AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

嵌入命令

共 1 条相关 AI 资讯
7月2日
10:22
10:22官方账号arXiv cs.AI@Brett Reynolds
该论文提出对抗性语用学作为评估语言模型安全性的基准与标注协议,涵盖指令冲突、嵌入命令、引用、范围歧义、指示语、间接言语行为和多轮智能体转录。论文贡献包括一个18条目的种子基准(含验证者强制元数据)和一个54行的本地种子试点实验。专家评估协议区分任务成功、政策合规、安全风险、拒绝结果和评估者置信度。框架为验证安全评估、LLM裁判、黄金集构建、提示注入测试和安全文档提供了实用工具。
论文对抗性语用学AI安全基准指令冲突嵌入命令

推荐理由:这篇论文搞了一个对抗性语用学基准,有18个具体条目,专门测试模型被指令冲突、嵌入命令搞昏头的情况,比以前只打通过/不通过标签靠谱多了。
原文
精选全部日报登录