AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP
全部 AI 动态
AI 相关资讯全量信息流
全部博客资讯推文论文
全部模型产品行业论文技巧
标签:对抗鲁棒性×
6月29日
10:08
10:08arXiv cs.AI@Yanchen Yin, Dongqi Han, Linghui Li
该研究揭示越狱攻击并非消除所有安全特征,而是选择性抑制早期层的Adversarially Compromised Heads (ACHs),而中间层的Safety-Aligned Heads (SAHs)保持鲁棒激活。消融实验表明,抑制少量ACHs即可在正常拒绝的输入上诱发出越狱行为,而移除SAHs会显著削弱中间层的安全激活。此外,通过直接读取这些持久激活信号(无需训练)即可获得与强对抗鲁棒性相当的聚合检测性能。
论文越狱攻击注意力头LLM安全对抗鲁棒性鲁棒有害特征

推荐理由:这篇论文用注意力头机制解释了越狱攻击无法完全消除安全特征,还提出一种无需训练的检测方法,效果不输传统对抗训练。
原文
6月18日
10:56
10:56arXiv cs.LG@Robi Rahman, Sabiha Tajdari
该论文评估了使用零开销、保护隐私的NVML遥测(仅观察计算的物理效应,不访问模型权重或训练数据)进行GPU工作负载分类的对抗鲁棒性。研究人员在5轮监控-逃避迭代中,针对9种GPU模型(跨4代架构)评估了20种逃避策略。开发的分类器在全语料库上实现了98.2%的二进制准确率,面对最困难意外工作负载(即使被对抗性伪装)也能达到43-87%的准确率。
论文NVMLGPU工作负载分类对抗鲁棒性AI计算治理论文

推荐理由:这篇论文用简单的NVML遥测就能高精度检测隐藏的ML训练,还能对抗各种伪装,对AI计算治理很有启发。
原文
6月16日
20:46
AITOP6月16日 20:46
600亿美元买下Cursor,xAI终于拿到了编程工具,但真正值得跟踪的或许不是AI600亿美元买下Cursor,xAI终于拿到了编程工具,但真正值得跟踪的或许不是AI
10:51
10:51arXiv: Google DeepMind@Junjian Zhang, Hao Tan, Ruonan Li, Dong Zhu, Aiping Li, Zhaoquan Gu
ARB4WM提出一个统一的评估框架,用于测试世界模型在视觉扰动下的对抗鲁棒性。该框架定义了五个白盒损失目标,涵盖策略、价值和潜在动力学三个层面。在MetaWorld和DeepMind Control Suite的20个任务上评估了四种Dreamer-style代理。结果显示,针对值估计、潜在表示和RSSM动力学的攻击与直接策略破坏同等有害,早期或频繁扰动尤其严重。代码已开源并提供使用接口。
AI模型ARB4WMDreamer世界模型对抗鲁棒性连续控制

推荐理由:想检验你的世界模型扛不扛揍?ARB4WM这个新基准专门测视觉扰动下的鲁棒性,比单看动作空间全面多了。
原文
6月12日
12:57
AITOP6月12日 12:57
Claude代码里藏了个20260612,18个月后的AI记忆革命已经开始倒计时
6月11日
15:28
AITOP6月11日 15:28
1107 vs 303:谷歌悄悄开源了一个“拆打字机”的模型,把大模型速度翻了4倍
15:23
AITOP6月11日 15:23
DiffusionGemma颠覆文本生成?自回归模型的“统治”要结束了
15:07
AITOP6月11日 15:07
每秒1107个token,Google开源的扩散模型为什么能改变本地推理格局?
5月25日
11:26
11:26arXiv cs.LG@Dongmin Lee, Anuran Makur, Japneet Singh
精选
本文研究了在Bradley-Terry-Luce (BTL)模型下,当数据受到半随机对抗攻击(即某些边的采样概率被人为提升)时,谱排序算法的逐项误差表现。研究发现,未加权的谱方法性能高度依赖于生成图的谱性质,而通过对观测边进行适当重加权以恢复谱间隙,可以接近均匀采样图下的渐近性能。理论结果通过数值模拟得到了验证。这项工作为对抗环境下的排序算法提供了理论保证。
论文谱排序BTL模型对抗鲁棒性逐项误差重加权

推荐理由:做排序算法或对抗鲁棒性研究的团队,这篇论文给出了半随机对抗下谱方法的理论误差界,并提出了有效的重加权策略,值得关注。
原文
精选全部日报登录