AITP
精选全部 AI 动态AI 日报Agent 接入我的简报我的追踪阅读偏好内容方法关于更新日志信源提报反馈
外观
登录 / 注册
AITOP

模型拒绝

共 1 条相关 AI 资讯
7月14日
09:10
09:10官方一手arXiv: Anthropic@Dominic Okonkwo, Magnus Hodgson, Temitope I. David, Susan Adanna Ihejirika
这篇论文评估了Anthropic最先进的模型Claude Fable 5在8个生物医学基准(4个文本+4个多模态)上的表现,并与Claude前辈和GPT-5进行了对比。研究发现Fable 5的拒绝率在8.0%到99.4%之间,具体取决于基准(如MedQA、MedXpertQA MM、RareBench),这一模式在先前模型和GPT-5中均不存在。一旦排除被拒绝的问题,Fable 5在所有基准上的准确率都超过或持平其他模型。论文识别出两种不同的拒绝模式:一种集中在基础科学和机制内容,另一种在RareBench上针对先天代谢疾病几乎全部拒绝,而成人自身免疫疾病则没有。
论文Claude Fable 5AnthropicGPT-5
事件专题

推荐理由:这篇论文很有意思,告诉你Claude Fable 5在医学难题上不是不会答,而是经常拒绝回答。一旦它愿意回答,准确率反而是最高的。如果你想了解模型的安全边界和真实能力,值得看看。
原文
精选全部日报登录