AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

浮点错误

共 1 条相关 AI 资讯
7月1日
09:28
09:28官方一手arXiv: DeepSeek@Lisa Taldir, Muhammad Ahmad Saeed, David Defour, Pablo de Oliveira Castro, Eric Petit
论文发布了InterFLOPBench,一个包含90个C语言内核和1130个测试样本的浮点错误分类基准。它评估了14个LLMs在六类错误(抵消、比较、除以零、溢出、下溢、NaN)上的多标签分类性能。结果显示,Qwen 3 32b、Gemini 2.5 Flash、Phi 4 Reasoning、DeepSeek R1T2和gpt-oss(20b和120b)等模型总体F1分数超过0.88。不同错误类别表现差异大:除以零平均F1为0.8479,而下溢和抵消分别只有0.6059和0.6164。
论文InterFLOPBenchLLM浮点错误基准测试C语言

推荐理由:这篇论文搞了个InterFLOPBench,专门测LLM找C语言浮点bug。Qwen 3和Gemini 2.5等模型表现最强,F1超0.88。写代码的必看!
原文
精选全部日报登录