09:39
arXiv cs.AI@Jessica McFadyen, Ole Jorgensen, Harry Coppock, Kevin Wei, Cozmin Ududec
推荐理由：别被固定预算的基准分数骗了，这篇论文揭示了很多模型实际能力需要更多推理计算才能看出来。
全部 AI 动态
AI 相关资讯全量信息流
6月17日
09:39
一项研究评估了12个前沿语言模型在7个基准上的表现，包括FrontierMath、TerminalBench和网络安全任务。研究发现，增加推理计算（如更大token预算和重复提交）能显著提升得分，例如在FrontierMath上提升达20%以上。固定预算的评估会低估新一代模型能力，因为它们在更大预算下能解锁并更可靠地解决难题。不同基准对推理缩放方法的依赖各异：重复提交对多数基准有效，但外部反馈仅在特定任务中有帮助。
6月16日
20:46
AITOP6月16日 20:46
6月12日
13:02
13:02
ARC Prize@arcprize
ARC Prize@arcprize精选
推荐理由：Chollet的洞见挑战了AI界对训练算力的迷信，做AI研究或关注AGI进展的开发者值得一看，可能会重新思考你的算力分配策略。
12:57
AITOP6月12日 12:57
6月11日
15:28
AITOP6月11日 15:28
15:23
AITOP6月11日 15:23
15:07
AITOP6月11日 15:07
5月16日
23:25
23:25
Gary Marcus@GaryMarcus
推荐理由：AI 从业者常陷入算力竞赛的思维定式，Marcus 的提醒点出了架构创新的长期价值，做模型选型和研发的团队值得一读。