AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

MATH-500

共 1 条相关 AI 资讯
7月1日
09:22
09:22官方一手arXiv: DeepSeek@Zhe Dong, Fang Qin, Manish Shah
精选
论文提出LearnStop方法,在固定预算检查点从推理前缀预测正确性,使用答案置信度、熵、前缀投票份额等特征。在GSM8K、MATH-500、MMLU-Pro、AIME-90、GPQA等18个任务-模型设置上评估,涉及Qwen3和DeepSeek-R1蒸馏模型。在GSM8K上使用Qwen3-32B时,后验峰值自适应增益达+0.157,验证选择操作点保持正增益。在多项选择和极难设置上,标量置信度、熵或稳定性规则更具竞争力。结论:学习停止的价值取决于轨迹结构,当许多问题在预算结束前变正确但缺乏可靠标量停止信号时有用。
论文LearnStop推理模型GSM8KMATH-500DeepSeek-R1

推荐理由:这篇论文分析了推理模型什么时候该提前停止计算。LearnStop在数学题上比简单规则好,但难题还是用置信度更靠谱。
原文
精选全部日报登录