23:15Gary Marcus@GaryMarcus精选Gary Marcus指出,纯LLM作为概率性下一个词预测模型存在固有局限,仅靠扩大规模无法修复硬数学问题中的组合幻觉。他提出有效的解决路径包括:在推理轨迹上进行SFT、采用o1风格的过程奖励模型进行RL、引入类似MCTS的推理时计算,以及集成可执行工具。Marcus强调现代数学AI是混合系统,而非纯Transformer。行业Gary MarcusLLM推理模型推荐理由:Gary Marcus总结了提升数学推理的有效路径:SFT加RL再加推理时计算和工具,别迷信纯规模了。原文稍后读已读值得跟进有用关注 Gary Marcus