主要来源DAIR.AI
查看原文事件专题 ·多源确认
NVIDIA 公开智能体编程中间训练配方,SWE-bench Multilingual 提升 7 分
NVIDIA 发布一份开放的中间训练(midtraining)配方,用于提升智能体编程能力。该阶段位于预训练与后训练之间,在 256K 上下文上用 500B token 的自然软件工程数据训练,包括打包仓库、pull request、commit 历史和构建日志,外加少量 agent traces。在 SFT 保持一致的前提下,Nemotron 3.5 Lightning 的 SWE-bench Multilingual 从 55.8 提升到 62.8,SWE-bench Verified 从 60.7 提升到 64.5,SWE-bench Pro 从 32.0 提升到 35.5。更大的 Nemotron 3.5 Super 上 DeepSWE 从 11.7 提升到 15.7。由于基座模型的代理指标无法预测后训练结果,团队用短固定 SFT 运行来评分每个数据选择。
当前结论
NVIDIA 开源了一个中间训练配方,给 Nemotron 加一段 500B token 的软件工程数据训练,SWE-bench 多语言直接从 55.8 涨到 62.8,自己训练编程智能体的可以照抄。
11 个信源61° AI 热度最后更新 2026/10/17 13:41:02
证据链
11 个信源冲突核查
现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。