事件专题 ·官方一手

研究:5个AI编程智能体的合并PR仍需更频繁的后续修复

一项研究追踪了来自 AIDev-pop 数据集的 6,774 个合并的智能体 PR,覆盖 OpenAI Codex、GitHub Copilot、Devin、Cursor 和 Claude Code 五个工具,并与同期 5,044 个人类 PR 对比。结果显示,合并后的智能体 PR 被后续修复的几率是人类 PR 的 1.62 倍。修复者中,69.6% 的验证修复来自同一个智能体,76.4% 的修复 PR 全部提交均由智能体完成。研究还用 LLM 评审与人类标注对照,Direct-fix 精度达 90%,二分类 Cohen's Kappa 为 0.78。

当前结论

追踪了 6774 个智能体 PR 的后续命运,发现 Codex、Claude Code 这些智能体合并代码后还得自己返工,几率比人类高 62%。

11 个信源53° AI 热度最后更新 2026/9/22 07:22:44

证据链

11 个信源
相关来源 8掘金本周最热
查看原文

冲突核查

现有去重数据只说明这些来源讨论同一事件,不代表立场相同。当前没有结构化的支持或反驳证据,不自动推断冲突。