Chinese contentarXiv 研究:编码模型基准分数更高,实际合并率并未提升
研究借出口管制造成的 19 天模型切换,追踪了近千开发者的真实 PR 数据。结果发现基准分数差 11 分的两个模型,合并率几乎没差别。给用基准榜选模型的工程负责人提了个醒。
研究借出口管制造成的 19 天模型切换,追踪了近千开发者的真实 PR 数据。结果发现基准分数差 11 分的两个模型,合并率几乎没差别。给用基准榜选模型的工程负责人提了个醒。
Rails 之父 DHH 分享自己的真实数据:用了 AI 后 20 个月写的代码只有过去 21 年的一半,他把生产力倍数之争从 10x 抬到了 1000x。