论文多源确认

METR 评估:Anthropic 研发效率已被 AI 提升 1.5 倍

精选理由

METR 给 Anthropic 的 AI 研发加速打了个具体分数:1.5 倍。想知道 AI 到底多大程度替代了工程师干活,这个口径很严谨,值得看看。

评估机构 METR 认为 Anthropic 目前的 AI 驱动研发加速系数约为 1.5 倍。这一数字采用严格口径,衡量 AI 对整体研发进程的实际加速,而非仅统计 AI 生成代码行数。METR 指出 Anthropic 内部由 AI 撰写的代码行数和 AI 设计的实验占比已超过纯人工产出。按此口径,1.5 倍属于相当快的速度。

原文 · Teortaxes

METR believes Anthropic is at 1.5x AI-driven R&D acceleration. This is a very rigorous definition (obviously they now have OOMs more AI-written LOCs, AI-defined experiments etc than fully-human-authored ones). So this is pretty fast. https://t.co/Rj3XscU4DR

  • Gary Marcus09-22 21:40原文
  • DeepLearning.AI09-23 13:30原文
  • The Information09-23 18:00原文
  • IT之家09-22 15:26原文
  • theverge09-22 16:30原文
  • 向阳乔木09-22 17:38原文
  • Tech in Asia09-23 00:44原文
  • rohanpaul_ai09-23 18:29原文
  • Andrew Curran09-23 18:32原文
  • Tanishq Abraham (论文推介)09-23 20:44原文