14:08IT之家(博客/媒体)普林斯顿大学发布CEO-Bench基准测试,模拟创业公司500天经营,初始资金100万美元。多数模型在500天内破产,Claude Fable 5期末现金达4715万美元,是唯一多次运行均高于初始余额的模型。Claude Opus 4.8和GPT-5.5分别以2777万美元和2129万美元位列其后。Grok 4.20表现最差,平均仅维持28天。基于规则的基准模型期末现金为1580万美元。AI模型CEO-BenchClaude Fable 5Claude Opus 4.8GPT-5.5智能体10 个信源在谈推荐理由:普林斯顿搞了个AI当老板的模拟考试,Claude Fable 5赚了4700万,其他大多破产,这测试挺能看出谁更适合做长期决策。原文
18:27官方账号Decoder@Maximilian Schreiner精选普林斯顿大学研究团队创建了CEO-Bench基准测试,要求AI代理在模拟环境中经营一家软件公司500天。测试结果显示,大多数参与模型最终破产,仅三个AI模型的资本高于初始资金。令人意外的是,一个简单的、不依赖AI的规则启发式方法几乎击败了所有AI模型。该测试揭示了当前AI在长期决策与资源管理方面的局限性。AI模型CEO-BenchPrinceton智能体基准测试AI代理推荐理由:普林斯顿大学用500天模拟测试AI经营公司,结果大部分亏钱,一个非AI规则反而更稳。看看哪三个模型赚钱了。原文