02:26
lmarena.ai@lmarena_ai
lmarena.ai@lmarena_ai推荐理由：想知道 Arena 排行榜上的自动评分怎么算的吗？这篇解释了 AutoEval 如何用数百万人类投票训练奖励模型来给新模型打分，快且透明。
Arena Score
共 1 条相关 AI 资讯
7月31日
02:26
AutoEval 通过从实时 Arena 评估中采样的提示为新模型生成响应。它使用一个基于数百万对人类投票训练的点态奖励模型为每个响应打分，并将分数差转换为软投票。这些软投票通过相同的排名管道处理，结果直接显示在排行榜上作为初步 AutoEval 分数。闪电标记的行根据估计分数定位，但需获得足够实时人类投票验证后才能获得官方排名。