10:17
官方账号arXiv cs.AI@George Andrikopoulos
推荐理由：你关注的AI研究团队发布了新看法，说以后衡量AI系统得看输出精度而不是单纯的能力，他们的方法能帮你实际优化系统，和以前的方式不一样，值得了解。
研究方法
共 1 条相关 AI 资讯
8月20日
10:17
前沿语言模型常被用于比较、营销和基准测试其能力，但这些模型的最佳或平均输出所达到的目标精度（如输出集中度）才是区分不同系统的关键；当前的基准文化系统地未能测量这种精度，而是报告了输出的中心趋势而非分布范围；该研究提出一种新的测量方法，通过多次运行固定任务并计算结果的一致性来确定精度；这种方法能够区分一致失败与分散失败，帮助优化AI系统性能。