Event ·Multi-source

OpenAI 提醒:评估结果受 API 设置、提示设计等影响

OpenAI 表示评估很少孤立测量模型,而是包含 API 设置、评估设计和提示等隐性因素。建议开发者使用 OpenAI 产品中的相同设置:使用 Responses API 而非旧版 Chat Completions API,保留推理(Retain reasoning),并启用压缩(Use compaction)。这些选择会显著影响模型输出表现。开发者可前往 arcprize.org/tasks 参与公开测试。

Current read

想用好 API 的别光看模型分数,OpenAI 告诉你设置和提示更重要,直接抄他们的作业就行。

9 sources67° AI heatLast updated 2026/7/29 23:57:55

Evidence

9 sources
Related source 2Simon Willison’s Weblog
View source
Related source 3向阳乔木
View source
Related source 4深度求索 DeepSeek
View source
Related source 6歸藏(guizang.ai)
View source
Related source 8Greg Brockman
View source

Conflict check

Dedup data only shows that these sources discuss the same event, not that they agree. There is no structured supporting or refuting evidence yet, so no conflict is inferred automatically.