Event ·Single source

Voice Arena 发布 Dictation Bench:首个 AI 听写应用开源基准

Voice Arena 发布 Dictation Bench,号称首个针对 AI 听写应用(而非 API)的开源基准。测试团队在 Mac 上向 10 款应用播放 761 段录音(来自 87 位说话者),再由 5 个 LLM 评审判断每份草稿能否直接发送。结果显示 Wispr Flow 达到 79%,Apple 自带听写仅 35%。 该基准的核心方法是只看最终成品:评审判读的是用户真正会发送出去的文本,而不是底层模型的转写准确率。它进一步拆分了"需要修几次"和"要改多少字"两个维度,并展示失败案例的具体内容。这一思路呼应了 Chamath 近期的观点——应把模型和 harness 作为一个整体来评估,而不是只看模型排行榜。 对在 macOS 上选择英文听写工具的用户来说,这份附带白 paper 的测试提供了可检验的依据。它把评测焦点从 API 层面拉回真实产品,为工作流选型提供了具体参考。

Current read

Voice Arena 在 Mac 上用 761 段录音实测了 10 款听写应用,5 个 LLM 评审只判草稿能不能直接发。结果 Wispr Flow 79%、Apple 35%,差距很直观。经常用语音输入或语音写 prompt 的人可以照着这份白paper选工具。

2 sources38° AI heatLast updated 2026/11/11 15:51:19

Evidence

2 sources
Primary sourceAI Breakfast
View source

Conflict check

Dedup data only shows that these sources discuss the same event, not that they agree. There is no structured supporting or refuting evidence yet, so no conflict is inferred automatically.