11:30
官方账号arXiv cs.AI@Thomas Thebaud, Yuzhe Wang, Hao Zhang, Sathvik Manikantan Napa Ugandhar, Ashish Hallur, Georgi Tinchev, Venkatesh Ravichandran, Laureano Moro-Velazquez
推荐理由：想测语音AI聊天有多自然？SPEARBench从8个维度对比人类，告诉你现有模型的短板具体在哪。
SPEARBench
共 1 条相关 AI 资讯
7月7日
11:30
SPEARBench基于Seamless Interaction语料库构建对话提示，评估多个当代语音到语音模型在响应延迟、中断、语音质量、ASR鲁棒性、语言与方言一致性、情感自然度、人际关系立场等8个维度上的表现。与人类对话相比，当前模型在延迟、重叠、方言保留、情感适应和立场动态方面仍有差距。基准包含原始人类回答作为参考条件。