AITOP
全部 AI 动态
AI 相关资讯全量信息流
全部博客资讯推文论文
全部模型产品行业论文技巧
标签：贝叶斯融合×
6月16日
20:46
6月12日
12:57
10:13
10:13arXiv cs.AI@Ali Elahi, Barbara Di Eugenio
现有自然语言处理（NLP）方法中，置信度用于可靠性、监督和下游决策，但尚无方法为多智能体系统的输出生成或评估置信度。本文提出三种协议，通过将原始置信度信号跨模型可比化，再经软投票或贝叶斯融合聚合，输出最终答案及单一聚合置信度。实验表明，聚合置信度的判别能力（AUARC）显著优于最佳单智能体或标准辩论基线，而正确性（F1分数）保持稳定，并恢复了多智能体辩论在模糊任务上的损失。研究分析了序列概率和自报告两种估计器，以及参数与非参数校准器，发现校准可提升F1，而AUARC对校准依赖较小。在五个基准和四种任务类型上，评估了六组同质和异质辩论对，覆盖不同模型能力和规模。
论文多智能体置信度聚合NLP贝叶斯融合辩论协议
推荐理由：多智能体系统终于有了统一的置信度评估方法，做NLP系统可靠性或智能体协作的团队可以直接参考协议设计，提升系统可信度。
原文
6月11日
15:28
15:23
15:07