AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

预算感知

共 1 条相关 AI 资讯
7月10日
11:35
11:35官方账号arXiv cs.LG@Teng-Ruei Chen
论文提出预算感知的测试时模型选择问题,在每次查询给定预算和不完美验证器下,分配预算在重采样(resample)和重路由(reroute)之间以最大化正确率。提出的在线Resample-or-Reroute (RoR)策略基于每单位成本的边际正确性估计。在11个开源模型的池子上,使用4个不同难度的基准进行多轮重放实验,RoR相对于单路由、单次提交路由器、预算感知Best-of-K、级联和随机分配基线实现了更优的成本-质量帕累托前沿。增益在异构性最强的基准上最大,且受验证器质量门控。
论文RoRLLM路由模型选择预算感知开源模型

推荐理由:这篇论文讲怎么在预算有限时选LLM,不是简单路由或采样,而是两者结合。用11个模型和4个基准测试,效果比现有方法好。
原文
精选全部日报登录