#LAB-Bench

1 stories · 1 in 7 days · 1 in 30 days
Stories, products and papers tagged "LAB-Bench", newest first.
Nov 17
PapersBuildersMulti-source13:39
Chinese contentRouting Beyond Task Categories: 基于 LAB-Bench 的成本感知路由研究

想在有限预算里用便宜模型跑、必要时切贵模型的人应该看看这篇。它在 LAB-Bench 上实测了几种路由策略,发现语义路由和 deferral 各提 0.66 和 1.35 个百分点,但置信区间跨零,效果未必稳。写模型路由代码前值得对齐一下预期。

Event
arXiv cs.AI@Ahmed Tariq, Leo GuinanSource