AITOP
精选
过去 24 小时，从 751 条中筛出 46 条
全部模型产品行业论文技巧
标签：格式遵循×
6月11日
15:28
15:23
15:07
12:35
12:35arXiv cs.AI@Selen Erkan, Bastian Boll, Kristian Kersting, Björn Deiseroth, Letitia Parcalabescu
精选
论文指出传统基准测试常因格式要求而低估基础模型的知识水平，因为基础模型缺乏后训练带来的格式遵循能力。作者提出软提示调优（soft-prompt tuning），仅优化10个软提示向量（约7B模型参数的0.0006%），在80步（约640样本）内即可让模型适应基准格式，从而准确反映其真实知识。实验覆盖7个模型和7个数据集，结果显示该方法显著优于零样本和少样本提示，甚至能提升后训练模型的格式合规性。软提示调优后的基础模型性能可更可靠地预测后训练模型的排名，为早期预训练策略选择提供低成本代理。
论文软提示调优LLM评估基准测试格式遵循预训练策略
推荐理由：做LLM评估的团队终于有了一个公平且高效的基准测试方案——只需微调极少量参数就能剥离格式干扰，直接测出模型真实知识水平。做预训练或模型选型的开发者值得一试，能省下大量后训练成本。
原文
6月1日
00:09
5月29日
08:02
AITOP5月29日 08:02
Opus 4.8发布：编程助手的“静默时刻”，是解放开发者，还是新门槛？🔥Anthropic 把 AI 编程的“确认键”彻底删掉了！Claude Code 搭载全新 Opus 4.8 模型，长时间任务不跑偏、不废话、不中断，像一个资深工程师一样默默干活，从功能开发到漏洞清扫全包圆，你在旁边喝茶等结果就行。过去 AI 写代码三步一问“这样可以吗”，现在它直接交完整交付物……自主编程的最后一层窗户纸，被捅破了。做自动化开发和代码审查的团队，这个模型建议直接上手，效率差距肉眼可见……Opus 4.8发布：编程助手的“静默时刻”，是解放开发者，还是新门槛？