10:23arXiv cs.LG@Zhikun Xu, Yu Feng, Jacob Dineen, Taiwei Shi, Jieyu Zhao, Ben ZhouReuseRL 是一种基于最小描述长度(MDL)原则的强化学习方法,旨在解决大语言模型智能体在强化学习中学习到脆弱、任务特定捷径的问题。该方法从成功轨迹中提取可复用的抽象技能字典,并通过分割成本惩罚编码效率低下的行为,从而鼓励智能体学习更通用、可压缩的行为模式。论文证明了该压缩惩罚的 PAC-Bayes 泛化界,并在 ALFWorld、TextWorld-Cooking 和 Countdown-Stepwise 等基准上,ReuseRL 在分布内和分布外任务上均优于 vanilla GRPO 和强基线方法。这项工作为提升智能体泛化能力提供了新思路,尤其适合需要跨任务迁移的 RL 场景。论文强化学习智能体技能复用泛化MDL推荐理由:ReuseRL 用 MDL 原则解决了智能体 RL 泛化差的痛点,做多任务智能体训练的团队可以直接参考其技能复用机制,提升模型在未见任务上的表现。原文