用行为树一个东西同时搞定任务描述、稠密奖励、课程和策略诊断,不用再在 LTL 和奖励函数之间来回翻译。做机器人 RL 或形式化方法的可以看看论文里的课程 DAG 提取算法,6 个规格的实验覆盖了离散和连续环境。
#curriculum learning
The wide-then-deep practice order, with a verifier gating what gets saved, is the lever — the 18-point gap suggests task sequencing matters more than adding training data. Builders deploying agents in novel apps can replicate the curriculum-actor-verifier loop without collecting new datasets. It compares directly against the costly collect-and-retrain route that most teams default to today.
PAC improves LLM training efficiency by 15-30% over existing methods, reducing computational costs for researchers in ASEAN and China.
这篇论文提出了一种新方法,能解决多模态模型推理时中间步骤乱但结果对的问题,效果SOTA还更高效,做推理增强的可以看看。
这篇论文提出用模型驱动和遗传算法自动生成RL环境变体,省去手写大量相似环境的麻烦,野火场景验证过,做课程学习的可以看看。
做足式机器人运动控制或强化学习的团队,RoboNaldo 的课程学习思路能直接借鉴——用单条参考动作引导复杂技能学习,解决了从仿真到真实部署的精度和速度难题,值得点开看方法细节。
做LLM数学推理RL训练的团队,GRPO的KL系数和采样策略可以照搬这个改进,AIME 2025上13个点的提升值得一试。