10:39官方账号arXiv cs.AI@Marcel Torne, Anubha Mahajan, Abhijnya Bhat, Chelsea Finn研究人员提出 Freeform Preference Learning (FPL),让标注者通过自然语言定义速度、安全性等偏好轴,并沿各轴提供成对比较。FPL 学习语言条件奖励模型,在四个真实世界和两个模拟长程操作任务中,比稀疏奖励和二元偏好方法提升 38 个百分点。该方法无需显式子任务分割即可获得密集进度信号,且能组合未见过的行为,允许测试时无需重新训练即可引导策略偏向不同行为。论文附有博客与视频演示。论文FPLFreeform Preference Learning机器人操作奖励学习偏好学习推荐理由:想让机器人按你的偏好做事?FPL 把“快一点”“稳一点”这种主观要求变成可训练的奖励信号,效果比传统方法好 38%。原文