12:26
官方一手arXiv: Google DeepMind@Shaojun Xu, Xiaoling Zhou, Yihan Lin, Yapeng Meng, Xinglong Ji, Luping Shi, Rong Zhao
精选
推荐理由：做强化学习稀疏奖励研究的团队终于有了突破历史束缚的新工具——Mind Dreamer 通过主动生成想象起点，大幅提升样本效率，建议跑过 DreamerV3 的开发者直接试。
潜变量干预
共 1 条相关 AI 资讯
5月18日
12:26
Mind Dreamer 提出一种名为主动潜变量干预（ALI）的框架，解决基于模型的强化学习中“历史束缚”问题——传统方法只能从观测状态开始想象，导致策略优化滞后于世界模型学习。它通过对抗生成器合成非连续的潜变量跳跃，探索物理可行但认知困难的盲点，并推导出中继价值函数和中继不确定性函数来分配跨空间断裂的信用。理论证明不确定性传播需要二次折扣，建立了形式化的认知视界。在DeepMind Control Suite上，Mind Dreamer 平均比 DreamerV3 快1.67倍，在稀疏奖励任务中加速达8.8倍。