10:38arXiv: Google DeepMind@Qijun Li, Zheng Fu, Qi Song, Yifei He, Weitao Zhou, Kun Jiang, Diange Yang精选Dual-Flow RL利用条件流匹配(CFM)同时建模回报分布和多模态策略分布,克服了传统单峰高斯价值估计的偏差问题。该方法引入熵-协方差探索调节器(ECER),实现基于状态的自适应探索。在DeepMind Control Suite的36个任务中,Dual-Flow RL在32个任务上取得最优,并在Humanoid-Bench上显著优于diffusion-based和flow-based方法。ECER通过策略熵与动作不确定性协方差动态调节探索强度,避免了模式坍塌。论文Dual-Flow RLDeepMind Control SuiteHumanoid-Bench强化学习多模态探索推荐理由:这篇论文用条件流匹配把回报分布和多模态策略一起建模,解决了强化学习中的多模态探索难题,在DeepMind控制任务上吊打了扩散方法。原文