10:32arXiv cs.LG@Yiyan Huang, Cheuk Hang Leung, Qi Wu, Zhiheng Zhang该论文研究离线策略学习中结果变量为分布的情况,将每个潜在结果视为概率测度,并通过 Wasserstein 重心下的效用函数定义奖励。论文基于 IPW 和 Doubly Robust 估计量建立了统计保证,证明了有限样本后悔率的领先项为 O~(√(N-dim(Π)/N))。在一维 Wasserstein 设定下,后悔率仍由策略类复杂度主导。另外提供了极小化下界,证明了对 N 和 N-dim(Π) 的领先依赖的紧致性。论文Wasserstein离线策略学习分布结果因果推断IPW推荐理由:这篇论文把因果推断中的离线策略学习扩展到了分布结果,用Wasserstein重心定义奖励,并给出了严格的统计保证,和传统均值策略学习不同,适合做理论研究的参考。原文