11:24官方账号arXiv cs.LG@Martin J. Wainwright论文提出路径解析的数据几何测度“去掩码增长复杂度”(UGC),用于分析掩码扩散离散采样。UGC局部增量直接控制KL离散化误差,统一了伯努利子集和固定基数去掩码方案。在log-reveal-odds坐标下,该方法可生成单块与多块优化调度,并量化按数据几何分配计算量的收益。作者证明UGC增量可从样本中估计,从而得到达到给定KL误差的认证最优采样器,迭代复杂度在常数因子内逼近oracle过程。示例显示自适应块相比粗粒度调度可带来√d量级的维度相关改进。论文Masking DiffusionUGC扩散模型推荐理由:想省离散扩散采样算力?这篇用UGC度量自动排去掩码节奏,常数个块逼近理论最优误差,给√d维数增益例子。原文稍后读已读值得跟进有用关注 Masking Diffusion
10:36官方账号arXiv cs.LG@Anna Zykova-Myzina, Timofei Gritsaev, Daniil Tiapkin, Nikita Morozov该论文将近端策略优化(PPO)应用于生成流网络(GFlowNet)框架下的离散概率分布采样。作者推导了GFlowNet的等价策略梯度算法,并实验探索了基线训练和优势估计等环节。这是首次成功将PPO应用于GFlowNet,在合成能量和分子图生成等基准上,PPO相比标准GFlowNet训练目标提升了收敛速度和数据效率。论文PPOGFlowNet离散采样推荐理由:这篇论文把PPO用到了GFlowNet上,收敛更快、数据效率更高,做离散采样研究的可以看看。原文稍后读已读值得跟进有用关注 PPO