AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

渐进后训练

共 1 条相关 AI 资讯
6月30日
13:55
13:55官方账号arXiv cs.AI@Shun Lei, Huaicheng Zhang, Dapeng Wu, Yaoxun Xu, Lishi Zuo, Wei Tan, Hangting Chen, Guangzheng Li, Jianwei Yu, Zhiyong Wu, Dong Yu
LeVo 2 是一个混合 LLM-Diffusion 框架,用于可控完整歌曲生成。它通过分层建模,先用 LeLM 预测混合 token 进行语义规划,再并行预测声乐和伴奏 token 细化细节,最后用扩散 Music Codec 重建波形。该框架引入美学引导训练,前训练阶段用自动音乐评估为大规模数据标注音乐性层级。渐进后训练依次使用 SFT、大规模离线 DPO 和闭环半在线 DPO 提升生成质量、可控性和音乐性。专家听测和客观评估显示,LeVo 2 在六个主观维度上超越开源基线,并在多项指标接近商业系统。
AI模型LeVo 2音乐生成分层建模扩散模型渐进后训练

推荐理由:LeVo 2 发布了一个能生成完整歌曲的模型,通过分层建模和美学引导训练,歌唱质量和可控性都比开源方案强,已经逼近商业系统水平。
原文
精选全部日报登录