PapersBuilders10:25Chinese contentCoDPO:用数据集诊断指标修复 DPO 训练中的约束漂移做偏好优化训练的可以看看:给 DPO 打了个闭式诊断指标,能提前判断冲突数据会不会让安全分、长度这些约束越训越差。#DPO#CoDPO#偏好优化#论文aarXiv cs.LG@Ping Liu, Yan YanSourceRead laterReadWorth followingUsefulFollow DPO