13:01
13:01
arXiv: DeepSeek@Zihang Li, Rui Zhou, Yingcheng Shi, Wenhan Yu, Zhewen Tan, Zixiang Liu, Zeming Li, Binhua Li, Yongbin Li, Tong Yang, Jieping Ye ESPO(Early-Stopping Proximal Policy Optimization)是一种针对大语言模型强化学习训练的新方法,能在推理轨迹中早期检测到错误步骤并提前终止生成。传统PPO算法在模型犯错后仍会强制生成直到最大步长,浪费计算资源并污染优势估计。ESPO通过实时计算基于logits的代理遗憾值,在累积遗憾显著超过估计值时终止轨迹,并将截断轨迹视为吸收失败状态,无需额外奖励模型或人工标注。在DeepSeek-R1-Distill-Qwen-7B的数学推理训练中,ESPO在AIME 2024、AMC 2023和MATH-500上均超越PPO,同时累计节省超过20%的生成token。
推荐理由:做LLM强化学习训练的团队终于有了一个能省算力又提效果的方法——ESPO在数学推理任务上不仅性能更好,还省了20%的token,训练成本敏感的团队值得一试。
12:14
12:14
arXiv cs.LG@Chris Varghese, Leo Y. Li-Han, Richa Bisht, Ellen Larson, Frank Lee, Ryan M. Carr, Tanios S. Bekaii-Saab, Shounak Majumder, John D. Halamka, Mark Truty, Ajit H. Goenka, Hojjat Salehinejad, Cornelius A. Thiels 该研究开发了一种基于Transformer的神经网络模型,通过分析患者多年的诊断编码和血液检测值序列,预测未来1-3年内患胰腺癌的风险。模型在6017名胰腺癌患者和17.7万对照人群上训练,外部验证显示1年预测AUC达0.837,校准良好。设定3.3%风险阈值时,诊断优势比为18.2,为胰腺癌人群筛查提供了首个数字化富集工具。
推荐理由:胰腺癌早期发现是提高生存率的关键,这项研究用常规医疗数据就能实现风险分层,做癌症筛查或临床决策支持的团队值得关注。
11:07
11:07
arXiv cs.AI@Chong Bao, Shichen Liu, Lijun Yu, David Futschik, Stylianos Moschoglou, Shefali Srivastava, Ziqian Bai, Feitong Tan, Guofeng Zhang, Zhaopeng Cui, Sean Fanello, Yinda Zhang 浙江大学团队提出 Archon,一个完全预训练的统一多模态模型,用于生成包含文本、音频、动作和视觉内容的完整数字人。该模型通过模态专用分词器和原生自回归架构,统一了七种模态,并在 72 个任务上预训练以建模联合分布。为解决高保真对话视频中的 token 爆炸问题,Archon 引入了一种内存高效的语义视频重参数化方法,实现 4 倍 token 压缩同时保留精细动态,并配合语义驱动的视频扩散解码器。此外,提出的“模态思考”机制将模糊的跨模态任务分解为逐步推理,提升了生成保真度和可控性。实验表明,Archon 在多种数字人生成任务上达到或超越现有水平。
推荐理由:做数字人、虚拟角色或交互式 AI 的团队终于有了一个统一框架——Archon 把文本、音频、动作、视频全打通了,不用再拼凑多个模型,做沉浸式体验的开发者可以直接参考其架构。
11:06
11:06
arXiv cs.AI@Yalun Dai, Yangyu Huang, Tongshen Yang, Yonghan Wang, Xin Zhang, Wenshan Wu, Qihao Zhao, Hao Li, Yuanyuan Gao, Kim-Hui Yap, Scarlett Li 该论文系统研究了数据组织对LLM训练的影响,提出四个关键准则:边界锐化、循环调度、课程连续性和局部多样性。基于这些准则,作者设计了两种新的数据排序方法STR和SAW,通过复用预计算的样本级分数,几乎不增加额外计算开销。实验表明,这些方法在预训练和SFT阶段均能提升训练稳定性和模型性能。对于追求训练效率的AI团队,这是一个低成本的优化方向。
推荐理由:数据组织是LLM训练中常被忽视的杠杆,STR和SAW方法几乎零成本就能提升训练效果,做预训练或SFT的团队值得一试。
仅展示最近 2000 条内容。更早的内容请查阅 AI 日报存档(侧边栏 → AI 日报 → 顶部「往期日报」)。