#组合泛化

共 6 条 · 7 天 2 条 · 30 天 2 条

信息流里打上「组合泛化」标签的资讯、产品与论文，按刊登时间排，新的在上。

10月8日

文生图经常画错“左边的红球”这类提示，这篇论文用低秩对齐把 DiT 训练成本砍半，还顺手超过 REPA 基线。

arXiv cs.LG@Arshia Hemmat 等 7 人原文

10月6日

一篇持续学习论文，提出 GaTaP 算法，用门控机制既防遗忘又能 few-shot 学新任务组合，实验覆盖 MLP 和 CNN。

arXiv cs.LG@Abdel Mfougouon Njupoun 等 4 人原文

9月10日

清华团队提出CoGe-GCD，解决GCD方法难以泛化到新组合的问题，代码已开源。

arXiv cs.LG@Luyao Tang 等 6 人原文

8月21日

研究人员发现，在共享语言模型中，限制模块间的证据可见性，能让模型在组合任务上表现更好，比全局可见的模型平均高出20个百分点，而且学到的接口更可复用。

arXiv cs.LG@Narcis Marincat原文

7月21日

论文精选01:10

这篇研究很酷，RLM harness让Transformer在短任务上训练就能自动泛化到长任务，甚至跨领域。不用改模型结构，靠框架就能实现。

elvis@omarsar0原文

6月1日

这篇论文用简洁的实验揭示了 Transformer 组合泛化的内部机制，对理解大模型如何组合技能有启发意义，做可解释性或模型架构研究的读者值得一看。

arXiv cs.LG@Brady Exoo 等 3 人原文