#NorMuon

共 1 条 · 7 天 0 条 · 30 天 1 条

LLM预训练 1 Muon 1 优化算法 1 行归一化 1

信息流里打上「NorMuon」标签的资讯、产品与论文，按刊登时间排，新的在上。

10月1日

论文 Agent 与开发者09:52

NorMuon行归一化研究

NorMuon论文解析了行归一化在理论保证与实践表现间的矛盾，对理解LLM优化很有价值。

#NorMuon #Muon #行归一化 #LLM预训练

arXiv cs.LG@Jiayu Zhang, Tianyi Lin原文