PapersBuilders12:42Chinese content临界阻尼 Polyak 步长:让梯度下降收敛到更平坦极小值的新算法搞训练的朋友可以看看这篇:不用 SAM 的两次前向,一个改过的 Polyak 步长就能压低 sharpness,连 LLM 微调都验证过,还带一致时间收敛证明。#SAM#gradient descent#optimization algorithms#sharpnessaarXiv cs.LG@Francesco Caporali et al. (3)SourceRead laterReadWorth followingUsefulFollow SAM