#SG-TULA

共 1 条 · 7 天 0 条 · 30 天 0 条

GPT-2 1 Langevin算法 1 采样 1 非凸优化 1

信息流里打上「SG-TULA」标签的资讯、产品与论文，按刊登时间排，新的在上。

8月7日

模型精选12:25

SG-TULA：非凸非光滑采样的驯化次梯度算法

新采样算法SG-TULA能处理非光滑非凸问题，在GPT-2预训练上干赢了AdamW和Muon，还带理论保证。

#SG-TULA #Langevin算法 #GPT-2 #采样

arXiv cs.LG@Iosif Lytras 等 3 人原文