AITP
精选全部 AI 动态AI 日报Agent 接入关于更新日志信源提报反馈
登录 / 注册
AITOP

神经缩放定律

共 1 条相关 AI 资讯
6月19日
09:46
09:46官方账号arXiv cs.LG@Itay Lavie, Noam Levi, Yonatan Kahn
本文从物理学视角分析了深度学习训练与泛化的统计特性,指出其打破了经典统计学的多项直觉。重点讨论了神经缩放定律(neural scaling laws)及其与约束、归纳偏置的相互作用。文章还回顾了构建深度学习模型时的多种选择及其合理性。
论文深度学习神经缩放定律统计特性物理学视角

推荐理由:这篇论文从物理学角度拆解深度学习的统计特性,解释了神经缩放定律如何打破经典统计直觉,做研究的值得看看。
原文
精选全部日报登录