02:36Gary Marcus@GaryMarcus精选Yann LeCun 在 Bloomberg 采访中指出,LLM 预训练于约 20 万亿单词(30 万亿 token),数据量约 10^14 字节,仅相当于一个 4 岁孩子通过视觉在 4 年内获取的数据量。但文本需要 40 万年才能读完,而孩子通过视觉、触觉等感官获得密集反馈。LeCun 引用 Moravec's paradox,认为理解物理世界(如玻璃杯的易碎感)远比生成流畅文本困难。行业LLMYann LeCunMoravec's paradox多模态1 个信源在谈推荐理由:Yann LeCun 用具体数字对比,讲清了 LLM 为什么看起来聪明却不懂物理常识。想理解当前 AI 天花板的人可以看看。原文