06:36Gary Marcus@GaryMarcusGary Marcus 引用一项新研究指出,AI 中所谓的“神经网络”与真实生物神经元几乎无关。研究显示,单个皮层神经元就能完成猫狗分类、语音识别等任务,而这些在传统 AI 中需要整个网络才能实现。这揭示了当前 AI 模型对生物神经系统的过度简化,可能限制了其能力上限。Marcus 认为,AI 领域需要重新审视其基础假设,从真实神经科学中汲取更多灵感。论文神经网络神经科学AI 基础Gary Marcus认知科学推荐理由:这项研究戳破了 AI 领域的一个常见误解——神经网络并不像大脑。做 AI 研究或对认知科学感兴趣的读者,看完会对模型设计有新的思考。原文
03:28rohanpaul_ai@rohanpaul_ai76°Andrej Karpathy 在 Sequoia Capital 的访谈中提出,未来计算可能从经典计算转向神经计算,神经网络成为主机进程,CPU 退居协处理器。他认为许多现有软件是早期计算时代需要明确每一步的产物,未来设备可能直接接收原始视频、音频或意图,通过扩散模型实时生成独特 UI。这意味着大量中间软件可能消失,界面不再由产品团队预先构建,而是根据当前时刻动态生成。Karpathy 指出,1950-60 年代人们曾困惑计算机会像计算器还是神经网络,最终选择了计算器路径,但现在可能迎来反转。行业神经网络计算范式软件消失Andrej Karpathy未来界面推荐理由:Karpathy 把软件行业的底层假设翻了个底朝天——未来可能不是更好的 App Store,而是神经网络直接接管界面生成。做产品、搞架构的开发者看完会重新思考自己每天在写什么。原文
23:14AlphaSignal@AlphaSignalAI精选72°一篇新论文提出 adVersarial Parameter Decomposition (VPD) 方法,将神经网络权重分解为小型、单一用途的子组件,每个组件处理特定任务(如表情预测或性别识别)。该方法通过对抗性消融训练保留关键行为,并成功分解了跨多头注意力计算——这一难题三年未解。VPD 可扩展到真实四层语言模型,被视为稀疏自编码器的有力竞争者。它允许通过归因图追踪信息流,甚至手动编辑特定行为并预测结果,使模型权重变得可解释。论文可解释性VPD神经网络权重分解注意力机制推荐理由:VPD 解决了神经网络可解释性长期以来的痛点——权重不可读,做模型调试、安全对齐或研究 AI 内部机制的团队可以直接用这个工具来追踪和编辑模型行为。原文
23:56François Chollet@fcholletFrançois Chollet 在推文中澄清,符号学习(Symbolic learning)并非要取代编程智能体,而是作为梯度下降和神经网络的替代方案。他将其描述为一种低层次、完全通用且极其可扩展的新型学习基底。这一观点重新定义了符号学习的定位,表明它可能在未来AI系统中扮演更基础的角色,为模型优化提供不同于反向传播的新途径。AI模型符号学习梯度下降神经网络AI研究学习范式推荐理由:重塑对符号学习的认知,明确其作为底层学习范式的潜力,对AI研究者和从业者理解未来方向有参考价值。原文