论文精选

Topo-Omni:多模态深度地形模型发现脑区功能选择性

Discovering Functionally Selective Brain Regions with a Deep Topographic Multimodal Model

精选理由

神经科学和AI交叉领域的研究者会感兴趣——Topo-Omni用单一模型统一了多模态皮层地图,还能预测新脑区,做认知建模或脑启发AI的团队值得关注。

AI 摘要

研究团队提出 Topo-Omni,一种多模态地形模型,将视觉、听觉和语言/认知处理整合到单一连续的模拟皮层上。该模型通过微调预训练基础模型并加入空间平滑约束,自发形成了与人类神经影像一致的跨模态功能簇。通过驱动或抑制特定簇,可以选择性影响感知,模拟人类干预实验。模型还发现了新的自然景观和动物网络功能簇,并在人类数据中得到验证。这项工作表明单一空间原则即可组织跨模态和跨处理阶段的表征,为皮层组织提供可检验的假设。

AI 翻译 · 中文

研究团队提出 Topo-Omni,一种多模态地形模型,将视觉、听觉和语言/认知处理整合到单一连续的模拟皮层上。该模型通过微调预训练基础模型并加入空间平滑约束,自发形成了与人类神经影像一致的跨模态功能簇。通过驱动或抑制特定簇,可以选择性影响感知,模拟人类干预实验。模型还发现了新的自然景观和动物网络功能簇,并在人类数据中得到验证。这项工作表明单一空间原则即可组织跨模态和跨处理阶段的表征,为皮层组织提供可检验的假设。

arXiv cs.LGNearby neurons in cortex share similar response profiles, producing systematic spatial organization across sensory and cognitive systems. Recent topographic models reproduce aspects of this structure but remain unimodal