稀疏激活相关 AI 资讯 · AI 热点

8月13日

20:52

20:52

shao__meng@shao__meng

微信团队在 X 上发布 WeLM 大语言模型系列，包含 80B (A3B) 和 617B (A23B) 两个型号。其中 A3B 指激活 3B 参数，A23B 指激活 23B 参数，对应总参数规模为 80B 与 617B。WeLM 由 Weixin 团队打造，官方帖文强调其核心优势是资源效率，并以 X 作为首发渠道。

AI模型 WeLM 微信 MoE

推荐理由：微信出了 WeLM，80B 和 617B 两个版本，主打省资源，激活参数只有 3B 和 23B。想省算力可以看看。