AITP
精选全部 AI 动态AI 日报Agent 接入我的简报我的追踪阅读偏好内容方法关于更新日志信源提报反馈
外观
登录 / 注册
AITOP

Circuit Condensation

共 1 条相关 AI 资讯
8月28日
19:07
19:07官方账号arXiv cs.LG@Sai Adith Senthil Kumar
精选73°
研究人员提出Circuit Condensation方法,通过后训练将模型行为压缩到更小的因果图中。该方法在4种行为和8个模型上测试,平均压缩比例为8.1倍,最高达316倍。研究发现权重更新而非搜索本身是电路规模减少的关键因素。该方法能识别出24个heads,其中17个有已记录角色,相比原始电路的61个heads和36个未记录角色显著减少。
论文Circuit Condensationmechanistic interpretability因果电路

推荐理由:OpenAI新研究提出Circuit Condensation,能将模型行为压缩316倍,让AI内部机制更透明可解释。
原文
精选全部日报登录