Transformer Circuits 九月更新:继任头与 SAE 过采样研究
Anthropic 的可解释性团队持续输出硬核研究,做 AI 安全或模型调试的开发者值得跟进——继任头和 SAE 过采样是理解 Transformer 内部机制的关键拼图。
Anthropic 的可解释性团队持续输出硬核研究,做 AI 安全或模型调试的开发者值得跟进——继任头和 SAE 过采样是理解 Transformer 内部机制的关键拼图。
字典学习是理解大模型内部机制的关键工具,这些优化技术能显著提升分析效率。做 AI 可解释性研究的团队值得关注,可以直接参考这些方法改进自己的实验。