Anthropic 可解释性团队 2026 年 6 月 Circuits Updates
Anthropic 可解释性团队发布 2026 年 6 月 Circuits Updates,介绍正在发展的研究思路。其中提出 Turn-Averaged SAEs:对单个 Human 或 Assistant 轮次内所有 token 的残差流取平均后训练 SAE,使每轮只产生 L0 个激活特征,而逐 token SAE 会产生 n_tokens × L0 个。在 Qwen-2.5-7B-Instruct 上,Sonnet 4.6 评判显示轮次平均特征在覆盖度上以 77% 被偏好,但区分度 74% 低于逐 token 的 95%。
匹配字段标题
