←事件详情

热点事件

Anthropic可解释性团队分享稀疏自编码器训练改进

1 篇正式报道1 条事件动态更新于 10月13日 20:32

先了解这件事

AI 综述

Anthropic可解释性团队发布2025年1月Circuits更新,分享了训练稀疏自编码器与crosscoder的改进方案。据该团队介绍,改进内容包括JumpReLU激活、pre-act loss以及新的初始化方式。团队表示这些属于初步实验,希望为外部训练稀疏自编码器的团队提供一个起点。目前该更新由Anthropic:Transformer Circuits发布,尚无其他后续发展事实。

AI 根据公开报道生成

最新进展 · 正式报道

Anthropic 可解释性团队 2025 年 1 月 Circuits 更新

事件进展

1 个已确认进展

  1. Anthropic可解释性团队分享稀疏自编码器训练改进

    来源:Anthropic:Transformer Circuits

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

10月13日

  1. Anthropic:Transformer Circuits一手

    Anthropic 可解释性团队 2025 年 1 月 Circuits 更新

    Anthropic 可解释性团队发布 2025 年 1 月 Circuits 更新,分享了训练稀疏自编码器与 crosscoder 的改进方案,包括 JumpReLU 激活、pre-act loss 和新的初始化方式。团队称这些是初步实验,希望为外部训练稀疏自编码器的团队提供起点。

关联事件

  1. 相关事件Anthropic 从 Claude 3 Sonnet 提取高质量可解释特征
  2. 相关事件LG AI Research 在 ICML 2026 展示 GEAR 与 Sim-GEAR
  3. 相关事件Thinking Machines Lab 提出流形版 Muon 优化器
  4. 相关事件Apple研究比较双语预训练与超参搜索