←事件详情

热点事件

Anthropic可解释性团队开发J++ lens

1 篇正式报道1 条事件动态更新于 10月30日 12:49

先了解这件事

AI 综述

Anthropic可解释性团队在Fellows Program项目中由Kola Ayonrinde主导,提出J++ lens,作为J-lens的改进版,可即插即用地替换原方法。该工作按层对激活值聚类并分别拟合Jacobian,再用学习权重组合,同时引入R-lens的逐层相关性传播和虚假读出token后置过滤。团队称在评测中它比J-lens和R-lens更可靠地读出模型推理所用的中间隐变量,并已公开代码、lens及Neuronpedia交互demo。

AI 根据公开报道生成

最新进展 · 正式报道

Anthropic 可解释性团队发布 J++ lens,改进模型中间层概念读取

事件进展

1 个已确认进展

  1. Anthropic可解释性团队开发J++ lens

    来源:Anthropic:Transformer Circuits

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

10月30日

  1. Anthropic:Transformer Circuits一手

    Anthropic 可解释性团队发布 J++ lens,改进模型中间层概念读取

    Anthropic 可解释性团队在 Fellows Program 项目中由 Kola Ayonrinde 主导,提出 J++ lens,作为 J-lens 的改进版,可即插即用地替换原方法。J++ lens 按层对激活值聚类并分别拟合 Jacobian,再用学习权重组合,同时引入 R-lens 的逐层相关性传播和虚假读出 token 后置过滤。团队称在评测中它比 J-lens 和 R-lens 更可靠地读出模型推理所用的中间隐变量,并已公开代码、lens 及 Neuronpedia 交互 demo。

关联事件

  1. 相关事件Nvidia发布Nemotron 3.5 Super VL与Bolt模型
  2. 相关事件Anthropic 从 Claude 3 Sonnet 提取高质量可解释特征
  3. 相关事件Anthropic 提出稀疏 crosscoder 方法
  4. 相关事件Anthropic 用归因图研究 Claude 3.5 Haiku 内部机制