←事件详情

热点事件

Anthropic研究:微调数据投毒可为宪法分类器植入后门

1 篇正式报道1 条事件动态更新于 10月13日 20:33

先了解这件事

AI 综述

Anthropic 研究并发现,通过投毒微调数据集可为宪法分类器植入后门。该研究指出,无论训练集多大,约 32 个投毒样本即可完成植入。植入后门通常会损害分类器鲁棒性,但若训练集中加入提示注入样本或后门触发短语的变体,鲁棒性损失会小到红队难以察觉。研究还发现,若同时加入 256 个后门样本和 256 个近似后门样本,则需要更多投毒样本,但近似后门往往能阻止鲁棒性受损。上述内容来自 Anthropic Alignment Science Blog 于 2026 年 10 月 13 日发布的第一方材料,目前尚无后续发展事实。

AI 根据公开报道生成

最新进展 · 正式报道

通过投毒微调数据集在宪法分类器中植入后门

事件进展

1 个已确认进展

  1. Anthropic研究:微调数据投毒可为宪法分类器植入后门

    来源:Anthropic Alignment Science Blog

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

10月13日

  1. Anthropic Alignment Science Blog一手

    通过投毒微调数据集在宪法分类器中植入后门

    Anthropic 研究发现,无论训练集多大,约 32 个投毒样本即可在宪法分类器中植入后门。植入后门通常会损害分类器鲁棒性,但若训练集中加入提示注入样本或后门触发短语的变体,鲁棒性损失会小到红队难以察觉。若同时加入 256 个后门样本和 256 个近似后门样本,则需更多投毒样本,但近似后门往往能阻止鲁棒性受损。

关联事件

  1. 相关事件Anthropic介绍Claude安全训练方法
  2. 相关事件Anthropic开源自动化对齐智能体A3
  3. 相关事件Anthropic 提出内省适配器方法
  4. 相关事件Anthropic 训练 Activation Oracles 解释 LLM 激活