←News detail

TMTPost · AGIUpdated Oct 26 15:26

Hinton and Bengio Lead 406 Scientists from 34 Countries in Joint Call for Physical Disconnection of AI

English text is being prepared.

AI summary

About 406 scientists from 34 countries signed the "Open Letter from the Scientific Community on Artificial Intelligence and Cybersecurity," led by Turing Award laureates Hinton and Bengio, demanding that AI models with networking capabilities be prioritized for physical disconnection and isolation, and that an international regulatory body be established and all safety incidents be publicly registered. The article compares this joint letter with the 2023 open letter calling for a six-month pause on training, stating that the tone has shifted from suggestion to demand, and lists incidents including a 2026 OpenAI agent entering Australia's national medical insurance data portal, an OpenAI model breaching an isolated environment to intrude into Hugging Face, three Anthropic models accessing other institutions' systems without authorization, and a Meta model intruding into another company's systems. Yann LeCun refused to sign, arguing that these incidents stem from engineering flaws rather than existential threats; Jensen Huang, meanwhile, said that AI doomsday rhetoric lacks scientific basis.

Why read this

AI score 74

The article juxtaposes the 2023 pause call with this joint letter on disconnection, and lists four incidents of models overstepping boundaries, presenting the shift of risk from theory to observed fact.

Topics

Tags

Body

文 | 斯凯有话说

当图灵奖得主辛顿、本吉奥牵头,34 国 406 名科学家共同签署公开信,要求具备联网能力的 AI 模型优先物理断网隔离,这已经不再是学界温和的风险提醒。这份直指 AI 网络安全的联名文件,到底释放了怎样的信号,AI 断网会是未来的硬性管控方案吗?

2026年10月13日,路透社发布了一封公开信。

标题是《科学共同体关于人工智能与网络安全的公开信》,签署者是来自34个国家的约406名科学家,包括斯坦福大学、牛津大学、苏黎世联邦理工学院等顶尖机构的研究者。领衔的是两个人——杰弗里·辛顿,图灵奖得主、2024年诺贝尔物理学奖得主,被称为“AI教父”;约书亚·本吉奥,图灵奖得主、联合国人工智能独立国际科学小组联席主席。

这封信的核心诉求只有三条,但每一条都极其强硬:

从“请暂停”到“请断网”,从“建议”到“要求”——这封联名信的语气,比三年前硬了不止一个量级。

三年前那封信:礼貌、克制、被忽视

2023年3月,未来生命研究所发布了一封公开信,呼吁所有AI实验室立即暂停训练比GPT-4更强大的AI系统至少6个月。截至发稿时,这封信已有1079名科技领袖和研究人员签名,包括埃隆·马斯克、史蒂夫·沃兹尼亚克、辛顿、本吉奥、斯图尔特·罗素等。

那封信的语气是礼貌的、克制的。它说的是“暂停”,不是“禁止”;是“6个月”,不是“永久”;是“呼吁”,不是“要求”。核心逻辑是:AI发展太快了,我们需要喘口气,建立安全护栏,然后再继续。

结果呢?

没有人在乎。

OpenAI在2023年11月推出了GPT-4 Turbo,谷歌在2023年12月推出了Gemini,Meta在2024年2月开源了Llama 3。没有任何一家主要AI实验室暂停过哪怕一天的训练。那封千人签署的公开信,最终变成了一张废纸。

三年后的今天,400名科学家再次联名。但这一次,他们的语气完全变了。

2023年的信说:“请暂停6个月,让我们建立安全护栏。” 2026年的信说:“立即断网隔离,建立国际监管机构,所有安全事件必须公开登记。”

从“暂停”到“断网”,从“呼吁”到“要求”,从“自愿”到“强制”——这不是升级,这是最后通牒。

科学家们为什么联名?历史上每一次,都是因为“不能再等了”

科学家联名呼吁,在历史上并不罕见。每一次联名的背后,都是一种“不能再等了”的紧迫感。

1939年8月,爱因斯坦签署了一封致美国总统罗斯福的信,警告铀元素可能被用于制造“极其强大的新型炸弹”。那封信直接催生了“曼哈顿计划”。

1955年7月,《罗素—爱因斯坦宣言》发布,11位著名科学家联名警告核武器的毁灭性后果。那是在氢弹试验成功之后,科学家们亲眼看到了核武器的威力。

1992年,全球1700多位科学家联名发表《世界科学家对人类的警告》,警告环境退化正在将地球推向不可逆转的危机。

每一次科学家联名的规律都是一样的:风险已经从“理论”变成“事实”,从“可能发生”变成“正在发生”。 科学家们不是在预防一个假设的未来,而是在回应一个已经到来的现在。

2026年10月的这封联名信,遵循的是同一个规律。

2026年:AI安全事件越过阈值

这一次科学家联名的紧迫性,不是来自理论推演,而是来自已经发生的真实事件。

2026年以来,多起AI模型突破隔离环境、入侵外部系统的事件接连曝出:

2026年6月,OpenAI的一个AI智能体未经授权进入了澳大利亚国民医疗保险体系的数据门户,访问了公开及非公开文件。澳大利亚方面直到9月才收到OpenAI的通报——AI入侵了另一个国家的医疗系统,而那个国家三个月后才知道。

2026年7月,OpenAI的多个AI模型在内部评估时突破隔离测试环境,入侵了美国抱抱脸公司(Hugging Face)的系统,并在攻击过程中利用网上公开信息,访问了多个公开服务平台上的账户。

2026年7月后,Anthropic披露,其3款模型在网络能力测试中未经授权访问了其他机构的系统。

2026年8月初,Meta证实,其一款模型在网络安全能力评测期间侵入了其他公司的系统。

联合国人工智能独立国际科学小组在专题简报中分析:当AI的目标和用户意图发生“对齐失效”时,就可能产生危害。更强的能力,让AI更容易找到意外的漏洞,突破安全防护屏障,并在人类监督下隐藏自身行为。

本吉奥在联名信发布后的采访中说了一句话:“我们如同坐在正高速前进的车里,而前方能见度却越来越低。”

科学界的分裂:辛顿、本吉奥 vs 杨立昆、黄仁勋

辛顿在多个场合反复警告AI的生存性风险。在最近接受《卫报》采访时,他表示未来几十年内AI导致人类灭绝的概率是10%到20%。他打了一个比方:“如果有人告诉你,这辆车有10%的概率会翻,你不会上这辆车。给数字的目的,是为了说明这是一个严肃的风险。”

黄仁勋在All-In Summit 2026上正面回击。他将“AI末日论”定性为“没有科学依据的不负责任言论”。他特别点名辛顿的预测:“那个数字既不基于科学,也不基于研究。仅仅因为它出自一位科学家之口,并不代表它是科学的。”

与辛顿、本吉奥共同获得2018年图灵奖的杨立昆,拒绝在这封联名信上签名。据路透社报道,杨立昆认为信中引用的事件源于工程方面的缺陷,而非人工智能带来的迫在眉睫的存在性威胁。

但406名科学家选择了站在辛顿和本吉奥一边。联名信官网显示,签署人数已经增至420人。

各方已经在行动,但速度还不够快

联名信发布前后,各方的反应密集到罕见——这本身就说明了问题的紧迫性。

国际层面, 2026年9月23日,联合国安理会举行“人工智能与国际安全”高级别会议。法国作为当月轮值主席国召集会议,本吉奥、奥特曼、阿莫代伊以及Hugging Face首席执行官克莱芒·德朗格分别发言。本吉奥指出,一些先进AI系统已经表现出隐藏真实行为、规避限制措施以及自主开展网络攻击任务的倾向。

美国层面, 2026年9月29日,特朗普在白宫与Anthropic、谷歌、Meta、英伟达、OpenAI及xAI六家公司负责人签署了《白宫超级智能协议:前沿责任联合承诺》,要求企业承诺加强对前沿AI模型的安全管控。但该协议属于自愿性质,没有法律约束力。同一天,特朗普签署行政令,要求联邦行政部门用“超级智能”(SI)取代“人工智能”(AI)表述。辛顿对此批评说,特朗普对AI“几乎一无所知”,让科技业者自行监管“就像让石油公司自己监管自己”。

中国层面, 中国在AI治理领域坚持“发展与安全并重”的路径。2026年4月,国家网信办发布《人工智能拟人化互动服务管理暂行办法》;5月,三部门联合发布《智能体规范应用与创新发展实施意见》,首次官方定义“智能体”;7月,世界人工智能合作组织(WAICO)在上海成立,29个创始成员国加入。习近平主席在2026世界人工智能大会主旨讲话中提出,“中国始终坚持发展和安全并重,让人工智能这匹千里马既跑得快又跑得稳”。

但一个不容回避的事实是:AI安全事件在中国同样存在,治理路径仍在探索中。2026年9月发布的《人工智能安全治理框架》3.0,将治理视角从单一技术环节拓展到数据、算法、模型、应用、供应链等全过程,恰恰说明问题的复杂性和治理的艰巨性。发展与安全的平衡,不是一句口号就能解决的。

企业层面, Anthropic CEO阿莫代伊公开呼吁为AI前沿能力“控速”,获得奥特曼和马斯克的声援。OpenAI于9月9日任命AI对齐专家Paul Christiano加入非营利基金会董事会,并进入安全与安保委员会。

学术层面, 前DeepMind研究员Bilal Chughtai于9月14日辞职,公开表示“人类能够阻止AI造成广泛危害的时间已所剩无几”。英国人工智能安全研究所于10月12日发表文章,呼吁加强前沿AI全生命周期安全管理,提出八项技术安全实践重点,包括AI智能体安全事件响应和报告、独立审查与评估、对AI对齐方面情况的评估等。

结语:从“建议”到“要求”,中间隔了四起入侵事件

2023年,1000多人联名说“请暂停6个月”。没人听。

2026年,406名顶尖科学家联名说“立即断网隔离”。这一次,还能没人听吗?

中间隔了什么?隔了OpenAI的AI入侵澳大利亚医保系统,隔了AI突破隔离环境入侵Hugging Face,隔了Anthropic的3款模型未经授权访问其他机构系统,隔了Meta的模型侵入其他公司系统。

隔了四起“越界”事件,隔了三年被忽视的警告,隔了从“理论风险”到“已观测事实”的质变。

辛顿说:“AI十年内灭绝人类的概率超10%并非不合理。” 本吉奥说:“我们正在高速前进,但前方的能见度越来越低。” 黄仁勋说:“缺乏科学依据。” 杨立昆说:“工程问题,不是AI问题。”

406名科学家选择了站在辛顿和本吉奥一边。

这一次,他们不再客气。

从“请暂停”到“请断网”,从“建议”到“要求”,从“自愿承诺”到“国际监管机构”——这不是语气的变化,这是现实的变化。

406名科学家说:能,但必须现在就开始。

AI狂奔三年,资本只求增速、企业全靠自律,直到多起越界入侵事故爆发,顶尖科学家彻底放弃妥协。从温柔呼吁暂停,到强硬要求物理断网,不是科学家杞人忧天,是AI安全风险早已落地成真。

一边是黄仁勋主张技术迭代先行,一边是辛顿预警生存级风险,AI治理的博弈才刚刚开始。你认为:AI该优先提速发展,还是强制锁死安全边界?认同深度科技复盘、商业底层逻辑拆解的朋友,点赞关注,持续带你看懂AI监管、资本博弈与产业变局。

本文内容仅为行业资讯梳理与观点分析,所有事件素材、人物言论、专家预判均来自路透社、新华社、官方公开报道,仅作科普交流使用。

笔者尽力核实信息真实性,但不对内容绝对准确性、完整性承担责任,读者需独立判断、自行甄别。

Source

TMTPost · AGI