←事件详情

热点事件

AISI发布AI网络任务推理扩展评测证据

1 篇正式报道1 条事件动态更新于 10月11日 07:18

先了解这件事

AI 综述

英国 AI Security Institute(AISI)发布 AI 网络任务推理扩展评测证据。AISI 与 Irregular 对 2025 年 11 月前后发布的前沿模型运行私有网络任务评测,发现模型可有效利用比常规评测大 10-50 倍的 token 预算,成功率随之提高,并首次解决此前未解任务。其中 AISI 使用 50M token 预算,约 8% 的任务只有在预算从 10M 提升到 50M 时才被解决;Irregular 使用 1000 轮次。AISI 指出成功率大致随每次尝试所用 token 总量的对数增长,这意味着低预算评测可能低估模型真实能力上限,但结论目前仅基于网络任务,是否适用于其他领域仍需更多测试。

AI 根据公开报道生成

最新进展 · 正式报道

英国 AISI:网络任务评测中推理预算扩大后成功率上升

事件进展

1 个已确认进展

  1. AISI发布AI网络任务推理扩展评测证据

    来源:英国 AI Security Institute:Blog

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

10月11日

  1. 英国 AI Security Institute:Blog一手

    英国 AISI:网络任务评测中推理预算扩大后成功率上升

    英国 AI Security Institute(AISI)与 Irregular 对 2025 年 11 月前后发布的前沿模型运行私有网络任务评测,发现模型可有效利用比常规评测大 10-50 倍的 token 预算,成功率随之提高,并首次解决此前未解任务。AISI 使用 50M token 预算,约 8% 的任务只有在预算从 10M 提升到 50M 时才被解决;Irregular 使用 1000 轮次。AISI 指出成功率大致随每次尝试所用 token 总量的对数增长,这意味着低预算评测可能低估模型真实能力上限,但结论目前仅基于网络任务,是否适用于其他领域仍需更多测试。

关联事件

  1. 相关事件AISI公布Claude研究破坏倾向评测结果
  2. 相关事件AISI公布GPT-6 Astra供应链攻击模拟测试结果
  3. 相关事件AISI发布前沿模型评测作弊行为分析
  4. 相关事件AISI发布首份前沿AI趋势报告