先了解这件事
2026年10月14日,Berkeley RDI 发布端到端网络安全基准 CyberGym-E2E,覆盖 139 个开源项目的 920 个真实漏洞,要求 AI 智能体自行定位漏洞、生成触发 sanitizer 崩溃的 PoC 并写出通过功能测试的补丁。据发布信息,在仅给定漏洞 PoC 和崩溃日志时最强配置成功率约 80%,改为端到端自行发现漏洞后,Claude Opus 4.5 降至 19.2%,GPT-5.4 在扩展集上达到 66.2%,Claude Opus 4.6 在无预算上限时约 63%。作者指出智能体常修好的是另一个有效漏洞而非目标漏洞,部分补丁只是在崩溃点加防护,因此补丁应视为待人工复核的候选。数据集已在 github.com/sunblaze-ucb/cybergym-e2e 开放。同日另有报道称 Berkeley RDI 推出 CyberGym 基准,覆盖 188 个开源项目的 1507 个真实漏洞,采用执行式客观评测,顶尖智能体单次尝试成功率约 30%,30 次尝试可达约 67%。
AI 根据公开报道生成
事件进展
2 个已确认进展
- 来源:Berkeley RDI Blog
- 来源:Berkeley RDI Blog
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月13日
Berkeley RDI Blog一手精选
Berkeley RDI 发布 CyberGym:1507 个真实漏洞评测 AI 安全能力
Berkeley RDI 推出 CyberGym 基准,覆盖 188 个开源项目的 1507 个真实漏洞,规模为此前基准的 7.5 倍,采用执行式客观评测。评测显示顶尖智能体单次尝试成功率约 30%,30 次尝试可达约 67%,模型单次成功率已从 10% 提升到 30%。智能体还自主发现 35 个零日漏洞和 17 个历史不完整补丁,Anthropic 已在 Claude-Sonnet-4.5 系统卡中使用该基准,其单次成功率为 28.9%,30 次为 66.7%。
Berkeley RDI Blog一手
伯克利发布 CyberGym-E2E:920 个真实漏洞的端到端安全基准
伯克利 RDI 发布 CyberGym-E2E,一个覆盖 139 个开源项目、920 个真实漏洞的端到端网络安全基准,要求 AI 智能体自行定位漏洞、生成触发 sanitizer 崩溃的 PoC 并写出通过功能测试的补丁。在仅给定漏洞 PoC 和崩溃日志时最强配置成功率约 80%,但改为端到端自行发现漏洞后,Claude Opus 4.5 降至 19.2%,GPT-5.4 在扩展集上达到 66.2%,Claude Opus 4.6 在无预算上限时约 63%。作者指出智能体常修好的是另一个有效漏洞而非目标漏洞,且部分补丁只是在崩溃点加防护,因此补丁应视为待人工复核的候选。数据集已在 github.com/sunblaze-ucb/cybergym-e2e 开放。