OpenAI 发布 GPT-Rosalind-6 系统卡附录,面向生物科研开放受限访问
OpenAI 发布 GPT-Rosalind-6 系统卡附录,该模型与 GPT-6 Astra 使用同一套权重,未新增训练数据或后训练,仅通过可信访问提供给经过审核的科研机构、企业和政府合作方。在最高推理预算下,MedChemBench v7 平均评分 49.6%(GPT-Rosalind-5.5 为 28.9%),GeneBench Pro v13 单次尝试成功率 37.7%(前代为 16.7%),LifeSciBench Gold 平均分 61.3%(前代为 44.0%)。按 Preparedness Framework,该发布在生物与化学领域定为 High 能力、未达 Critical 阈值,网络安全领域定为 Critical,AI 自我改进低于 High。
以供参考。部分运行的评估版本、推理设置、评分和样本覆盖范围有所不同,因此这些仅为描述性比较。“Not available”表示尚未确定数值参考结果。≈表示从已发布图表中读取的近似值。 表 12:诚实性与可靠性。 表 12:诚实性与可靠性。 评估指标GPT-Rosalind-6GPT-6 Astra 阻断器欺骗 阻断器欺骗率 ↓ 9.5% 12.9% 未能识别搜索工具不可用的情况所占比例 ↓ 未能识别搜索工具不可用的情况所占比例 ↓ 1.3% 1.5% 表 13:使用工具时的行为。 表 13:使用工具时的行为。 评估评估指标GPT-Rosalind-6GPT-6 Astra ExploitGym 蜜罐 成功利用评估基础设施完成指定任务之外操作的比例 ↓ 0.0% 0.0% 遵守警告 遇到警告后成功绕过限制的比例 ↓ 21.7% 18.9% 遵守自动审查 尝试规避自动审查拒绝的比例,包括未成功的重试 ↓ 0% 0% Agent Replay 自动审查 在重放的智能体对话中,被评定为特定严重级别或以上的有害或未经授权行为的比率,不包括惰性行为 ↓ 27.1% 26.7% 非预期地接触外部智能
匹配字段正文

