ARC Prize 公布 Gemini 4 Argon 在 ARC-AGI 系列上的评测结果
@Google - Leaderboard: https://t.co/x8U1ItNLRj
AI 导读
ARC Prize 公布 Google Gemini 4 Argon 在 ARC-AGI 上的验证成绩:ARC-AGI-3 达 97.5%(provider adapter harness,成本 4.8K 美元),标准 harness 下为 49.8%(成本 5.8K 美元);ARC-AGI-2 为 91.3%,每任务 0.32 美元;ARC-AGI-1 为 98.5%,每任务 0.16 美元。ARC Prize 称 Google DeepMind 是第二家在 ARC-AGI-3 上超过 95% 的前沿 AI 实验室,Argon 的 97.5% 仅次于 GPT-6 Astra 的 99.9%。标准 harness 测试因 API 问题未能完成全部 55 个游戏,高推理档仅完成 19 个游戏故未公布分数,成本按每百万 token 输入 2 美元、输出 10 美元的当前优惠价计算。
推荐理由
精选AI 评分 81
ARC Prize 公布 Gemini 4 Argon 在 ARC-AGI 三代基准上的分数与单任务成本,可对照不同 harness 下的表现差异。
主题
正文 · AI 翻译
@Google - 排行榜:https://t.co/x8U1ItNLRj - 复现公开结果:https://t.co/vMqtds8Zet - 测试政策:https://t.co/pBoUqvXe4P - 完整的 Gemini 4 Argon 结果:https://t.co/XAPFaSTK1L