AI 热点

ARC Prize 公布 GPT-6.2 Astra 在 ARC-AGI 各基准的成绩与成本

ARC Prize更新于 11月18日 02:31

@OpenAI Across low through xhigh on ARC-AGI-2 semi-private tasks, GPT-6.2 Astra used 51% fewer reasoning tokens than its predecessor GPT-6 Astra. At max, it use

AI 导读

ARC Prize 公布 OpenAI GPT-6.2 Astra 在 ARC-AGI 系列基准上的结果:ARC-AGI-3 得分 100.0%(SOTA),成本 $4.1K(provider adapter)、70.3% 与 $24.2K(standard);ARC-AGI-2 为 95.8%(SOTA),$0.50/task;ARC-AGI-1 为 98.5%,$0.17/task。在 ARC-AGI-2 半私有任务上,从 low 到 xhigh 档位,GPT-6.2 Astra 的推理 token 用量比前代 GPT-6 Astra 少 51%,max 档位则多 12%。在 ARC-AGI-3 的 25 个公开游戏 max 推理下,其动作数比人类基线少 64.1%,比 GPT-6 Astra 少 5.2%。

推荐理由

精选AI 评分 72

ARC Prize 给出 GPT-6.2 Astra 在 ARC-AGI 各档位的分数与成本,并对比前代在推理 token 用量上的变化。

主题

标签

正文

@OpenAI Across low through xhigh on ARC-AGI-2 semi-private tasks, GPT-6.2 Astra used 51% fewer reasoning tokens than its predecessor GPT-6 Astra. At max, it used 12% more: https://t.co/kdoJRqyPAL

来源

ARC Prize