先了解这件事
事件摘要
还没有公开综述,先看下面的报道时间线。
最新进展 · 正式报道
ARC Prize:ARC-AGI 三代基准呈自然递进事件进展
1 个已确认进展
- 来源:ARC Prize
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月29日
ARC Prize一手
ARC Prize:ARC-AGI 三代基准呈自然递进
ARC Prize 表示,ARC-AGI-1、ARC-AGI-2 与 ARC-AGI-3 之间的关系呈现出一种自然的递进,未来基准将继续帮助衡量进展并区分能力越来越强的模型。该线程还提到,ARC-AGI-2 与 ARC-AGI-3 的得分存在相似关系,其中 Gemini 4 Argon 在低推理设置下是一个明显的例外:ARC-AGI-2 仅 42.1%,ARC-AGI-3 达 97.5%。
ARC Prize一手
ARC Prize:ARC-AGI 三项基准分数强相关
ARC Prize 绘制 ARC-AGI 模型得分后发现,三项基准之间存在强关联:幂曲线 v2 = v1^4.53 可解释约 98% 的 ARC-AGI-2 得分变化,在 ARC-AGI-1 上持平的模型,在 ARC-AGI-2 上仍可能相差超过 20 个百分点。ARC-AGI-3 上也有类似趋势,但 Gemini 4 Argon 低推理档是明显例外:ARC-AGI-2 仅 42.1%,ARC-AGI-3 却达 97.5%。