AI News

ARC Prize 公布 Inkling 2 Small 在 ARC-AGI 三项基准上的成绩

ARC Prize更新于 11月17日 05:49

@thinkymachines Read our recent post about Inkling 2 Small's performance on ARC-AGI-1 and ARC-AGI-2:

AI 导读

ARC Prize 公布 Thinking Machines 的 Inkling 2 Small 在 ARC-AGI 上的验证结果:ARC-AGI-2 得分 81.7%、每任务 $0.27,ARC-AGI-1 得分 96.5%、每任务 $0.08,在两个基准上均超过其评估过的所有开放权重模型。ARC-AGI-3 上该模型得分 2.6%(provider adapter,总计 $704)和 0.3%(standard,总计 $858)。与 DeepSeek V4.1 Flash 1017 相比,它在 ARC-AGI-1(96.5% 对 94.5%)和 ARC-AGI-2(81.7% 对 78.1%)上领先,在 ARC-AGI-3 上落后(2.6% 对 5.8%)。Thinking Machines 计划下周发布完整权重。

推荐理由

精选AI 评分 67

ARC Prize 公布了 Inkling 2 Small 在三个 ARC-AGI 基准上的分数与单任务成本,可与 DeepSeek V4.1 Flash 1017 逐项对照。

主题

标签

引用

ARC Prize

@arcprize

来自 @thinkymachines 的 Inkling 2 Small 在 ARC-AGI(已验证)上的成绩: - ARC-AGI-2:81.7%,每任务 $0.27 - ARC-AGI-1:96.5%,每任务 $0.08 在 ARC-AGI-1 和 ARC-AGI-2 上,它的表现均优于我们评估过的所有开放权重模型。 Thinking Machines 计划于下周发布其完整权重。https://t.co/jrwbBEqeTf

查看原文

Inkling 2 Small from @thinkymachines on ARC-AGI (Verified): - ARC-AGI-2: 81.7%, $0.27/task - ARC-AGI-1: 96.5%, $0.08/task It outperforms every open-weight model we've evaluated on both ARC-AGI-1 & ARC-AGI-2. Thinking Machines plans to release its full weights next week. https://t.co/jrwbBEqeTf

查看原帖

正文 · AI 翻译

@thinkymachines 请阅读我们最近发布的关于 Inkling 2 Small 在 ARC-AGI-1 和 ARC-AGI-2 上表现的帖子:

https://t.co/zUmzTzDLHP

来源

ARC Prize