AI News

ARC Prize 评测 Inkling 2 Small:ARC-AGI-2 得分 81.7%

ARC Prize更新于 11月7日 03:42

@thinkymachines Compared with the original Inkling Small, released July 30, Inkling 2 Small more than doubled the ARC-AGI-2 semi-private score, from 40.14% to 8

AI 导读

ARC Prize 公布 Thinking Machines 的 Inkling 2 Small 在 ARC-AGI 上的验证结果:ARC-AGI-2 得分 81.7%,每任务成本 $0.27;ARC-AGI-1 得分 96.5%,每任务成本 $0.08。相比 7 月 30 日发布的初代 Inkling Small,ARC-AGI-2 半私有集分数从 40.14% 提升到 81.67%。ARC Prize 称其在 ARC-AGI-1 和 ARC-AGI-2 上超过其评测过的所有开放权重模型,Thinking Machines 计划下周发布完整权重,ARC-AGI-3 结果待测试完成后公布。

推荐理由

AI 评分 78

ARC Prize 给出 Inkling 2 Small 在 ARC-AGI-1 与 ARC-AGI-2 上的分数和单任务成本,可与前代直接对照。

主题

标签

正文 · AI 翻译

@thinkymachines 与7月30日发布的初代 Inkling Small 相比,Inkling 2 Small 的 ARC-AGI-2 半私有集得分提升了一倍多,从 40.14% 提高到 81.67%。https://t.co/kwy8zygwKj

来源

ARC Prize