AI News

ARC Prize 公布 Inkling 2 Small 在 ARC-AGI-1 与 ARC-AGI-2 的评测结果…

ARC Prize更新于 11月7日 03:41

@thinkymachines ARC-AGI-3 evaluations are more operationally intensive; we will share the results once testing is complete.

AI 导读

ARC Prize 公布 thinkymachines 的 Inkling 2 Small 在 ARC-AGI 上的评测结果:ARC-AGI-2 得分 81.7%,每任务成本 $0.27;ARC-AGI-1 得分 96.5%,每任务成本 $0.08。ARC Prize 称该模型在两个基准上都超过其评测过的所有开放权重模型,Thinking Machines 计划下周发布完整权重。ARC Prize 表示 ARC-AGI-3 评测的操作成本更高,测试完成后会公布结果。

正文

@thinkymachines ARC-AGI-3 evaluations are more operationally intensive; we will share the results once testing is complete.

Full ARC-AGI-1 and ARC-AGI-2 results: https://t.co/az2H7r9gNn https://t.co/wsh6rmFA3l

来源

ARC Prize