AI 热点

ARC Prize 公布 Inception AI 的 Mercury 3 Preview 在…

ARC Prize更新于 11月17日 23:22

Mercury 3 Preview from @_inception_ai on ARC-AGI (Verified):

AI 导读

ARC Prize 公布 Inception AI 的 Mercury 3 Preview 在 ARC-AGI 上的验证成绩:ARC-AGI-1 得分 88.5%,每任务 $0.03;ARC-AGI-2 得分 61.8%,每任务 $0.06;ARC-AGI-3 得分 0.2%(provider adapter,$299)与 0.1%(standard,$333)。这是 ARC Prize 评测的首个扩散模型,最高输出速度达 1,743 tokens/秒;在 instant 推理档位下,ARC-AGI-2 公开集平均 981 输出 tokens/秒,单次调用峰值 1,743 tokens/秒(1.72 秒输出 3,001 tokens),开启推理后平均 500-600 tokens/秒。

推荐理由

AI 评分 58

ARC Prize 公布了首个扩散模型在 ARC-AGI 三个基准上的成绩与单任务成本,可对照现有榜单判断其位置。

主题

标签

正文 · AI 翻译

来自 @_inception_ai 的 Mercury 3 Preview 在 ARC-AGI(已验证)上的预览:

- ARC-AGI-3:0.2%,$299(provider adapter),0.1%,$333(standard) - ARC-AGI-2:61.8%,$0.06/任务 - ARC-AGI-1:88.5%,$0.03/任务

这是我们评估的首个扩散模型,输出速度最高可达 1,743 tokens/秒。https://t.co/Wqscy5zUrl

来源

ARC Prize