←新闻详情

ARC Prize更新于 10月30日 14:35

ARC Prize 公布 Meta Muse Spark Open 在 ARC-AGI 上的评测结果

Muse Spark Open from @AIatMeta on ARC-AGI (Verified):

AI 导读

ARC Prize 公布 Meta 的 Muse Spark Open 在 ARC-AGI 上的验证成绩:ARC-AGI-1 为 89.0%、每任务 $0.29,ARC-AGI-2 为 57.5%、每任务 $0.73,ARC-AGI-3 在标准 harness 下为 0.1%、$3.9K。ARC Prize 称其 v1/2 得分与 Haiku 5.5 和 GPT-6 Luna 相近,但成本约为后者的 9 倍;该模型在 OpenRouter 上定价为每百万输入 $1.25、每百万输出 $4.25。随推理档位提升,ARC-AGI-2 从 medium 的 29.4%(平均 55k tokens/任务)升至 xhigh 的 57.2%(180k tokens/任务)。

推荐理由

精选AI 评分 62

ARC Prize 给出 Meta 新模型在 ARC-AGI 三个版本上的成绩与单任务成本,可与同分竞品直接对比。

主题

标签

正文 · AI 翻译

Muse Spark Open 在 ARC-AGI(已验证)上的成绩,来自 @AIatMeta:

- ARC-AGI-3:0.4%,$3.0K(provider adapter harness),0.1%,$3.9K(标准 harness) - ARC-AGI-2:57.5%,$0.73/任务 - ARC-AGI-1:89.0%,$0.29/任务

其在 v1/2 上的得分与 Haiku 5.5 和 GPT-6 Luna 相近,但成本约为后者的 9 倍。https://t.co/PtKFobKDc4

来源

ARC Prize