←新闻详情

ARC Prize更新于 10月30日 14:35

ARC Prize 公布 Meta Muse Spark Open 在 ARC-AGI 上的评测结果

Muse Spark Open from @AIatMeta on ARC-AGI (Verified):

AI 导读

ARC Prize 公布 Meta 的 Muse Spark Open 在 ARC-AGI 上的验证成绩:ARC-AGI-1 为 89.0%、每任务 $0.29,ARC-AGI-2 为 57.5%、每任务 $0.73,ARC-AGI-3 在标准 harness 下为 0.1%、$3.9K。ARC Prize 称其 v1/2 得分与 Haiku 5.5 和 GPT-6 Luna 相近,但成本约为后者的 9 倍;该模型在 OpenRouter 上定价为每百万输入 $1.25、每百万输出 $4.25。随推理档位提升,ARC-AGI-2 从 medium 的 29.4%(平均 55k tokens/任务)升至 xhigh 的 57.2%(180k tokens/任务)。

推荐理由

精选AI 评分 62

ARC Prize 给出 Meta 新模型在 ARC-AGI 三个版本上的成绩与单任务成本,可与同分竞品直接对比。

主题

标签

正文

Muse Spark Open from @AIatMeta on ARC-AGI (Verified):

- ARC-AGI-3: 0.4%, $3.0K (provider adapter harness), 0.1%, $3.9K (standard harness) - ARC-AGI-2: 57.5%, $0.73/task - ARC-AGI-1: 89.0%, $0.29/task

Its scores on v1/2 are similar to Haiku 5.5 & GPT-6 Luna, but ~9x the cost. https://t.co/PtKFobKDc4

来源

ARC Prize