ARC Prize 实测 Meta Spark Open:ARC-AGI-2 得分 57.5%,成本约为同分模型 9 倍
@AIatMeta Meta Spark Open costs $1.25/M input, $4.25/M output on all providers listed on OpenRouter including @Baseten where we tested it. For comparison, Haiku
AI 导读
ARC Prize 在 ARC-AGI 上实测 Meta Spark Open,ARC-AGI-1 得 89.0%、ARC-AGI-2 得 57.5%、ARC-AGI-3 仅 0.4%,v1/v2 分数与 Haiku 5.5、GPT-6 Luna 接近但成本约为其 9 倍。在 OpenRouter 各提供商上,该模型输入 $1.25/M、输出 $4.25/M,而 Haiku 5.5 和 GPT-6 Luna 均为输入 $0.10/M、输出 $0.50/M。随推理档位提升,ARC-AGI-2 从 medium 的 29.4%(平均 55k tokens/task)升到 xhigh 的 57.2%(180k tokens/task)。
正文 · AI 翻译
@AIatMeta Meta Spark Open 在 OpenRouter 上列出的所有提供商处,输入费用为每百万 token 1.25 美元,输出费用为每百万 token 4.25 美元,其中包括我们测试过的 @Baseten。作为对比,Haiku 5.5 和 GPT-6 Luna 的输入费用均为每百万 token 0.10 美元,输出费用均为每百万 token 0.50 美元。
完整结果:https://t.co/MHQYZ73Nyw https://t.co/R9gr1uXvKC