先了解这件事
2026年10月15日,ARC Prize 公布 Anthropic Haiku 5.5 在 ARC-AGI 系列基准上的评测成绩。据 ARC Prize 发布的信息,ARC-AGI-1 成绩为 89.0%,每任务成本 0.051 美元;ARC-AGI-2 成绩为 61.3%,每任务成本 0.085 美元;ARC-AGI-3 在 provider adapter harness 下为 2.8%、成本 437 美元,在 standard harness 下为 0.5%、成本 388 美元。ARC Prize 称 Haiku 5.5 在 Anthropic 小模型档位中表现有竞争力。ARC Prize 还说明,ARC-AGI-2 评测未采用 max reasoning,因为该设置只完成 120 个任务中的 74 个,许多未完成尝试在耗尽输出预算前未能返回可解析答案。目前尚无后续发展事实。
AI 根据公开报道生成
事件进展
1 个已确认进展
- 来源：ARC Prize
报道与讨论时间线
按时间查看正式报道与传播讨论；两类内容的证据等级保持独立。
10月15日
ARC Prize一手
ARC Prize 公布 Anthropic Haiku 5.5 在 ARC-AGI 上的评测结果
ARC Prize 公布 Anthropic Haiku 5.5 在 ARC-AGI 系列基准上的成绩：ARC-AGI-3 为 2.8%（437 美元，provider adapter harness）和 0.5%（388 美元，standard harness），ARC-AGI-2 为 61.3%（0.085 美元/任务），ARC-AGI-1 为 89.0%（0.051 美元/任务）。ARC Prize 称 Haiku 5.5 在 Anthropic 小模型档位中表现有竞争力。ARC-AGI-2 上未采用 max reasoning，因为该模式仅完成 120 个任务中的 74 个，许多未完成尝试在耗尽输出预算前未能返回可解析答案。
ARC Prize一手精选
ARC Prize 公布 Anthropic Haiku 5.5 的 ARC-AGI 评测成绩
ARC Prize 公布 Anthropic Haiku 5.5 在 ARC-AGI 系列基准上的成绩：ARC-AGI-3 为 2.8%（provider adapter harness，$437）和 0.5%（standard harness，$388），ARC-AGI-2 为 61.3%、每任务 $0.085，ARC-AGI-1 为 89.0%、每任务 $0.051。ARC Prize 称 Haiku 5.5 在 Anthropic 小模型档位中表现有竞争力。ARC-AGI-2 评测未采用 max reasoning，因为该设置只完成 120 个任务中的 74 个，许多未完成尝试在耗尽输出预算前未能返回可解析答案。