先了解这件事
AI 综述
ARC Prize公布了Anthropic的Claude Sonnet 5.5在ARC-AGI各代基准上的验证成绩。ARC-AGI-3方面,在provider adapter harness下成绩为72.4%、成本8.2K美元,在标准harness下为24.3%、成本7.4K美元;ARC-AGI-2为83.9%、每任务0.55美元;ARC-AGI-1为96.5%、每任务0.14美元。ARC Prize称Sonnet 5.5在ARC-AGI-3上的72.4%值得关注。目前尚无后续发展。
AI 根据公开报道生成
最新进展 · 正式报道
Claude Sonnet 5.5 在 ARC-AGI 基准上的成绩公布事件进展
1 个已确认进展
- 来源:ARC Prize
报道与讨论时间线
按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。
10月22日
ARC Prize一手精选
Claude Sonnet 5.5 在 ARC-AGI 基准上的成绩公布
ARC Prize 公布 Anthropic 的 Claude Sonnet 5.5 在 ARC-AGI 各代基准上的成绩:ARC-AGI-3 在 provider adapter harness 下为 72.4%、成本 8.2K 美元,在标准 harness 下为 24.3%、成本 7.4K 美元;ARC-AGI-2 为 83.9%、每任务 0.55 美元;ARC-AGI-1 为 96.5%、每任务 0.14 美元。ARC Prize 称 Sonnet 5.5 在 ARC-AGI-3 上的 72.4% 值得关注。