ARC Prize 公布 DeepSeek V4.1 Flash 1017 在 ARC-AGI 上的评测结果
@deepseek_ai @baseten - Leaderboard: https://t.co/x8U1ItNLRj
AI 导读
ARC Prize 公布 DeepSeek V4.1 Flash 1017 在 ARC-AGI 上的评测结果:ARC-AGI-3 半私有集得分 5.81%,ARC-AGI-2 为 78.1%,ARC-AGI-1 为 94.5%,在开放权重模型中领先。相比 2026 年 9 月 10 日的原版 V4.1 Flash,其 ARC-AGI-3 半私有集分数从 2.68% 提升到 5.81%,公开集则从 11.05% 降至 8.97%。在最大推理强度下,该模型首次动作消耗的推理 token 在 25 个公开游戏上平均减少 36%,在 55 个半私有游戏上减少 48.6%。
推荐理由
AI 评分 56
ARC Prize 给出 DeepSeek V4.1 Flash 1017 在 ARC-AGI 三个基准上的分数与推理 token 变化,可对照其前代版本看进步幅度。
主题
正文 · AI 翻译
@deepseek_ai @baseten - 排行榜:https://t.co/x8U1ItNLRj - 复现公开结果:https://t.co/vMqtds8Zet - 测试政策:https://t.co/pBoUqvXe4P - DeepSeek V4.1 Flash 1017 完整结果:https://t.co/o6j71QYoOc