←事件详情

热点事件

FrontierSWE基准上线Environments Hu

1 篇正式报道1 条事件动态更新于 4月16日 08:00

先了解这件事

AI 综述

2026年4月16日,Proximal的编程基准FrontierSWE上线Prime Intellect的Environments Hub。该基准包含编译器优化、蛋白质预测模型训练等超长周期开放挑战,智能体平均每个任务运行11小时,几乎全部失败。双方还合作设计了granite_inf任务,要求端到端优化IBM Granite-Mamba-2层前向传播速度,仅一次Codex运行和一次Gemini运行接近隐藏优化基线。多数失败并非不懂Mamba架构,而是难以在隐藏评分下兼顾速度与数值稳定性;最终提交均未使用.cu、.ptx或CUDA扩展等底层手段。

AI 根据公开报道生成

最新进展 · 正式报道

FrontierSWE 上线 Environments Hub:智能体平均跑 11 小时仍几乎全败

事件进展

1 个已确认进展

  1. FrontierSWE上线Environments Hub

    来源:Prime Intellect

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

4月16日

  1. Prime Intellect一手

    FrontierSWE 上线 Environments Hub:智能体平均跑 11 小时仍几乎全败

    Proximal 的编程基准 FrontierSWE 上线 Prime Intellect 的 Environments Hub,任务为编译器优化、蛋白质预测模型训练等超长周期开放挑战,智能体平均每个任务运行 11 小时,几乎全部失败。双方还合作设计了 granite_inf 任务,要求端到端优化 IBM Granite-Mamba-2 层前向传播速度,仅一次 Codex 运行和一次 Gemini 运行接近隐藏优化基线。多数失败并非不懂 Mamba 架构,而是难以在隐藏评分下兼顾速度与数值稳定性;最终提交均未使用 .cu、.ptx 或 CUDA 扩展等底层手段。

关联事件

  1. 相关事件METR发现约半数通过SWE-bench的PR不会被合并
  2. 相关事件Z.ai发布GLM-5.3模型
  3. 相关事件Mistral发布一万亿参数Mistral Large 4预览版
  4. 相关事件Anthropic发布Claude Opus 5.5