←事件详情

热点事件

Jev Router路由效果被评测

2 篇正式报道2 条事件动态更新于 10月8日 06:29

先了解这件事

AI 综述

2026年10月8日,Arena发布对Jev Router的评测,考察其在任务成功率、可控性、成本与延迟上的模型路由表现。评测显示,Jev Router展现出较强的模型选择与可控性,但未能取得更优的综合权衡。若进入Agent Arena榜单,它将录得+3.6%净提升,每任务中位成本$0.155。其排名低于最常路由到的DeepSeek V4.1 Flash,但在Steerability(+10.0% vs -0.2%)和Praise vs Complaint(+6.3% vs +2.1%)上胜出;DeepSeek则在Confirmed Success(+8.3% vs +2.2%)、Bash Recovery(+7.8% vs -0.7%)和Tool Hallucination(+0.4% vs +0.2%)上更强。其Steerability得分距Claude Opus 5.5 (High)仅低0.48个百分点。评测指出,直接调用DeepSeek V4.1 Flash能以更低成本和延迟获得相似性能,同时平衡任务成功率、可控性、成本和延迟仍是未解难题。

AI 根据公开报道生成

最新进展 · 正式报道

Arena 评测:Jev Router 模型路由仍难兼顾成本与延迟

事件进展

1 个已确认进展

  1. Jev Router路由效果被评测

    来源:Arena

报道与讨论时间线

按时间查看正式报道与传播讨论;两类内容的证据等级保持独立。

10月8日

  1. Arena

    Arena 评测:Jev Router 模型路由仍难兼顾成本与延迟

    总的来说,Jev Router 做出了明智的选择。它最常用的 5 个模型中有 4 个位于帕累托前沿,其可控性也明显很强。 但这还不足以带来更好的权衡。直接调用 DeepSeek V4.1 Flash 能以更低的成本和延迟获得相似的性能。 我们的结果说明了模型路由为何困难:同时平衡任务成功率、可控性、成本和延迟仍是一个未解难题。

  2. Arena

    Jev Router 若入 Agent Arena 榜单:净提升 +3.6%,中位成本 $0.155

    Jev Router 若进入 Agent Arena 榜单,将录得 +3.6% 净提升,每任务中位成本 $0.155。它排名低于其最常路由到的 DeepSeek V4.1 Flash,但在 Steerability(+10.0% vs -0.2%)和 Praise vs Complaint(+6.3% vs +2.1%)上胜出;DeepSeek 则在 Confirmed Success(+8.3% vs +2.2%)、Bash Recovery(+7.8% vs -0.7%)和 Tool Hallucination(+0.4% vs +0.2%)上更强。其 Steerability 得分距 Claude Opus 5.5 (High) 仅低 0.48 个百分点。

关联事件

  1. 相关事件Jev Router延迟高于DeepSeek
  2. 相关事件Anthropic发布Claude Opus 5.5
  3. 相关事件Reflection发布首个开放权重模型Beam
  4. 相关事件Meta 推出 Muse Wonder 与 Muse Wonder Full 模型