Jev Router延迟高于DeepSeek

10月8日

1. 06:29

   Arena

   Jev Router 与 DeepSeek V4.1 Flash 延迟对比

   最后，我们来比较一下该 router 与附近 Pareto 最优模型的端到端请求延迟。 结果显示 Jev Router 的中位延迟更高。它耗时 6.18 秒，而 DeepSeek V4.1 Flash (Max) 为 3.64 秒。 在 P90（最慢的 10% 请求）处差距进一步扩大。Jev Router 耗时 30.59 秒，而 DeepSeek 为 14.26 秒。

   展开摘要
2. 06:29

   Arena

   Jev 模型调用：DeepSeek V4.1 Flash 占比最高

   Jev 优先考虑效率，将大部分调用路由至 DeepSeek V4.1 Flash——占全部模型调用的四分之一以上（28.1%）。 它表现出对 OpenAI 模型的偏好高于 Anthropic 的 LLM。GPT-6 Astra 是第二受欢迎的模型（23.5%），其次是其他 GPT 模型 Sol（22.8%）和 Luna（11.1%）。

   展开摘要
3. 06:29

   Arena

   Arena 评测 Jev Router：成本高 38%、延迟 1.7 倍

   Arena 在 Agent Arena 上用超 4700 个真实智能体会话评测了 typesafeai 的 Jev Router，结果显示它未能推进当前帕累托前沿：与 DeepSeek V4.1 Flash (Max) 性能相近时成本高 38%，中位模型请求延迟高 1.7 倍。它主要路由到帕累托高效模型，最常选 DeepSeek V4.1 Flash，GPT-6.1 Sol 与 GPT-6 Luna 也常被选中。其核心优势是可操控性，得分 +10%，接近 Claude Opus 5.5 (High) 的 +10.48。

   展开摘要