Arena评测Jev Router:未破成本延迟前沿
先了解这件事
2026年10月8日,Arena 在 Agent Arena 上对 Jev Router 完成超 4,700 次真实智能体会话评测,结果显示其未改进当前 Pareto 前沿:与 DeepSeek V4.1 Flash (Max) 性能相当时成本高 38%、中位模型请求延迟高 1.7x。延迟对比显示,Jev Router 中位端到端请求延迟为 6.18 秒,DeepSeek V4.1 Flash (Max) 为 3.64 秒;P90 上差距扩大,Jev Router 为 30.59 秒,DeepSeek 为 14.26 秒。Arena 总结称 Jev Router 做出了明智选择——其使用最多的 5 个模型中有 4 个位于帕累托前沿,可控性表现突出——但这不足以构成更优权衡,直接调用 DeepSeek V4.1 Flash 能以更低成本和延迟获得相似性能;同时说明同时平衡任务成功率、可控性、成本和延迟仍是开放挑战。
报道时间线
- Jev Router与DeepSeek延迟对比
最后,让我们将路由器的端到端请求延迟与附近的帕累托最优模型进行比较。 结果显示,Jev Router 的中位延迟更高,耗时 6.18 秒,而 DeepSeek V4.1 Flash (Max) 为 3.64 秒。 在 P90(最慢的 10% 请求)上差距进一步拉大,Jev Router 耗时 30.59 秒,而 DeepSeek 为 14.26 秒。
- Jev Router 模型路由评测结果
总的来说,Jev Router 做出了明智的选择。其使用最多的 5 个模型中有 4 个位于帕累托前沿,且可控性表现突出。 但这还不足以构成更优的权衡。直接调用 DeepSeek V4.1 Flash 能以更低成本和延迟获得相似性能。 我们的结果说明了模型路由为何困难:同时平衡任务成功率、可控性、成本和延迟仍是一个开放挑战。
- Agent Arena 评测 Jev Router:成本高 38% 未破前沿
Arena 在 Agent Arena 上对 Jev Router 完成超 4,700 次真实智能体会话评测,结果显示其未改进当前 Pareto 前沿:与 DeepSeek V4.1 Flash (Max) 性能相当时成本高 38%、中位模型请求延迟高 1.7x。