Arena.ai, Agent Arena에서 4,700개 이상의 에이전트 세션을 통해 Jev Router 평가

Arena.ai는 Agent Arena에서 4,700개 이상의 실제 에이전트 세션을 바탕으로 typesafeai의 Jev Router를 평가했다. 테스트 결과 Jev Router는 기존 파레토 프론티어를 개선하지 못했으며, DeepSeek V4.1 Flash (Max)와 동등한 성능을 내는 데 비용이 38% 더 들고 모델 요청 중앙값 지연 시간도 1.7배 더 긴 것으로 나타났다.

평가에 따르면 이 라우터는 대부분의 쿼리를 파레토 효율적인 모델로 전달하며, DeepSeek V4.1 Flash를 가장 자주 선택했고 GPT-6.1 Sol과 GPT-6 Luna도 규칙적으로 선택했다. Jev Router의 주된 강점은 조종성이었으며, 사용자 피드백에 따라 더 유능한 모델로 라우팅함으로써 +10%의 점수를 기록해 Claude Opus 5.5 (High)의 +10.48에 근접했다.