Elvis의 소규모 Pi SDK 테스트에서 Jev Router가 고정 GPT-6 Sol보다 저렴하고 빨랐다

elvis는 Pi SDK로 만든 맞춤형 harness 기반의 소규모 지원 에이전트에서 OpenRouter의 패키지형 typesafe/jev-router인 Jev Router를 테스트했다. 같은 8개 사례를 고정 GPT-6 Sol 기준선과도 실행해 실제 호출은 총 32회였다. 두 구성 모두 모든 사례를 맞혔다.

라우터 비용은 0.008달러로 0.018달러와 비교됐고, 응답 시간 중앙값은 1.5초로 1.9초와 비교됐다. elvis는 표본이 작다고 밝혔으며, Jev를 라우터로 쓸 때의 캐싱은 아직 완전히 해결되지 않았다고 말했다. 라우팅 패턴 구현은 Pi SDK harness의 Jev 결정에 공개돼 있다.