Tutoriales y consejos

OpenRouter compara Jev 1.13 y Claude Opus 5 en precisión, latencia y coste en la tarea de clasificación Banking77

Título original:Is Jev as Accurate as Frontier Models at Classification?

Resumen de IA

OpenRouter usa las 3.080 muestras de atención al cliente del conjunto de pruebas Banking77 para comparar el rendimiento de Jev 1.13 y Claude Opus 5 en clasificación de intenciones. La precisión de Jev es del 81,0%, 3,3 puntos porcentuales por debajo del 84,4% de Opus, pero su latencia mediana de 175 ms es aproximadamente 1/13 de la de Opus (2.266 ms), y su coste por cada mil solicitudes es de $0.11 frente a $2.42 (con caché de prompts activada).

Puntos clave

  • OpenRouter usa las 3.
  • 080 muestras de atención al cliente del conjunto de pruebas Banking77 para comparar el rendimiento…
  • 13 y Claude Opus 5 en clasificación de intenciones.
  • La precisión de Jev es del 81,0%,3,3 puntos porcentuales por debajo del 84,4% de Opus,pero su…
  • 266 ms),y su coste por cada mil solicitudes es de $0.

Resumen rápido

Publicado
Actualizado
Fuente
OpenRouter:Announcements(RSS)
Categoría
Tutoriales y consejos
Puntuación IA
62
Leer el original Leer el artículo completo en la fuente original
Por qué importa

原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。

Entidades relacionadas

Fuente y derechos

Este artículo se basa en títulos seleccionados y resúmenes de IA de la API pública de AIHOT, con atribución y enlaces de vuelta. Los derechos del original pertenecen a los medios y autores originales; este sitio no reproduce textos completos.

Artículo original · Ficha de AIHOT

Cómo citar

Al citar este artículo, conserva el título, la fecha y el enlace permanente, e indica que la fuente es Orange News.

Orange News: OpenRouter compara Jev 1.13 y Claude Opus 5 en precisión, latencia y coste en la tarea de clasificación Banking77. 22. septiembre 2026. https://new.nat6.net/es/news/cmucxyky704ftronibjzp4dos/

Ver todo →