OpenRouter testet Jev 1.13 und Claude Opus 5 bei Banking77: Genauigkeit, Latenz und Kosten
Originaltitel:Is Jev as Accurate as Frontier Models at Classification?
KI-Zusammenfassung
OpenRouter vergleicht Jev 1.13 und Claude Opus 5 bei der Intent-Klassifikation anhand von 3.080 Kundendienst-Sätzen aus dem Banking77-Testset. Jev erreicht 81,0% Genauigkeit und liegt damit 3,3 Prozentpunkte unter Opus (84,4%), hat aber mit 175 ms medianer Latenz etwa ein Dreizehntel der Latenz von Opus (2.266 ms) und kostet $0.11 gegenüber $2.42 pro 1000 Anfragen (mit aktiviertem Prompt-Caching).
Kernpunkte
- OpenRouter vergleicht Jev 1.
- 13 und Claude Opus 5 bei der Intent-Klassifikation anhand von 3.
- 080 Kundendienst-Sätzen aus dem Banking77-Testset.
- Jev erreicht 81,0% Genauigkeit und liegt damit 3,3 Prozentpunkte unter Opus (84,4%),hat aber mit…
- 266 ms) und kostet $0.
Auf einen Blick
- Veröffentlicht
- Aktualisiert
- Kategorie
- Tutorials & Tipps
- KI-Bewertung
- 62
原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。
Verwandte Entitäten
Quelle & Urheberrecht
Dieser Artikel basiert auf kuratierten Titeln und KI-Zusammenfassungen der öffentlichen AIHOT-API, mit Quellenangabe und Rückverlinkung. Das Urheberrecht am Original liegt bei den ursprünglichen Medien und Autoren; diese Seite spiegelt keine Volltexte.
Zitierhinweis
Beim Zitieren dieses Artikels bitte Titel, Datum und Permalink beibehalten und Orange News als Quelle angeben.
Orange News: OpenRouter testet Jev 1.13 und Claude Opus 5 bei Banking77: Genauigkeit, Latenz und Kosten. 22. September 2026. https://new.nat6.net/de/news/cmucxyky704ftronibjzp4dos/