OpenRouter menguji ketepatan, kependaman dan kos Jev 1.13 berbanding Claude Opus 5 pada tugas klasifikasi Banking77
Tajuk asal:Is Jev as Accurate as Frontier Models at Classification?
Ringkasan AI
OpenRouter menggunakan 3,080 data korpus khidmat pelanggan daripada set ujian Banking77 untuk membandingkan prestasi klasifikasi niat Jev 1.13 dengan Claude Opus 5. Ketepatan Jev 81.0% adalah 3.3 mata peratus lebih rendah daripada Opus (84.4%), tetapi kependaman mediannya 175 ms iaitu kira-kira 1/13 daripada Opus (2,266 ms), dengan kos setiap seribu permintaan $0.11 berbanding $2.42 (dengan cache gesaan diaktifkan).
Maklumat penting
- OpenRouter menggunakan 3,080 data korpus khidmat pelanggan daripada set ujian Banking77 untuk…
- 13 dengan Claude Opus 5.
- Ketepatan Jev 81.
- 0% adalah 3.
- 3 mata peratus lebih rendah daripada Opus (84.
Sekilas pandang
- Diterbitkan pada
- Dikemas kini pada
- Kategori
- Tutorial dan petua
- Skor AI
- 62
原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。
Entiti Berkaitan
Sumber dan hak cipta
Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.
Cara memetik
Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.
Orange News: OpenRouter menguji ketepatan, kependaman dan kos Jev 1.13 berbanding Claude Opus 5 pada tugas klasifikasi Banking77. 22 September 2026. https://new.nat6.net/ms/news/cmucxyky704ftronibjzp4dos/