Tutorial dan petua

OpenRouter menguji ketepatan, kependaman dan kos Jev 1.13 berbanding Claude Opus 5 pada tugas klasifikasi Banking77

Tajuk asal:Is Jev as Accurate as Frontier Models at Classification?

Ringkasan AI

OpenRouter menggunakan 3,080 data korpus khidmat pelanggan daripada set ujian Banking77 untuk membandingkan prestasi klasifikasi niat Jev 1.13 dengan Claude Opus 5. Ketepatan Jev 81.0% adalah 3.3 mata peratus lebih rendah daripada Opus (84.4%), tetapi kependaman mediannya 175 ms iaitu kira-kira 1/13 daripada Opus (2,266 ms), dengan kos setiap seribu permintaan $0.11 berbanding $2.42 (dengan cache gesaan diaktifkan).

Maklumat penting

  • OpenRouter menggunakan 3,080 data korpus khidmat pelanggan daripada set ujian Banking77 untuk…
  • 13 dengan Claude Opus 5.
  • Ketepatan Jev 81.
  • 0% adalah 3.
  • 3 mata peratus lebih rendah daripada Opus (84.

Sekilas pandang

Diterbitkan pada
Dikemas kini pada
Sumber
OpenRouter:Announcements(RSS)
Kategori
Tutorial dan petua
Skor AI
62
Baca asal Baca artikel penuh di sumber asal
Sebab disyorkan

原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。

Entiti Berkaitan

Sumber dan hak cipta

Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.

Pautan asal · Entri AIHOT

Cara memetik

Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.

Orange News: OpenRouter menguji ketepatan, kependaman dan kos Jev 1.13 berbanding Claude Opus 5 pada tugas klasifikasi Banking77. 22 September 2026. https://new.nat6.net/ms/news/cmucxyky704ftronibjzp4dos/

Lihat Semua →