Hướng dẫn & mẹo

OpenRouter thử nghiệm độ chính xác, độ trễ và chi phí của Jev 1.13 và Claude Opus 5 trên tác vụ phân loại Banking77

Tiêu đề gốc:Is Jev as Accurate as Frontier Models at Classification?

Tóm tắt AI

OpenRouter dùng 3.080 mẫu hội thoại chăm sóc khách hàng trong tập kiểm thử Banking77 để so sánh hiệu năng phân loại ý định của Jev 1.13 và Claude Opus 5. Độ chính xác của Jev 81,0% thấp hơn 3,3 điểm phần trăm so với 84,4% của Opus, nhưng độ trễ trung vị 175 ms bằng khoảng 1/13 của Opus (2.266 ms), chi phí mỗi nghìn yêu cầu $0,11 so với $2,42 (bật bộ nhớ đệm prompt).

Thông tin chính

  • OpenRouter dùng 3.
  • 080 mẫu hội thoại chăm sóc khách hàng trong tập kiểm thử Banking77 để so sánh hiệu năng phân loại…
  • 13 và Claude Opus 5.
  • Độ chính xác của Jev 81,0% thấp hơn 3,3 điểm phần trăm so với 84,4% của Opus,nhưng độ trễ trung vị…
  • 266 ms),chi phí mỗi nghìn yêu cầu $0,11 so với $2,42 (bật bộ nhớ đệm prompt).

Tóm tắt nhanh

Đăng lúc
Cập nhật lúc
Nguồn
OpenRouter:Announcements(RSS)
Danh mục
Hướng dẫn & mẹo
Điểm AI
62
Đọc bản gốc Đọc toàn văn tại nguồn tin gốc
Lý do đề xuất

原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。

Thực thể liên quan

Nguồn và bản quyền

Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.

Liên kết gốc · Mục AIHOT

Cách trích dẫn

Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.

Orange News: OpenRouter thử nghiệm độ chính xác, độ trễ và chi phí của Jev 1.13 và Claude Opus 5 trên tác vụ phân loại Banking77. 22 tháng 9 2026. https://new.nat6.net/vi/news/cmucxyky704ftronibjzp4dos/

Xem tất cả →