OpenRouter thử nghiệm độ chính xác, độ trễ và chi phí của Jev 1.13 và Claude Opus 5 trên tác vụ phân loại Banking77
Tiêu đề gốc:Is Jev as Accurate as Frontier Models at Classification?
Tóm tắt AI
OpenRouter dùng 3.080 mẫu hội thoại chăm sóc khách hàng trong tập kiểm thử Banking77 để so sánh hiệu năng phân loại ý định của Jev 1.13 và Claude Opus 5. Độ chính xác của Jev 81,0% thấp hơn 3,3 điểm phần trăm so với 84,4% của Opus, nhưng độ trễ trung vị 175 ms bằng khoảng 1/13 của Opus (2.266 ms), chi phí mỗi nghìn yêu cầu $0,11 so với $2,42 (bật bộ nhớ đệm prompt).
Thông tin chính
- OpenRouter dùng 3.
- 080 mẫu hội thoại chăm sóc khách hàng trong tập kiểm thử Banking77 để so sánh hiệu năng phân loại…
- 13 và Claude Opus 5.
- Độ chính xác của Jev 81,0% thấp hơn 3,3 điểm phần trăm so với 84,4% của Opus,nhưng độ trễ trung vị…
- 266 ms),chi phí mỗi nghìn yêu cầu $0,11 so với $2,42 (bật bộ nhớ đệm prompt).
Tóm tắt nhanh
- Đăng lúc
- Cập nhật lúc
- Danh mục
- Hướng dẫn & mẹo
- Điểm AI
- 62
原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。
Thực thể liên quan
Nguồn và bản quyền
Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.
Cách trích dẫn
Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.
Orange News: OpenRouter thử nghiệm độ chính xác, độ trễ và chi phí của Jev 1.13 và Claude Opus 5 trên tác vụ phân loại Banking77. 22 tháng 9 2026. https://new.nat6.net/vi/news/cmucxyky704ftronibjzp4dos/