OpenRouter ने Banking77 वर्गीकरण कार्य पर Jev 1.13 और Claude Opus 5 के सटीकता, विलंबता और लागत का परीक्षण किया
मूल शीर्षक:Is Jev as Accurate as Frontier Models at Classification?
AI सारांश
OpenRouter ने 3,080 Banking77 कस्टमर सर्विस कॉर्पस का उपयोग करके Jev 1.13 और Claude Opus 5 के इरादा वर्गीकरण का परीक्षण किया। Jev की सटीकता 81.0% है, जो Opus के 84.4% से 3.3 प्रतिशत अंक कम है, लेकिन 175ms की माध्य विलंबता Opus (2,266ms) की तुलना में लगभग 1/13 है। प्रति हजार अनुरोध लागत $0.11 है, जबकि Opus की लागत $2.42 (प्रॉम्प्ट कैशिंग सक्रिय के साथ) है।
मुख्य जानकारी
- OpenRouter ने 3,080 Banking77 कस्टमर सर्विस कॉर्पस का उपयोग करके Jev 1.
- 13 और Claude Opus 5 के इरादा वर्गीकरण का परीक्षण किया। Jev की सटीकता 81.
- 0% है,जो Opus के 84.
- 3 प्रतिशत अंक कम है,लेकिन 175ms की माध्य विलंबता Opus (2,266ms) की तुलना में लगभग 1/13 है। प्रति…
- 11 है,जबकि Opus की लागत $2.
एक नज़र में
- प्रकाशन समय
- अपडेट समय
- श्रेणी
- ट्यूटोरियल और टिप्स
- AI स्कोर
- 62
原文用同一测试流程给出两家模型的准确率、延迟与成本数据,并演示了基于置信度的级联路由方法,便于读者按自身流量权衡选型。
संबंधित एंटिटी
स्रोत और कॉपीराइट
यह लेख AIHOT के सार्वजनिक API की चयनित सुर्खियों और AI सारांशों के आधार पर तैयार किया गया है, स्रोत का उल्लेख और लिंक दिया गया है; मूल पाठ का कॉपीराइट मूल मीडिया और लेखक के पास है, यह साइट पूरा पाठ मिरर नहीं करती।
उद्धरण कैसे दें
इस लेख का उद्धरण देते समय शीर्षक, तिथि और स्थायी लिंक बनाए रखें और स्रोत Orange News बताएं।
Orange News: OpenRouter ने Banking77 वर्गीकरण कार्य पर Jev 1.13 और Claude Opus 5 के सटीकता, विलंबता और लागत का परीक्षण किया। 22 सितंबर 2026। https://new.nat6.net/hi/news/cmucxyky704ftronibjzp4dos/