क्या एआई एजेंट काबिल हैं? अपने ही टूल पर ओपन-सोर्स मॉडल का मूल्यांकन
मूल शीर्षक:Is it agentic enough? Benchmarking open models on your own tooling
AI सारांश
Hugging Face ने एआई एजेंट उपयोग परिदृश्यों के लिए एक बेंचमार्क फ्रेमवर्क जारी किया है, जो transformers लाइब्रेरी के उदाहरण से लाइब्रेरी की एजेंट-अनुकूलता का मूल्यांकन करता है। फ्रेमवर्क pi coding agent और ओपन-सोर्स मॉडल से संचालित है तथा Hugging Face Jobs के माध्यम से कार्यों को वितरित कर हार्डवेयर की एकरूपता सुनिश्चित करता है। मूल्यांकन में केवल अंतिम परिणाम नहीं, बल्कि एजेंट द्वारा कार्य पूरा करने की लागत, विलंबता, token उपयोग और विफलता दर पर ध्यान दिया जाता है। पहले hf CLI के अनुकूलन के बाद एजेंट का token उपयोग 1.3-1.8 गुना (अधिकतम 6 गुना) घटा था; यह फ्रेमवर्क transformers पर ऐसे अनुकूलनों के प्रभाव को सत्यापित करना चाहता है।
मुख्य जानकारी
- Hugging Face ने एआई एजेंट उपयोग परिदृश्यों के लिए एक बेंचमार्क फ्रेमवर्क जारी किया है,जो…
- 8 गुना (अधिकतम 6 गुना) घटा था
- यह फ्रेमवर्क transformers पर ऐसे अनुकूलनों के प्रभाव को सत्यापित करना चाहता है।
एक नज़र में
- प्रकाशन समय
- अपडेट समय
- स्रोत
- Hugging Face 社区博客(混合发现)
- श्रेणी
- ट्यूटोरियल और टिप्स
- AI स्कोर
- 74
Hugging Face 这波实验打破了我的直觉——为大型模型优化的 CLI+Skill 方案反而让小模型正确率暴跌,做 agent 工具链的人应该马上看这个标杆。
संबंधित एंटिटी
स्रोत और कॉपीराइट
यह लेख AIHOT के सार्वजनिक API की चयनित सुर्खियों और AI सारांशों के आधार पर तैयार किया गया है, स्रोत का उल्लेख और लिंक दिया गया है; मूल पाठ का कॉपीराइट मूल मीडिया और लेखक के पास है, यह साइट पूरा पाठ मिरर नहीं करती।
उद्धरण कैसे दें
इस लेख का उद्धरण देते समय शीर्षक, तिथि और स्थायी लिंक बनाए रखें और स्रोत Orange News बताएं।
Orange News: क्या एआई एजेंट काबिल हैं? अपने ही टूल पर ओपन-सोर्स मॉडल का मूल्यांकन। 18 जून 2026। https://new.nat6.net/hi/news/cmqjk1dcw0421slmh4xbaqcmp/