Ant inclusionAI ने Ling-3.0 श्रृंखला के भाषा आधार मॉडल ओपन-सोर्स किए
मूल शीर्षक:inclusionAI/Ling-3.0-tiny-base
AI सारांश
Ant inclusionAI ने Ling-3.0 श्रृंखला के भाषा आधार मॉडल ओपन-सोर्स किए हैं, जिनमें tiny और flash दो आकार तथा प्री-ट्रेनिंग, मिड-ट्रेनिंग और मर्ज (WSM) चरणों के चेकपॉइंट शामिल हैं। यह श्रृंखला हाइब्रिड लीनियर अटेंशन और स्पार्स MoE आर्किटेक्चर अपनाती है, कुल पैरामीटर 7.9B हैं, प्रति token केवल 1.3B पैरामीटर सक्रिय होते हैं (128 राउटेड एक्सपर्ट्स में से 8 सक्रिय)।
मुख्य जानकारी
- Ant inclusionAI ने Ling-3.
- 0 श्रृंखला के भाषा आधार मॉडल ओपन-सोर्स किए हैं,जिनमें tiny और flash दो आकार तथा…
- 9B हैं,प्रति token केवल 1.
- 3B पैरामीटर सक्रिय होते हैं (128 राउटेड एक्सपर्ट्स में से 8 सक्रिय)।
एक नज़र में
- प्रकाशन समय
- अपडेट समय
- श्रेणी
- मॉडल लॉन्च
- AI स्कोर
- 65
用加权检查点合并替代学习率衰减,让基座模型更适合持续预训练,也为验证不同衰减曲线省去重复实验。
स्रोत और कॉपीराइट
यह लेख AIHOT के सार्वजनिक API की चयनित सुर्खियों और AI सारांशों के आधार पर तैयार किया गया है, स्रोत का उल्लेख और लिंक दिया गया है; मूल पाठ का कॉपीराइट मूल मीडिया और लेखक के पास है, यह साइट पूरा पाठ मिरर नहीं करती।
उद्धरण कैसे दें
इस लेख का उद्धरण देते समय शीर्षक, तिथि और स्थायी लिंक बनाए रखें और स्रोत Orange News बताएं।
Orange News: Ant inclusionAI ने Ling-3.0 श्रृंखला के भाषा आधार मॉडल ओपन-सोर्स किए। 11 अगस्त 2026। https://new.nat6.net/hi/news/cmt0aa8b416ywrodpq8czlstx/