मॉडल लॉन्च

Answer.AI ने BERT का विकल्प, अगली पीढ़ी का एनकोडर मॉडल ModernBERT लॉन्च किया

मूल शीर्षक:Finally, a Replacement for BERT: Introducing ModernBERT

AI सारांश

Answer.AI और LightOn ने मिलकर ModernBERT लॉन्च किया है, जो BERT को प्रतिस्थापित करने के लिए डिज़ाइन किया गया एक SOTA एनकोडर मॉडल है। यह मॉडल LLM के नवीनतम आर्किटेक्चर सुधारों जैसे Flash Attention और RoPE का उपयोग करता है, 8192 टोकन की कॉन्टेक्स्ट लंबाई का समर्थन करता है, और प्रदर्शन तथा गति में पुराने मॉडलों से बेहतर है। यह base (149M) और large (395M) आकारों में उपलब्ध है और इसे Hugging Face Transformers v4.48.0 में एकीकृत किया गया है, जो RAG, वर्गीकरण और कोड रिट्रीवल जैसे कार्यों के लिए उपयुक्त है।

मुख्य जानकारी

  • Answer.
  • AI और LightOn ने मिलकर ModernBERT लॉन्च किया है,जो BERT को प्रतिस्थापित करने के लिए डिज़ाइन किया…
  • 0 में एकीकृत किया गया है,जो RAG,वर्गीकरण और कोड रिट्रीवल जैसे कार्यों के लिए उपयुक्त है।

एक नज़र में

प्रकाशन समय
अपडेट समय
स्रोत
Answer.AI 官方研发博客(RSS)
श्रेणी
मॉडल लॉन्च
AI स्कोर
82
मूल पढ़ें मूल स्रोत पर पूरा लेख पढ़ें
सुझाव का कारण

这是六年来首个真正意义上对 BERT 架构的重大升级,解决了长上下文限制并提升了效率,对依赖编码器的 RAG 和搜索系统开发者具有直接的生产力价值。

संबंधित एंटिटी

स्रोत और कॉपीराइट

यह लेख AIHOT के सार्वजनिक API की चयनित सुर्खियों और AI सारांशों के आधार पर तैयार किया गया है, स्रोत का उल्लेख और लिंक दिया गया है; मूल पाठ का कॉपीराइट मूल मीडिया और लेखक के पास है, यह साइट पूरा पाठ मिरर नहीं करती।

मूल लिंक · AIHOT प्रविष्टि

उद्धरण कैसे दें

इस लेख का उद्धरण देते समय शीर्षक, तिथि और स्थायी लिंक बनाए रखें और स्रोत Orange News बताएं।

Orange News: Answer.AI ने BERT का विकल्प, अगली पीढ़ी का एनकोडर मॉडल ModernBERT लॉन्च किया। 19 दिसंबर 2024। https://new.nat6.net/hi/news/f9k3aucnsfxp6dv9j3qfq6pd3/

सभी देखें →