Zyphra выпустила 7B базовую модель гибридной архитектуры Zamba
Оригинальный заголовок:ZAMBA
ИИ-резюме
Zyphra выпустила базовую модель 7B Zamba с гибридной архитектурой из блоков Mamba и глобальных слоёв внимания с общими весами каждые 6 слоёв.
Кратко
- Опубликовано
- Обновлено
- Источник
- Zyphra Research(网页)
- Категория
- Релизы моделей
- Оценка ИИ
- 61
Почему это важно
官方原文给出架构设计、训练规模和开放 checkpoints 细节,读者可以据此评估 Mamba 混合架构在本地部署上的取舍。
Источник и авторские права
Статья основана на отобранных заголовках и ИИ-резюме из открытого API AIHOT с указанием источника и обратными ссылками. Авторские права на оригинал принадлежат исходным изданиям и авторам; сайт не воспроизводит полные тексты.
Как цитировать
При цитировании сохраняйте заголовок, дату и постоянную ссылку, указывая источник: Orange News.
Orange News: Zyphra выпустила 7B базовую модель гибридной архитектуры Zamba. 16 апреля 2024. https://new.nat6.net/ru/news/cmtyo1ljj03asrog0h47mq5so/