Zyphra 发布 ZAYA1-8B:全 AMD 集群训练的 MoE 模型
原文标题:ZAYA1-8B: Frontier intelligence density, trained on AMD
AI 摘要
Zyphra 发布 ZAYA1-8B,一个活跃参数不足 10 亿的 MoE 模型,是首个完全在 AMD Instinct MI300 集群(1,024 个节点,与 IBM 合作构建)上完成预训练、中期训练和监督微调的模型。
关键信息
- Zyphra 发布 ZAYA1-8B,一个活跃参数不足 10 亿的 MoE 模型,是首个完全在 AMD Instinct MI300 集群(1
- 024 个节点,与 IBM 合作构建)上完成预训练、中期训练和监督微调的模型
- 原文给出活跃参数不足 1B 的 MoE 模型在数学和编码基准上的具体成绩,以及全 AMD 集群训练和 Markovian RSA 测试时计算方法
速览
- 发布时间
- 更新时间
- 分类
- 模型发布
- AI 评分
- 67
推荐理由
原文给出活跃参数不足 1B 的 MoE 模型在数学和编码基准上的具体成绩,以及全 AMD 集群训练和 Markovian RSA 测试时计算方法。
来源与版权
本文基于 AIHOT 公开 API 的精选标题与 AI 摘要整理,已注明来源并回链;原文版权归原媒体与作者所有,本站不镜像全文。
如何引用
引用本文时请保留标题、日期与永久链接,并注明来源为橙子新闻。
橙子新闻:Zyphra 发布 ZAYA1-8B:全 AMD 集群训练的 MoE 模型。2026年5月6日。https://new.nat6.net/news/cmtym34cd000fro1n2yr52in4/