ZyphraがZAYA1-8Bをリリース:AMDクラスタのみでトレーニングされたMoEモデル
原題:ZAYA1-8B: Frontier intelligence density, trained on AMD
AI 要約
Zyphraは活性パラメータが10億未満のMoEモデルZAYA1-8Bをリリースした。AMD Instinct MI300クラスタ(1,024ノード、IBMと共同構築)上で事前トレーニング、中期トレーニング、教師ありファインチューニングを完全に完了した初のモデルである。
要点
- Zyphraは活性パラメータが10億未満のMoEモデルZAYA1-8Bをリリースした。
- AMD Instinct MI300クラスタ(1,024ノード、IBMと共同構築)上で事前トレーニング
- 中期トレーニング、教師ありファインチューニングを完全に完了した初のモデルである
概要
- 公開日時
- 更新日時
- カテゴリ
- モデル公開
- AI スコア
- 67
おすすめの理由
原文给出活跃参数不足 1B 的 MoE 模型在数学和编码基准上的具体成绩,以及全 AMD 集群训练和 Markovian RSA 测试时计算方法。
出典と著作権
本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。
引用方法
本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。
Orange News:ZyphraがZAYA1-8Bをリリース:AMDクラスタのみでトレーニングされたMoEモデル。2026年5月6日。https://new.nat6.net/ja/news/cmtym34cd000fro1n2yr52in4/