モデル公開

ZyphraがZAYA1-8Bをリリース:AMDクラスタのみでトレーニングされたMoEモデル

原題:ZAYA1-8B: Frontier intelligence density, trained on AMD

AI 要約

Zyphraは活性パラメータが10億未満のMoEモデルZAYA1-8Bをリリースした。AMD Instinct MI300クラスタ(1,024ノード、IBMと共同構築)上で事前トレーニング、中期トレーニング、教師ありファインチューニングを完全に完了した初のモデルである。

要点

  • Zyphraは活性パラメータが10億未満のMoEモデルZAYA1-8Bをリリースした。
  • AMD Instinct MI300クラスタ(1,024ノード、IBMと共同構築)上で事前トレーニング
  • 中期トレーニング、教師ありファインチューニングを完全に完了した初のモデルである

概要

公開日時
更新日時
出典
Zyphra Research(网页)
カテゴリ
モデル公開
AI スコア
67
原文を読む 情報源で全文を読む
おすすめの理由

原文给出活跃参数不足 1B 的 MoE 模型在数学和编码基准上的具体成绩,以及全 AMD 集群训练和 Markovian RSA 测试时计算方法。

出典と著作権

本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。

原文記事 · AIHOT 記事

引用方法

本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。

Orange News:ZyphraがZAYA1-8Bをリリース:AMDクラスタのみでトレーニングされたMoEモデル。2026年5月6日。https://new.nat6.net/ja/news/cmtym34cd000fro1n2yr52in4/

すべて見る →