Hugging Face HubがStorage Bucketsストレージサービスを正式提供
原題:Introducing Storage Buckets on the Hugging Face Hub
AI 要約
Hugging Face Hubは、機械学習ワークフロー向けに設計された可変でS3ライクなオブジェクトストレージサービスStorage Bucketsを公開した。Xetストレージバックエンドを基盤とし、ファイル間で共有されるコンテンツを含むMLアーティファクトを効率的に重複排除できるため、帯域幅を節約し、転送を高速化し、ストレージコストを削減する。また「プリウォーム」機能を提供し、データを計算リソースに近いクラウドリージョンへ事前に移行することで、分散トレーニングなどのシナリオの効率を向上させる。現在AWSとGCPをサポートし、ユーザーはCLIまたはPythonライブラリを通じて2分以内にストレージバケットを迅速に作成・同期できる。
要点
- Hugging Face Hubは、機械学習ワークフロー向けに設計された可変でS3ライクなオブジェクトストレージサービスStorage Bucketsを公開した。
- Xetストレージバックエンドを基盤とし、ファイル間で共有されるコンテンツを含むMLアーティファクトを効率的に重複排除できるため、帯域幅を節約し、転送を高速化し、ストレージコストを削減する。
- また「プリウォーム」機能を提供し、データを計算リソースに近いクラウドリージョンへ事前に移行することで、分散トレーニングなどのシナリオの効率を向上させる。
- 現在AWSとGCPをサポートし、ユーザーはCLIまたはPythonライブラリを通じて2分以内にストレージバケットを迅速に作成・同期できる
概要
- 公開日時
- 更新日時
- カテゴリ
- その他
- AI スコア
- 83
おすすめの理由
ML 开发者可高效管理训练数据和检查点,节省存储成本并加速工作流。
関連エンティティ
出典と著作権
本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。
引用方法
本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。
Orange News:Hugging Face HubがStorage Bucketsストレージサービスを正式提供。2026年3月10日。https://new.nat6.net/ja/news/cmoegbhaj0093slxxxx35fdze/