Hugging Face Hub 正式推出 Storage Buckets 存储服务
原文标题:Introducing Storage Buckets on the Hugging Face Hub
AI 摘要
Hugging Face Hub 发布 Storage Buckets,这是一种为机器学习工作流设计的可变、类 S3 的对象存储服务。它基于 Xet 存储后端,能对跨文件共享内容的 ML 工件进行高效去重,从而节省带宽、加速传输并降低存储成本。该服务还提供“预暖”功能,可将数据预先迁移至靠近计算资源的云区域,以提升分布式训练等场景的效率。目前支持 AWS 和 GCP,用户可通过 CLI 或 Python 库在 2 分钟内快速创建和同步存储桶。
关键信息
- Hugging Face Hub 发布 Storage Buckets,这是一种为机器学习工作流设计的可变、类 S3 的对象存储服务。
- 它基于 Xet 存储后端,能对跨文件共享内容的 ML 工件进行高效去重,从而节省带宽、加速传输并降低存储成本。
- 该服务还提供“预暖”功能,可将数据预先迁移至靠近计算资源的云区域,以提升分布式训练等场景的效率。
- 目前支持 AWS 和 GCP,用户可通过 CLI 或 Python 库在 2 分钟内快速创建和同步存储桶
- ML 开发者可高效管理训练数据和检查点,节省存储成本并加速工作流
速览
- 发布时间
- 更新时间
- 分类
- 其他
- AI 评分
- 83
推荐理由
ML 开发者可高效管理训练数据和检查点,节省存储成本并加速工作流。
相关实体
来源与版权
本文基于 AIHOT 公开 API 的精选标题与 AI 摘要整理,已注明来源并回链;原文版权归原媒体与作者所有,本站不镜像全文。
如何引用
引用本文时请保留标题、日期与永久链接,并注明来源为橙子新闻。
橙子新闻:Hugging Face Hub 正式推出 Storage Buckets 存储服务。2026年3月10日。https://new.nat6.net/news/cmoegbhaj0093slxxxx35fdze/