튜토리얼 및 팁

Hugging Face, LoRA와 Storage Bucket으로 HF Jobs에서 비동기 GRPO 실행… NCCL 없이 3.9배 속도 향상

원제목:Async GRPO with LoRA across HF Jobs: a bucket, a proxy, and no NCCL

AI 요약

Hugging Face는 TRL v1.14의 AsyncGRPOTrainer에서 LoRA adapter만 훈련하고 동기화하는 기능을 지원하며, Storage Bucket 마운트와 프록시 라우팅을 결합해 훈련 Job과 vLLM 추론 Job을 서로 다른 머신에서 NCCL 없이 실행할 수 있게 했다.

핵심 정보

  • Hugging Face는 TRL v1.
  • 14의 AsyncGRPOTrainer에서 LoRA adapter만 훈련하고 동기화하는 기능을 지원하며
  • Storage Bucket 마운트와 프록시 라우팅을 결합해 훈련 Job과 vLLM 추론 Job을 서로 다른 머신에서 NCCL 없이 실행할 수 있게 했다.

한눈에 보기

게시
업데이트
출처
Hugging Face 社区博客(混合发现)
카테고리
튜토리얼 및 팁
AI 점수
61
원문 읽기 정보 출처에서 전체 본문 읽기
추천 이유

Hugging Face 官方用五个实验展示了如何在 Jobs 上分离训练与推理跑异步 GRPO,并通过逐项定位瓶颈把运行提速 3.9 倍,方法可迁移。

관련 엔티티

출처 및 저작권

이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.

원문 기사 · AIHOT 항목

인용 방법

본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.

Orange News: Hugging Face, LoRA와 Storage Bucket으로 HF Jobs에서 비동기 GRPO 실행… NCCL 없이 3.9배 속도 향상. 2026년 9월 10일. https://new.nat6.net/ko/news/cmu10mxhc08m6ro2nafd8smam/

전체 보기 →