DreamGen: 로봇이 영상 생성 모델 속에서 '꿈꾸며' 훈련 데이터를 합성하게 하다
원제목:What if robots could dream inside a video generative model? Introducing DreamGen, a new engine that ...
AI 요약
DreamGen은 로봇이 영상 생성 모델 속에서 '꿈꾸며' 훈련 데이터를 합성하게 한다. Sora 등 모델을 미세 조정해 대량의 신경 궤적(사실적 영상+행동 라벨)을 생성하고, 로봇은 단일 집기-놓기 작업에서 붓기, 접기 등 22가지 새로운 행동으로 일반화한다. NVIDIA 본사 카페 테스트에서 휴머노이드 로봇의 새로운 동사 제로샷 성공률은 0%에서 43%로, 새 환경에서는 28%로 높아졌다. 기존 그래픽 엔진과 달리 수작업 모델링 없이 유체, 변형 가능한 물체 등 복잡한 장면을 처리할 수 있으며, 전체 pipeline은 조만간 완전 오픈소스화된다.
핵심 정보
- DreamGen은 로봇이 영상 생성 모델 속에서 '꿈꾸며' 훈련 데이터를 합성하게 한다.
- Sora 등 모델을 미세 조정해 대량의 신경 궤적(사실적 영상+행동 라벨)을 생성하고,로봇은 단일 집기-놓기 작업에서 붓기,접기 등 22가지 새로운 행동으로 일반화한다.
- NVIDIA 본사 카페 테스트에서 휴머노이드 로봇의 새로운 동사 제로샷 성공률은 0%에서 43%로,새 환경에서는 28%로 높아졌다.
- 기존 그래픽 엔진과 달리 수작업 모델링 없이 유체,변형 가능한 물체 등 복잡한 장면을 처리할 수 있으며,전체 pipeline은 조만간 완전 오픈소스화된다.
한눈에 보기
- 게시
- 업데이트
- 카테고리
- 기타
NVIDIA 提出 DreamGen:让机器人在视频生成模型中「做梦」合成训练数据,实现强零样本泛化,将开源
관련 엔티티
출처 및 저작권
이 기사는 AIHOT 공개 API가 제공하는 선별 제목과 AI 요약을 바탕으로 하며, 출처를 밝히고 원문으로 연결합니다. 원문 저작권은 원 미디어와 저자에게 있으며, 본 사이트는 전문을 전재하지 않습니다.
인용 방법
본문을 인용할 때는 제목, 날짜, 영구 링크를 유지하고 출처를 Orange News(으)로 표기해 주세요.
Orange News: DreamGen: 로봇이 영상 생성 모델 속에서 '꿈꾸며' 훈련 데이터를 합성하게 하다. 2025년 5월 20일. https://new.nat6.net/ko/news/cmnw1ysuy0106slc325419zpu/