DreamGen: membuat robot "bermimpi" dalam model generasi video untuk menyintesis data pelatihan
Judul asli:What if robots could dream inside a video generative model? Introducing DreamGen, a new engine that ...
Ringkasan AI
DreamGen membuat robot "bermimpi" dalam model generasi video untuk menyintesis data pelatihan. Melalui fine-tuning model seperti Sora untuk menghasilkan lintasan neural dalam jumlah besar (video realistis + label aksi), robot menggeneralisasi dari satu tugas pick-and-place ke 22 perilaku baru seperti menuang dan melipat. Dalam pengujian di kafe kantor pusat NVIDIA, tingkat keberhasilan zero-shot robot humanoid untuk kata kerja baru meningkat dari 0% menjadi 43%, dan mencapai 28% di lingkungan baru. Dibandingkan mesin grafis tradisional, tanpa perlu pemodelan manual dapat menangani skenario kompleks seperti fluida dan objek yang dapat berubah bentuk; seluruh pipeline akan sepenuhnya open source dalam waktu dekat.
Poin utama
- DreamGen membuat robot "bermimpi" dalam model generasi video untuk menyintesis data pelatihan.
- Melalui fine-tuning model seperti Sora untuk menghasilkan lintasan neural dalam jumlah besar…
- Dalam pengujian di kafe kantor pusat NVIDIA,tingkat keberhasilan zero-shot robot humanoid untuk…
- Dibandingkan mesin grafis tradisional,tanpa perlu pemodelan manual dapat menangani skenario…
- seluruh pipeline akan sepenuhnya open source dalam waktu dekat.
Ringkasan cepat
- Waktu terbit
- Waktu diperbarui
- Sumber
- X:Jim Fan (@DrJimFan)
- Kategori
- Lainnya
NVIDIA 提出 DreamGen:让机器人在视频生成模型中「做梦」合成训练数据,实现强零样本泛化,将开源
Entitas Terkait
Sumber dan hak cipta
Artikel ini disusun berdasarkan judul pilihan dan ringkasan AI dari API publik AIHOT, dengan sumber yang dicantumkan dan tautan balik; hak cipta konten asli milik media dan penulis aslinya, situs ini tidak menyalin artikel secara penuh.
Cara mengutip
Saat mengutip artikel ini, sertakan judul, tanggal, dan tautan permanen, serta cantumkan sumber Orange News.
Orange News: DreamGen: membuat robot "bermimpi" dalam model generasi video untuk menyintesis data pelatihan. 20 Mei 2025. https://new.nat6.net/id/news/cmnw1ysuy0106slc325419zpu/