Lain-lain

DreamGen: membolehkan robot "bermimpi" menjana data latihan sintetik dalam model penjanaan video

Tajuk asal:What if robots could dream inside a video generative model? Introducing DreamGen, a new engine that ...

Ringkasan AI

DreamGen membolehkan robot "bermimpi" menjana data latihan sintetik dalam model penjanaan video. Melalui penalaan halus model seperti Sora untuk menjana trajektori neural secara besar-besaran (video realistik + label tindakan), robot menggeneralisasi daripada satu tugas angkat-letak kepada 22 tingkah laku baharu seperti menuang dan melipat. Dalam ujian di kafe ibu pejabat NVIDIA, kadar kejayaan zero-shot robot humanoid terhadap kata kerja baharu meningkat daripada 0% kepada 43%, dan 28% dalam persekitaran baharu. Berbanding enjin grafik tradisional, ia mengendalikan senario kompleks seperti bendalir dan objek boleh ubah bentuk tanpa pemodelan manual, dan keseluruhan pipeline akan dibuka sumber sepenuhnya tidak lama lagi.

Maklumat penting

  • DreamGen membolehkan robot "bermimpi" menjana data latihan sintetik dalam model penjanaan video.
  • Melalui penalaan halus model seperti Sora untuk menjana trajektori neural secara besar-besaran…
  • Dalam ujian di kafe ibu pejabat NVIDIA,kadar kejayaan zero-shot robot humanoid terhadap kata kerja…
  • Berbanding enjin grafik tradisional,ia mengendalikan senario kompleks seperti bendalir dan objek…

Sekilas pandang

Diterbitkan pada
Dikemas kini pada
Sumber
X:Jim Fan (@DrJimFan)
Kategori
Lain-lain
Baca asal Baca artikel penuh di sumber asal
Sebab disyorkan

NVIDIA 提出 DreamGen:让机器人在视频生成模型中「做梦」合成训练数据,实现强零样本泛化,将开源

Entiti Berkaitan

Sumber dan hak cipta

Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.

Pautan asal · Entri AIHOT

Cara memetik

Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.

Orange News: DreamGen: membolehkan robot "bermimpi" menjana data latihan sintetik dalam model penjanaan video. 20 Mei 2025. https://new.nat6.net/ms/news/cmnw1ysuy0106slc325419zpu/

Lihat Semua →