DreamGen:ロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成
原題:What if robots could dream inside a video generative model? Introducing DreamGen, a new engine that ...
AI 要約
DreamGen はロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成する。Sora などのモデルをファインチューニングして大量の神経軌跡(リアルな動画+動作ラベル)を生成し、ロボットは単一のピックアンドプレースタスクから注ぐ、折りたたむなど22種類の新行動へ汎化する。NVIDIA 本社のカフェでのテストでは、ヒューマノイドロボットの新しい動詞に対するゼロショット成功率が0%から43%に向上し、新環境では28%に達した。従来のグラフィックスエンジンと比べ、手作業のモデリングなしで流体や変形可能物体などの複雑なシーンを処理でき、パイプライン全体は近く完全オープンソース化される予定。
要点
- DreamGen はロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成する。
- Sora などのモデルをファインチューニングして大量の神経軌跡(リアルな動画+動作ラベル)を生成し、ロボットは単一のピックアンドプレースタスクから注ぐ、折りたたむなど22種類の新行動へ汎化する。
- NVIDIA 本社のカフェでのテストでは、ヒューマノイドロボットの新しい動詞に対するゼロショット成功率が0%から43%に向上し、新環境では28%に達した。
- 従来のグラフィックスエンジンと比べ、手作業のモデリングなしで流体や変形可能物体などの複雑なシーンを処理でき、パイプライン全体は近く完全オープンソース化される予定
概要
- 公開日時
- 更新日時
- カテゴリ
- その他
おすすめの理由
NVIDIA 提出 DreamGen:让机器人在视频生成模型中「做梦」合成训练数据,实现强零样本泛化,将开源
関連エンティティ
出典と著作権
本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。
引用方法
本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。
Orange News:DreamGen:ロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成。2025年5月20日。https://new.nat6.net/ja/news/cmnw1ysuy0106slc325419zpu/