その他

DreamGen:ロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成

原題:What if robots could dream inside a video generative model? Introducing DreamGen, a new engine that ...

AI 要約

DreamGen はロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成する。Sora などのモデルをファインチューニングして大量の神経軌跡(リアルな動画+動作ラベル)を生成し、ロボットは単一のピックアンドプレースタスクから注ぐ、折りたたむなど22種類の新行動へ汎化する。NVIDIA 本社のカフェでのテストでは、ヒューマノイドロボットの新しい動詞に対するゼロショット成功率が0%から43%に向上し、新環境では28%に達した。従来のグラフィックスエンジンと比べ、手作業のモデリングなしで流体や変形可能物体などの複雑なシーンを処理でき、パイプライン全体は近く完全オープンソース化される予定。

要点

  • DreamGen はロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成する。
  • Sora などのモデルをファインチューニングして大量の神経軌跡(リアルな動画+動作ラベル)を生成し、ロボットは単一のピックアンドプレースタスクから注ぐ、折りたたむなど22種類の新行動へ汎化する。
  • NVIDIA 本社のカフェでのテストでは、ヒューマノイドロボットの新しい動詞に対するゼロショット成功率が0%から43%に向上し、新環境では28%に達した。
  • 従来のグラフィックスエンジンと比べ、手作業のモデリングなしで流体や変形可能物体などの複雑なシーンを処理でき、パイプライン全体は近く完全オープンソース化される予定

概要

公開日時
更新日時
出典
X:Jim Fan (@DrJimFan)
カテゴリ
その他
原文を読む 情報源で全文を読む
おすすめの理由

NVIDIA 提出 DreamGen:让机器人在视频生成模型中「做梦」合成训练数据,实现强零样本泛化,将开源

関連エンティティ

出典と著作権

本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。

原文記事 · AIHOT 記事

引用方法

本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。

Orange News:DreamGen:ロボットが動画生成モデルの中で「夢見て」トレーニングデータを合成。2025年5月20日。https://new.nat6.net/ja/news/cmnw1ysuy0106slc325419zpu/

すべて見る →
  • AgentをMCPサーバーとしてカプセル化する例

    MCP Agent Serverの例は、AgentワークフローをMCPサーバーとしてカプセル化する「Agent as a Service」アーキテクチャを示している。asyncio(軽量なメモリ内実行、開発テスト向け)とTemporal(…

    Hacker News:AI 热帖その他

  • 汎用 AI アシスタントの構想

    Google は Gemini を世界モデルへと拡張し、世界をシミュレーションすることで計画を立て新たな体験を想像できるようにし、汎用 AI アシスタントの構想を実現する計画である。

    Google DeepMind:Blog(RSS)その他

  • AIを定着させる:リーダーシップ、ラボ、集合知

    企業におけるAIの定着成功は3つの柱に依存する。リーダーシップが戦略の整合性を確保し、ラボが具体的なユースケースを育成し、集合知(クラウドソーシング)が現場の洞察を集約する。三者が協働して再現可能なAI活用フレームワークを構成する。

    Ethan Mollick:One Useful Thing(RSS)その他

  • AIの最近の発展史:32匹のカワウソ版

    32匹のカワウソを主人公に、海洋哺乳類の視点からAIの過去3年間の技術的進展を振り返り、モデルの反復と業界の突破を気軽な形で紹介する。

    Ethan Mollick:One Useful Thing(RSS)その他