MolmoMotion:言語誘導の3D運動予測モデル
原題:MolmoMotion: Language-guided 3D motion forecasting
AI 要約
MolmoMotionはMolmo 2バックボーンに基づき、動画フレーム、物体上の3D点マーカー、テキストの動作指示(例:「テーブルの上の果物が入った木製ボウルを移動させて回転させる」)を入力として、今後数秒間のこれらの点の3D軌跡を予測する。2つの変体を提供:自己回帰型のMolmoMotion-ARは座標を段階的に予測し、フローマッチング型のMolmoMotion-FMは連続空間変換を通じて複数可能性のある運動を処理する。同時にMolmoMotion-1Mデータセット(116万動画の3D点軌跡と動作記述を含む)とPointMotionBenchベンチマーク(2,700の人手検証済み動画クリップ)を公開。モデルの重み、データセット、ベンチマークはすべてオープンソース化されている。
要点
- MolmoMotionはMolmo 2バックボーンに基づき、動画フレーム、物体上の3D点マーカー、テキストの動作指示(例:「テーブルの上の果物が入った木製ボウルを移動させて回転させる」)を入力として…
- 2つの変体を提供:自己回帰型のMolmoMotion-ARは座標を段階的に予測し、フローマッチング型のMolmoMotion-FMは連続空間変換を通じて複数可能性のある運動を処理する。
- 同時にMolmoMotion-1Mデータセット(116万動画の3D点軌跡と動作記述を含む)とPointMotionBenchベンチマーク(2,700の人手検証済み動画クリップ)を公開。
- モデルの重み、データセット、ベンチマークはすべてオープンソース化されている
概要
- 公開日時
- 更新日時
- カテゴリ
- モデル公開
- AI スコア
- 69
おすすめの理由
MolmoMotion把3D运动预测从模板化推到任意物体,百万级数据集和基准让研究门槛大降,做机器人和视频生成的值得认真看,但目前仍是研究阶段,离落地还有距离。
出典と著作権
本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。
引用方法
本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。
Orange News:MolmoMotion:言語誘導の3D運動予測モデル。2026年6月17日。https://new.nat6.net/ja/news/cmqi8qht206mtslf0a4q8mkrb/