モデル公開

MolmoMotion:言語誘導の3D運動予測モデル

原題:MolmoMotion: Language-guided 3D motion forecasting

AI 要約

MolmoMotionはMolmo 2バックボーンに基づき、動画フレーム、物体上の3D点マーカー、テキストの動作指示(例:「テーブルの上の果物が入った木製ボウルを移動させて回転させる」)を入力として、今後数秒間のこれらの点の3D軌跡を予測する。2つの変体を提供:自己回帰型のMolmoMotion-ARは座標を段階的に予測し、フローマッチング型のMolmoMotion-FMは連続空間変換を通じて複数可能性のある運動を処理する。同時にMolmoMotion-1Mデータセット(116万動画の3D点軌跡と動作記述を含む)とPointMotionBenchベンチマーク(2,700の人手検証済み動画クリップ)を公開。モデルの重み、データセット、ベンチマークはすべてオープンソース化されている。

要点

  • MolmoMotionはMolmo 2バックボーンに基づき、動画フレーム、物体上の3D点マーカー、テキストの動作指示(例:「テーブルの上の果物が入った木製ボウルを移動させて回転させる」)を入力として…
  • 2つの変体を提供:自己回帰型のMolmoMotion-ARは座標を段階的に予測し、フローマッチング型のMolmoMotion-FMは連続空間変換を通じて複数可能性のある運動を処理する。
  • 同時にMolmoMotion-1Mデータセット(116万動画の3D点軌跡と動作記述を含む)とPointMotionBenchベンチマーク(2,700の人手検証済み動画クリップ)を公開。
  • モデルの重み、データセット、ベンチマークはすべてオープンソース化されている

概要

公開日時
更新日時
出典
Hugging Face 社区博客(混合发现)
カテゴリ
モデル公開
AI スコア
69
原文を読む 情報源で全文を読む
おすすめの理由

MolmoMotion把3D运动预测从模板化推到任意物体,百万级数据集和基准让研究门槛大降,做机器人和视频生成的值得认真看,但目前仍是研究阶段,离落地还有距离。

出典と著作権

本記事は AIHOT の公開 API が提供する厳選タイトルと AI 要約に基づいており、出典の明記と元記事へのリンクを行っています。原文の著作権は元の媒体と著者に帰属し、当サイトは全文を転載しません。

原文記事 · AIHOT 記事

引用方法

本記事を引用する際は、タイトル・日付・パーマリンクを保持し、出典をOrange Newsと明記してください。

Orange News:MolmoMotion:言語誘導の3D運動予測モデル。2026年6月17日。https://new.nat6.net/ja/news/cmqi8qht206mtslf0a4q8mkrb/

すべて見る →