MolmoMotion: Model ramalan gerakan 3D berpandukan bahasa
Tajuk asal:MolmoMotion: Language-guided 3D motion forecasting
Ringkasan AI
MolmoMotion berdasarkan rangka tulang belakang Molmo 2, mengambil bingkai video, penanda titik 3D pada objek dan arahan gerakan teks (seperti "gerakkan dan putarkan mangkuk kayu berisi buah di atas meja") sebagai input, dan meramal trajektori 3D titik-titik tersebut dalam beberapa saat akan datang. Dua varian disediakan: MolmoMotion-AR autoregresif meramal koordinat langkah demi langkah, manakala MolmoMotion-FM pemadanan aliran mengendalikan gerakan berbilang kemungkinan melalui transformasi ruang berterusan. Set data MolmoMotion-1M (mengandungi trajektori titik 3D dan penerangan gerakan bagi 1.16 juta video) dan penanda aras PointMotionBench (2,700 klip video disahkan manusia) turut dilancarkan. Pemberat model, set data dan penanda aras semuanya sumber terbuka.
Maklumat penting
- MolmoMotion berdasarkan rangka tulang belakang Molmo 2,mengambil bingkai video,penanda titik 3D…
- Dua varian disediakan: MolmoMotion-AR autoregresif meramal koordinat langkah demi langkah,manakala…
- Set data MolmoMotion-1M (mengandungi trajektori titik 3D dan penerangan gerakan bagi 1.
- 16 juta video) dan penanda aras PointMotionBench (2,700 klip video disahkan manusia) turut…
- Pemberat model,set data dan penanda aras semuanya sumber terbuka.
Sekilas pandang
- Diterbitkan pada
- Dikemas kini pada
- Sumber
- Hugging Face 社区博客(混合发现)
- Kategori
- Pelancaran Model
- Skor AI
- 69
MolmoMotion把3D运动预测从模板化推到任意物体,百万级数据集和基准让研究门槛大降,做机器人和视频生成的值得认真看,但目前仍是研究阶段,离落地还有距离。
Sumber dan hak cipta
Artikel ini disusun berdasarkan tajuk pilihan dan ringkasan AI daripada API awam AIHOT, dengan sumber dinyatakan dan pautan balik disediakan; hak cipta teks asal milik media dan penulis asal, laman ini tidak menyalin penuh teks penuh.
Cara memetik
Apabila memetik artikel ini, kekalkan tajuk, tarikh dan pautan kekal, serta nyatakan sumber sebagai Orange News.
Orange News: MolmoMotion: Model ramalan gerakan 3D berpandukan bahasa. 17 Jun 2026. https://new.nat6.net/ms/news/cmqi8qht206mtslf0a4q8mkrb/