MolmoMotion: Model Prediksi Gerakan 3D yang Dipandu Bahasa
Judul asli:MolmoMotion: Language-guided 3D motion forecasting
Ringkasan AI
MolmoMotion berbasis jaringan tulang punggung Molmo 2, menerima frame video, penanda titik 3D pada objek, dan instruksi gerakan teks (seperti "pindahkan dan putar mangkuk kayu berisi buah di atas meja"), lalu memprediksi lintasan 3D titik-titik tersebut dalam beberapa detik ke depan. Tersedia dua varian: MolmoMotion-AR autoregresif yang memprediksi koordinat langkah demi langkah, dan MolmoMotion-FM flow matching yang menangani berbagai kemungkinan gerakan melalui transformasi ruang kontinu. Juga dirilis dataset MolmoMotion-1M (berisi lintasan titik 3D dan deskripsi gerakan dari 1,16 juta video) dan benchmark PointMotionBench (2.700 klip video yang diverifikasi manusia). Bobot model, dataset, dan benchmark semuanya sumber terbuka.
Poin utama
- MolmoMotion berbasis jaringan tulang punggung Molmo 2,menerima frame video,penanda titik 3D pada…
- Tersedia dua varian: MolmoMotion-AR autoregresif yang memprediksi koordinat langkah demi…
- Juga dirilis dataset MolmoMotion-1M (berisi lintasan titik 3D dan deskripsi gerakan dari 1,16 juta…
- 700 klip video yang diverifikasi manusia).
- Bobot model,dataset,dan benchmark semuanya sumber terbuka.
Ringkasan cepat
- Waktu terbit
- Waktu diperbarui
- Sumber
- Hugging Face 社区博客(混合发现)
- Kategori
- Rilis Model
- Skor AI
- 69
MolmoMotion把3D运动预测从模板化推到任意物体,百万级数据集和基准让研究门槛大降,做机器人和视频生成的值得认真看,但目前仍是研究阶段,离落地还有距离。
Sumber dan hak cipta
Artikel ini disusun berdasarkan judul pilihan dan ringkasan AI dari API publik AIHOT, dengan sumber yang dicantumkan dan tautan balik; hak cipta konten asli milik media dan penulis aslinya, situs ini tidak menyalin artikel secara penuh.
Cara mengutip
Saat mengutip artikel ini, sertakan judul, tanggal, dan tautan permanen, serta cantumkan sumber Orange News.
Orange News: MolmoMotion: Model Prediksi Gerakan 3D yang Dipandu Bahasa. 17 Juni 2026. https://new.nat6.net/id/news/cmqi8qht206mtslf0a4q8mkrb/