MolmoMotion: mô hình dự đoán chuyển động 3D dẫn dắt bằng ngôn ngữ
Tiêu đề gốc:MolmoMotion: Language-guided 3D motion forecasting
Tóm tắt AI
MolmoMotion dựa trên xương sống Molmo 2, đầu vào là khung video, điểm đánh dấu 3D trên vật thể và lệnh hành động bằng văn bản (như "di chuyển và xoay bát gỗ đựng trái cây trên bàn"), dự đoán quỹ đạo 3D của các điểm này trong vài giây tới. Cung cấp hai biến thể: MolmoMotion-AR tự hồi quy dự đoán tọa độ từng bước, MolmoMotion-FM khớp dòng xử lý chuyển động đa khả năng qua biến đổi không gian liên tục. Đồng thời phát hành bộ dữ liệu MolmoMotion-1M (chứa quỹ đạo điểm 3D và mô tả hành động của 1,16 triệu video) và bài kiểm tra PointMotionBench (2.700 đoạn video được xác minh thủ công). Trọng số mô hình, bộ dữ liệu và bài kiểm tra đều đã mở mã nguồn.
Thông tin chính
- MolmoMotion dựa trên xương sống Molmo 2,đầu vào là khung video,điểm đánh dấu 3D trên vật thể và…
- Cung cấp hai biến thể: MolmoMotion-AR tự hồi quy dự đoán tọa độ từng bước,MolmoMotion-FM khớp dòng…
- Đồng thời phát hành bộ dữ liệu MolmoMotion-1M (chứa quỹ đạo điểm 3D và mô tả hành động của 1,16…
- 700 đoạn video được xác minh thủ công).
- Trọng số mô hình,bộ dữ liệu và bài kiểm tra đều đã mở mã nguồn.
Tóm tắt nhanh
- Đăng lúc
- Cập nhật lúc
- Nguồn
- Hugging Face 社区博客(混合发现)
- Danh mục
- Ra mắt mô hình
- Điểm AI
- 69
MolmoMotion把3D运动预测从模板化推到任意物体,百万级数据集和基准让研究门槛大降,做机器人和视频生成的值得认真看,但目前仍是研究阶段,离落地还有距离。
Nguồn và bản quyền
Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.
Cách trích dẫn
Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.
Orange News: MolmoMotion: mô hình dự đoán chuyển động 3D dẫn dắt bằng ngôn ngữ. 17 tháng 6 2026. https://new.nat6.net/vi/news/cmqi8qht206mtslf0a4q8mkrb/