Ra mắt mô hình

MolmoMotion: mô hình dự đoán chuyển động 3D dẫn dắt bằng ngôn ngữ

Tiêu đề gốc:MolmoMotion: Language-guided 3D motion forecasting

Tóm tắt AI

MolmoMotion dựa trên xương sống Molmo 2, đầu vào là khung video, điểm đánh dấu 3D trên vật thể và lệnh hành động bằng văn bản (như "di chuyển và xoay bát gỗ đựng trái cây trên bàn"), dự đoán quỹ đạo 3D của các điểm này trong vài giây tới. Cung cấp hai biến thể: MolmoMotion-AR tự hồi quy dự đoán tọa độ từng bước, MolmoMotion-FM khớp dòng xử lý chuyển động đa khả năng qua biến đổi không gian liên tục. Đồng thời phát hành bộ dữ liệu MolmoMotion-1M (chứa quỹ đạo điểm 3D và mô tả hành động của 1,16 triệu video) và bài kiểm tra PointMotionBench (2.700 đoạn video được xác minh thủ công). Trọng số mô hình, bộ dữ liệu và bài kiểm tra đều đã mở mã nguồn.

Thông tin chính

  • MolmoMotion dựa trên xương sống Molmo 2,đầu vào là khung video,điểm đánh dấu 3D trên vật thể và…
  • Cung cấp hai biến thể: MolmoMotion-AR tự hồi quy dự đoán tọa độ từng bước,MolmoMotion-FM khớp dòng…
  • Đồng thời phát hành bộ dữ liệu MolmoMotion-1M (chứa quỹ đạo điểm 3D và mô tả hành động của 1,16…
  • 700 đoạn video được xác minh thủ công).
  • Trọng số mô hình,bộ dữ liệu và bài kiểm tra đều đã mở mã nguồn.

Tóm tắt nhanh

Đăng lúc
Cập nhật lúc
Nguồn
Hugging Face 社区博客(混合发现)
Danh mục
Ra mắt mô hình
Điểm AI
69
Đọc bản gốc Đọc toàn văn tại nguồn tin gốc
Lý do đề xuất

MolmoMotion把3D运动预测从模板化推到任意物体,百万级数据集和基准让研究门槛大降,做机器人和视频生成的值得认真看,但目前仍是研究阶段,离落地还有距离。

Nguồn và bản quyền

Bài viết này được tổng hợp dựa trên các tiêu đề chọn lọc và tóm tắt AI từ API công khai của AIHOT, đã ghi rõ nguồn và liên kết ngược; bản quyền nội dung gốc thuộc về cơ quan truyền thông và tác giả gốc, trang này không sao chép toàn văn.

Liên kết gốc · Mục AIHOT

Cách trích dẫn

Khi trích dẫn bài viết này, vui lòng giữ nguyên tiêu đề, ngày đăng và liên kết vĩnh viễn, đồng thời ghi rõ nguồn là Orange News.

Orange News: MolmoMotion: mô hình dự đoán chuyển động 3D dẫn dắt bằng ngôn ngữ. 17 tháng 6 2026. https://new.nat6.net/vi/news/cmqi8qht206mtslf0a4q8mkrb/

Xem tất cả →