DreamTraj: Dự đoán quỹ đạo vật thể 6-DoF từ ảnh đơn bằng cách khai thác mô hình khuếch tán video

Tóm tắt AI

DreamTraj giới thiệu phương pháp dự đoán quỹ đạo 6-DoF của vật thể chỉ từ một ảnh RGB và hướng dẫn bằng ngôn ngữ, tận dụng các biểu diễn nội tại từ mô hình khuếch tán thay vì tạo video tốn kém. Nghiên cứu đi kèm bộ dữ liệu MOVE với hơn 5.000 quỹ đạo chi tiết để tối ưu hóa khả năng điều khiển robot.