Stanford và Caltech dùng GPT-6 Astra điều khiển trực tiếp robot Unitree G1 dọn dẹp nhà bếp lạ

Các nhà nghiên cứu từ Stanford và Caltech đã xây dựng HomeBody, một hệ thống cho phép robot Unitree G1 tự động điều hướng trong một căn bếp xa lạ, dọn dẹp và lấy đồ vật từ ngăn kéo. Đây là một thử nghiệm khác cho thấy GPT-6 Astra hoạt động hiệu quả với robot.

HomeBody loại bỏ lớp điều khiển được huấn luyện thông thường giữa mô hình ngôn ngữ và robot. Thay vào đó, một mô hình ngôn ngữ thị giác (VLM) có thể thay thế, tại đây là GPT Astra, gọi trực tiếp vào thư viện kỹ năng mở rộng để thực hiện các thao tác cầm nắm, điều hướng hoặc mở ngăn kéo. Robot sẽ khám phá căn phòng trước, xây dựng bản sao kỹ thuật số trong Isaac Sim của Nvidia, đồng thời ghi lại các đối tượng và vị trí vào bộ nhớ không gian. Điều đó cho phép nó tìm thấy các vật phẩm ngay cả khi chúng đã nằm ngoài tầm nhìn. Đối với các tác vụ như "dọn dẹp nhà bếp", mô hình ngôn ngữ sẽ lập kế hoạch cho từng bước và tự sửa lỗi khi cần.

Các hạn chế bao gồm độ trễ của Astra, tình trạng quá nhiệt ở các động cơ servo ngón tay và chi phí tính toán cao. Mã nguồn có trên GitHub. Các điểm chuẩn trước đó cho thấy khả năng suy luận không gian được cải thiện đáng kể của Astra, trong khi một báo cáo khác đã cảnh báo về các vấn đề an toàn khi Astra điều khiển robot. OpenAI đã công bố kế hoạch quay trở lại lĩnh vực robot, bao gồm cả các ứng dụng cho mục đích cá nhân.

Tin tức AI không thổi phồng – Được biên soạn bởi con người

Đăng ký THE DECODER để đọc không quảng cáo, nhận bản tin AI hàng tuần, báo cáo tiên phong "AI Radar" độc quyền sáu lần một năm, quyền truy cập toàn bộ kho lưu trữ và tham gia phần bình luận của chúng tôi.

Đăng ký ngay