Runway công bố mô hình robot Praxis-1 được tiền huấn luyện bằng video

Runway công bố Praxis-1, mô hình thế giới về chuyển động áp dụng tiền huấn luyện bằng video vào điều khiển robot. Công ty hướng tới giảm chi phí và công sức thu thập dữ liệu trình diễn robot, đồng thời kết nối chuyển động và vật lý của đồ vật học được từ video với hành động của robot.

Ngày 30 tháng 9, Runway giới thiệu Praxis-1 trên X là mô hình thế giới về chuyển động có trọng số mở. Cách tiếp cận này cho phép người dùng tải trọng số mô hình xuống và điều chỉnh. Công ty cho biết dự kiến công bố trọng số trong vài tháng tới.

Để triển khai robot trong nhiều môi trường và công việc, cần dữ liệu huấn luyện phản ánh đa dạng tình huống. Việc điều khiển robot từ xa để thu thập dữ liệu trình diễn bị hạn chế về khối lượng dữ liệu và chi phí. Runway cho rằng có thể thu thập nhiều video hơn ghi lại chuyển động của con người, đồ vật và các giai đoạn giữa chừng khi công việc diễn ra. Vì vậy, công ty dùng tiền huấn luyện bằng video làm nền tảng cho mô hình chính sách robot.

Mô hình chính sách quyết định robot nên thực hiện hành động nào trong một tình huống nhất định. Runway giải thích rằng nếu robot học trước chuyển động và tương tác giữa các đồ vật trong video, mô hình có thể được sử dụng để robot thực hiện công việc trong thực tế.

Trong nghiên cứu nội bộ, Runway đưa ra sai số vị trí cuối cùng là 16,1 cm đối với mô hình được tiền huấn luyện bằng video trên web và 16,0 cm với mô hình học từ video robot điều khiển từ xa. Đánh giá được thực hiện trên 93 cặp dữ liệu. Biểu đồ do công ty công bố cho thấy chênh lệch giữa hai kết quả nhỏ hơn biên sai số nên không có ý nghĩa thống kê.

Đây là kết quả thử nghiệm do Runway cung cấp, khác với chỉ số thể hiện tỷ lệ thành công tổng thể của mô hình khi thực hiện công việc. Tài liệu gốc không đưa ra tỷ lệ thành công theo từng công việc hay kết quả đánh giá định lượng riêng khác.

Ngày 30 tháng 9, Runway cho biết Noble Machines, Standard Bots và Ultra đang thử nghiệm mô hình trên các phần cứng khác nhau. Noble Machines áp dụng mô hình cho robot hai tay, Standard Bots cho cánh tay robot sáu trục RO1, còn Ultra dùng nền tảng di động. Runway cho biết công ty kiểm tra hiệu suất và độ an toàn trên nhiều robot và môi trường trước khi công bố.

Kế hoạch công bố trọng số mở sẽ giúp nhà phát triển thử nghiệm và điều chỉnh mô hình cho từng loại phần cứng. Tuy nhiên, Runway chưa công bố quy mô mô hình, tổng lượng video dùng để huấn luyện hay điều khoản cấp phép cho mục đích thương mại.

Runway mô tả Praxis-1 là mô hình chính sách đa dụng dành cho nhà phát triển và nhà nghiên cứu robot. Công ty mới nêu thời điểm công bố trọng số là “trong vài tháng tới”.