Các nhà khoa học đã tạo ra một ứng dụng cho phép điều khiển robot khi đeo tai nghe Apple Vision Pro VR .
Các nhà khoa học đã phát triển một ứng dụng cho tai nghe thực tế hỗn hợp Apple Vision Pro cho phép người dùng điều khiển robot chỉ bằng cử chỉ đầu và tay. Nó có thể được sử dụng để điều khiển từ xa trong nhiều tình huống khác nhau, đặc biệt là ở những khu vực có thảm họa.
Một ứng dụng có tên “Tracking Streamer” theo dõi chuyển động của con người, cụ thể là cách đầu, cổ tay và ngón tay di chuyển, đồng thời truyền dữ liệu đó qua kết nối Wi-Fi tới robot để điều khiển. (Ảnh: Park Younghyo).
Một ứng dụng có tên “Tracking Streamer” theo dõi chuyển động của con người, cụ thể là cách đầu, cổ tay và ngón tay di chuyển và truyền dữ liệu đó qua kết nối Wi-Fi đến robot trên cùng một mạng. Robot được kết nối sau đó sẽ dịch dữ liệu thành các chuyển động tương ứng.
Các nhà nghiên cứu đã công bố công trình của họ trong một bài báo được xuất bản gần đây trên Github, một kho lưu trữ nguồn mở. Hệ thống theo dõi 26 điểm trên bàn tay và cổ tay cũng như các điểm riêng biệt trên đầu. Nó cũng ghi lại dữ liệu không gian, chẳng hạn như độ cao của bạn so với mặt đất.
Nhà phát triển ứng dụng Younghyo Park, nghiên cứu sinh tiến sĩ tại Viện Công nghệ Massachusetts (MIT), đã đăng một video lên mạng xã hội X cho thấy hệ thống đang hoạt động.
Trong một đoạn video ngắn, đồng tác giả nghiên cứu Gabe Margolis, một sinh viên tốt nghiệp tại MIT, điều khiển một robot bốn chân bằng chuyển động của tay và cơ thể.
Margolis ra hiệu cho robot đến gần một cánh cửa đang đóng, xoay tay cầm bằng kẹp và bước vào. Trong một cảnh khác, anh hướng dẫn robot mở nắp thùng rác và ném đồ vật vào thùng rác. Đôi khi, anh ấy cũng nghiêng người về phía trước, khiến robot bắt chước anh ấy.
Apple ra mắt tai nghe thực tế ảo (VR) Vision Pro vào tháng 2 năm 2024 để hỗ trợ người dùng trong cuộc sống hàng ngày bằng hình ảnh. Ngay trước khi ra mắt, các nhà khoa học đã công bố một nghiên cứu nhằm điều tra cách thức hoạt động của tai nghe VR nếu bạn sử dụng chúng trong cuộc sống hàng ngày.
Họ phát hiện ra rằng các thiết bị này có độ trễ thời gian, hạn chế tầm nhìn ngoại vi và gây ra các biến dạng tương tự như một chiếc gương xiếc đang cười. Họ cảnh báo không nên sử dụng tai nghe VR khi lái xe hoặc đi xuống cầu thang.
Park và Margolis suy đoán rằng một số người dùng có thể đeo Apple Vision Pro mọi lúc, chẳng hạn như kính, và điều đó sẽ cung cấp thêm dữ liệu để dạy robot cách con người di chuyển và làm theo.
- Làm thế nào một kỹ sư của NASA ngồi ở nhà và điều khiển robot trên sao Hỏa?
- Robot Trung Quốc làm vỡ kính và làm bị thương người
- Lần đầu tiên điều khiển robot trên Trái đất từ không gian
