Ứng dụng mới cho phép điều khiển robot bằng tai nghe?

Các nhà khoa học đã xây dựng một ứng dụng cho phép điều khiển robot khi đeo tai nghe thực tế ảo Apple Vision Pro VR.

Các nhà khoa học đã phát triển một ứng dụng cho tai nghe thực tế hỗn hợp Apple Vision Pro cho phép người dùng điều khiển robot chỉ bằng cử chỉ của đầu và tay. Nó có thể được sử dụng để điều khiển từ xa trong các tình huống khác nhau, đặc biệt trong các vùng gặp thảm họa.


Một ứng dụng có tên "Tracking Streamer" theo dõi chuyển động của con người - đặc biệt là cách đầu, cổ tay và ngón tay di chuyển - và truyền dữ liệu này qua kết nối Wi-Fi tới robot để điều khiển nó. (Ảnh: Younghyo Park).

Ứng dụng có tên "Tracking Streamer" theo dõi chuyển động của con người - đặc biệt là cách đầu, cổ tay và ngón tay di chuyển - và truyền dữ liệu này qua kết nối Wi-Fi tới robot trên cùng một mạng. Robot được kết nối sau đó sẽ dịch dữ liệu thành các chuyển động tương ứng.

Các nhà nghiên cứu đã công bố công trình của họ trong một bài báo vừa đăng trên trên Github, một kho lưu trữ mã nguồn mở. Hệ thống này theo dõi 26 điểm ở bàn tay và cổ tay, cũng như các điểm riêng biệt ở đầu. Nó cũng ghi lại dữ liệu không gian - chẳng hạn như bạn ở độ cao bao nhiêu so với mặt đất.

Nhà phát triển ứng dụng Younghyo Park, một nghiên cứu sinh tiến sĩ tại Viện Công nghệ Massachussets (MIT) đã xuất bản một video lên mạng xã hội X cho thấy hệ thống đang hoạt động.

Trong một đoạn video ngắn, đồng tác giả nghiên cứu Gabe Margolis, một sinh viên tốt nghiệp tại MIT, điều khiển một robot bốn chân bằng tay và chuyển động cơ thể của mình.

Margolis thực hiện các cử chỉ để ra lệnh cho robot đến gần một cánh cửa đang đóng, xoay tay cầm bằng dụng cụ kẹp và đi vào. Trong một cảnh khác, anh ra hiệu cho robot mở nắp thùng rác và ném đồ vào thùng rác. Có lúc, anh cũng cúi xuống - điều này khiến robot bắt chước anh.

Apple ra mắt tai nghe thực tế ảo (VR) Vision Pro vào tháng 2 năm 2024, để hỗ trợ những người đeo thiết bị này trong cuộc sống hàng ngày của họ bằng những cảnh quay. Ngay trước khi ra mắt, các nhà khoa học đã công bố nghiên cứu nhằm điều tra xem tai nghe VR hoạt động tốt như thế nào nếu bạn sử dụng chúng trong cuộc sống hàng ngày.

Họ nhận thấy các thiết bị này có độ trễ thời gian, làm hạn chế tầm nhìn ngoại vi và gây ra các biến dạng giống như một chiếc gương cười ở rạp xiếc. Họ cảnh báo không nên đeo tai nghe VR khi lái xe hoặc đi bộ xuống cầu thang.

Park và Margolis đã suy đoán rằng, một số người dùng có thể đeo Apple Vision Pro mọi lúc, như kính, và việc này sẽ cung cấp nhiều dữ liệu hơn để dạy robot cách con người di chuyển và nó sẽ làm theo.

TIN CŨ HƠN
Công nghệ đột phá dưới lòng đất tạo ra trăm megawatt điện không carbon, bộ năng lượng Mỹ ra cú hích

Công nghệ đột phá dưới lòng đất tạo ra trăm megawatt điện không carbon, bộ năng lượng Mỹ ra cú hích

Tương lai không phụ thuộc vào nhiên liệu hóa thạch đã đến?

Đăng ngày: 05/01/2026
Xe đạp có bánh thì quá bình thường, giờ đây chúng ta có cả xe đạp không bánh

Xe đạp có bánh thì quá bình thường, giờ đây chúng ta có cả xe đạp không bánh

Chiếc xe đạp sử dụng thiết kế vòng xích giống xe tăng có thể di chuyển về phía trước nhưng hơi khó lái hoặc chạy trên địa hình kém bằng phẳng.

Đăng ngày: 04/01/2026
Lộ diện mẫu giày đi bộ nhanh nhất thế giới, tốc độ nhanh gấp 4 lần người thường

Lộ diện mẫu giày đi bộ nhanh nhất thế giới, tốc độ nhanh gấp 4 lần người thường

Công ty khởi nghiệp Shift Robotics giới thiệu mẫu giày Moonwalker có thể giúp người đeo tăng 250% tốc độ đi bộ nhờ thuật toán AI.

Đăng ngày: 02/01/2026
Mắt kính phiên dịch mọi ngôn ngữ khác nhau của Google

Mắt kính phiên dịch mọi ngôn ngữ khác nhau của Google

Google vừa tung ra đoạn video giới thiệu nhanh về kính thực tế ảo tăng cường (AR) thông minh có thể phiên dịch trực tiếp đa ngôn ngữ.

Đăng ngày: 29/12/2025
Xe đạp điện không có nan hoa, trục vòm bánh

Xe đạp điện không có nan hoa, trục vòm bánh "tàng hình" công nghệ bảo mật khủng

Chiếc xe đạp điện Reevo Bike của thương hiệu Beno Technologies hứa hẹn sẽ làm nên cú hit mới cho thị trường xe đạp điện tương lai.

Đăng ngày: 29/12/2025
Súng phóng lựu bắn hai loại đạn duy nhất trên thế giới

Súng phóng lựu bắn hai loại đạn duy nhất trên thế giới

Súng phóng lựu RPG-32 “Hashim” do Xí nghiệp khoa học sản xuất quốc gia Bazalt/ Nga chế tạo theo đơn đặt hàng và hợp đồng của Jordan ký năm 2005.

Đăng ngày: 24/12/2025
Ưu thế tuyệt đối của chip lượng tử ánh sáng: Rút ngắn 9.000 năm tính toán xuống còn 36 phần triệu giây

Ưu thế tuyệt đối của chip lượng tử ánh sáng: Rút ngắn 9.000 năm tính toán xuống còn 36 phần triệu giây

Nếu các siêu máy tính mạnh nhất hiện nay cần 9.000 năm để giải được bài toán này, chip lượng tử ánh sáng chỉ cần vài phần triệu giây.

Đăng ngày: 17/12/2025
Khoa Học News