VR-гарнитура позволяет управлять роем роботов

Новый подход позволяет людям управлять полуавтономными роботами с помощью гарнитуры виртуальной реальности

Роботизированные рои могут стать прорывом во многих сферах (от поисково-спасательных операций до добычи полезных ископаемых), но сложно понять, как можно контролировать такое количество движущихся роботов. Новый подход позволяет людям управлять полуавтономными роботами с помощью гарнитуры виртуальной реальности.

Надев очки виртуальной реальности, оператор оказывается на виртуальной арене, содержащей до девяти роботов, которые могут перемещаться и координировать действия друг друга. Три виртуальных робота при этом имеют реальные воплощения. Чтобы управлять роботами, пользователь просто протягивает руку и перемещает их в симуляции. Роботов можно направлять, ловить, строить из них стены. Эти движения фиксируются с помощью технологии отслеживания жестов Leap Motion, прикреплённой к внешней стороне гарнитуры. Команды отправляются реальным ботам по радиосвязи. Простое управление жестами также позволяет пользователю увеличивать и уменьшать масштаб виртуальной среды и перемещаться по ней.

Виртуальная реальность и отслеживание жестов уже являются популярными инструментами для управления роботами, но новый подход сочетает их, чтобы пользователь мог напрямую взаимодействовать с большим количеством роботов. Система позволила неподготовленным операторам собрать вместе 50 свободно передвигающихся в разных зонах виртуальных роботов примерно за 5 минут.

Фото и видео: sciencemag.org

На сайте могут быть использованы материалы интернет-ресурсов Facebook и Instagram, владельцем которых является компания Meta Platforms Inc., запрещённая на территории Российской Федерации