Новая технология позволяет управлять роботами через камеру (видео)

Сотрудники Университета Карнеги — Меллона создали систему телеуправления гуманоидными роботами в режиме реального времени. Программа использует алгоритмы с применением искусственного моделирования, собирая крупные массивы данных о движениях конечностей человека и последующего распознавания действий для обучения робота.

Технология получила название «Человек — гуманоид». Приложение позволяет контролировать движения оператора при помощи камер, используя так называемую технологию масштабируемого ретаргетинга. Софт обрабатывает и обширный набор данных, содержащий информацию о движениях человека. Одновременно с этим система занимается точным распознанием движений.

Особенность технологии в том, что для её работы достаточно обычной камеры без необходимости использовать специальные костюмы или датчики. Приложение позволяет дистанционно управлять роботами-гуманоидами для перемещения объектов, а также воссоздания движений ходьбы и других действий.



Программа позволяет преобразовывать движения человека в действия робота. По словам авторов проекта, речь идёт о масштабируемой системе, основанной на обучении, что ускоряет развитие точности движений.

Фактически софт решает проблему полного контроля над крупными гуманоидами, когда роботу необходимо имитировать произвольные человеческие движения в реальном времени. Вдобавок технология облегчает интуитивное взаимодействие между людьми и человекоподобными ботами.