Система с тактильным рукавом и инфракрасным очками с 3D-камерой Intel RealSense D415 заменит слепым трость

Инженеры из Мюнхенского технического университета разработали эффективную навигационную систему для слепых и слабовидящих людей. Изобретение состоит из двух элементов. Во-первых, это пара напечатанных на 3D-принтере «очков». Подобно системам отслеживания движения в гарнитурах виртуальной реальности, они используют камеры для записи стереоскопического изображения окружающей среды для построения трехмерной карты.

Исследователи использовали камеру Intel RealSense D415, которая улавливает инфракрасное излучение, что позволяет системе работать ночью и формировать трехмерное изображение с разрешением 1280×720 и частотой до 90 кадров в секунду. При тестировании системы применялось разрешение 640×480 при 6 кадрах для повышения вычислительной производительности.

Данные об окружающих пользователя препятствиях передаются на специальный рукав с виброподкладкой, обеспечивающей передачу при помощи тактильной связи информации о наличии препятствия. Интенсивность вибрации указывает на расстояние до препятствия. Площадь рукава разбита на 25 секторов (5х5), каждый из которых имеет независимый вибропривод. Использование инфракрасных камер значительно повышает по сравнению с ультразвуковыми датчиками точность и чувствительность системы.

Система имеет два режима работы: в помещении с максимальной дальностью обнаружения в три метра и на улице с минимальной дальностью в два метра для обнаружения препятствий на расстоянии. Таким образом, устройство может работать в дополнение к трости.

Добровольцам, тестировавшим систему, удалось правильно ориентироваться в 98,6% случаев с вибрацией только одного из моторов и до 70% случаев в более сложных ситуациях с множественной тактильной обратной связью. Исследователи намерены продолжать совершенствовать свое изобретение и надеются настроить механизм распознавания объектов, чтобы составлять маршруты, помогающие ориентироваться на открытых пространствах.