ИИ-система помогает слепым ориентироваться в пространстве

Исследование, опубликованное в журнале Nature Machine Intelligence, описывает устройство, способное анализировать окружающую среду и предупреждать пользователя о приближении к препятствиям или объектам.

Такие электронные системы визуальной поддержки могут стать перспективной альтернативой хирургическим вмешательствам и имплантам, превращая визуальную информацию в тактильные или звуковые сигналы и облегчая выполнение повседневных задач. Однако ранее созданные устройства нередко оказывались неудобными в использовании, что мешало их широкому распространению.

Лэйлэй Гу и его команда представили усовершенствованную носимую систему, которая ориентирует пользователя с помощью голосовых команд. Встроенный ИИ-алгоритм анализирует видеопоток с камеры и определяет безопасный маршрут.

Информация о маршруте может передаваться через наушники с костной проводимостью звука. Дополнительно используются эластичные искусственные «кожи», закреплённые на запястьях, которые подают вибросигналы, указывая направление движения и предупреждая о боковых препятствиях.

Разработку протестировали как на человекоподобных роботах, так и на слепых и слабовидящих людях в виртуальной и реальной среде. Тесты показали заметное улучшение в навигации и выполнении задач — участники стали увереннее обходить препятствия, проходить лабиринты и находить нужные предметы.