Студенты НГТУ НЭТИ разработали новый ИИ-навигатор для слабовидящих

В Новосибирске разработали ^[1] навигатор с искусственным интеллектом ^[2] для слабовидящих людей. Навигатор создали студенты НГТУ НЭТИ с факультета радиотехники и электроники и факультета автоматики и вычислительной техники. Программа помогает ориентироваться на местности и предупреждает об опасных объектах.

Программа работает на телефоне с ОС Android. Пользователь запускает приложение, включает камеру и крепит телефон на грудь. Искусственный интеллект обрабатывает видео и сообщает о препятствиях голосом.

Для распознавания объектов используют сверточную нейросеть. Её обучают на размеченных вручную данных. Система видит препятствия на расстоянии до пяти метров. Это нужно, чтобы не перегружать человека и давать время на реакцию ^[3]. Обработка одного кадра занимает 300 миллисекунд.

В отличие от других подобных решений, приложение не требует интернета, не показывает рекламу и не просит платную подписку. В будущем пользователи смогут добавлять собственные объекты для распознавания.

Сейчас команда работает над основной версией. Планируют выпустить её в течение трёх месяцев. Также разрабатывают новые функции: прокладку маршрута по голосовому запросу и поиск объектов по названию. Проект почти готов. Перед выпуском разработчики проведут тестирование.Также разработчики будут оперативно исправлять мелкие ошибки ^[4].