Поиск:
 

Российские ученые разработали гаджет, который поможет слепым «видеть» предметы

НИА-Хакасия
Инженеры из компании «Бизнес бюро» создали систему мультиканальной обработки информации СОМСИ, которая позволит слепым людям самостоятельно ориентироваться в пространстве.
Разработка специалистов представляет собой прототип устройства для анализа окружающей обстановки по видео и звуку. Гаджет размером с небольшой плеер позволит людям с серьезными нарушениями зрения или полной слепотой хорошо ориентироваться в пространстве. Аппаратно-программный комплекс СОМСИ состоит из двух взаимосвязанных модулей. Первый представляет собой оснащенный широкоформатной видеокамерой и микрофоном сенсор для захвата информации. Второй модуль — это вычислительная платформа для обработки данных, пишут «Известия».
Работает СОМСИ по следующему алгоритму. Сначала система получает изображения и звуки окружающей обстановки, затем через интернет передает их на вычислительную платформу, находящуюся на отдельном сервере. Там нейросеть анализирует поступающую информацию. После того как нейросеть обработала информацию, устройство переводит данные в форму, которая доступна пользователю — голосовое сообщение, вывод в тактильной форме или отображение виртуальных примитивов. Последний вариант доступен при наличии соответствующего импланта, способного частично заменить зрение.
На сегодняшний день «искусственный глаз» представляет собой аналог сетчатки — на тонкую пленку нанесены «пиксели» из фоточувствительного материала. Настоящее изображение такой имплант распознать пока не способен, но уже может обработать крупную схематичную картинку, которую и формирует СОМСИ. Нейросеть преобразует «увиденное» камерой в схему, например, представляя человека как набор палочек и овалов — конечностей, головы и туловища.
Есть и дополнительная функция, благодаря которой быстро идущий человек может получить информацию о местности на расстоянии нескольких десятков метров. Помимо распознания предметов, их цвета и размера, аппарат может определять дистанцию до вещей с помощью ультразвука, как это делают современные парковочные датчики на автомобилях.
Однако, отмечают разработчики, благодаря системе распознания звуковых сигналов, СОМСИ может помочь не только слепым, но и людям с нарушениями слуха. Из основных звуков нейросеть различает сигналы тревоги, «бибиканье» автомобиля и звук светофора, предупреждающий о том, что пора переходить улицу.
В дальнейшие планы разработчиков входит продолжение обучения нейросети, чтобы она смогла распознавать конкретного человека. Также для ускорения работы СОМСИ и возможности получить хотя бы небольшой объем информации при отсутствии интернета инженеры хотят внести часть нейросети в само устройство.