Как нейроимпланты и искусственный интеллект меняют жизнь незрячих и глухих

— Наша компания создает устройства и разрабатывает программы для смартфонов, которые помогают незрячим или глухим, а также людям с аутизмом. Каждый из них сталкивается в жизни с трудностями, мешающими полноценно общаться, учиться, работать, достигать своих целей.

Один из наших популярных проектов называется «Робин» — это умная камера, которая помогает слепым ориентироваться в пространстве и распознавать лица знакомых. Устройство с помощью искусственного интеллекта подсказывает, какие препятствия встречаются на пути, будь то автомобиль или человек. «Робин» также может озвучивать текст на бумаге — достаточно навести камеру на документы или книги.

Ещё один гаджет — «Чарли» — внешне похож на умную колонку, помогает тем, кто плохо или совсем ничего не слышит. Устройство «ловит» речь и преобразует её в текст на экране телевизора, планшета, телефона или дисплея Брайля. Обычно люди с нарушением слуха общаются в поликлинике или МФЦ с помощью записок — это долго, непонятно и порой унизительно, особенно когда понимаешь, что заставляешь ждать тех, кто стоит за тобой в очереди. «Чарли» делает общение комфортным для всех участников.

Другой наш проект для людей с нарушенным слухом — цифровой онлайн-помощник «СУРДО-ПОМОЩЬ». Он переводит речь в текст и создает субтитры в мобильном приложении, выступает как виртуальный сурдопереводчик, который с помощью ИИ генерирует русский жестовый язык и, при необходимости, позволяет подключить реального сурдопереводчика для общения через видеоконференцию. У нас в штате работают такие специалисты, и мы ищем способы предоставить нашу платформу организациям, которые занимаются сурдопереводом.

Мы сейчас также вместе с партнерами в Москве разрабатываем интеллектуального чат-бота, который текстовые сообщения дублирует на жестовом языке. В перспективе он может стать альтернативой службам поддержки для глухих, которые не могут звонить по телефону.

Флагманский проект нашей организации — разработка нейроимплантов. «Сенсор-Тех» был учрежден Фондом поддержки слепоглухих «Со-единение».

Мы создаем нейроимпланты для восстановления слуха и зрения. Если говорить про слух, то кохлеарные импланты — давно известные в медицине устройства для восстановления способности слышать. Они состоят из двух частей: внутренней, встроенной хирургом во время операции в улитку внутреннего уха, и внешней, которая носится за ухом, включает приемник, передатчик, звуковой процессор, батарейку и выглядит как рожок.

Электрод — тонкий провод — вживляется в улитку и электричеством стимулирует нервные окончания, передавая звуковые сигналы в мозг. «Слушает» окружающий мир микрофон, который человек носит снаружи.

В России разрешено проводить такие операции детям с полутора лет, чтобы они росли в мире, полном звуков, и могли развиваться, учиться, общаться. Если мы сделаем свою систему, то не будет риска, что иностранцы прекратят поставки устройств.

С электронным зрением ситуация обстоит иначе. В мире пока не существует ни одной сертифицированной системы с имплантом, который мог бы воздействовать на мозг и передавать картинку, — мы всё-таки видим не глазами, а мозгом. Именно он анализирует информацию, получаемую от зрительного нерва.

Наша команда разработала технологию ELVIS V, которая передает картинку с камеры в зрительную кору головного мозга. Если стимулировать ее токами, то человек будет видеть световые вспышки, похожие на те, когда мы закрываем глаза и давим на глазные яблоки — получаются «звездочки». Из этих «звездочек» или световых «пикселей» получаются изображения. ELVIS V пока тестируем на обезьянах, затем последует этап клинических испытаний на добровольцах. Желающие уже есть.

Интересные результаты мы получили от организации из сферы социальной защиты, которая использует «Чарли» для работы с населением. Функция перевода помогает в два раза быстрее общаться, а также экономит деньги компании на найме специалистов.

Цифровой онлайн-помощник «СУРДО-ПОМОЩЬ» после запуска будет доступен бесплатно. Проект финансируется ФРИИ, в будущем планируем монетизировать его. Думаем, что ставку сделаем на сотрудничество с крупными компаниями и государством, а частным пользователям предложим бесплатный доступ, либо использование функций до определенного лимита, остальное — за отдельную стоимость.

Мы также получаем много благодарностей от пользователей умных очков SMW Patch для слабовидящих. Это еще один наш программный продукт: мы разработали приложение для смартфона, которое с помощью камеры телефона и VR-очков обрабатывает изображения в зависимости от заболевания глаз и, благодаря специальным настройкам и фильтрам, человек видит четкую яркую картинку и может смотреть телевизор или читать книги.

— Ради чего вы этим занимаетесь?

— Меня вдохновляет, что мы меняем к лучшему мир конкретных людей и улучшаем их качество жизни. К тому же интересно работать с новыми технологиями: искусственный интеллект в реабилитации, нейроимпланты в медицине — суперсовременные и прорывные направления, которыми мало кто занимается в России и мире. Интересно исследовать предел возможностей технологий.

— А есть ли предел...

— Действительно, есть ли предел? Технологии развиваются стремительно: то, что было недоступно и дорого сегодня, буквально через три года можно купить за вменяемые деньги в виде маленького микрочипа, который можно использовать. Эта динамичность и постоянные изменения делают нашу работу захватывающей и увлекательной.

Иногда наши технологии не только решают проблемы, но и вдохновляют людей на изменения в жизни. Некоторые удивляются, узнав, как много талантливых специалистов работают двадцать четыре на семь над новыми полезными разработками. Это мотивирует как пользователей, так и нас. Люди часто приезжают в офис, чтобы познакомиться с командой и узнать больше о наших проектах. В этом есть какая-то магия технологий, которые воспринимаются как нечто особенное.

Футурологи прогнозируют, что к 2040–2045 годам устройства-помощники могут стать частью жизни любого человека, а не только тех, кто плохо видит или слышит. Например, можно использовать подобные приборы для того, чтобы видеть в темноте, ориентироваться во время прогулок по городу или постоянно следить за состоянием организма. Но мы всё же пока сосредоточены на медицинском применении нейроимплантов — предоставляем людям с тяжелыми заболеваниями конкретный способ решения их проблемы.

Бывает, люди недовольны скоростью разработки и хотят быстрых результатов, но мы понимаем, что многие технологические проекты критикуют, и это не всегда отражает реальное качество продукта. Иногда это просто показатель того, что пользователи заинтересованы и переживают за результат.