Новосибирские ученые представили автономный ИИ-помощник для слабовидящих

Вице-премьер РФ Дмитрий Григоренко посетил Новосибирск и познакомился с инновационной разработкой ученых Новосибирска и МНТК "Микрохирургия глаза" - автономным ИИ-помощником для слабовидящих людей, сообщает НГУ.

Эта новая технология призвана облегчить ориентацию в пространстве для слабовидящих и незрячих пациентов.

Представленная вице-премьеру базовая модель автономного интеллектуального помощника для слабовидящих и незрячих пациентов была разработана совместными усилиями ученых и специалистов из различных областей. Этот проект стал результатом долгой исследовательской работы и инновационного подхода к проблеме поддержки людей с ограниченными возможностями зрения.

Визит вице-премьера в Новосибирск также включал ознакомление с другими передовыми разработками в области информационных технологий, проведение встречи с представителями IT-компаний региона и обсуждение перспектив сотрудничества для дальнейшего развития инноваций в сфере поддержки слабовидящих и незрячих граждан.

В современном мире, где технологии и искусственный интеллект становятся все более важными, возникает интересная идея использования слухового анализатора мозга для помощи людям с ограниченными возможностями в ориентации в пространстве. При чтении книги или прослушивании аудиозаписи у человека возникают определенные образы в мозгу, которые могут быть использованы для определения расстояний и размеров объектов. Это открывает новые перспективы для адаптации слабовидящих и слепых людей в повседневной жизни и обществе.

Директор новосибирского филиала МНТК "Микрохирургия глаза" Валерий Черных подчеркивает, что предоставление возможности пациентам определять расстояния и размеры объектов через слуховой анализатор может значительно облегчить их жизнь. Это позволит им лучше ориентироваться в окружающем мире и быть более самостоятельными.

Использование технологий искусственного интеллекта для помощи людям с ограниченными возможностями открывает новые горизонты в области адаптации и интеграции в общество. Развитие подобных технологий может привести к значительным улучшениям в качестве жизни для многих людей, сталкивающихся с проблемами зрения.

Врачи и ученые Исследовательского центра в сфере искусственного интеллекта НГУ объединили усилия для создания автономной технологии без использования интернета. В настоящее время разработчики работают над прототипом прибора и обучают модель. После завершения прототипа начнется настройка устройства, установка режимов, сбор базы данных и обучение ИИ.

"Мы применяем большие языковые модели с целью помочь пациентам данной категории анализировать окружающее пространство. Наша цель - создать для них проводника, который способен предоставить детальное устное описание всех объектов перед пользователем", - говорят разработчики.

Технология, разрабатываемая специалистами, имеет потенциал значительно улучшить качество жизни людей с ограниченными возможностями. Работа над созданием этой инновационной системы требует не только технических навыков, но и понимания потребностей конечных пользователей.

При разработке устройства используется мультимодальная языковая модель, благодаря чему оно уже выдает достаточно качественное словесное описание окружающих помещений и предметов. Это инновационное устройство, предназначенное для помощи людям с ограниченными возможностями в ориентации в пространстве. Принцип работы данной системы прост: "видеть" вместо человека будет видеокамера, информация с которой поступит в портативный компьютер, преобразующий ее в текст. Затем текстовое описание преобразуется голосовым помощником и подается через наушники непосредственно пациенту. Данное сообщение предоставляет основную информацию, которую пользователю необходимо знать, чтобы ориентироваться в пространстве", - пояснил руководитель проекта в Центре ИИ НГУ Алексей Окунев.

В настоящее время создана базовая модель, прототип которой будет готов к концу 2025 года. Это компактная носимая система, состоящая из одноплатного 16-ядерного компьютера, размещенного в наплечной сумке, видеокамеры (например, GoPro) и наушников. Устройство будет снабжено аккумулятором, а все элементы будут соединены беспроводными каналами коммуникации. Видеокамеру пользователь будет держать в руке и наводить в желаемом направлении. Общий вес устройства с аккумулятором составит около 1 килограмма. Этот инновационный продукт открывает новые возможности для пользователей в области визуального восприятия окружающего мира.

В перспективе у пользователя появится возможность задавать уточняющие вопросы о наблюдаемой сцене и получать развернутые ответы на них. Также языковая модель распознает тексты, считывает надписи, указатели, предупреждения о препятствиях и так далее. Это значит, что пользователи смогут получать дополнительную информацию о том, что они видят, что может быть полезно в различных ситуациях, от туризма до повседневных задач.

НГУ сообщили, что разработка этой технологии находится на передовой научно-исследовательской стадии. Это открывает перспективы для создания более продвинутых версий устройства в будущем. С появлением таких инновационных технологий мир становится более доступным и информативным для всех его обитателей.

Источник и фото - ria.ru