Китайские ученые развивают носимый AI, чтобы помочь людям с нарушениями визуального нарушения «видят»

Группа китайских ученых разработала систему носимого искусственного интеллекта (ИИ), предназначенную для того, чтобы помочь слепым и нарушенным визуальным людям двигаться по миру с большей независимостью и уверенностью. Подробная в недавнем исследовании, опубликованном в сфере интеллекта Nature Machine, система объединяет видео-анализ в реальном времени, звуковые сигналы и тактискую обратную связь, чтобы безопасно направлять пользователей через окружение.

Разработанный исследователями из Университета Шанхай Цзяо Тонг, Шанхайской лаборатории искусственного интеллекта, Университета Восточного Китая, Университета науки и техники Гонконга, а также государственной ключевой лаборатории медицинской нейробиологии в Университете Фудана, это устройство представляет собой значительный шаг вперед в доступных навигационных технологиях.

Как это работает: обратная связь в реальном времени без перегрузки

Носимая система состоит из небольшой камеры, установленной между бровями пользователя, процессором ИИ, наушниками для костной проводимости и ультратонкими искусственными датчиками кожи, которые носят на запястьях. Поскольку камера снимает живые видеозаписи, ИИ анализирует визуальные данные локально и обеспечивает минимальные, но необходимые аудио подсказки непосредственно через наушники, не блокируя окружающие звуки.

В то же время, датчики запястья, похожие на кожу, отслеживают близость к близлежащим объектам. Если обнаружено препятствие, например, стена или мебель, соответствующее запястье вибрирует, аккуратно подталкивая пользователя, чтобы изменить направление. Этот двойной подход снижает зависимость от длинных устных инструкций и повышает осведомленность о окружающей среде посредством интуитивных сигналов.

Вдумчиво разработанная, удобная система

Ведущий исследователь Гу Лейлей, доцент Университета Шанхай Цзяо Тонг, подчеркнул важность поддержания легкой, практичной и достаточно удобной для использования в системе.

«Длинные описания звука окружающей среды могут ошеломлять пользователей и пользователей шин, что заставляет их неохотно использовать такие системы», — сказал Гу в Южно -Китайском Morning Post. «В отличие от автомобильной навигационной системы с подробными направлениями, наша работа направлена ​​на минимизацию вывода системы искусственного интеллекта, передавая информационный ключ для навигации таким образом, чтобы мозг мог легко поглощать».

Он добавил: «Эта система может частично заменить глаза».

Команда разработала систему, позволяющую пользователям двигаться естественно, не чувствуя себя обремененным. Он был протестирован в помещении с 20 участниками с нарушениями зрения, большинство из которых научились комфортно управлять им в течение 10-20 минут. Обратная связь подчеркнула надежность системы и простоту использования.

Голосовые команды и распознавание объектов

Навигация с устройством просто. Пользователи просто выпускают голосовую команду, чтобы установить пункт назначения, и ИИ определяет безопасный, без препятствий, предлагая руководство только при необходимости.

ИИ был обучен распознавать 21 обычно встречающийся объект, такие как кровати, столы, стулья, двери, раковины, телевизоры, продукты питания и даже люди, по разным углам и расстояниям. Ожидается, что база данных распознавания будет расти, улучшая универсальность системы в разных средах.

Помимо навигации, датчики запястья также помогают пользователям определять местонахождение и достижение объектов, ощущая расстояние между рукой и целью, предлагая тонкую обратную связь для направления движений рук.

Заглядывая в будущее: от помещений до на открытом воздухе

В то время как текущая система продемонстрировала перспективы в помещениях в помещении, Гу сказал, что следующий этап разработки будет сосредоточен на адаптации для ее среды для наружных средств. Будущие обновления могут включать более сложное обнаружение объектов, адаптацию маршрутов в реальном времени и интеграцию с GPS для обработки непредсказуемости улиц, трафика и открытых пространств.

«Это исследование прокладывает путь для удобных систем визуальной помощи,-написала команда в исследовании,-предлагая альтернативные возможности для повышения качества жизни людей с нарушениями зрения».

С дальнейшей уточнением эта носимая система ИИ может принести новую автономию и мобильность миллионам людей с потерей зрения во всем мире.