AiSee — носимое устройство, с помощью которого слабовидящие люди могут получить описание окружающих их предметов.

Группа исследователей из Школы вычислительной техники Национального университета Сингапура (NUS Computing) представила AiSee, инновационное и доступное по цене носимое вспомогательное устройство, которое использует возможности искусственного интеллекта (ИИ), чтобы помочь слабовидящим людям "видеть" окружающий их мир. Устройство напоминает наушники с костной проводимостью, соединенные ремешком на затылке.

Один из наушников оснащен 13-мегапиксельной камерой, а второй — сенсорной панелью для активации устройства и работы с ним. Пользователю нужно просто взять в руки предмет и активировать встроенную камеру. Затем AiSee делает снимок объекта и использует облачные алгоритмы ИИ для обработки и анализа изображения. Алгоритм ИИ анализирует различные параметры предмета, включая цвет, форму, размер, а также текст, напечатанный на этикетке. Этот процесс позволяет AiSee идентифицировать объект и предоставить пользователю соответствующую информацию с помощью синтетического голоса в наушниках. Если пользователю потребуется дополнительная информация, он может спросить об этом у ИИ.

Важно отметить, что AiSee является полностью автономным устройством и не требует сопряжения со смартфоном или другими внешними устройствами. 

Одной из особенностей AiSee также является использование технологии костной проводимости. Эта передовая технология обеспечивает передачу звука через кости черепа, позволяя людям с нарушениями зрения эффективно воспринимать слуховую информацию, не обращая внимания на внешние звуки, такие как разговоры или шум транспорта. Благодаря этой функции пользователи могут безопасно и уверенно ориентироваться в окружающей обстановке.

AiSee — это результат многолетних исследований и разработок. Впервые устройство было разработано в 2018 году, и в течение пяти лет оно подвергалось постепенной модернизации. В течение этого времени исследовательская группа NUS Computing экспериментировала с различными моделями ИИ, включая Google Vision API и GPT-3, а также с различными подсказками и механизмами звуковой обратной связи. Этот итеративный процесс позволил исследователям усовершенствовать возможности устройства и обеспечить его эффективность в оказании помощи слабовидящим людям.

Для дальнейшего совершенствования функций и производительности AiSee исследовательская группа сотрудничает с SG Enable в Сингапуре, чтобы провести обширное пользовательское тестирование с участием людей с нарушениями зрения. Эти ценные отзывы помогут доработать и оптимизировать устройство, чтобы оно лучше отвечало специфическим потребностям пользователей.