Исследовательская группа Массачусетского технологического института (MIT) под руководством Натальи Косьминой (Nataliya Kos’myna) недавно опубликовала статью о своем проекте Ddog. Его цель — превратить четвероногого робопса Boston Dynamics Spot в базовый коммуникатор для людей с физическими проблемами, такими как боковой амиотрофический склероз (БАС), церебральный паралич и травмы спинного мозга.
В проекте используется система интерфейса мозг-компьютер (BCI), включая AttentivU. Она представляет собой пару беспроводных очков с датчиками, встроенными в оправу. Эти датчики могут измерять электроэнцефалограмму (ЭЭГ), или активность мозга, и электроокулограмму, или движения глаз.
Это исследование опирается на разработанный в университете Brain Switch — замкнутую систему BCI, позволяющую пользователям общаться невербально и в режиме реального времени со своим помощником. Проект Ddog расширяет возможности приложения, используя тот же технологический стек и инфраструктуру, что и Brain Switch.
По данным Национальной организации по редким расстройствам, сегодня в США 30 000 человек живут с БАС, и каждый год диагностируется примерно 5 000 новых случаев. По данным Cerebral Palsy Guide, около 1 млн американцев живут с церебральным параличом.
Многие из этих людей уже потеряли или со временем потеряют способность ходить, одеваться, говорить, писать и даже дышать. Хотя средства коммуникации существуют, большинство из них — это устройства, позволяющие пользователям общаться с помощью компьютера. Систем, позволяющих пользователю взаимодействовать с окружающим миром, не так много.
Самое большое преимущество Ddog — его мобильность. Spot полностью автономен. Это означает, что, получив простые инструкции, он может выполнить их без постороннего вмешательства.
Благодаря четырем ногам он может пройти практически везде, где может пройти человек, включая подъемы и спуски по склонам и лестницам. С помощью роботизированной руки он может доставлять продукты, перемещать стул или приносить книги / различные гаджеты пользователю.
Система MIT работает всего на двух iPhone и паре очков. Для нее не нужны клейкие электроды или рюкзаки, что делает ее гораздо более доступной для повседневного использования.
Первое, что должен сделать Spot при работе с новым пользователем в новой среде, — создать 3D-карту мира, в котором он работает. Затем первый iPhone спросит пользователя, что он хочет делать дальше, а пользователь ответит, просто подумав о том, что он хочет.
Второй iPhone запускает локальную навигационную карту, управляет рукой Spot и дополняет лидар Spot данными лидара iPhone. Оба iPhone общаются друг с другом, чтобы отслеживать прогресс робопса в выполнении заданий.
Команда MIT разработала систему, которая может работать как в автономном, так и в онлайн-режиме. Онлайн-версия имеет более продвинутый набор моделей машинного обучения и более точную настройку моделей.
