Blind Camera ("слепая камера") от инженера Диего Трухильо Пизанти — это устройство на базе Raspberry Pi, которое использует обученную модель ИИ для создания изображений по звуку окружающей среды.

Сама Blind Camera состоит из корпуса, напечатанного на 3D-принтере, и небольшого экрана, который выполняет роль видоискателя и отображает данные о процессе обработки снимка. У камеры нет привычного объектива, вместо него есть рупор для лучшего улавливания звука. В качестве "начинки" — одноплатный компьютер Raspberry Pi 3 B. Подключать Blind Camera к внешним устройствам не нужно, а для создания снимка достаточно навести камеру на интересующий объект и нажать кнопку.

Изображение на основании звука генерирует специально разработанная нейросеть, которая предварительно обучалась на видео, снятых в Мехико, где каждый кадр соответствует / ассоциируется с определенным звуком. Таким образом, модель ИИ сравнивает полученные данные с материалами, на которых она обучалась, а затем создает изображение. Это выглядит следующим образом:

Модель ИИ Blind Camera была написана с использованием Python3 и Tensorflow 2. Она сочетает в себе элементы вариационных автоэнкодеров и GAN.