Компания Microsoft разработала новую модель искусственного интеллекта (ИИ) под названием Muse, которая может генерировать реагирующее на действия игрока окружение в видеоиграх. 

Разработанная Microsoft Research совместно с Ninja Theory из Xbox Game Studios, Muse была обучена на более чем миллиарде изображений и действий контроллера из многопользовательской экшен-игры Bleeding Edge.

Muse работает как модель действий человека и мира (WHAM), то есть она может генерировать не только визуальные образы, но и последовательности игровых действий. ИИ может имитировать игровой процесс, предсказывая, как должно измениться окружение на основе данных, полученных от контроллера. Исследователи Microsoft считают, что это может открыть новые возможности для создания игровых прототипов и игрового опыта с использованием ИИ.

Пока Muse находится на ранних стадиях разработки и создает изображения низкого разрешения (300×180 пикселей), что далеко от стандарта 1080p для современных игр. Тем не менее, Microsoft предоставила весовую часть модели с открытым исходным кодом и разместила прототип на Azure, чтобы разработчики могли поэкспериментировать с его возможностями.

Помимо генерации игровых сцен, Microsoft изучает возможности использования Muse для сохранения игр. Глава Xbox Фил Спенсер (Phil Spencer) предположил, что ИИ может помочь перенести классические игры на новое оборудование, обучаясь на основе игровых кадров, что позволит обойтись без оригинального игрового движка.

Microsoft — не единственная компания, занимающаяся разработкой игр на основе ИИ. Такие стартапы, как Decart, который недавно получил финансирование от Sequoia, работают над моделями, которые генерируют миры, похожие на Minecraft, в режиме реального времени. Видеомодель Sora от OpenAI также упоминается в качестве возможного инструмента для разработки игр.