Новая революция в сфере разработки игр произошла благодаря недавно запущенному инструменту искусственного интеллекта (ИИ) Google Genie.
Genie — это небольшая модель ИИ с 11 млрд параметров, обученная на более чем 200 000 часах видео людей, играющих в 2D-игры в стиле платформеров. Genie способна создавать игровые виртуальные миры из одного изображения. Модель также может распознавать и понимать текстовый запрос, эскиз или изображение, созданное ИИ, а затем превращать его в упрощенный 2D-платформер, с которым пользователь может взаимодействовать и играть.
Уникальной особенностью Genie является то, что она может распознавать главного героя игры, даже не будучи обученной на действиях или текстовых аннотациях. Благодаря этому пользователь может легко управлять персонажем в сгенерированном мире. Это происходит благодаря действию моделей Latent Action Model, Video Tokenizer и Dynamics Model.
Genie — это исследовательский проект, а не конечный продукт. На текущий момент модель генерирует 16 секундные видео разрешением 160х90 пикселей, так как Genie был обучен на таких видео. Однако, если добавить более длинные видео с высоким разрешением и задействовать больше вычислений, результат будет намного лучше.
Возможно, уже в ближайшее время мы получим ИИ-помощника, с которым будем создавать собсвенные виртуальные миры.
