ИИ-стартап Decart представил Oasis — ИИ-модель, способную в режиме реального времени генерировать окружение и графику в видеоиграх.
В отличие от традиционных игровых движков, Oasis напрямую обрабатывает пользовательские данные, такие как движения клавиатуры и мыши, чтобы смоделировать игровой процесс, включая физику, графику и окружение, не опираясь на предварительно написанные скрипты. Decart рассматривает Oasis как первый шаг к созданию моделей ИИ, способных автономно создавать и управлять интерактивными мирами, что в конечном итоге заменит традиционные игровые движки.
Демонстрация, разработанная в сотрудничестве с компанией Etched, показывает, как пользователи могут взаимодействовать с миром, созданным ИИ, в режиме реального времени. Игровая модель вдохновлена игрой Minecraft — игроки могут прыгать, собирать предметы и ломать блоки, и все это динамически генерируется в ответ на их действия.
По сравнению с другими генераторами видео, создаваемыми ИИ, система отличается высокой скоростью. В то время как таким моделям, как Sora от OpenAI или Runway Gen-3, требуется 10-20 секунд для создания одной секунды видео, Oasis генерирует 20 кадров в секунду с "нулевой задержкой" — новый кадр каждые 0,04 секунды.
Decart утверждает, что Oasis использует собственную архитектуру ИИ, основанную на технологии Transformer. В отличие от других моделей, он может мгновенно создавать изображения и реагировать на действия игрока. Система сочетает технологию Vision Transformer с диффузионной моделью обработки изображений, позволяя игрокам управлять игрой с помощью стандартных клавиш WASD и мыши.
Дин Лейтерсдорф, соучредитель и генеральный директор Decart, говорит, что цель компании — создать новую эру генеративного опыта, в которой искусственный интеллект сможет управлять полностью интерактивными средами.
Помимо игр, Decart и Etched считают, что такие модели, как Oasis, можно использовать в различных контекстах, где требуется интерактивное видео, например, в развлекательных, образовательных программах или даже в творческих медиа, управляемых ИИ.
