На выставке Computex 2024, проходящей в Тайване, компания Nvidia презентовала свой новый проект — G-Assist. Это интегрированный в игру искусственный интеллект (ИИ), способный предоставлять контекстную помощь игрокам в режиме реального времени. Ассистент анализирует визуальную информацию из игры и выдает индивидуальные рекомендации по дальнейшей стратегии. Кроме того, он может оптимизировать графические настройки для улучшения игрового процесса.

G-Assist от Nvidia реагирует на запросы пользователя, будь то текстовые или голосовые, с помощью сложной ИИ-модели. Эта модель генерирует ответы, которые затем передаются в виде текста в речь. При этом она может работать как непосредственно на графическом процессоре RTX, так и через облачные сервисы. Ассистент призван революционизировать игровой процесс, предлагая индивидуальные советы по стратегии игры, анализируя повторы многопользовательских игр и облегчая выполнение сложных творческих задач в игровом окружении.

Основная функциональность G-Assist заключается в анализе вводимых пользователем данных и контекстных данных с игрового экрана. Для улучшения понимания контекста используются модели искусственного зрения, которые в сочетании с большой языковой моделью (LLM), связанной с базой игровых знаний, позволяют получать точные, учитывающие контекст ответы, адаптированные к текущей ситуации игрока в игре.

Кроме того, Project G-Assist повышает производительность системы, оптимизируя настройки графики в зависимости от конкретной аппаратной конфигурации компьютера пользователя. Он способен предложить оптимальные настройки для повышения производительности игр, выполнить безопасный разгон GPU и грамотно отрегулировать энергопотребление системы.

Контекстная осведомленность ИИ распространяется и на распознавание отображаемого на экране контента, что позволяет ему отвечать на вопросы, связанные с видимыми врагами, оптимальными стратегиями использования навыков и т.д. Эта функция позволяет игрокам получать мгновенную помощь, не прерывая игру для поиска информации в сети.

Nvidia не назвала дату выхода Project G-Assist, однако компания сообщила, что все обновления и проекты, представленные на Computex 2024, будут доступны позже в этом году.