NVIDIA представила новую модель LATTE3D, которая способна преобразовывать текстовые подсказки в высококачественные 3D-объекты за миллисекунды.

LATTE3D генерирует несколько вариантов 3D-форм под один текстовый запрос. Пользователь может выбрать соответствующие его требованиям 3D-объекты и оптимизировать их для более высокого качества, а затем экспортировать в различные графические приложения или платформы, такие как NVIDIA Omniverse.

Модель была обучена на наборах данных о животных и повседневных объектах, но архитектура модели может быть адаптирована для обучения на других типах данных. Например, версия, обученная на 3D-растениях, может помочь ландшафтным дизайнерам создавать рендеры садов, а версия, обученная на бытовых предметах, может генерировать предметы для 3D-симуляторов домов, используемых в обучении персональных роботов-помощников.

Для обучения LATTE3D использовались графические процессоры NVIDIA A100 Tensor Core и разнообразные текстовые подсказки, сгенерированные с помощью ChatGPT. Такой подход улучшил способность модели справляться с различными способами описания 3D-объекта пользователем.

С LATTE3D NVIDIA расширяет границы генеративного ИИ, делая его более быстрым и доступным для творческих людей из разных индустрий. По мере развития технологии можно ожидать появления еще большего количества инновационных приложений и сценариев использования.

В этой статье описаны основные преимущества и возможности LATTE3D.