Компания Nvidia представила Fugatto — новый музыкальный редактор на базе искусственного интеллекта (ИИ), способный преобразовывать и комбинировать звуки, не включенные в обучающие данные. Система может объединять звуки животных с музыкальными инструментами — например, заставлять трубу лаять или саксофон мяукать. Помимо этих необычных сочетаний, Fugatto может изменять человеческие голоса, меняя акценты и тональные качества. Инструмент также предлагает возможности редактирования музыки, позволяя пользователям отделять вокал от песен, добавлять новые инструменты или изменять мелодии.
ИИ-модели от Stability AI, OpenAI, Google DeepMind, ElevenLabs и Adobe также предлагают синтез звука, но особенность Fugatto заключается в его способности создавать поистине неслыханные звуки. Он расширяет творческие границы, предоставляя аудиопроизводителям новый уровень контроля.
В демонстрации NVIDIA модель Fugatto использует уникальную технику под названием ComposableART. Она позволяет пользователям управлять генерируемыми атрибутами звука — акцентом, эмоциями или даже смешиванием звуков — с помощью подсказок в свободной форме.
