Компания Stability AI выпустила Stable Audio 2.0, новейшую версию своей модели искусственного интеллекта, способной генерировать музыку и звуковые эффекты. В этой последней версии появилось множество новых функций и возможностей, позволяющих художникам и музыкантам создавать высококачественные полноценные треки с беспрецедентной легкостью и гибкостью.

Одно из самых замечательных достижений Stable Audio 2.0 является способность генерировать трехминутные музыкальные композиции, включающие вступление, развитие и концовку, а также стереофонические эффекты. Это отличает Stable Audio 2.0 от других современных моделей, поскольку она может создавать последовательные музыкальные структуры, которые в точности имитируют композиции, написанные человеком.

В дополнение к функции преобразования текста в аудио Stable Audio 2.0 теперь поддерживает генерацию аудио в аудио. Пользователи могут загружать собственные аудиообразцы и преобразовывать их с помощью подсказок на естественном языке. Эта функция позволяет настраивать тематику выходных данных, согласовывая их с конкретным стилем и тоном проекта.

Модель была обучена исключительно на лицензионном данных из музыкальной библиотеки AudioSparx, которая состоит из более чем 800 000 аудиофайлов. Все артисты AudioSparx имели возможность "отказаться" от участия в обучении модели Stable Audio.

Другие примеры использования Stable Audio 2.0 можно найти на следующих двух интересных ресурсах:

Stable Radio — это круглосуточный прямой эфир, состоящий из треков, созданных исключительно моделью, который теперь транслируется на YouTube-канале Stable Audio.

Stable Mixtape — это постоянно обновляемый плейлист из треков, созданных сообществом Stable Audio.

Stable Audio 2.0 можно бесплатно использовать на сайте Stable Audio, а также вскоре он будет доступен через Stable Audio API. Stability AI заявляет, что в будущем они опубликуют исследовательскую работу с дополнительными техническими подробностями о модели.