Стартап RunwayML добавил в свой видеоредактор с ИИ две новые функции: Text-to-Speech и Ratio, а также нацелился на более высокий уровень в рамках своего долгосрочного исследовательского проекта по созданию модели мира.

С помощью функции Text-to-Speech Runway внедряет синтетические голоса в видеоредактор. Компания предлагает на выбор различные голоса, которые соответствуют определенным характеристикам, таким как молодой, зрелый, женский, мужской и прочее.

Функция Ratio позволяет одним щелчком мыши конвертировать созданное видео в различные форматы, например 1:1 или 16:9. Это облегчает создание видео для разных каналов.

Runway также объявил о новой исследовательской инициативе: компания хочет разработать то, что она называет "мировыми моделями". Модели мира предназначены для развития ИИ с помощью систем, способных понимать и моделировать визуальный мир.

Модель мира — это система ИИ, которая разрабатывает внутреннее представление среды для моделирования будущих событий в этой среде. Цель общей модели мира — отобразить и смоделировать ситуации и взаимодействия в реальном мире.

Примером такой модели является GAIA-1 компании Wayve, которая была разработана на основе визуальных и текстовых данных для управления автономными транспортными средствами на основе понимания окружающей среды. Однако этот сценарий ограничен и контролируем.

В рамках этого проекта Runway работает над несколькими исследовательскими задачами, включая разработку моделей, способных создавать последовательные карты окружающей среды и реалистичные модели поведения людей.