MobileDiffusion — это новейшая разработка Google в области преобразования текста в изображения. Разработанная специально для смартфонов, диффузионная модель генерирует высококачественные изображения из введенного текста менее чем за секунду.

Размер модели составляет всего 520 млн параметров, что значительно меньше, чем у моделей с миллиардами параметров, таких как Stable Diffusion и SDXL, что делает ее более подходящей для использования на мобильных устройствах.

Тесты исследователей показали, что MobileDiffusion может генерировать изображения с разрешением 512х512 пикселей примерно за полсекунды как на смартфонах Android, так и на iPhone. При этом изображение постоянно обновляется по мере ввода, как показано в демонстрационном видео Google.

Google еще не выложил модель в свободный доступ и не объявил о своих планах. Скорее, исследование следует рассматривать как шаг к цели демократизации процесса генерации текста в изображение на мобильных устройствах.

Преимущество подхода Google MobileDiffusion в том, что он обеспечивает быстрые результаты на всех системах, независимо от операционной системы. На iPhone 15 Pro он работает даже лучше, чем на последнем флагмане Samsung, Galaxy S24, который работает под управлением ОС Android от Google.