🔜 Luma Labs запускает Uni-1

Luma Labs выпустила Uni-1, генеративную модель изображений, которая сначала анализирует намерения, а затем генерирует изображения. Uni-1 использует авторегрессионный трансформер и призвана решить проблему «разрыва намерений», свойственную стандартным конвейерам диффузии.

В отличие от моделей, основанных на denoising diffusion probabilistic models (DDPMs), таких как Stable Diffusion, Uni-1 реализует фазу рассуждения перед генерацией. Это смещает рабочий процесс от «prompt engineering» к следованию инструкциям.

🦂 Uni-1 состоит из нескольких этапов: кодирование входных данных, рассуждение о намерениях и декодирование в изображение. Модель сначала кодирует входные данные (текст или изображение) в латентное пространство. Затем модуль рассуждения обрабатывает это представление для вывода намерений, лежащих в основе запроса.

Наконец, декодер преобразует намерения в пиксели изображения. Luma Labs утверждает, что Uni-1 генерирует изображения с большей точностью и согласованностью, чем традиционные модели диффузии.

#StableDiffusion #AI #Luma