IP Adapter Instruct: Resolving Ambiguity in Image-based Conditioning using Instruct Prompts

В IP-Adapter-Plus добавили дополнительное обусловливание текстовым промптом.

Код
Демо

#conditioning #personalization #adapter

Опубликован код адаптера стиля RB-Modulation

Код
Демо

#conditioning #text2image #image2image #styletransfer #adapter

InfGen: A Resolution-Agnostic Paradigm for Scalable Image Synthesis

Адаптер к диффузным генераторам для генерации изображений произвольного разрешения от китайцев. Модель решает проблему высокой вычислительной сложности и долгого времени генерации изображений высокого разрешенияю

Заменяет VAE декодеры на одношаговый генератор

— сокращает время генерации 4K-изображений до менее чем 10 секунд.

— может генерировать изображения любого разрешения из фиксированного латентного кода

— не требует переобучения диффузионных моделей для работы с новым разрешением

— упрощает процесс генерации изображений и снижает вычислительную нагрузку;

— применим к любым моделям, использующим одинаковое латентное пространств

Код ждем наверно

#adapter #text2image #optimization #research

Z-Image-Turbo Training Adapter

Тренировочный адаптер от Ostris для дообучения Z-Image-Turbo

Суть проблемы, которую исправляет адаптер, заключается в следующем: при непосредственном обучении на модели, прошедшей пошаговую дистилляцию, процесс дистилляции быстро нарушается. Это приводит к непредсказуемой потере результатов пошаговой дистилляции и снижению качества работы модели. Адаптер позволяет замедлить разрушение дистилляции, что даёт возможность проводить короткие обучающие циклы с сохранением достигнутых результатов и скорости работы модели

#finetuning #adapter #lora #zimage

How to Train a Z-Image-Turbo LoRA with AI Toolkit

Туториал от Ostris по обучению лоры Z-Image-Turbo с применением того самого адаптера

#finetuning #adapter #lora #zimage #tutorial