TransPixar: Advancing Text-to-Video Generation with Transparency

Adobe придумали метод генерации видео с альфа каналом. Для тех кто не в курсе - это маска прозрачности.

Генерация по тексту и по картинке

Прикрутили к CogvideoX и mochi

Код
Демо

#text2video #image2video #RGBA

FluxZayn: FLUX LayerDiffuse Extension for Stable Diffusion WebUI Forge

Народная версия layerdiffusion с Flux под капотом вместо SD. Создает картинки с альфа-каналом (прозрачностью)

расширение для Forge
LayerDiffuse-Flux - оригинальный код

Для #ComfyUI есть ComfyUI_FluxLayerDiffuse

#extension #forge #text2image #flux #RGBA

Wan-Alpha

Кто хотел генерировать видео с альфа-каналом? Вот оно.

На базе Wan2.1-T2V-14B

К нему нужна ускорялка Lightx2v-T2V-14B

VAE свой - Wan-Alpha VAE. Для #ComfyUI - отдельно декодер RGB и отдельно декодер альфа канала

И своя RGBA Dora

То есть, к привычному воркфлоу докачаете всего пару гигабайт

Гитхаб
HF
Wan-Alpha_ComfyUI
воркфлоу

#RGBA #text2video #text2rgba #workflow

Qwen-Image-Layered

Редактор картинок от Qwen на базе #qwenimage
Hаскладывает изображения на несколько RGBA-слоёв. Это позволяет редактировать каждый слой отдельно, не трогая остальные части картинки

Может менять размер объектов без искажений

Может рекурсивно раскладывать слои — то есть любой слой можно разложить ещё на более мелкие слои

Гитхаб
HF
GGUF
Демо

спасибо @m_franz @stefanfalkok

#imageediting #image2rgba #rgba #gguf

Stable Layers

Инструмент для работы со слоями от Stability AI на базе Qwen-Image-Layered - лора поверх оного

Нарезает картинку на слои для редактирования

Гитхаб
HF
Демо

#imageediting #image2rgba #rgba #image2layers #lora #qwenimage

FLUX.2 Klein Alpha

Ишь ты, FLUX.2 Klein научили делать прозрачные изображения. Расширили VAE до 4 каналов (RGBA) и натренировали LoRA для вырезания объектов в PNG с прозрачностью

• Вырезание объекта из фото — на вход картинка с объектом и фон без него, на выходе прозрачный PNG
• Стирание объектов
• Мягкие тени и блики остаются полупрозрачными

• ~11 с/изображение, ~10 ГБ VRAM
• Работает на одной видеокарте 16 ГБ

Гитхаб
Демо

#rgba #t2rgba #klein

MAX