Matting Anything

Маскирование/замена объектов на изображении на основе SAM, но лучше (см сравнение)

Код
Демо

#segmentation #video2mask #inpainting #matting

Mask Prompter

Генератор масок для AfterEffects.
Как-то я не сильно следил за плагинами и скриптами для AE. А оказывается вот такие штуки есть. $49.99 для честных людей.
поддерживает АЕ 2022 и выше

Туториал

#video2mask #segmentation #matting

Matting by Generation

Новый подход матированию - созданию маски для отделения объекта от фона, позволяющий лучше сохранять мелкие детали.

Код ждем

#image2mask #matting

BiRefNet: Bilateral Reference for High-Resolution Dichotomous Image Segmentation

Новый лидер в отделении объекта от фона. Умеет также и сегментировать

Код
Демо
Fal Playground
ComfyUI-BiRefNet-ZHO (должно работать и для видео)
Колаб (inference)
Колаб2 (Inference + evaluation)
Колаб3 (сегментация)

#backgroundremoval #segmentation #image2mask #matting

MatAnyone: Stable Video Matting with Consistent Memory Propagation

Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.

Пока еще далеко от идеала, но надеюсь станет подспорьем в композе

Код и демо ждем на следующей неделе

#segmentation #matting #video2matte #video2mask

Опубликован код и веса отделятора человеков от фона MatAnyone 2

Гитхаб
HF
Демо

#segmentation #matting #video2matte #video2mask

Нейронавт в MAX

SAM2Matting

Матирование по сегментации (SAM2, SAM3)

В отличие от сегментной маски, матирование содержит информацию не только о границе объекта, но и о мягкости/полупрозрачности краев

Поддержка разных промптов - маски, точки, боксы, текст

Обучен только на изображениях, но уверенно работает на видео

Гитхаб
HF
Демо

#video2matte #segmentation #rgb2rgba #matting #image2matte