MatAnyone: Stable Video Matting with Consistent Memory Propagation
Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.
Пока еще далеко от идеала, но надеюсь станет подспорьем в композе
Код и демо ждем на следующей неделе
#segmentation #matting #video2matte #video2mask
Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.
Пока еще далеко от идеала, но надеюсь станет подспорьем в композе
Код и демо ждем на следующей неделе
#segmentation #matting #video2matte #video2mask
🔥11👎2❤1
This media is not supported in your browser
VIEW IN TELEGRAM
BEN2: Background Erase Network
Удаление фона с изображений и видео
Ест 3.5 ГБ VRAM, скорость 3fps на RTX3090
Демоспейс выдает RGB mp4 с зеленкой, естественно без альфы
Демо
Код
Веса
Попробовать на офсайте
#bg #bgremoval #image2matte #video2matte
Удаление фона с изображений и видео
Ест 3.5 ГБ VRAM, скорость 3fps на RTX3090
Демоспейс выдает RGB mp4 с зеленкой, естественно без альфы
Демо
Код
Веса
Попробовать на офсайте
#bg #bgremoval #image2matte #video2matte
🔥11👍5🤔2💯2
Авторы MatAnyone запустили демоспейс, можно тестить
Демо
#segmentation #matting #video2matte #video2mask
Демо
#segmentation #matting #video2matte #video2mask
Telegram
Нейронавт | Нейросети в творчестве
MatAnyone: Stable Video Matting with Consistent Memory Propagation
Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.
Пока еще далеко от идеала, но надеюсь…
Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.
Пока еще далеко от идеала, но надеюсь…
🔥11👍2
Опубликован код MatAnyone + есть #ComfyUI
Код
ComfyUI_MatAnyone_Kytra
#segmentation #matting #video2matte #video2mask
Код
ComfyUI_MatAnyone_Kytra
#segmentation #matting #video2matte #video2mask
Telegram
Нейронавт | Нейросети в творчестве
MatAnyone: Stable Video Matting with Consistent Memory Propagation
Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.
Пока еще далеко от идеала, но надеюсь…
Создает маску на заданного человека на видео
На вход принимает маску в первом кадре. Но потеть не придется, целевая маска создается в несколько кликов.
Пока еще далеко от идеала, но надеюсь…
🔥12
Generative Omnimatte: Learning to Decompose Video into Layers
Модель от Google DeepMind раскладывает видео на слои (omnimatte-слои), где каждый слой содержит полностью видимый объект и связанные с ним эффекты, например, тени и отражения.
Использует генеративные и семантические данные для дополнения скрытых пикселей и точного связывания эффектов с объектами
Код - тут неофициальная реимплементация на основе CogVideoX и Wan2.1, которая, как признают авторы, чуть слабее чем официальная Casper на основе Lumiere
Спасибо @Ildar_Idrisov
#video2matte #video2mask #rgb2rgba #segmentation
Модель от Google DeepMind раскладывает видео на слои (omnimatte-слои), где каждый слой содержит полностью видимый объект и связанные с ним эффекты, например, тени и отражения.
Использует генеративные и семантические данные для дополнения скрытых пикселей и точного связывания эффектов с объектами
Код - тут неофициальная реимплементация на основе CogVideoX и Wan2.1, которая, как признают авторы, чуть слабее чем официальная Casper на основе Lumiere
Спасибо @Ildar_Idrisov
#video2matte #video2mask #rgb2rgba #segmentation
🔥12👍4
This media is not supported in your browser
VIEW IN TELEGRAM
MatAnyone 2: Scaling Video Matting via a Learned Quality Evaluator
Матирование человеков на видео с пиксельной точностью, вторая версия. Первая тут
DINOv3 используется для извлечения признаков
Код ждем
#segmentation #matting #video2matte #video2mask
Матирование человеков на видео с пиксельной точностью, вторая версия. Первая тут
DINOv3 используется для извлечения признаков
Код ждем
#segmentation #matting #video2matte #video2mask
🔥8👍3
This media is not supported in your browser
VIEW IN TELEGRAM
VideoMaMa: Mask-Guided Video Matting via Generative Prior
В Adobe и KAIST придумали инструмент для превращения грубых масок (например из SAM 2) в точную мягкую маску
Гитхаб
HF
Демо
#segmentation #mask2matte #video2matte
В Adobe и KAIST придумали инструмент для превращения грубых масок (например из SAM 2) в точную мягкую маску
Гитхаб
HF
Демо
#segmentation #mask2matte #video2matte
👍12🤔1🤯1
VideoMaMa - ComfyUI Custom Nodes
А вот кстати кастом ноды VideoMaMa, можно потыкать в комфи
Модель весит 6 ГБ, может заведется если у вас нет 22.7 Гб на CorridorKey
воркфлоу
#segmentation #mask2matte #video2matte #workflow #comfyui
А вот кстати кастом ноды VideoMaMa, можно потыкать в комфи
Модель весит 6 ГБ, может заведется если у вас нет 22.7 Гб на CorridorKey
воркфлоу
#segmentation #mask2matte #video2matte #workflow #comfyui
❤11👍2🤔1🤯1
Опубликован код и веса отделятора человеков от фона MatAnyone 2
Гитхаб
HF
Демо
#segmentation #matting #video2matte #video2mask
Нейронавт в MAX
Гитхаб
HF
Демо
#segmentation #matting #video2matte #video2mask
Нейронавт в MAX
👍10🔥3❤1😁1😱1
This media is not supported in your browser
VIEW IN TELEGRAM
ONYX Ai Matte v2.1
Коммерческий плагин к Nuke / Fusion /daVinci для отделения объектов от фона на базе VitMatte
Есть несколько режимов - по точкам, по рамке, по тексту. Умеет улучшать края ротоскопа
Есть триалка
#segmentation #matting #video2matte #video2mask #desktop #nuke #plugin #davinci
Нейронавт в MAX
Коммерческий плагин к Nuke / Fusion /daVinci для отделения объектов от фона на базе VitMatte
Есть несколько режимов - по точкам, по рамке, по тексту. Умеет улучшать края ротоскопа
Есть триалка
#segmentation #matting #video2matte #video2mask #desktop #nuke #plugin #davinci
Нейронавт в MAX
👍3😁3
SAM2Matting
Матирование по сегментации (SAM2, SAM3)
В отличие от сегментной маски, матирование содержит информацию не только о границе объекта, но и о мягкости/полупрозрачности краев
Поддержка разных промптов - маски, точки, боксы, текст
Обучен только на изображениях, но уверенно работает на видео
Гитхаб
HF
Демо
#video2matte #segmentation #rgb2rgba #matting #image2matte
Матирование по сегментации (SAM2, SAM3)
В отличие от сегментной маски, матирование содержит информацию не только о границе объекта, но и о мягкости/полупрозрачности краев
Поддержка разных промптов - маски, точки, боксы, текст
Обучен только на изображениях, но уверенно работает на видео
Гитхаб
HF
Демо
#video2matte #segmentation #rgb2rgba #matting #image2matte
🔥10🤔1
Lightricks как и обещали продолжают выкладывать лоры для #LTX25
Layout To Render
Берет grey-clay вьюпорт или blocky playblast из Blender/Unreal с движением камеры и превращает в готовый кадр. Нужно задать первый кадр как арт-дирекшн
SDR To HDR
Конвертит 8-бит SDR-видео в 16-бит HDR: разворачивает урезанный из-за грейда динамический диапазон. Пишет #EXR последовательность в ACEScg
Alpha Gen
Генерирует alpha-маску для обычного RGB-видео. Выход совпадает с исходником кадр в кадр для композитинга.
rank 128, ставятся через ComfyUI-LTXVideo. У Alpha Gen лимит 145 кадров и 1920p. SDR To HDR не требует промпта
не сдаются минимаксу без боя
#lora #sdr2hdr #hdr #layout2video #video2matte
MAX
Layout To Render
Берет grey-clay вьюпорт или blocky playblast из Blender/Unreal с движением камеры и превращает в готовый кадр. Нужно задать первый кадр как арт-дирекшн
SDR To HDR
Конвертит 8-бит SDR-видео в 16-бит HDR: разворачивает урезанный из-за грейда динамический диапазон. Пишет #EXR последовательность в ACEScg
Alpha Gen
Генерирует alpha-маску для обычного RGB-видео. Выход совпадает с исходником кадр в кадр для композитинга.
rank 128, ставятся через ComfyUI-LTXVideo. У Alpha Gen лимит 145 кадров и 1920p. SDR To HDR не требует промпта
не сдаются минимаксу без боя
#lora #sdr2hdr #hdr #layout2video #video2matte
MAX
🔥12👍2❤1