Planar Object Tracking via Weighted Optical Flow

Новый алгоритм отслеживания объектов с высочайшей точностью. По-нашему трекинг.
Пишут про отслеживание восьми степеней свободы.

Судя по видео, ему ни по чем отражения, яростная тряска, частично перекрывающие объекты.

Все это хорошо работает благодаря назначению весов разным объектам оптического потока. (А старые трекеры так не делают? Я не в курсе)

Код к вашим услугам услугам!
В каком виде отдаёт результат пока не знаю, ещё не пробовал.
Попробуете - отпишитесь пожалуйста так ли он хорош.

Код

#tracking #matchmoving

NaRCan: Natural Refined Canonical Image with Integration of Diffusion Prior for Video Editing

Редактор видео. Считывает деформации, и по ним лепит результат.
Судя по демо, быстрый как понос.
- матчмувинг
- стилизация по тексту
- трекинг заданного сегмента

Код ждем
Демо

#videoediting #video2video #stylization #matchmoving #tracking

Ebsynth V2

Веб-версия легендарного инструмента для так скажем замены текстур на видео. Изменяем что-нибудь в одном кадре любыми доступными средствами. Отдаем это Ebsynth, и он по векторам движения шевелит наш кадр на всем видео.

В веб-версии появилась таймлиния с ключевыми кадрами, рисовалка, удобное управление ключевыми кадрами. И встроенный генератор по изображению с контролнетом

На бесплатном тарифе разрешение ограничено 720p, ограничено количество генрации ключевых кадров, нет экспорта в PNG.

Туториал

#matchmoving #video2video