This media is not supported in your browser
VIEW IN TELEGRAM
Generative Inbetweening: Adapting Image-to-Video Models for Keyframe Interpolation
Новый интерполятор кадров от Google DeepMind. Посмотрите на сайте насколько он круче FILM. Из двух кадров делает видео
А почему они не сравнили его со своим же VIDIM?
Код
#frameinterpolation #slowmotion
Новый интерполятор кадров от Google DeepMind. Посмотрите на сайте насколько он круче FILM. Из двух кадров делает видео
А почему они не сравнили его со своим же VIDIM?
Код
#frameinterpolation #slowmotion
❤10👍6
Появился демоспейс интерполятора кадров Generative Inbetweening
Работает он, кстати, на базе #SVD
Все не так хорошо как хотелось бы.
Детали съедает, объекты идут артефактами
Демо
#frameinterpolation #slowmotion
Работает он, кстати, на базе #SVD
Все не так хорошо как хотелось бы.
Детали съедает, объекты идут артефактами
Демо
#frameinterpolation #slowmotion
👍8❤1🤯1
This media is not supported in your browser
VIEW IN TELEGRAM
Framer: Interactive Frame Interpolation
Интерполяция кадров с контролем траектории.
Кажется, пора уже вводить термин креативная интерполяция кадров
Код ждем 28 октября
Демо ждем
#frameinterpolation #slowmotion #motioncontrol
Интерполяция кадров с контролем траектории.
Кажется, пора уже вводить термин креативная интерполяция кадров
Код ждем 28 октября
Демо ждем
#frameinterpolation #slowmotion #motioncontrol
🔥8
Можете потыкать демку интерполятора кадров Framer
Код задерживается
Демо
#frameinterpolation #slowmotion #motioncontrol
Код задерживается
Демо
#frameinterpolation #slowmotion #motioncontrol
👍4
Media is too big
VIEW IN TELEGRAM
GIMM-VFI: Generalizable Implicit Motion Modeling for Video Frame Interpolation
Интерполяция кадров, создает кадры между существующими
Код
#frameinterpolation #slowmotion
Интерполяция кадров, создает кадры между существующими
Код
#frameinterpolation #slowmotion
👍6🔥1
Media is too big
VIEW IN TELEGRAM
Topaz Labs Video AI 7
реставратор видео Starlight mini - видимо, облегченная для локального запуска версия - доступен в платном пакете от Topaz Labs за жалкие $249, с целым годом грядущих обновлений
Помимо наваливания разрешения с деталями есть интерполяция кадров (слоумойшен) и (!!!) работа с .EXR - что вообще уникально. Хотя возможно, я слишком мало интересуюсь коммерческими реставраторами
Спасибо @MIXTRESH
#videorestoration #restoration #denoise #deblur #antialias #upscalevideo #enhance #frameinterpolation #exr
реставратор видео Starlight mini - видимо, облегченная для локального запуска версия - доступен в платном пакете от Topaz Labs за жалкие $249, с целым годом грядущих обновлений
Помимо наваливания разрешения с деталями есть интерполяция кадров (слоумойшен) и (!!!) работа с .EXR - что вообще уникально. Хотя возможно, я слишком мало интересуюсь коммерческими реставраторами
Спасибо @MIXTRESH
#videorestoration #restoration #denoise #deblur #antialias #upscalevideo #enhance #frameinterpolation #exr
🔥7👍3😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Topaz Labs Astra
"Первый в мире" (ага) креативный апскейлер видео. Предлагают апскейлить сгенерарованные нейросетками видео до 4K, "с улучшением качества и добавлением мельчайших деталей". Под капотом новые модели Starlight
Умеет делать интерполяцию кадров, то есть добавлять кадры меж существующих (для слоумоушена)
Чтобы поклянчить доступ ставьте лайк официальному твиту и там в комментах напишите "Astra"
Или идем на офсайт и жмем кнопку Get early access
#upscalevideo #upscale #frameinterpolation
"Первый в мире" (ага) креативный апскейлер видео. Предлагают апскейлить сгенерарованные нейросетками видео до 4K, "с улучшением качества и добавлением мельчайших деталей". Под капотом новые модели Starlight
Умеет делать интерполяцию кадров, то есть добавлять кадры меж существующих (для слоумоушена)
Чтобы поклянчить доступ ставьте лайк официальному твиту и там в комментах напишите "Astra"
Или идем на офсайт и жмем кнопку Get early access
#upscalevideo #upscale #frameinterpolation
❤7😈1
astra.app
"Первый в мире" креативный апскейлер видео от Topaz Labs вышел из стадии раннего доступа и доступен для всех... от $39 в месяц
#upscalevideo #upscale #frameinterpolation
"Первый в мире" креативный апскейлер видео от Topaz Labs вышел из стадии раннего доступа и доступен для всех... от $39 в месяц
#upscalevideo #upscale #frameinterpolation
🥴5🤔1💩1🤡1
This media is not supported in your browser
VIEW IN TELEGRAM
FreeMorph: Tuning-Free Generalized Image Morphing with Diffusion Model
Морфинг (плавное перетекание) одного заданного кадра в другой за 30 секунд. Полагаю, можно использовать как интерполятор кадров
В 10X ~ 50X быстрее существующих методов, #SOTA в морфинге
Код
#frameinterpolation #morphing
Морфинг (плавное перетекание) одного заданного кадра в другой за 30 секунд. Полагаю, можно использовать как интерполятор кадров
В 10X ~ 50X быстрее существующих методов, #SOTA в морфинге
Код
#frameinterpolation #morphing
🔥14👍4❤1
Media is too big
VIEW IN TELEGRAM
ToonComposer
Кто тут просил модель для анимации, вот она
Модель, "берущая на себя до 70% рутины" в создании аниме. Рисует промежуточные кадры и раскрашивает.
Создаёт видео из одного эскиза и цветного кадра.
Есть контроль ключевых кадров.
Заполняет пустые области эскиза по контексту и промпту.
Код
Демо ждем
#sketch2animation #animation #frameinterpolation #anime
Кто тут просил модель для анимации, вот она
Модель, "берущая на себя до 70% рутины" в создании аниме. Рисует промежуточные кадры и раскрашивает.
Создаёт видео из одного эскиза и цветного кадра.
Есть контроль ключевых кадров.
Заполняет пустые области эскиза по контексту и промпту.
Код
Демо ждем
#sketch2animation #animation #frameinterpolation #anime
20🔥8👍4❤2🥴1
This media is not supported in your browser
VIEW IN TELEGRAM
Заработал демоспейс аниматора ToonComposer
Демо
#sketch2animation #animation #frameinterpolation #anime
Демо
#sketch2animation #animation #frameinterpolation #anime
👍7
jax-raft
Порт интерполятора кадров RAFT с pytorch на JAX/Flax, должен работать быстрее.
Чекпойнты тоже портированы
#frameinterpolation #opticalflow #slowmotion
Порт интерполятора кадров RAFT с pytorch на JAX/Flax, должен работать быстрее.
Чекпойнты тоже портированы
#frameinterpolation #opticalflow #slowmotion
GitHub
GitHub - alebeck/jax-raft: JAX/Flax port of the RAFT optical flow estimator
JAX/Flax port of the RAFT optical flow estimator. Contribute to alebeck/jax-raft development by creating an account on GitHub.
👍4😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Topaz's Flagship Upscale Models in ComfyUI
Топаз завезли в комфи.
Объясняю понятным языком: платно, в API ноды
для видео:
- Video Upscale (до 4K)
- Starlight Fast — повышение чёткости видео с помощью диффузионной технологии
- Starlight Creative (Astra) — творческое улучшение видео
- Apollo — интерполяция кадров
для изображений:
- Image Enhance (до 8K)
- Bloom (Reimagine) — креативное улучшение и переработка изображений
#upscale #comfyui #upscalevideo #imagerestoration #frameinterpolation
Топаз завезли в комфи.
Объясняю понятным языком: платно, в API ноды
для видео:
- Video Upscale (до 4K)
- Starlight Fast — повышение чёткости видео с помощью диффузионной технологии
- Starlight Creative (Astra) — творческое улучшение видео
- Apollo — интерполяция кадров
для изображений:
- Image Enhance (до 8K)
- Bloom (Reimagine) — креативное улучшение и переработка изображений
#upscale #comfyui #upscalevideo #imagerestoration #frameinterpolation
👍8😁2🤔1
This media is not supported in your browser
VIEW IN TELEGRAM
VSRFI-ComfyUI
Апскейл + интерполяция кадров для видео любой длины - все в одной ноде
Сама автоматически выбирает тайлинг под ваш объем VRAM
Апскейл FlashVSR Ultrafast
Интерполяция кадров есть выбор из 3 моделей GIMM / RIFE / FILM
#comfyui #upscale #frameinterpolation
Апскейл + интерполяция кадров для видео любой длины - все в одной ноде
Сама автоматически выбирает тайлинг под ваш объем VRAM
Апскейл FlashVSR Ultrafast
Интерполяция кадров есть выбор из 3 моделей GIMM / RIFE / FILM
#comfyui #upscale #frameinterpolation
🔥17👍6😁2❤1
DA-Flow
Модель для оценки оптического потока на базе DiT4SR, хорошо работает с сильно испорченными видео. Учитывает искажения, хорошо справляется с шумом, размытием и артефактами сжатия
Оптический поток используют для интерполяции кадров если что - добавления новых кадров между существующими
Гитхаб ждем
#opticalflow #frameinterpolation
Модель для оценки оптического потока на базе DiT4SR, хорошо работает с сильно испорченными видео. Учитывает искажения, хорошо справляется с шумом, размытием и артефактами сжатия
Оптический поток используют для интерполяции кадров если что - добавления новых кадров между существующими
Гитхаб ждем
#opticalflow #frameinterpolation
👍4❤1
LDF-VFI: Towards Holistic Modeling for Video Frame Interpolation with Auto-regressive Diffusion Transformers
Новый интерполятор видеокадров от китайцев: достраивает промежуточные кадры между существующими.
Коэффициенты интерполяции ×2, ×4 и т. д.
используется модифицированная версия 3D DiT backbone из Wan2.1 с локальным пространственно-временным вниманием
Гитхаб
HF
Спасибо @m_franz
#frameinterpolation #wan21
Новый интерполятор видеокадров от китайцев: достраивает промежуточные кадры между существующими.
Коэффициенты интерполяции ×2, ×4 и т. д.
используется модифицированная версия 3D DiT backbone из Wan2.1 с локальным пространственно-временным вниманием
Гитхаб
HF
Спасибо @m_franz
#frameinterpolation #wan21
👍15
Media is too big
VIEW IN TELEGRAM
LongE2V
Восстанавливает, предсказывает и интерполирует видео на основе событий по низкокачественным видеопотокам с датчиков событий. Тянет длинные временные горизонты, где обычные методы буксуют.
Строится на видео-диффузионных моделях. Сжимает временные зависимости, не теряет детали на длинных отрезках.
Похоже что это лора на CogVideoX-5b-I2V
Гитхаб
#frameinterpolation #v2v
Восстанавливает, предсказывает и интерполирует видео на основе событий по низкокачественным видеопотокам с датчиков событий. Тянет длинные временные горизонты, где обычные методы буксуют.
Строится на видео-диффузионных моделях. Сжимает временные зависимости, не теряет детали на длинных отрезках.
Похоже что это лора на CogVideoX-5b-I2V
Гитхаб
#frameinterpolation #v2v
👍3
This media is not supported in your browser
VIEW IN TELEGRAM
ComfyUI-NVIDIA-DLSS-Frame-Interpolation
Подъехала интерполяция кадров на #DLSS5 для #ComfyU
Ну апскейл тоже есть
- DLSS Frame Interpolation: повышение FPS, вплоть до 120 FPS, с каскадным режимом для нестандартных множителей
- DLSS Video Upscale: апскейл видео до 3x с Neural Rendering (качество, баланс, производительность, ультра)
- DLSS Image Upscale: то же самое для отдельных кадров и батчей, прямо в тензоре без сохранения файла
- Контроль Neural Rendering: стиль (Natural/Cinematic), интенсивность, тон, структура, маска, пресеты DLSS
- Сохраняет аудио, субтитры и метаданные оригинала
- Только Windows, только NVIDIA RTX
- В комплекте DLL от DLSS 5 !!!
- FFmpeg отдельно
- Есть флаг Require Neural Upscaling: если нейросетевой апскейл не сработал — нода выдаст ошибку вместо тихого падения
#upscale #frameinterpolation
VK | MAX
Подъехала интерполяция кадров на #DLSS5 для #ComfyU
Ну апскейл тоже есть
- DLSS Frame Interpolation: повышение FPS, вплоть до 120 FPS, с каскадным режимом для нестандартных множителей
- DLSS Video Upscale: апскейл видео до 3x с Neural Rendering (качество, баланс, производительность, ультра)
- DLSS Image Upscale: то же самое для отдельных кадров и батчей, прямо в тензоре без сохранения файла
- Контроль Neural Rendering: стиль (Natural/Cinematic), интенсивность, тон, структура, маска, пресеты DLSS
- Сохраняет аудио, субтитры и метаданные оригинала
- Только Windows, только NVIDIA RTX
- В комплекте DLL от DLSS 5 !!!
- FFmpeg отдельно
- Есть флаг Require Neural Upscaling: если нейросетевой апскейл не сработал — нода выдаст ошибку вместо тихого падения
#upscale #frameinterpolation
VK | MAX
👍8🔥8
Media is too big
VIEW IN TELEGRAM
Runway Enhance Frame Rate
интерполятор кадров о тRunway
Клянутся что работает в разы быстрее альтернатив
• смена framerate на целевой - от 24 до 120 fps
• поддержка кинематографичных 23.98, 29.97 и 59.94
• видео до 300 секунд
• доступен через API наравне с апскейлом
• целевые значения: 24, 25, 30, 48, 50, 60, 120
• тариф 1 кредит за 2 секунды
• до 7 раз быстрее пересъёмки
Подходит для бродкаста и монтажа. Тот же endpoint, что и у video upscaler
docs.dev.runwayml.com/guides/models
#frameinterpolation
MAX
интерполятор кадров о тRunway
Клянутся что работает в разы быстрее альтернатив
• смена framerate на целевой - от 24 до 120 fps
• поддержка кинематографичных 23.98, 29.97 и 59.94
• видео до 300 секунд
• доступен через API наравне с апскейлом
• целевые значения: 24, 25, 30, 48, 50, 60, 120
• тариф 1 кредит за 2 секунды
• до 7 раз быстрее пересъёмки
Подходит для бродкаста и монтажа. Тот же endpoint, что и у video upscaler
docs.dev.runwayml.com/guides/models
#frameinterpolation
MAX
👍9
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
This media is not supported in your browser
VIEW IN TELEGRAM
NVIDIA VFX Nodes для ComfyUI
RTX-VFX ноды
• RTX Video Super Resolution: 4× или до заданных размеров вплоть до 8192 px, плюс denoise и deblur без смены разрешения
• RTX Video Frame Generation: новые кадры между соседними, 2×-16× или в конкретный момент
• RTX Video HDR: SDR в BT.2020 HDR, вывод HLG или PQ, настройка контраста, сатурации, среднего серого и пиковой яркости 400-2000 нит
• 19 режимов супер-резолюшна: стандартные, high-bitrate, стриминговые, denoise/deblur, бикубик
Оптимальная цепочка — Super Resolution → Frame Generation → HDR. Смена кадра ловится автоматически. Есть 10-бит
#EXR: half/full-float, сохранение supernat значений, расширенный color management (sRGB, Rec.709, HLG, PQ, LogC3, ACEScct)
github.com/Comfy-Org/ComfyUI_Nvidia_VFX_Nodes
#upscale #sdr2hdr #frameinterpolation #comfyui
MAX
RTX-VFX ноды
• RTX Video Super Resolution: 4× или до заданных размеров вплоть до 8192 px, плюс denoise и deblur без смены разрешения
• RTX Video Frame Generation: новые кадры между соседними, 2×-16× или в конкретный момент
• RTX Video HDR: SDR в BT.2020 HDR, вывод HLG или PQ, настройка контраста, сатурации, среднего серого и пиковой яркости 400-2000 нит
• 19 режимов супер-резолюшна: стандартные, high-bitrate, стриминговые, denoise/deblur, бикубик
Оптимальная цепочка — Super Resolution → Frame Generation → HDR. Смена кадра ловится автоматически. Есть 10-бит
#EXR: half/full-float, сохранение supernat значений, расширенный color management (sRGB, Rec.709, HLG, PQ, LogC3, ACEScct)
github.com/Comfy-Org/ComfyUI_Nvidia_VFX_Nodes
#upscale #sdr2hdr #frameinterpolation #comfyui
MAX
👍23🔥2🥴2