Нейронавт | Нейросети в творчестве

LiveEdit

Редактирование потокового видео в рилтайме на базе #wan21

• 12.66 FPS в реальном времени
• трехэтапная дистилляция для переноса способностей модели
• причинно-следственная покадровая обработка
• сохранение фона и неизмененных регионов
• AR-ориентированный кэш масок для экономии вычислений

Дистилляция до 4 шагов диффузии.

Гитхаб
HF

#realtime #videoediting #streaming

👍6

1.82K views15:18

0:39

Lucy 2.5

Обновилась "самая продвинутая" модель для редактирования видео в реальном времени

• Добавление и удаление объектов
• Изменение стиля сцен
• Генерация VFX
• Виртуальные примерки одежды
• Интерактивные стримы
• Управление контентом аудиторией
• Размещение рекламы в реальном времени

Работает через API с низкой задержкой

Попробовать

#videoediting #realtime #tryon #characterswap #objectreplacement #streaming

🔥13😁3👍1

2.28K views10:13

0:46

0:36

Remotion

Скилл для создания видео с помощью React

• создание анимированных ассетов
• Пакетный рендеринг
• Создание приложений для редактирования видео
• Поддержка эффектов, переходов, субтитров, звуковых эффектов

npx skills add remotion-dev/skills

Гитхаб
———

ChatCut

Плагин для редактирования видео в ChatGPT

• редактирование говорящей головы: удаление пустых слов, выделение лучших моментов
• превращение длинных подкастов в короткие вертикальные ролики
• добавление motion-графики, субтитров, музыки
• генерация B-roll и коротких кинематографических клипов
• создание рекламных роликов и объясняющих видео

Есть бесплатный план на попробовать

#skill #plugin #videoediting

👍5❤1

1.95K views09:13

0:46

FLUX 3

мультимодалка от BFL объединяет обработку изображений, видео, аудио и текста. Знает связи объектов, движения, звуков

• генерация видео до 20 секунд с нативным аудио
• text-to-video, image-to-video, video-to-video
• продолжение видео и аудио по референсу
• создание мультиязычных диалогов
• редактирование и синтез изображений в разных стилях
• предсказание действий, интеграция с роботехникой
• сборка длинных сцен из клипов, контроль персонажей

• 720p
• поддержка разных соотношений сторон и стилей
• мультиязычная генерация текста на изображениях

базируется на Self-Flow, совмещает генерацию и понимание в одной архитектуре. в тестах обходит Runway Gen-4.5, Luma Ray 3.2 и др

готовят опенсорный вариант FLUX 3 Dev

Поклянчить ранний доступ

#multimodal #vlm #t2v #t2av #t2i #i2v #videoediting

👍22🔥7❤2

1.68K views08:12

ID-V2V

переделывает сцену и свет в видео, личность и действия не трогает, На вход нужно собственно исходное видео и измененный первый кадр

Есть версия с контролем глубины сцены

на базе Wan2.1 (T5, VAE, CLIP), SAM3, DiT + VACE
Для глубины - DAViD и DepthAnything-V2

Гитхаб
HF

#relighting #wan21 #videoediting #referencing #sylize

🔥16👍4

2.07K views06:10

JoyAI-Video-Edit

Авторегрессивная диффузионная модель для потокового редактирования видео

• стиль видео по промпту
• добавление/удаление объектов
• замена фона на лету
• локальные правки без пересчёта всего ролика

• 720p в реальном времени
• ~30 FPS на одном GPU
• 16B параметров

Гитхаб
HF
Демо - там только для своих, нужен инвайт

#streaming #videoediting #v2v #realtime

🔥9👍5

2.08K views07:10

Bernini-Diffusers-v2

Обновился видеогенератор-редактор Bernini на базе wan

Переучили грамотнее, модель стала внимательнее к референсу.

• Правка видео по референсу. v2 точнее следует образцу. Там где раньше плыло, теперь держится крепче

• Генерация по референсу. v2 лучше удерживает внешность

#t2v #videoediting #referencing

1👍11❤1

1.99K views10:14

Qwen-Video-Edit

Картинки видеогенераторами уже делали, теперь наоборот

Видеоредактор по текстовой инструкции, собранный без видео-трансформера. Qwen-Image-Edit научили править видеолатенты напрямую - кадры раскладываются в виртуальную сетку как одна огромная картинка

• Редактирование видео по инструкции
• Длинные ролики кусками по 45 кадров, каждому свой промпт
• Портретные видео нативно, пропорции сохраняются
• Финальный прогон через Wan 2.2 для временной стабильности

• VAE от Wan 2.1
• Чекпоинт обучен под 360p и 45 кадров
• DiT ~40 ГБ, text encoder ~15 ГБ, Wan 2.2 A14B ~80 ГБ

Гитхаб
HF

#videoediting #QIE

VK | MAX

👍9❤3🤷‍♂2🤔1

1.93K views14:18

1:27

MiniMax Design

А вот и монетизация #MinimaxH3 подъехала. Десктоп-приложение от MiniMax (Windows и macOS)

Мультимодальный агент полного цикла видеопроизводства. Разбирает задачу на шаги, пишет сценарий, собирает раскадровку, генерирует кадры и ролики, монтирует, накладывает озвучку и субтитры и отдает готовое видео

- Сам решает, что взять за референс, что оставить, а что переделать и упаковывает все в формат для H3
- Режиссёрский 3D-инструмент для сложных кадров: расстановка персонажей, движение, ракурсы камеры до генерации сцены
- Подключение воркфлоу ComfyUI облачно или локально, агент помогает крутить ноды и параметры
- Работает с разными моделями: H3 для видео, GPT Image 2 и Nano Banana Pro для картинок, Music 2.6 и Speech 2.8 для звука

#directing #videoediting

VK | MAX

👍16❤3

1.84K views07:10