Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
CMD (Context-Matched Distillation)

Метод дистилляции для авторегрессивной генерации видео от NVIDIA. #SOTA среди авторегрессивных методов

Учитель и ученик получают одинаковый контекст: кадр оценивается по тому же префиксу и контролю, что был у студента при генерации. Раньше учитель видел весь клип целиком включая будущие кадры которых студент не видел, и супервизия разъезжалась с реальными условиями генерации

В итоге меньше шагов на генерацию, можно интерактивно вмешиваться в процесс генерации, задавать движение камеры и получать длинные сцены без поплывшего хвоста

- База: Cosmos-Predict2.5 2B
- Шесть чекпоинтов: chunk-1 и chunk-4 (короткие/длинные + камера-контроль)

Гитхаб
HF
Демо

#optimization #cameracontrol #interactive #t2v #i2v
👍7❤1
Media is too big
VIEW IN TELEGRAM
HyCreator

Агентский харнесс от Tencent Hunyuan для генерации длинных фильмов. В авторежиме делает клипы на 10 минут без участия человека, а в любой момент можно переключиться в интерактивное редактирование в реальном времени

- Сквозной авторежим: от задумки до готового фильма без единого вмешательства
- Переключение на живое редактирование в любой момент, можно править прямо по ходу генерации

Ранний доступ по заявке через сайт

#directiong #t2v #i2v #referencing #text2script #text2movie

VK | MAX
👍13🥴2
MiniMax-H3-Acc-LoRAs

LoRA ускорения для MiniMax-H3 от Alibaba PAI

Параллельная дистилляция декодирования (PDD). Видео и аудио за 8 шагов вместо обычных 20

- Две версии: FL2VA (от первого кадра) и Ref2VA (по референсам)

HF
ComfyUI

Спасибо @m_franz

#optimization #minimaxH3 #lora

VK | MAX
👍11
This media is not supported in your browser
VIEW IN TELEGRAM
MiniMax H3 Max

Пост-трейн версия #MiniMaxH3 от fal
#1 на Artificial Analysis среди image-to-video
5 секунд 720p за 3 секунды генерации
Качество, скорость и цена — лидер во всех трёх

- $0.04 за секунду первую неделю (50% скидка)
- Пять бесплатных генераций в день через fal
- Социальные ролики, прототипы, консистентный контент - разработчики хвалят за стабильность

- Разрешение: 768p
- Скидка 50% первую неделю
- Планируют открыть веса (!!!)

fal.ai/models/minimax/h3-max/text-to-video
fal.ai/models/minimax/h3-max/image-to-video

#t2v #i2v

VK | MAX
👍11🔥6
Gemini Omni 1.1 Flash

Обновление видео-модели Gemini

Продакшен-релиз с "профессиональными инструментами монтажа"

360p для быстрых черновиков, 4K для финала, растяжка сцен до 40 секунд и плавные переходы между ключевыми кадрами

- Продление сцены до 40 секунд: модель анализирует до 10 секунд контекста (раньше 1 секунду) и достраивает видео без разрыва
- First/Last Frame
- 360p для черновиков: до 60% быстрее и втрое дешевле 720p
- Апскейл до 1080p и 4K для финального рендера
- Видео-референсы: до 3 секунд видео на входе

- #1 на Video Arena

AI Studio
Enterprise Agent Platform

#t2v #i2v #videoediting #referencing #upscale #4k
👍12
This media is not supported in your browser
VIEW IN TELEGRAM
Code as Worlds

VLM-агент, который пишет код симуляции физики на каждом шаге генерации видео

- Смотрит видео и пишет код сцены: объекты, их свойства, отношения, правила движения, камера, освещение
- Код в симуляторе проверяет как изменится сцена если поменять параметры
- Композиция: можно разобрать сцену на части и менять части
- Отделяет физическое состояние от внешнего вида — знает, что тяжёлый предмет не зависит от того, какого он цвета

Гитхаб
HF
Демо

#vlm #simulation #t2v #physics

VK | MAX
👍9
This media is not supported in your browser
VIEW IN TELEGRAM
The Attention Triangle

Исследование о том почему в аудио-видео моделях звук прилипает не к тому объекту. Пират молчит, а говорит попугай — модель все равно заставляет говорить пирата. Авторы разобрали механизм утечки и научились его чинить

- Нашли треугольник внимания: три связи между текстом, аудио и видео. Главный источник утечки — двунаправленная связь аудио ↔️ видео
- Интервенция на инференсе: управляют треугольником внимания, чтобы звук прикреплялся к правильному источнику — без переобучения

Проверено на LTX-2. Получили практически бесплатный обходной фикс для уже обученных моделей

Код ждем

#research #attention #t2v #i2v

VK | MAX
🔥12👍3🤔2❤1
Накопилось по #minimaxH3 - часть 23

huggingface.co/Smite79/MiniMax-H3-Longvideos - один промпт → ~2 минуты видео со звуком. Решает проблемы склейки шотов. Без воркфлоу, с инструкцией #longvideo

github.com/tritant/ComfyUI_MiniMax_H3_Extender - чейнинг клипов с motion context, дисковым кешем, динамическими референсами и аудио. Есть #workflow

github.com/Adudeguyman/ComfyUI-Fantastic-MiniMaxH3-PromptBuilder - построитель промптов по официальному гайду в #ComfyUI: секции, тайминги, ID спикеров, теги референсов. Без LLM

github.com/RmaNMetaverse/ComfyUI-FirstframeLastframeExtractor - автосохранение первого и последнего кадра из VAE-декода для повторной генерации в большем размере

jurn.link/dazposer/index.php/2026/08/15/updated-my-minimax-workflow-for-the-3060-12gb-card/ - воркфлоу #T2V для RTX 3060 12Gb: до 2.0 Мп без падений, Kitchen Attention, автоэкстракт кадров

huggingface.co/CZMartin22/TaoMate-H3-3step-ComfyUI - TaoMate упаковали в 3-шаговую лору

huggingface.co/Robert1212star/TaoMate-H3-3Step-ComfyUI - версия для комфи

huggingface.co/Kijai/MiniMax-H3_comfy/tree/main/loras - версия #LoRA 182Mb от Kijai #optimization

github.com/xm6018924/BSAI-ComfyUI-FaceRefine - еще один фикс мелких и дальних лиц

github.com/GENKAIx/Genkai-ComfyUI-Nodes - PromptSync: видео H3 рядом с таймкодами промпта — проверка, где происходят действия и диалоги

github.com/LoveRain1997/video-to-h3-prompt - видео → готовый H3-промпт: разделение на действие/камеру/эффекты/звук. CLI, нужен ffmpeg #captioning #vieo2prompt

github.com/FranckyB/ComfyUI-H3RefModPicker - форк RefModPicker: лучше UI, добавлен звук #refmods

huggingface.co/siraxe/H3_slider_experiments - #slider Camera Arc, Detail, Speed, Smear. Без триггеров

github.com/NyckM/H3-Relight-Minimax-ComfyUI - #relighting до трeх источников света на виджете → референс и промпт. GUI на португальском
👍9🔥5❤2👨‍💻1
This media is not supported in your browser
VIEW IN TELEGRAM
Oyama AI Video Studio

Desktop-рабочая станция для ИИ-видеопроизводства поверх #ComfyUI. Все локально: #MiniMaxH3 #LTX25 #ZImage #ACEStep — один интерфейс, без копирования моделей

- MiniMax H3: T2V/I2V/Ref2VA с FL2VA и Ref2VA, Turbo LoRA (4/8 шагов), Quality/Preview пресеты, A/B сравнение
- LTX 2.5 отдельное рабочее пространство с Quality (двухстадийный апскейл) и Turbo пресетами, синхронное аудио
- ACE-Step 1.5 музыка: лирика/инструментал, темп/тональность/язык, FLAC
- Character Studio: референсы через Z-Image → I2V turntable → Movie Creator
- Mobile companion: QR-доступ с телефона для быстрых генераций
- Local Ollama: промпт-улучшение, тайминг, переписывание аудио
- Модели индексируются на месте, не копируются и не перекладываются
- LAN по опции, с токеном

#studio #t2v

VK | MAX
👍17🤔1
This media is not supported in your browser
VIEW IN TELEGRAM
LynnReal-Omni

Единая модель на базе #MiniMaxH3 для всех видео-задач: #t2v, #i2v, генерация по позе, structural control, omni-reference generation, #styletransfer, видео-редактирование, восстановление деградированного видео и стриминг длинных видео. 4 шага

Принимает разнородные входы — референсы внешности, 3D-рендеры, записи игр. Агент может компоновать условия внутри одной модели

LynnReal-Omni-Flash (27B, 3 шага) — ускоренная с легким VAE-декодером. На одном H100 генерация + декодинг 22 кадров 540p: 843 ms (Standard), 377 ms (Flash). Основа для #realtime стриминга.

Гитхаб
ComfyUI

#comfyui #videoediting #controlnet #videorestoration #imageediting
🔥10👍2
VideoGen-Agent от Принстона и Стэнфорда

Мультимодальный агент, обученный агентным RL координировать инструменты для генерации видео. Не просто один прогон модели, а цикл: поискать контекст - сгенерировать - проверить - доработать

• аугментация - веб-поиск, поиск картинок, физическая симуляция PyBullet
• генерация - T2V, I2V, по движению и по референсам
• проверка - детекция объектов и оценка глубины готового ролика
• разделяет промпт на этапы и сам решает, когда остановиться

• поднимает базовый Seedance 1.0 с 56.5 до 75.6 (+19.1) на VABench
• со свежими инструментами на инференсе без дообучения - 86.1
• люди предпочитают его 84.3% сравнений
• базовая модель - Qwen3-VL-8B

Код ждем

#agent #assistant #t2v #ref2v

MAX
👍2
MaLiang-Harness

Фреймворк, превращающий MLLM в художников, пишущих код. Генерация изображений и видео через постоянное конструирование, инспекцию и правку. Закрывает разрыв между исполняемыми программами и визуальным качеством. Оценивали 11 ведущих моделей на двух новых бенчмарках

Гитхаб

#harness #agent #t2i #t2v

MAX
👍5🤔3
Media is too big
VIEW IN TELEGRAM
HeyGen Video

Первый универсальный видеогенератор HeyGen — кинематографичные клипы из промпта без аватаров. Текст, картинка или видео-референс на входе, один вызов по API/ На базе Minimax H3

• Text to Video — промпт в клип со звуком: диалоги, эмбиенс, эффекты в том же вызове
• Image to Video — анимирует референс-картинку: продукт, недвижимость, лайфстайл
• Reference to Video — видео-референс задает движение, композицию, стиль
• API, OpenRouter, Runware, ComfyUI

• Оплата за секунду выхода, картинка и аудио-референсы бесплатны
• Скидка 50% до конца октября
• Первое место в слепых тестах против Seedance 2.5/2.0, H3 Max и Kling 3.0

#t2v #ref2v

MAX
👍5
Vidu Q4 Preview

Новый флагманский видеогенератор от Vidu.
Экспрессивная актерская игра, киношная работа камерой и сочные VFX


• Кинематографичный язык камеры
• Выразительная мимика и движения персонажей
• Высококонтрастные VFX-эффекты
• Генерация видео флагманского уровня

Все это хорошо но но ноги блуждающие по телу, аморфная анатомия - нехорошо

• От $0.014 за секунду видео
• Промокод для новых пользователей: VIDUQ4PV1

Ретвит и комментарий под анонсом в X приносит 200 кредитов в личку, акция на 72 часа

Кажется уже на Fal, wavespeed.ai

#t2v #i2v

MAX
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
GRACE

Метод сжатия латентов от KAIST AI и Kakao Corp: сжимает видео-автоэнкодер так, что DiT работает на 8× меньшем числе токенов. Ускорение 11.1× при том же качестве по VBench.

• Сжимает предобученный автоэнкодер #Wan21 без потери совместимости с DiT
• Генерация видео с 8× меньшим числом латент-токенов
• Качество на уровне полного пайплайна по VBench
• Без переобучения DiT с нуля — легкая адаптация LoRA

• Wan2.1-I2V-14B: 32.8k → 4.3k токенов
• Ускорение 11.1× при 480×832, 15.5× при 736×1280
• Инференс 78 с против 863 с на A100 80GB
• Асимметричный денойзинг: база чистится раньше остатка

github.com/cvlab-kaist/GRACE
huggingface.co/chimaharicox/GRACE

#optimiozation #t2v #i2v

MAX
❤6🔥2👀2👍1
This media is not supported in your browser
VIEW IN TELEGRAM
LIFT

Фреймворк для контролируемой генерации видео. Добавляет к управлению камерой контроль будущего лейаута: ты задаешь, что и где появится в финальном кадре.

• Задаешь траекторию камеры + лейаут финального кадра рамками и подписями
• Видео идет от первого кадра к заданному последнему, следуя камере
• Работает при больших сменах ракурса, когда камера открывает невидимые в начале области
• Боксы объектов в последнем кадре как явный сигнал управления
• Два режима: только камера / камера + лейаут

Гитхаб
HF
Демо

#t2v #cameracontrol #layoutcontrol

MAX
👍11❤1
Vivix W1

Видеогенератор из Китая от стартапа Vivix (основатель из SenseTime, происхождение весов частично из Alibaba). Ставка на дешевые массовые итерации, а не на топ-качество: $0.003 за секунду.

• Text-to-Video, Image-to-Video, аудио-референсы, первый и последний кадры
• Длительность 5-15 секунд, три режима скорости с разной ценой
• Интерактивный streaming-режим: можно менять сцену голосом, текстом или действиями прямо по ходу воспроизведения (пока в закрытой бете)

• $0.003 за секунду до 31 октября 2026 (не на все режимы)
• 10-секундный ролик — $0.03, 10 вариантов — $0.3, 100 вариантов — $3
• ~77× дешевле Seedance 2.5
• 8-сек ролик в среднем за 8.4 с по внутренним тестам

~30B активных параметров

Дают 3 бесплатные генерации (1080/720/540)
API

#t2v

MAX
🤔7❤1👍1
This media is not supported in your browser
VIEW IN TELEGRAM
VIS-Ground

Фреймворк от Google: зритель ставит видео на паузу и рулит сюжетом, а продолжение опирается сразу на источник, уже показанное видео и запрос — вместе.

Что умеет
• Интерактивное продолжение видео по запросу зрителя
• Учитывает контекст трёх входов сразу, а не по отдельности
• Строит граф зависимостей и выводит из него ограничения под конкретное продолжение
• Планирует, проверяет, правит и рендерит, потом сверяет результат с теми же ограничениями

Код ждем до 15 декабря

#t2v #interactive

MAX
🔥12😱2👍1
Media is too big
VIEW IN TELEGRAM
KLING 4.0

Полный доступ

• Обновленный интерфейс на kling.ai
• #MCP и #CLI для гибкой работы с видеоворкфлоу

Скоро
• 10-битное HDR-видео в 4K и 1080p
• API для корпоративных клиентов и разработчиков

#t2v #ref2va

MAX
👍4👎1🤝1