Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.65K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
MVTrack4Gen

мультимодальная генерация видео с трекингом объектов по промпту. решает проблему согласованности объектов между кадрами в длинных видео - наоснове двух базовых моделей (ReCamMaster и ReDirector)

В частности позволяет пересоздать исходное видео с другого ракурса, стабилизировать камеру и т д

#sota по стабильности геометрии

Код ждем

#tracking #cameracontrol #t2v #i2v #referencing #v2v
👍7🔥1
This media is not supported in your browser
VIEW IN TELEGRAM
LTX-Video 2.3 22B — IC-LoRA: CrossView Prompt v0.9

лора #ltx23 меняет ракурс видео по промпту, держит объект и сцену

Спасибо @m_franz

#lora #cameracontrol
👍19🔥2
MetaView

Синтез новых ракурсов по одному изображению на DepthAnything 3 + Qwen-Image-Edit

Учитывает масштаб через неявную геометрию

Гитхаб
HF
Демо

#novelview #cameracontrol #i2i
👍9🔥4🤷‍♂2
This media is not supported in your browser
VIEW IN TELEGRAM
LTX-Video 2.3 22B — IC-LoRA: CrossView Prompt v0.9

Лора для смены ракурса видео. v0.9 экспериментальная версия, обучение продолжается

#lora #ltx23 #cameracontrol
👍10
ComfyUI-CrossViewWarp

Кастом пак для IC-LoRA: CrossView

По заданному смещению камеры выстраивает репроекцию в качестве управляющего видео для лоры

Спасибо @m_franz опять принес полезное

#comfyui #lora #cameracontrol #ltx23
👍14🔥6❤1
CameraAnything

По входному видео создает видео с другого ракурса, на базе Wan2.1

Контролирует внешние (точка зрения, траектория, мультисценные переходы) и внутренние (фокусное расстояние, разрешение и соотношение сторон) параметры в одном процессе генерации

Гитхаб
HF

#wan21 #cameracontrol #v2v
👍10
SCoPE

Модицфикация видеогенератора для управления камерой. Даешь ей один кадр и траекторию движения камеры - получаешь видео с заданным движением камеры

У каждого пикселя картинки есть луч от камеры в сцену. Пока сцена не сгенерирована, непонятно что там, но луч уже задан пользователем. SCoPE добавляет этот луч в механизм внимания. Внимание начинает сравнивать не только "что изображено" но и "откуда смотрим". Два луча, которые пересекаются в одной точке сцены, усиливают друг друга, так модель понимает геометрию.

• Все типы движения камеры: наезд, отъезд, облёт, подъём краном, произвольные пути
• Можно прогнать сцену с несколькими траекториями
• Управление с клавиш WASD
• Пересъемка входного видео с новой камерой

• Добавляет меньше 0.1% новых параметров - почти бесплатно

Прикручено к #wan22

Гитхаб
HF

#cameracontrol
👍7👀1
CMD (Context-Matched Distillation)

Метод дистилляции для авторегрессивной генерации видео от NVIDIA. #SOTA среди авторегрессивных методов

Учитель и ученик получают одинаковый контекст: кадр оценивается по тому же префиксу и контролю, что был у студента при генерации. Раньше учитель видел весь клип целиком включая будущие кадры которых студент не видел, и супервизия разъезжалась с реальными условиями генерации

В итоге меньше шагов на генерацию, можно интерактивно вмешиваться в процесс генерации, задавать движение камеры и получать длинные сцены без поплывшего хвоста

- База: Cosmos-Predict2.5 2B
- Шесть чекпоинтов: chunk-1 и chunk-4 (короткие/длинные + камера-контроль)

Гитхаб
HF
Демо

#optimization #cameracontrol #interactive #t2v #i2v
👍7❤1
Накопилось по Minimax H3 - часть 3

huggingface.co/LBH-123-AI/Minimax_h3_latent_Upscaler
github.com/LBH-123-AI/Comfyui_Minimax_h3_latent_Upscaler
Латентный апскейлер для H3

huggingface.co/Jojocodex/minimax-h3-spatial-physics-lora
LoRA на пространственную физику и сценарные действия:

huggingface.co/Jojocodex/minimax-h3-yunjing-lora
LoRA движений камеры: 12 приёмов, включая Orbit. Лучше всего срабатывает с Handheld и медленным отъездом, работает вместе с turbo-LoRA. Триггер — yunjing

huggingface.co/berryber09/MiniMax-H3-ref2va-fl2va-hybrid-w4a8
Гибрид Ref2VA + Fl2VA в одной модели на 12 ГБ: ролик одновременно стартует с первого кадра и подтягивает референсы - «открываем на этом кадре, а персонаж заходит позже». Для #LowVRAM. Требует ключевых кадров (нужен свежий ComfyUI Nightly)

github.com/hoodtronik/minimax-h3-style-atlas
Офлайн-атлас стилей H3 (1.2 ГБ в ZIP): 941 визуальный стиль из 1000 клипов, сгруппированы в 8 категорий от live-action до 3D-рендеров, с живым фильтром и быстрыми превью

#MinimaxH3 #lora #upscale #cameracontrol #directing

VK | MAX
🔥15👍4❤1
This media is not supported in your browser
VIEW IN TELEGRAM
OmniCam

Камера-контроль в ComfyUI

Как мини-Blender внутри ноды. Три инструмента: извлечь камеру из видео, расставить кадры в 3D-вьюпорте, скомпилировать движение под нужную модель

#comfyui #cameracontrol

VK | MAX
1❤9👍9🔥1🤯1
Meridian

Еще одна модель от Viggle AI на базе #MiniMaxH3

Генерирует новые ракурсы уже снятого видео. Возвращается к моменту события и снимает его заново с камеры которую выбирает юзер

Возможности:
- Камера: орбита, наезд, панорама, подъем — путь из нескольких ключевых кадров
- Буллет-тайм
- Замедление и ускорение
- Работает и от одного изображения

VGGT-Omega строит геометрию и позиции камер из исходного видео, рендерится варп-референс вдоль выбранного пути, а Meridian дорисовывает скрытые области

Файнтюн трансформера MiniMax-H3 без текст-энкодера на инференсе, 61.7 ГБ bf16 + LoRA 2.5 ГБ, 4 шага. Выход 768p

Большие движения камеры дают артефакты, скрытые поверхности не восстанавливаются а генерируются. Пока только на B200

HF
Демо

#cameracontrol #novelview

VK | MAX
🔥10👍6❤2
Накопилось по #minimaxH3 - часть 26

huggingface.co/Comfy-Org/MiniMax-H3/tree/main/vae - Kijai обновил быстрый видео VAE для H3: 2.8Gb

huggingface.co/WarmBloodAban/Minimax_H3_LoRAs - #LoRA : CGs, HUD, динамическая камера от 3-го/1-го лица как в играх

github.com/xmarre/ComfyUI-Spectrum-MiniMax-H3 - Spectrum v0.2.28: фикс CRLF для Windows. Проверяйте цепочку воркфлоу — у многих неправильно подключена

huggingface.co/silveroxides/MiniMax-H3_tests/tree/main/viggle_lora - экспериментальная Viggle #LoRA : замена персонажа по одному перерисованному кадру + перенос движения #characterswap

huggingface.co/berryber09/MiniMax-H3-Fun-Controlnet-Union-w4a8 - #W4A8 квантизация Fun #ControlNet-Union: 2.13Gb → 1.45Gb

github.com/ShamanicArts/h3-spherical-vae - круговой #VAE для панорамного видео #panorama

huggingface.co/circlestone-labs/MiniMax-H3-Image-Training-Adapter - адаптер для тренировки H3 по картинкам вместо видео без порчи видео-знаний

github.com/cicalooo/ComfyUI-MM-1Frame - извлечение лучшего кадра из генерации: не тупо первый, а авто-выбор из пяти

github.com/caiusy/traffic-motion-studio - симулятор трафика для H3: рисование траекторий, подрезы, ДТП, обгоны, экспорт 2D-референса для погонь

github.com/NyckM/3d-Camera-control-H3-Minimax - depth-контроль камеры для H3 + Viggle Meridian #cameracontrol

github.com/Comfy-Org/ComfyUI/pull/16422 - фикс тайловых швов VAE H3, на подходе к мержу

huggingface.co/neph1/1980s_horror_movies_minimax_h3 - #LoRA хоррор 80-х

huggingface.co/neph1/1950sScifiMinimaxH3 - #LoRA sci-fi 50-х

huggingface.co/Cseti/MiniMax-H3_Ref2VA-LoRA-CrossView-Warp_v1 - #LoRA для смены движения/угла камеры уже готового клипа #V2V

github.com/NyckM/3d-Camera-control-H3-Minimax - v3: depth-контроль камеры + Viggle Meridian

plox-1.github.io/h3-speedups - сравнение методов ускорения H3 с базой. Качество оценено ИИ (Fable 5.1) по 5 кадрам

civitai.com/models/2947601/simply-advanced-minimax-h3 - продвинутый #workflow : 6 картинок, 2 видео, 3 аудио — что угодно как референс/гайд/оба. LLM-пайплайн в 4 стадии (расширение→анализ референсов→креативный план→компиляция), безшовное продолжение, Force Audio. Требует frontend < v1.50.5

huggingface.co/LBH-123-AI/Minimax_h3_latent_Upscaler/tree/main/minimax_h3_latent_upscaler_3d_conv_v1 - новая версия латентного апскейлера с 3D-конволюцией

youtu.be/qyWbsUkxSFs - воркфлоу фейс-свопа #faceswap

reddit.com/r/StableDiffusion/comments/1whbdje/minimax_h3_latents_as_reference/ - латенты как референс: картинка→латент+шум дает вариативность без тяжёлого промптинга. 0.35 — рабочий порог, ниже 0.25 — почти интерпретация модели #ref2va #referencing
👍15❤2
Накопилось по #minimaxH3 - часть 27

huggingface.co/alibaba-pai/MiniMax-H3-Fun-Controlnet-Union-2.0 - добавились Scribble, Layout, Gray, блоков управления вдвое. У Kijai уже есть INT8 4.5Gb

comfy.icu/models/2949040/-MMH3-DayNight-Slider-v1-0 - #slider день/ночь: #LoRA с регулировкой освещения по силе

civitai.com/models/2941229/mmh3-video-age-slider - слайдер «старения» видео: сила контролирует насколько «старой» выглядит картинка

huggingface.co/prithivMLmods/MiniMax-H3-Rough-2D-Cartoon-Illustration - #LoRA «грубая 2D-мультяшка»: свободный рисунок и динамика. Триггер rough 2D cartoon illustration

huggingface.co/Leon1000/H3-Shadow-Negative-Nodes - ноды негативного промптинга для H3. Минимакс частично понимает негатив и в основном промпте

github.com/maosika-ai/ComfyUI-ReShot - видео → depth/OpenPose/Canny для Fun #Controlnet. Обновился: появились OpenPose и Canny

github.com/phazei/ComfyUI-Camera-Path - виртуальная камера: картинка + геометрия MoGe, рисуешь путь в 3D — получаешь кадры с новых позиций. #cameracontrol

civitai.com/models/2956315/rough-sketch-nature-for-minimax-h3 - скетч-натура в духе комикса. Длинный вводный промпт #lora

civitai.com/models/2955672/somethings-off-h3-minimax-style-lora-by-fos - Something's Off: общая «хантеровская» затемненная жуткая стилистика

disk.yandex.ru/d/fdk4Uayx56Z_yA - Minimax Studio v6 от @Evgeny_Rublev : модель Bonsai 2 (умнее), три режима (текст, кадры, референсы), быстрее декодер. Прошлые версии удалены

huggingface.co/Jojocodex/minimax-h3-Camera-Motion-lora - обновилась единственная рабочая LoRA с имитацией ручной съемки
❤9👍4🔥3
Накопилось по #minimaxH3 - часть 28

github.com/fukkun2705-commits/ComfyUI-H3-FaceAutoBypass - сам решает, нужен ли клипу фейсфикс

huggingface.co/vpakarinen/natural-face-speech-h3-lora - #lora мимика + четкая английская речь, добавлены мужской/женский голоса с синхронизацией

huggingface.co/Alissonerdx/Minimax-H3-ComfyUI - экспериментальные #LoRA на перенос стиля и VFX-эдит (тот же шот с одной правкой) #styletransfer
Лора на замену головы #headswap #LoRA

huggingface.co/LiseTY/Minimax-H3-ref2v_Anime_2_Realism - #LoRA для аниме→фотореализм #realism

huggingface.co/JOKER141/MiniMaxH3-GunFu-Gunfight-LORA - #LoRA перестрелок

github.com/RK-BoilingPoint/H3-Visual-Marker-Control - управление кадрами-маркерами: синяя рамка вокруг персонажа и вокруг цели — персонаж сам подходит. Двух персонажей: синий/красный, жtлтый — «дальняя цель»

github.com/dntpi/ComfyUI-H3-Refine - H3 Chain Tone v0.3: компенсация накопленного сдвига яркости при склейке клипов #longvideo

huggingface.co/akatz-ai/MiniMax-H3-Character-Swap-LoRA - LoRA замены персонажа: фон сохраняется лучше базы, но тайминг движений и мимика ненадежны #characterswap

huggingface.co/neph1/minimax_h3_headmounted_fpv_cam - #LoRA «камера на голове» в стиле шутеров от первого лица #pov

huggingface.co/ostris/minimax_h3_training_adapter/tree/main - Ostris H3 Training Adapter v3 #finetuning

huggingface.co/pablodawson/MiniMax-H3-360-Orbit-LoRA - 360-орбита: одни и те же первый/последний кадр, камера облетает застывшую сцену, петля. Для #FL2VA, нужен спец-промпт #cameracontrol

github.com/aaruyou/ComfyUI-RemoteMiniMaxH3 - энкодер H3 на другом ПК, VRAM основной машины свободнее

github.com/aroslanov/ComfyUI-VideoAnalyzer - видео → H3-промпт через VLM. Несколько Qwen VL на выбор под VRAM #prompting #video2prompt

slopus.ai - Slopus: десктоп-приложение для AI-видео локально. Сцены (first/last, animate, pose, replace, extend, bridge), таймлайн с эффектами и экспортом, встроенный агент с отменой #desktop #agent

github.com/lisitskyaa/ComfyUI_UltimateSDUpscaleGuider_H3 - USDU гайдер-апскейл для H3 #upscale

github.com/bbaudio-2025/Comfyui-MMH3-UltimateUpscale - ультимативный #upscale

huggingface.co/Efficient-Large-Model/H3-to-LTX-Latent-Adapter - адаптер латентов H3 → LTX
👍10❤4🔥3
#QI21

pastebin.com/NVJCj4Xk
pastebin.com/Q4uQrq9B - консистентные персонажи: Head shot и Multiview #workflow

github.com/Pyrolistical/qwen-image-2.1-workflows - редактирование, управляемое JSON-файлом рядом с картинкой

civitai.com/articles/35828/2x-faster-qwen-image-21-using-4-steps-lora-comfyui-low-vram-workflow - #lowVRAM : INT8 ConvRot + Kitchen Attention + 4-шаговая LoRA = ~2x быстрее. Как эдит-модель Qwen 2.1 силен (стиль, одежда, character sheet), чистый T2I слабее — кожа, руки, мелкий текст

github.com/shootthesound/Fizgig - Fizgig 6.5.0: тренировка LoRA и LoKR Qwen Image 2.1, турбо-превью, адаптер с более резкой картинкой (huggingface.co/ShootTheSound/Fizgig-Qwen-Image-2.1-Training-Adapter), 10GB VRAM+

huggingface.co/WarmBloodAban/Qwen-Image-2.1-LoRAs - Anime_consistency, Anything2RealCharacters,

huggingface.co/lilylilith/QI_2.1_AnyAngle - произвольные ракурсы для любого изображения #LoRA #cameracontrol

MAX
👍13❤3
Накопилось по #minimaxH3 - часть 31

#LoRA

huggingface.co/Iwannapose/minimax_h3_pdmd_2nfe_comfyui - #PDMD 2-NFE: 2-шаговая LoRA для H3, ComfyUI-формат

huggingface.co/adf99/H3_Ref2V_Anime_Slider_v1 - аниме-слайдер для Ref2V: положительные значения тянут в 2D-аниме, отрицательные — в реализм

huggingface.co/neph1/1950s_western_movies_h3 - LoRA вестернов 50-х для FL2VA. Совет: естественный свет, винтажный кинокадр, формат 1.85:1 или 2.35:1

huggingface.co/neph1/1980s_fantasy_movies_minimax_h3 - LoRA фэнтези-фильмов 80-х. Без триггера, для боевых сцен не годится

civitai.com/models/2979777/minimax-h3-motion-combat-reasoning-or-ref2va-or-fl2va-or-hybrid - боевая моторика: похоже, хорошо для средневековых мечей

huggingface.co/RunningHubAI/rh-minimax-h3-digicam-realism-improve-lora - реализм любительской съемки на цифромыльницу #realism

huggingface.co/RunningHubAI/rh-minimax-h3-five-view-512-s1500.safetensors-lora - пять ракурсов одного персонажа

huggingface.co/Playtime-AI/Minimax_H3-Age_Slider - экспериментальный возраст-слайдер теперь и для #REF2VA (для FL2VA был раньше). Без триггера

civitai.com/models/2985070/sss-rank-minimax-h3-smooth-slow-sync - SSS Rank: замедляет и сглаживает анимацию

huggingface.co/akhaliq/MiniMax-H3-Claymation-Style-LoRA - клеймейшн-стиль. Дает вид пластилина, но не характерные стоп-моушен тайминги

huggingface.co/Kijai/MiniMax-H3-experimental/blob/main/loras/minimax_h3_DMAD_4step_full_lora_avg_rank_39_bf16.safetensors - новая 4-шаговая турбо-LoRA DMAD от Kijai, выбрана по умолчанию в свежей сборке SEEDHUNTER

#workflow

civitai.com/models/2979689/basic-refmod-creator-minimax-h3 - базовый воркфлоу создания #RefMods

civitai.com/models/2980013/minimax-h3-role-swap-face-refine - замена персонажа + отдельный проход фейс-рефайна: YuNet ловит лицо, низкий денойз 0.45 на 12 шагов, вшивание обратно

github.com/roycho87/degrade_repo - длинная генерация без деградации: 10 склеенных клипов, свежие латенты каждые 10–15 сек, шов пересэмплируется FL2V #longvideo

reddit.com/r/StableDiffusion/comments/1wwyva2/minimax_h3_refmod_consistent_location_trick/ - стабильная комната: 20 фото комнаты сеткой 4×5 в один RefMod

reddit.com/r/StableDiffusion/comments/1wxigqo/minimax_h3_voice_acting_with_speech_tags/ - управление диалогом тегами, курсив для акцента на слове

github.com/Violinet-tech/seamless-loop-video - #skill для Claude Code: бесшовный зацикленный эмбиент из статичной картинки + три .PY скрипта

github.com/veda-sparse/Veda-on-ComfyUI - VEDA для #ComfyUI 0.2: разреженное внимание, скипает ~90% шагов, 7.1x на attention. Требует ComfyUI 0.38.0, предиктор 275Mb в models/veda. На 3060 с хард-грейви 6 шагов: 8 мин на 8 сек — без выигрыша против Turbo/Kitchen/Spectrum

———

github.com/SK-SL-source/cinematic-director-camera-dsl - Claude Code #SKILL : короткие камерные коды вроде /MS /LOWANGLE /DOLLYIN разворачиваются в полноценные H3-промпты #PROMPTING #CAMERACONTROL

github.com/zacharydenton/h3-hrx - запуск H3 на #AMD Strix Halo

youtube.com/watch?v=blI0X5zslfw - гайд по #RefMods: видео, аудио, движение, стиль #guide
👍13❤2
This media is not supported in your browser
VIEW IN TELEGRAM
LIFT

Фреймворк для контролируемой генерации видео. Добавляет к управлению камерой контроль будущего лейаута: ты задаешь, что и где появится в финальном кадре.

• Задаешь траекторию камеры + лейаут финального кадра рамками и подписями
• Видео идет от первого кадра к заданному последнему, следуя камере
• Работает при больших сменах ракурса, когда камера открывает невидимые в начале области
• Боксы объектов в последнем кадре как явный сигнал управления
• Два режима: только камера / камера + лейаут

Гитхаб
HF
Демо

#t2v #cameracontrol #layoutcontrol

MAX
👍11❤1
#QI21

huggingface.co/Qwen/Qwen-Image-2.1-Turbo - официальная Turbo-версия Qwen Image 2.1 от Qwen. И диффузионные модели Comfy-Org: huggingface.co/Comfy-Org/Qwen-Image-2.1/tree/main/diffusion_models

github.com/hypersniper05/MCP-Image-Generator-Uncensored - #MCP для Qwen 2.1: любой LLM-клиент с MCP управляет генерацией. 2K, панорамы, эдит до 10 картинок, бесшовные тайлы (нормали/высоты), апскейл до 8K, 360-вьювер, удаление вотермарков и фона, прозрачные PNG, текст в картинке. В Docker, пик 11GB VRAM #uncensored

huggingface.co/akhaliq/Qwen-Image-2.1-Multiple-Angles-LoRA - Multiple Angles: несколько ракурсов одного объекта для Qwen 2.1 #cameracontrol
Демо

MAX
👍18