Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Смотрите какая штука.
Делает HDRI панорамы из обычной фотки.
Умеет добавлять и удалять источники света, релайт.
Есть код который должно быть несложно запустить

#relighting #360 #panorama #hdri
SyncDiffusion: Coherent Montage via Synchronized Joint Diffusions

Диффузный генератор больших бесшовных панорам.
конкурент (и победитель) Multidiffusion

Код еще не выложили

#text2image #panorama
HoloDreamer: Holistic 3D Panoramic World Generation from Text Descriptions

Генерация 3D сцен по текстовому описанию. Первым шагом генерируется 360-градусная панорама. Ну а дальше на нее напускают гауссианы.

Код ждем

#gaussian #text2scene #textto3d #panorama
🔥10👍1
Edify Image: High-Quality Image Generation with Pixel Space Laplacian Diffusion Models

Генерация фотореалистичных изображений с пиксельной точностью от Nvidia. Отсутствует CLIP, пиксельное пространство вместо латентного.

Фичи:
- картинки по тексту
- ControlNet-апсемплинг до 4K (генератор выдает 1K)
- поддерживает Controlnet, сети управления
- HDR панорамы 360°
- дообучение, в том числе на несколько объектов

Впечатляет, но

Кода нет

#text2image #panorama #HDR #conditioning #upscale
🔥6👍1
Media is too big
VIEW IN TELEGRAM
Imagine360: Immersive 360 Video Generation from Perspective Anchor

Делает из обычного видео сферичекое панорамное. Для этого, ясно, надо дорисовывать невидимые в исходнике части

Код ждем в январе

#video2panorama #panorama #video2VR
👍7❤1🔥1
Media is too big
VIEW IN TELEGRAM
HoloTime: Taming Video Diffusion Models for Panoramic 4D Scene Generation

Генерирует панорамные динамичные видео по тексту или по картинке, реконструируя 4D ассеты

Код

#image2scene #text2video #image2video #360 #panorama #4d #textto4d #imageto4d
👍6😱3
DreamCube: 3D Panorama Generation via Multi-plane Synchronization

Генератор 3D-панорам. Использует технологию Multi-plane Synchronization.
На выходе - куб с натянутыми текстурами, глубиной

Рработает с разными 2D моделями (SDXL, Marigold, VideoCrafter2)

Код
HF
Инструкция по установке (реддит)

#text2image #text2panorama #panorama #rgbd
🔥5👍2
DiT360: High-Fidelity Panoramic Image Generation via Hybrid Training

Модель для создания реалистичных панорамных изображений на базе Flux с лорой

— улучшает качество существующих панорам за счёт устранения артефактов и искажений в полярных областях

— использует перспективные изображения для обогащения панорамного контента и повышения фотореализма

— обеспечивает согласованность границ и устраняет искажения в полярных регионах

— делает инпейнтинг и аутпейнтинг без дополнительного обучения

— использует несколько механизмов для контроля геометрии и искажения в латентном пространстве

Код
Демо

#panorama #text2panorama #text2image
👍6❤1
360Anything: Geometry-Free Lifting of Images and Videos to 360°

Работа от Гугл без кода - преобразование обычных изображений и видео в 360-градусные панорамы без использования данных о камере или 3D-информации

А прогоняя материал через эту модель, они делают реконструкцию 3д сцены гауссианами и получают лучший результат

Спасибо @m_franz

#panorama #video2panorama #image2panorama #video2scene #research
🔥10❤2👍2
Media is too big
VIEW IN TELEGRAM
ComfyUI Panorama Stickers

Кастом ноды и лоры для работы с 360 equirectangular панорамами

Сборка, извлечение, работа со стыками

Работает с лорой FLUX.2 Klein и работает с лорой автора для аутпейнта панорам FLUX.2 Klein 4B и 9B

nomadoor/flux-2-klein-4B-360-erp-outpaint-lora
nomadoor/flux-2-klein-9B-360-erp-outpaint-lora

Спасибо @m_franz

#panorama #comfyui #lora #klein
👍8🔥3
Media is too big
VIEW IN TELEGRAM
CubeComposer: Spatio-Temporal Autoregressive 4K 360° Video Generation

Диффузионная модель от Tencent для генерации 4K 360° видео из перспективного видео без пожирания памяти, без лоурес-потом-апскейл

Представляет 360° видео как кубмап (6 граней), генерирует их авторегрессивно по пространству и времени — снижает память для нативного 4K.

Видеочасть на базе WAN 2.2, остальное - своя модель

Гитхаб
HF

#panorama #video2panorama #VR

Нейронавт в MAX 📲
👍7🤷‍♂2😱1
This media is not supported in your browser
VIEW IN TELEGRAM
ComfyUI_StarNodes

В кастом пак добавили сохранение панорам и просмотрщик всевозможных форматов панорам со сравнением

#comfyui #panorama
👍5
Накопилось по #minimaxH3 - часть 17

huggingface.co/kirk86413/cinema-h3 - #LoRA для кинематографической текстуры. Для быстрых сцен и Ref2VA — силу 0.5. Триггер DY

github.com/yedp123/ComfyUI-Cinematic-Prompt - визуальный построитель промптов с превью и пресетами кинокамер и пленок #prompting

huggingface.co/shamanic/minimax-h3-equi360-lora - LoRA для 360° видео: 2:1, метка equirectangular — и готово для VR #panorama

github.com/xmarre/MiniMax-H3-Flow-Aligned-Regenerate - генерация в два прохода: низкое разрешение запоминает решения модели, высокое повторяет их. Сохраняет монтаж и движение

github.com/loopforge0/ComfyUI-H3-Continuous - чейнер склеивает любое количество H3 рендеров в один непрерывный take на Ref2VA. Можно починить один неудачный кусок

civitai.red/models/2910804/minimax-h3-ltx-25-fast-refineupscale-2-stage-av-pipeline - #upscale H3 + #LTX25

huggingface.co/lightx2v/Minimax-h3-Turbo - LightX2V выпустил FL2V Turbo 4-step v1.2 768p

#comfyui
👍17👎2❤1
Накопилось по #minimaxH3 - часть 22

github.com/TaoLiveAIGC/TaoMate-H3 - стриминг-рантайм генерации аудио+видео от Alibaba TaoLive. Чанками, непрерывная длинная генерация, 480p/768p/1080p

huggingface.co/Alissonerdx/Minimax-H3-ComfyUI - #LoRA на четкость H3: то же разрешение, но резче или мыльнее. Не апскейлер

github.com/TwoAbove/ComfyUI-H3VideoOutpaint - аутпейнтинг видео без промпта: скользящее окно расширяет клип (например до 9:12) с сохранением тайминга и звука. Окно-контекст до 107 кадров. Для 20 шагов res_multistep

huggingface.co/datasets/jacokon/fasth3-live - FastH3 Live: непрерывный рилтайм стрим видео+аудио на одной 5090. 721 сцена, 22.1 fps на 448×448. 4-шаговый DiT, sage attention, ретайминг под slow-motion. 22.7GB

github.com/RH-RunningHub/MiniMax-H3-MultiGPU-Lightning - RunningHub H3 Lightning: мультиGPU-рецепт ускорения инференса H3

huggingface.co/drbaph/MiniMax-H3-Turbo-Lora-ComfyUI/tree/main/experimental - экспериментальные DMD турбо #LoRA на 8 шагов

huggingface.co/circlestone-labs/MiniMax-H3-Image-Training-Adapter - адаптер для тренировки LoRA-концептов без порчи видео-знаний модели

github.com/cicalooo/ComfyUI-MM-1Frame - извлечение лучшего кадра: авто-выбор из пяти. Работает с Hard Gravy турбо, Spectrum и Klein 4B для ремонта. Второй референс — OpenPose, требует слово-позу в промпте

reddit.com/r/StableDiffusion/comments/1wdlg0q/instant_references_no_refmod_or_fancy_custom/ - референсы без #RefMods : папка картинок → кадры видео-референса. Много изображений в один вход. Менять набор — чистить кеш

github.com/NyckM/3d-Camera-control-H3-Minimax - контроль камеры от bruxosdovfx. GUI на португальском

github.com/maosika-ai/depthcat - Depthcat: клип → depth-блокаут для Fun Controlnet. Только статинг, без лиц и стиля. Белое близко, чёрное далеко. До 15 сек, нужна доп. модель 111Mb

huggingface.co/FastVideo/FastVideo-Minimax-FastH3-Preview-v0.2 - 4-шаговая v0.2, плюс FastH3-Live 1.2.0

huggingface.co/berryber09/MiniMax-H3-Fun-Controlnet-Union-w4a8 - W4A8 квантизация #ControlNet-Union

github.com/ShamanicArts/h3-spherical-vae - круговое VAE-декодирование для equirectangular видео H3 #panorama

github.com/duckyshell/ComfyUI-MiniMaxH3-FirstBlockCache - FirstBlockCache: cross-step кеш для 20-шаговиков, ~30% быстрее

civitai.com/models/2930172/manga-tone-rendering-lora-for-minimax-h3 - манга-тон для H3: монохром, штриховка, тон держится при движении камеры. Триггер manga-tone rendering

civitai.com/models/2929051/minimax-h3-15-reference-image-workflow - воркфлоу на 15+ референсов: патч .BAT/.PY снимает лимит девяти для #Ref2VA

huggingface.co/Playtime-AI/Minimax_H3-Age_Slider - слайдер возраста #slider

huggingface.co/Alissonerdx/Minimax-H3-ComfyUI - #LoRA переноса стиля + #workflow #styletransfer

#comfyui #srealrime #streaming #optimization #realism
🔥18❤2👍2
Накопилось по #minimaxH3 - часть 26

huggingface.co/Comfy-Org/MiniMax-H3/tree/main/vae - Kijai обновил быстрый видео VAE для H3: 2.8Gb

huggingface.co/WarmBloodAban/Minimax_H3_LoRAs - #LoRA : CGs, HUD, динамическая камера от 3-го/1-го лица как в играх

github.com/xmarre/ComfyUI-Spectrum-MiniMax-H3 - Spectrum v0.2.28: фикс CRLF для Windows. Проверяйте цепочку воркфлоу — у многих неправильно подключена

huggingface.co/silveroxides/MiniMax-H3_tests/tree/main/viggle_lora - экспериментальная Viggle #LoRA : замена персонажа по одному перерисованному кадру + перенос движения #characterswap

huggingface.co/berryber09/MiniMax-H3-Fun-Controlnet-Union-w4a8 - #W4A8 квантизация Fun #ControlNet-Union: 2.13Gb → 1.45Gb

github.com/ShamanicArts/h3-spherical-vae - круговой #VAE для панорамного видео #panorama

huggingface.co/circlestone-labs/MiniMax-H3-Image-Training-Adapter - адаптер для тренировки H3 по картинкам вместо видео без порчи видео-знаний

github.com/cicalooo/ComfyUI-MM-1Frame - извлечение лучшего кадра из генерации: не тупо первый, а авто-выбор из пяти

github.com/caiusy/traffic-motion-studio - симулятор трафика для H3: рисование траекторий, подрезы, ДТП, обгоны, экспорт 2D-референса для погонь

github.com/NyckM/3d-Camera-control-H3-Minimax - depth-контроль камеры для H3 + Viggle Meridian #cameracontrol

github.com/Comfy-Org/ComfyUI/pull/16422 - фикс тайловых швов VAE H3, на подходе к мержу

huggingface.co/neph1/1980s_horror_movies_minimax_h3 - #LoRA хоррор 80-х

huggingface.co/neph1/1950sScifiMinimaxH3 - #LoRA sci-fi 50-х

huggingface.co/Cseti/MiniMax-H3_Ref2VA-LoRA-CrossView-Warp_v1 - #LoRA для смены движения/угла камеры уже готового клипа #V2V

github.com/NyckM/3d-Camera-control-H3-Minimax - v3: depth-контроль камеры + Viggle Meridian

plox-1.github.io/h3-speedups - сравнение методов ускорения H3 с базой. Качество оценено ИИ (Fable 5.1) по 5 кадрам

civitai.com/models/2947601/simply-advanced-minimax-h3 - продвинутый #workflow : 6 картинок, 2 видео, 3 аудио — что угодно как референс/гайд/оба. LLM-пайплайн в 4 стадии (расширение→анализ референсов→креативный план→компиляция), безшовное продолжение, Force Audio. Требует frontend < v1.50.5

huggingface.co/LBH-123-AI/Minimax_h3_latent_Upscaler/tree/main/minimax_h3_latent_upscaler_3d_conv_v1 - новая версия латентного апскейлера с 3D-конволюцией

youtu.be/qyWbsUkxSFs - воркфлоу фейс-свопа #faceswap

reddit.com/r/StableDiffusion/comments/1whbdje/minimax_h3_latents_as_reference/ - латенты как референс: картинка→латент+шум дает вариативность без тяжёлого промптинга. 0.35 — рабочий порог, ниже 0.25 — почти интерпретация модели #ref2va #referencing
👍15❤2