Нейронавт | Нейросети в творчестве
13.2K subscribers
7.15K photos
5.66K videos
51 files
7.24K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Media is too big
VIEW IN TELEGRAM
V-RGBX: Video Editing with Accurate Controls over Intrinsic Properties

Комплексный редактор видео от Adobe на базе WAN2.1

Раскладывает видео на базовые компоненты (альбедо, нормали, материалы и освещённость), затем вносит изменения и применяет компоненты обратно.

Можно отредактировать один кадр и применить эти изменения ко всему видео.

Работает с разными задачами: от изменения внешнего вида объектов до переосвещения всей сцены

Код ждем

#videoediting #relighting #compositing #videoinpainting
🔥8👍1
Media is too big
VIEW IN TELEGRAM
MVInverse: Feed-forward Multi-view Inverse Rendering in Seconds

Реконструкция геометрии, PBR материалов и освещения по одному или нескольким ракурсам. Все это называется обратный рендеринг.

Скорость рендера 10 fps на A100

Гитхаб

#relighting #pbr #video2pbr #video2texture #rendering #video2scene #image2scene
🔥11❤1
This media is not supported in your browser
VIEW IN TELEGRAM
SwitchX - Change background and lighting in a single click

Новая версия инструмента от Beeble для трансформации кадров: меняет освещение, фон, реквизит, сохраняя оригинального субъекта и его движения.

Работает на пиксельном уровне исходного видео. Контролируемый результат, без галлюцинаций.

Маски для выборочных правок - меняешь только фон или отдельные элементы, оставляя актёра нетронутым. На примерах волоски идеально откеены.

Подходит для постпродакшена: релайтинг сцен, смена окружения, стилизация без пересъёмок.

Попробовать - на время бета теста бесплатно

#relighting #compositing
👍11
This media is not supported in your browser
VIEW IN TELEGRAM
Hailuo Light Studio

Релайтинг от Hailuo

Контроль освещения на видео и фото. С его помощью можно:

— настраивать детали: угол, интенсивность и цветовую температуру

— смешивать два источника света

— использовать 20 готовых пресетов одним кликом

#relighting #online
❤7👍2
Опубликован код/веса нвидиевского релайтера UniRelight

Гитхаб
HF - 29ГБ

Спасибо @alex31415926

#relighting
👍10😱3🔥1
BRDFusion

Фреймворк для редактирования городских сцен: релайтинг, симуляция ночи, вставка объектов.

Объединяет физическое моделирование и генеративные модели, работает с реальными и синтетическими сценами.

Восстанавливает свойства сцены (геометрию, материалы, HDR‑освещение) из видео, затем редактирует. Якобы решает проблему артефактов рендеринга и неточной визуализации

При этом размыливает картинку в кашу, а жаль

Гитхаб
HF

#videoediting #relighting
😁3❤2
NeumaTex

Метод NVIDIA для 3D-текстур по фото. Восстанавливает детали и UV-карты без сложных пайплайнов.

Вместо PBR создают нейро-материалы из снимков, сделанных с разных ракурсов. Материалы моделируют более сложные свойства: прозрачность, дымка, пыль, шероховатость, рассеяние и смешанные зеркальные эффекты. При этом пригодны для релайтинга и рендера

• генерация текстур с сохранением мелких деталей
• автоматическое построение UV-развёрток
• работает с небольшим набором входных ракурсов

Кода нет

#image2pbr #image2material #research #relighting #rendering
🔥5👀2👍1
Neural Render Proxies (NRP)

Технология Disney, ускоряет процесс настройки освещения в компьютерной анимации. Интерактивно и дифференцируемо изменяет освещение статических сцен с фиксированным положением камеры и материалами

Разделили рендеринг на выборку путей и вычисление излучения. За один проход, не зависящий от освещения, собирают данные о транспортировке света. Затем обучают лёгкую нейросеть переносить свет от любой точки сцены к любому пикселю изображения

минимальные требования к памяти при выводе

масштабируемость в зависимости от разрешения, количества источников света и параметров, а не от сложности сцены

рилтайм 30–60 Гц

Только хвастаются, нам свои технологии не отдадут

Спасибо @iNevestenko

#research #rendering #lighting #relighting
👍8
UniD

модель для плотной разметки видео, сразу несколько свойств сцены в одном прогоне

• глубина
• нормали поверхности
• семантическая сегментация
• границы объектов
• части тела человека
• альбедо
• затенение
• материалы

• единый backbone, один проход для всех задач
• стабильная согласованность по кадрам

Гитхаб ждем

#material #video2depth #video2normals #segmentation #relighting
👍8
This media is not supported in your browser
VIEW IN TELEGRAM
ID-V2V

переделывает сцену и свет в видео, личность и действия не трогает, На вход нужно собственно исходное видео и измененный первый кадр

Есть версия с контролем глубины сцены

на базе Wan2.1 (T5, VAE, CLIP), SAM3, DiT + VACE
Для глубины - DAViD и DepthAnything-V2

Гитхаб
HF

#relighting #wan21 #videoediting #referencing #sylize
🔥16👍4
LTX-2.3 22B IC-LoRA Relight (Sun Direction)

Лора #ltx23 для релайтинга экстерьерных видео. Меняет направление и жёсткость света в соответствии с шариком направления света в углу кадра

#lora #relighting
👍14
Media is too big
VIEW IN TELEGRAM
Splatlight

Плагин для работы с гауссианами в Blender. Добавляет реалистичные тени без внешних инструментов.

Совместим с Cycles и Eevee

В бесплатной версии релайтинг и экспорт

В платной ($35) - редактирование, 4D-воспроизведение, запекание света, Surface Paint, прокси-риггинг и анимация, а также генераторы.

gumroad
Superhive

#gaussian #relighting #blender #plugin #4d
👍14👎1
Накопилось по #gaussian

3dnchu.com/archives/splat2mesh - конвертирует сплаты в полигональный меш. Локально, без GPU, бесплатно для личного

github.com/pbkx/DirectXSplat - нативный D3D12 рендер гауссиан для Windows. До 2.4x быстрее gsplat. Без CUDA-зависимости

github.com/harry7557558/spirula-studio - обучение сплатов,

github.com/Kiri-Innovation/3dgs-render-blender-addon - 3DGS Render для #Blender 5.1: несколько сплатов, дубликаты, #HDRI-свет, экспериментальные риггинг, #relighting и тени

github.com/FlagOpen/InsertAny3D - вставка 3DGS-объектов в сцены #Unity через серверные модели, вывод PLY + позы

github.com/PrintedForFun/ply-to-splat - лидарное облако точек в гауссианы за 5 секунд вместо часов тренировки. Качество ниже обученного сплэта

reconstrura.com - Reconstrura: студия от видео до готового сплэта. Свой GPU-SfM (1300 кадров за 4 мин на 4090), маски SAM 2.1, кнопка авто-реконструкции. Linux. $25 разово
👍7🔥6
Накопилось по #minimaxH3 - часть 23

huggingface.co/Smite79/MiniMax-H3-Longvideos - один промпт → ~2 минуты видео со звуком. Решает проблемы склейки шотов. Без воркфлоу, с инструкцией #longvideo

github.com/tritant/ComfyUI_MiniMax_H3_Extender - чейнинг клипов с motion context, дисковым кешем, динамическими референсами и аудио. Есть #workflow

github.com/Adudeguyman/ComfyUI-Fantastic-MiniMaxH3-PromptBuilder - построитель промптов по официальному гайду в #ComfyUI: секции, тайминги, ID спикеров, теги референсов. Без LLM

github.com/RmaNMetaverse/ComfyUI-FirstframeLastframeExtractor - автосохранение первого и последнего кадра из VAE-декода для повторной генерации в большем размере

jurn.link/dazposer/index.php/2026/08/15/updated-my-minimax-workflow-for-the-3060-12gb-card/ - воркфлоу #T2V для RTX 3060 12Gb: до 2.0 Мп без падений, Kitchen Attention, автоэкстракт кадров

huggingface.co/CZMartin22/TaoMate-H3-3step-ComfyUI - TaoMate упаковали в 3-шаговую лору

huggingface.co/Robert1212star/TaoMate-H3-3Step-ComfyUI - версия для комфи

huggingface.co/Kijai/MiniMax-H3_comfy/tree/main/loras - версия #LoRA 182Mb от Kijai #optimization

github.com/xm6018924/BSAI-ComfyUI-FaceRefine - еще один фикс мелких и дальних лиц

github.com/GENKAIx/Genkai-ComfyUI-Nodes - PromptSync: видео H3 рядом с таймкодами промпта — проверка, где происходят действия и диалоги

github.com/LoveRain1997/video-to-h3-prompt - видео → готовый H3-промпт: разделение на действие/камеру/эффекты/звук. CLI, нужен ffmpeg #captioning #vieo2prompt

github.com/FranckyB/ComfyUI-H3RefModPicker - форк RefModPicker: лучше UI, добавлен звук #refmods

huggingface.co/siraxe/H3_slider_experiments - #slider Camera Arc, Detail, Speed, Smear. Без триггеров

github.com/NyckM/H3-Relight-Minimax-ComfyUI - #relighting до трeх источников света на виджете → референс и промпт. GUI на португальском
👍9🔥5❤2👨‍💻1
Gaussian Splat Relighting от Niantic Spatial (Scaniverse)

У сплатов свет запечен в съемку: солнце, тени и погода записаны статично, а не как редактируемые параметры. Niantic научились переосвещать сцены без пересъемки. Бета для партнеров (там внизу есть кнопка чтобы податься в партнеры)

• смена времени суток - рассвет, закат, положения солнца
• атмосферные варианты - туман, влажная дымка
• погода - дождь, мокрый асфальт, лужи и блики
• геометрия не меняется - коллизии, навмеши и семантика переносятся как есть

Как работает: свет рендерится на сопутствующую .glb меш-геометрию, результат переносится на сплаты. Одна съемка = много условий без повторной реконструкции

Ограничение: качество зависит от меша. Трава и рельеф скрывают артефакты, стекло, окна и острые грани требуют проверки

#relighting #3d #gaussian

MAX
🔥8❤1👍1
This media is not supported in your browser
VIEW IN TELEGRAM
WallGS Pro

Плагин для #UE
Умеет рендерить и анимировать гауссианы. UE 5.3–5.8, от ПК до Android и VR. В Pro-версии появилось главное — #relighting

Что нового в Pro
• Релайтинг: пересветить скан можно двумя способами — через proxy-меш или автоматически по нормалям
• Сплаты попадают в Lumen-отражения
• Импорт сплатов на лету
• Culling volumes: обрезка сцен объемами
• 4DGS-анимации, LOD и DLSS-пресеты

Что вообще умеет
• 3DGS и 4DGS, коллизии в один клик, авто-LOD
• Android и Meta Quest через Vulkan
• Подготовка ассетов в 10 раз быстрее NanoGS, файлы на треть меньше

Есть бесплатный Windows-вьюер без установки Unreal.

Pro-версия — на FAB, релайтинг пока экспериментальный

#gaussian #plugin

MAX
🔥11🤯4