SwitchLight 3.0

Обновился инструмент для релайтинга

Есть облачная и десктопная версии

работает с 4К, поддерживает 16-bit EXR

Интеграция с Блендером и UE5

Все платное. Студенты могут поклянчить бесплатный некоммерческий доступ

#video2PBR #video2normal #relighting #exr #ue #blender

MVInverse: Feed-forward Multi-view Inverse Rendering in Seconds

Реконструкция геометрии, PBR материалов и освещения по одному или нескольким ракурсам. Все это называется обратный рендеринг.

Скорость рендера 10 fps на A100

Гитхаб

#relighting #pbr #video2pbr #video2texture #rendering #video2scene #image2scene

Generative World Renderer

Фреймворк и датасет для прямого и обратного рендеринга видео на основе данных из игр

Обратный рендер извлекает из RGB-видео G-буферы (пассы) - альбедо, нормали, глубина, шероховатость, металличность

позволяет стилизовать и модифицировать игровые окружения по запросам пользователя

улучшает результаты обратного рендеринга, давая чистое альбедо, геометрию без артефактов и точные предсказания материалов

синтезирует пересвеченные изображения с помощью карт окружения

Для обратного рендера взята Cosmos-Transfer1-DiffusionRenderer

Для Game Editing — Wan2.1 1.3B

Гитхаб
Демо

#video2normals #video2pbr #video2depth #controlnet