Point-Cloud Completion with Pretrained Text-to-image Diffusion Models

В NVIDIA разработали модель, которая достраивает неполные облака точек. Результаты 3D-сканирования (например с лидаров) часто не охватывают объекты целиком, оставляя "белые пятна", где данных о форме объекта не хватает. Эта модель генерирует недостающие данные на основе существующих и текстовой подсказки.

А что с текстурами, NVIDAI?

Код обещают выложить

#3Dto3D #3Dreconstruction #photogrammetry

Generative Multiview Relighting for 3D Reconstruction under Extreme Illumination Variation

Реконструкция 3D объектов в экстремальных условиях освещения

Проект Гугла, кода нет

#relighting #nerf #3Dreconstruction #photogrammetry

ArtiFixer

Модель NVIDIA для улучшения 3D‑реконструкций — работает с неполными данными, заполняет пробелы в 3D‑сценах.

• генерирует новые виды сцены
• улучшает 3D‑представление
• учитывает текстовые подсказки
• обрабатывает RGB‑изображения, карты непрозрачности и карты лучей камеры

• базовая модель — Wan2.1 (WanTransformer3DModel)
• 16,9 млрд параметров
• преимущество 1–3 дБ по PSNR (на наборах MipNeRF 360 и DL3DV‑10K)

https://github.com/nv-tlabs/artifixer

https://huggingface.co/nvidia/ArtiFixer

Спасибо @m_franz

#gaussian #optimization #3denhance #3dreconstruction

Surflo

Реконструкция 3D-поверхности из нескольких фото. Справляется с передним и задним планом, держит согласованность видов.

• строит облако точек, конвертирует в сетку
• работает с любым числом фото - размер скрытого состояния не растёт
• даёт разное разрешение от грубого превью до плотной сетки
• для контроля точек использует Flow-Matching и гауссианы

Гитхаб ждем

#gaussian #3dreconstruction #image2scene

Релизнули веса / код реконструктора 3D-поверхности из нескольких фото Surflo

Гитхаб
HF

#gaussian #3dreconstruction #image2scene

VK | MAX