Нейронавт | Нейросети в творчестве

1:20

1:11

Towards Realistic Example-based Modeling via 3D Gaussian Stitching

3D-моделирование гауссианами на основе примеров.

Наконец что-то с контролем результата и GUI.

Рабочий процесс состоит из трех этапов:

1) сегментация и преобразование гауссовой модели в реальном времени с использованием GUI

2) анализ KNN для определения граничных точек в области пересечения исходной и целевой моделей

3) двухфазная оптимизация целевой модели с использованием клонирования на основе выборки и градиентных ограничений.

Если вы чего-то не поняли в этом описании, я тоже. Гляньте видео, там примерно видно процесс

Код ждем

#imageto3d #modeling #photogrammetry #gaussian #image2gaussian

🔥8👍3

1.99K views18:05

1:33

ReconX: Reconstruct Any Scene from Sparse Views with Video Diffusion Model

Реконструкция 3D сцены по двум или нескольким ракурсам. Недостающую информацию генерирует видеогенератор и затем все это преобразуется в сцену на гауссианах

Код ждем

#gaussian #image2gaussian #image2scene #imageto3d

👍9❤1

1.85K views07:37

0:27

VistaDream: Sampling multiview consistent images for single-view scene reconstruction

Дерзко. Создает 3D сцену на гауссианах из одной картинки

Код
Галерея

#gaussian #image2scene #imageto3d #image2gaussian

🔥14🤔1

1.84K views13:08

0:25

LargeSpatialModel: End-to-end Unposed Images to Semantic 3D

Реконструкция сцены на гауссианах по двум входным изображениям. По одному уже было

LSM использует в качестве входных данных два некалиброванных изображения и в реальном времени восстанавливает световое поле, включая геометрию, внешний вид и семантику

Код ~~будет в ноябре~~ есть
Демо

#gaussian #image2scene #imageto3d #image2gaussian #realtime

🔥8

1.51K viewsedited 11:21

0:24

DiffSplat: Repurposing Image Diffusion Models for Scalable 3D Gaussian Splat Generation

Генератор 3D объектов на гауссианах по картинке, по тексту. Поддерживает контроль генерации контролнетом - в примерах есть canny, depth, normals

Модель представляет собой файнтюн PixArt-Sigma-XL-2-512-MS

Код
Веса
Демо ждем

#textto3d #imageto3d #gaussian #conditioning #text2gaussian #image2gaussian

🔥6👍2

2.26K viewsedited 09:38

0:30

Free4D: Tuning-free 4D Scene Generation with Spatial-Temporal Consistency

Создает 4D-сцены на гауссианах из одного изображения, управляемый рендер в реальном времени.

Код

#image2gaussian #image2video #imageto4d #gaussian #nivelview #realtime #4d

🔥7

1.85K viewsedited 11:14

0:50

Media is too big

ReconViaGen

Реконструкция 3D-объектов по нескольким ракурсам

- генерирует меши и PBR-материалы

- устраняет дыры и артефакты в моделях - додумывает недостающее диффузией

Реконструкция по 16 изображениям без уточнения требует менее 18 ГБ VRAM, с уточнением — менее 24 ГБ VRAM

Гитхаб
Неофициальная имплементация на Pytorch
Демо - тут можно и гауссову сцену получить

#imageto3d #pbr #image2gaussian #3d

👍12🔥1

2.31K views05:08

Giro

Экспериментальный пайплайн: одна картинка на входе, готовый VR-сплат на выходе. Фото превращается в орбитальное видео, потом в обрезанный сплат, по которому можно ходить в VR.

• Орбита вокруг объекта через MiniMax H3, фото как первый и последний кадр
• Свой гейт проверки: минимум 330° облета, ровное движение, замкнутый цикл
• Плохой сид перебрасывается автоматически, пропущенная дуга до-генерируется
• Маскирование объекта через SAM 3.1 до COLMAP
• Опциональная правка фона через Qwen-Image-Edit
• Обучение с прозрачным фоном, обрезка по visual hull
• Экспорт SPZ, SOG, PLY под VR, кнопка View in VR
• Веб-UI с живым прогрессом и причинами каждого решения

• Нужны две видеокарты по 24 ГБ, Linux
• Экспорт ориентирован на бюджет Quest

#image2gaussian #vr #gaussian

MAX

👍11

1.57K views15:18