Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Как вам такая фотограмметрия? Вообще за полгода существования Зеленых Роботов в резервации уже несколько раз были прорывы в этой области. Но на сей раз достижение не только в качестве. Эта штука выдает и геометрию, и материал
https://www.youtube.com/watch?v=19gzG-AsBNU
#фотограмметрия #photogrammetry
🔥3
This media is not supported in your browser
VIEW IN TELEGRAM
Point-Cloud Completion with Pretrained Text-to-image Diffusion Models

В NVIDIA разработали модель, которая достраивает неполные облака точек. Результаты 3D-сканирования (например с лидаров) часто не охватывают объекты целиком, оставляя "белые пятна", где данных о форме объекта не хватает. Эта модель генерирует недостающие данные на основе существующих и текстовой подсказки.

А что с текстурами, NVIDAI?

Код обещают выложить

#3Dto3D #3Dreconstruction #photogrammetry
Не мое. Давно хотел такое сделать, руки не доходили.
Реконструкция сцены из фильма гауссианами. Можно пихнуть ее в Unreal и дальше на что фантазии хватит.

твиттер

#photogrammetry #video2scene #videoto3D #reconstruction
🔥14❤2
Towards Realistic Example-based Modeling via 3D Gaussian Stitching

3D-моделирование гауссианами на основе примеров.

Наконец что-то с контролем результата и GUI.

Рабочий процесс состоит из трех этапов:

1) сегментация и преобразование гауссовой модели в реальном времени с использованием GUI

2) анализ KNN для определения граничных точек в области пересечения исходной и целевой моделей

3) двухфазная оптимизация целевой модели с использованием клонирования на основе выборки и градиентных ограничений.

Если вы чего-то не поняли в этом описании, я тоже. Гляньте видео, там примерно видно процесс

Код ждем

#imageto3d #modeling #photogrammetry #gaussian #image2gaussian
🔥8👍3
This media is not supported in your browser
VIEW IN TELEGRAM
Generative Multiview Relighting for 3D Reconstruction under Extreme Illumination Variation

Реконструкция 3D объектов в экстремальных условиях освещения

Проект Гугла, кода нет

#relighting #nerf #3Dreconstruction #photogrammetry
😭2👀2❤1
Fast3R: Towards 3D Reconstruction of 1000+ Images in One Forward Pass

Реконструкция 3D сцены за один проход от Facebook Research. Обрабатывает много изображений параллельно, тогда как обычно для этой задачи входные изображения обрабатывают попарно за много проходов.

Код
Демо

#imageto3d #videoto3d #photogrammetry
👍6🔥3
Matrix3D: Large Photogrammetry Model All-in-One

Единая модель фотограмметрии от Apple, выполняющая оценку ракурса, глубины и синтез нового ракурса

Сгенерированные новые ракурсы предлагают использовать для реконструкции сцены гауссианами

Код

#photogrammetry #novelview #image2depth
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
Triangle Splatting for Real-Time Radiance Field Rendering

Новый способ представления и рендера объемных сцен от DeepMind и Ко на треугольных сплатах. Конец гегемонии гауссовых сплатов?

- Высокая визуальная точность. В отличие от гауссиан сохраняет четкость в мелких деталях

- Быстрая сходимость

- Скорость. Более 2400 FPS при разрешении 1280×720 на RTX4090

- Совместим с традиционными пайплайнами

Код

#rendering #news #trisplat #photogrammetry
🔥5
SHELLS: Topologically Consistent Multi-view 3D Head Reconstruction via Coarse-Guided Layered Surface Sampling

Реконструкция 3D‑головы с текстурами от Google по нескольким видам. Держит топологию, избегает артефактов

Сразу пригодная для анимации топология

Точность до субмиллиметровых деталей.

Жрет 2.4 GB VRAM. Но это VRAM у кого надо VRAM. Кода-весов нет

на базе GNM

#head #HMR #imageto3d #photogrammetry
🔥17💯2🤯1
#gaussian

offlinetools.io/colmap - COLMAP в браузере. Камера, облако точек, маски. #photogrammetry

github.com/ooolabdev/ooosplat - OOOSplat: десктоп-приложение, видео/фото → гауссианы в один клик. COLMAP, тренировка, превью, редактирование, экспорт

github.com/mlslabs/MLSLabsGaussianSplattingRenderer-UE - обновился плагин для #UE : Vulkan вместо LibTorch, AMD

github.com/WilliamLiu-1997/Gaussian-Splat-Lite - облегченная реализация 3DGS

gphyx.com - gSplatting 2.0 плагин для Final Cut Pro: эдитор пути камеры, 3D-объекты с окклюзией #FCP youtu.be/pvmV_JA9LCs

github.com/PozzettiAndrea/ComfyUI-LiTo
github.com/Ltamann/Comfyui-TBG-LiTo - ноды Apple LiTo для #ComfyUI

liquiduslabs.com/lulusplat - LuLuSplat v1.1.0 для #Mac

github.com/quixbrics/gausseous - еще один инструмент сплатов попробовать

VK | MAX
👍9🔥3❤2
Две программы для реконструкции сцен, разные по позиционированию

MipMap

Профессиональный комплекс для реальной 2D/3D реконструкции. Строит 3D-модели и сплаты с дронов, LiDAR, 360-камер, фото и видео

• Фотограмметрия, ортофото, точки, меши, сплаты
• MipMap Desktop — десктоп для съёмки, инспекции, архитектуры (бесплатно попробовать)
• MipMap Engine — SDK для интеграции и приватного деплоя
• MipMap Cloud — облако для просмотра и совместной работы
• MipMap Link — планирование полетов дро7нов
• 2D-результаты: DOM, DSM | 3D: точки, меши, сплаты

Бесплатная учетка для старта
———

3DF Zephyr Free

Бесплатная для личного использования версия полноценной фотограмметрии. Простая точка входа в тему

• Собирает 3D-модель из фото
• Открывает .ZEP-файлы из любых версий Zephyr
• Не ограничено по времени

• До 50 фото на проект
• Одна NVIDIA-карта на ускорение
• Ограничен экспорт (текстуры только JPG)

#photogrammetry #gaussian
👍8