Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Не мое. Давно хотел такое сделать, руки не доходили.
Реконструкция сцены из фильма гауссианами. Можно пихнуть ее в Unreal и дальше на что фантазии хватит.

твиттер

#photogrammetry #video2scene #videoto3D #reconstruction
🔥14❤2
Media is too big
VIEW IN TELEGRAM
Concerto: Joint 2D-3D Self-Supervised Learning Emerges Spatial Representations

Модель для работы с 3D-представлениями. Имитирует человеческий процесс обучения абстрактным понятиям.

Проще говоря, создает реконструкции 3D сцен по видео или облаку точек. Ну то есть на вход можно подать и готовую сцену на гауссианах .ply, и он должен ее улучшить.

Код
Демо

#reconstruction #video2scene #rendering #gaussian #videoto3d
👍4❤2
Media is too big
VIEW IN TELEGRAM
UniCorrn: Unified Correspondence Transformer Across 2D and 3D

Модель от Adobe и компании для работы с 2D‑ и 3D‑данными, объединяет обработку разных пространств в одной архитектуре.

Находит соответствия между 2D‑изображениями и 3D‑сценами в любых комбинациях

Работает одновременно с плоскими изображениями и объёмными данными

Пригодно для задач AR/VR, робототехники и 3D‑реконструкции по фото

Гитхаб

#tracking #3d #reconstruction
👍8
SplashSplat

реконструкция брызгающих жидкостей из реальных видео

Метод от EPFL, ETH Zurich, Google и Microsoft. Восстанавливает динамику жидкости из многокамерной съемки: семь калиброванных 4K-камер, 20 сцен с разными жидкостями и контейнерами.

Главный принцип - накладывать физическую структуру только там, где наблюдения могут ее ограничить. Маски кадров сливаются в уровень жидкости, перенос между кадрами дает поле скоростей, а по нему движутся лагранжевы носители, которые корректируются по новым наблюдениям и перезасеваются там, где теряется покрытие.

Обходит #SOTA в динамическом гауссовом сплэттинге на реальных и синтетических сценах. Движение физически правдоподобнее, тренировка дешевле.

Поддерживает новые ракурсы, временную интерполяцию и перенос стиля без повторной оптимизации.

Гитхаб ждем

#gaussian #reconstruction #styletransfer
🔥4👍2