This media is not supported in your browser
VIEW IN TELEGRAM
Test3R: Learning to Reconstruct 3D at Test Time
Реконструкция 3D сцен и предсказание глубины по нескольким ракурсам. Сравнивают себя с DUSt3R
Test Time - модель «учится» и настраивается на лету, в режиме обработки данных, а не только во время предварительного обучения. В прошлом году была статья по Test Time Training и такой подход использовала NVIDIA в video-dit. Когда-то давно, до хайпа нейросетей я думал что все нейросетки так работают. Неа
Код
#scenereconstruction #novelview #imageto3d #image2scene #video2scene #videoto3d #ttt
Реконструкция 3D сцен и предсказание глубины по нескольким ракурсам. Сравнивают себя с DUSt3R
Test Time - модель «учится» и настраивается на лету, в режиме обработки данных, а не только во время предварительного обучения. В прошлом году была статья по Test Time Training и такой подход использовала NVIDIA в video-dit. Когда-то давно, до хайпа нейросетей я думал что все нейросетки так работают. Неа
Код
#scenereconstruction #novelview #imageto3d #image2scene #video2scene #videoto3d #ttt
👍6
TTT3R: 3D Reconstruction as Test-Time Training
Метод улучшения 3D реконструкции CUT3R с использованием Test-Time Training (#TTT)
Вдвое улучшает оценку глобальной позы по сравнению с базовой моделью.
Обрабатывает тысячи изображений со скоростью 20 кадров в секунду, используя 6 ГБ VRAM
Пир этом избегает «забывания» данных
Гитхаб
#image2scene #video2scene #videoto4d #scenereconstruction #4d #novelview #imageto3d #image2scene #video2scene
Метод улучшения 3D реконструкции CUT3R с использованием Test-Time Training (#TTT)
Вдвое улучшает оценку глобальной позы по сравнению с базовой моделью.
Обрабатывает тысячи изображений со скоростью 20 кадров в секунду, используя 6 ГБ VRAM
Пир этом избегает «забывания» данных
Гитхаб
#image2scene #video2scene #videoto4d #scenereconstruction #4d #novelview #imageto3d #image2scene #video2scene
🔥11👍2❤1
tttLRM: Test-Time Training for Long Context and Autoregressive 3D Reconstruction
Модель для 3D-реконструкции из нескольких изображений. Загружаешь фотографии объекта или сцены - получаешь 3D-модель.
Главное: может обрабатывать до 64 изображений ( Long-LRM только 32) и работает в 2 раза быстрее чем существующие методы. #SOTA на Objaverse и DL3DV-10K.
Создаёт неявное 3D-представление в скрытом пространстве и преобразует его в разные форматы, например вгауссианы
Умеет авторегрессивно обновлять 3D-модель при поступлении новых фотографий - как если бы снимаешь объект с разных сторон и модель уточняется в реальном времени. В чем собственно и соль TTT
Реконструкция пёселя по одному изображению - повертеть тут
Гитхаб
#3d #scenereconstruction #TTT #gaussian #novelview
Модель для 3D-реконструкции из нескольких изображений. Загружаешь фотографии объекта или сцены - получаешь 3D-модель.
Главное: может обрабатывать до 64 изображений ( Long-LRM только 32) и работает в 2 раза быстрее чем существующие методы. #SOTA на Objaverse и DL3DV-10K.
Создаёт неявное 3D-представление в скрытом пространстве и преобразует его в разные форматы, например вгауссианы
Умеет авторегрессивно обновлять 3D-модель при поступлении новых фотографий - как если бы снимаешь объект с разных сторон и модель уточняется в реальном времени. В чем собственно и соль TTT
Реконструкция пёселя по одному изображению - повертеть тут
Гитхаб
#3d #scenereconstruction #TTT #gaussian #novelview
1🔥9👍5❤1
This media is not supported in your browser
VIEW IN TELEGRAM
Spatial-TTT
Tencent придумал потоковую визуально-языковую модель с обучением в процессе работы (#TTT) на базе Qwen3-VL
Обрабатывает потоковое видео и отвечает на вопросы о пространстве в нём. Модель запоминает и обновляет информацию о пространстве по мере поступления новых кадров
Гитхаб
HF
#vlm #streaming #video2text
Нейронавт в MAX
Tencent придумал потоковую визуально-языковую модель с обучением в процессе работы (#TTT) на базе Qwen3-VL
Обрабатывает потоковое видео и отвечает на вопросы о пространстве в нём. Модель запоминает и обновляет информацию о пространстве по мере поступления новых кадров
Гитхаб
HF
#vlm #streaming #video2text
Нейронавт в MAX
🔥10