SAMPart3D: Segment Any Part in 3D Objects
Семантическая сегментация 3D объектов на составляющие. Предлагаемые кейсы применения - выборочное редактирование материалов, геометрии, иерархическая сегментация по клику
Код
#segmentation #segmentation3D
Семантическая сегментация 3D объектов на составляющие. Предлагаемые кейсы применения - выборочное редактирование материалов, геометрии, иерархическая сегментация по клику
Код
#segmentation #segmentation3D
👍6
PartField: Learning 3D Feature Fields for Part Segmentation and Beyond
Сегментация 3D объектов на составляющие от Nvidia. Работает CAD моделями, сгенерированными моделями, реконструкциями на гауссианах
Код
#segmentation #gaussian #segmentation3d
Сегментация 3D объектов на составляющие от Nvidia. Работает CAD моделями, сгенерированными моделями, реконструкциями на гауссианах
Код
#segmentation #gaussian #segmentation3d
🔥5
This media is not supported in your browser
VIEW IN TELEGRAM
Stable Part Diffusion 4D: Multi-View RGB and Kinematic Parts Video Generation (SP4D)
Сегментатор кинематических частей на картинках и видео. Stability AI выступают одним из двух соавторов
В отличие от методов, которые генерируют только внешний вид, SP4D фиксирует как визуальную структуру, так и сочлененную геометрию, создавая 3D-объекты, готовые к ригу с учетом частей и анимации
Код ждем
#segmentation #segmentation3D #3d #imageto3d #videoto3d
Сегментатор кинематических частей на картинках и видео. Stability AI выступают одним из двух соавторов
В отличие от методов, которые генерируют только внешний вид, SP4D фиксирует как визуальную структуру, так и сочлененную геометрию, создавая 3D-объекты, готовые к ригу с учетом частей и анимации
Код ждем
#segmentation #segmentation3D #3d #imageto3d #videoto3d
👍6
SuperDec: 3D Scene Decomposition with Superquadric Primitives
Компактное представление 3D-сцен с использованием суперквадрических примитивов, разработано при участии Microsoft.
Вместо миллионов гауссиан — сотни примитивов
Модель умеет эффективно раскладывать облака точек объектов на набор суперквадрик, что позволяет получать выразительное, но при этом компактное представление 3D-сцен.
При том еще выполняет неконтролируемую сегментацию частей объектов, выделяя чёткие маски сегментов и группирует объекты по геометрической структуре без аннотаций.
— применимо в робототехнике для планирования пути и захвата объектов
— применимо для контроля генерации и редактирования изображений диффузными моделями, может создавать управляющие сцены
Гитхаб
#video2scene #segmentation3d
Компактное представление 3D-сцен с использованием суперквадрических примитивов, разработано при участии Microsoft.
Вместо миллионов гауссиан — сотни примитивов
Модель умеет эффективно раскладывать облака точек объектов на набор суперквадрик, что позволяет получать выразительное, но при этом компактное представление 3D-сцен.
При том еще выполняет неконтролируемую сегментацию частей объектов, выделяя чёткие маски сегментов и группирует объекты по геометрической структуре без аннотаций.
— применимо в робототехнике для планирования пути и захвата объектов
— применимо для контроля генерации и редактирования изображений диффузными моделями, может создавать управляющие сцены
Гитхаб
#video2scene #segmentation3d
👍11❤1🔥1
Open-YOLO 3D: Towards Fast and Accurate Open-Vocabulary 3D Instance Segmentation
Сегментация 3D-объектов с открытым словарём.
На вход принимает RGBD или 3D сцены
Модель из 2024 года, но держит #SOTA на наборах данных ScanNet200 и Replica.
Hаботает в 16 раз быстрее, чем лучшие существующие методы
Использует только 2D-обнаружение объектов на многовидовых RGB-изображениях, без необходимости применять ресурсоёмкие 2D базовые модели вроде Segment Anything (SAM) и CLIP
Код
#segmentation #segmentation3d
Сегментация 3D-объектов с открытым словарём.
На вход принимает RGBD или 3D сцены
Модель из 2024 года, но держит #SOTA на наборах данных ScanNet200 и Replica.
Hаботает в 16 раз быстрее, чем лучшие существующие методы
Использует только 2D-обнаружение объектов на многовидовых RGB-изображениях, без необходимости применять ресурсоёмкие 2D базовые модели вроде Segment Anything (SAM) и CLIP
Код
#segmentation #segmentation3d
🔥5
Name That Part: 3D Part Segmentation and Naming
Модель под названием AlLIGN-Parts сегментирует и именует части 3D объектов за один проход
Код ждем
#3d #segmentation3d
Модель под названием AlLIGN-Parts сегментирует и именует части 3D объектов за один проход
Код ждем
#3d #segmentation3d
❤6👍4
This media is not supported in your browser
VIEW IN TELEGRAM
SIMART
Разбивает сложные 3D-объекты на части и превращает статичные 3D-модели в интерактивные и пригодные для симуляций.
Гитхаб ждем
#3dto3d #simulation #3d #segmentation3D
Разбивает сложные 3D-объекты на части и превращает статичные 3D-модели в интерактивные и пригодные для симуляций.
Гитхаб ждем
#3dto3d #simulation #3d #segmentation3D
🔥2❤1👍1
Tripo (майское обновление)
Что добавилось:
• Segmentation V2 — разбиение объектов на смысловые части по геометрии, чёткие границы сегментов
• 8K‑текстуры — фотореалистичное разрешение за 2 минуты
• интеграция с ZBrush (Tripo DCC Bridge) — переход к скульптингу без экспорта и конвертации
• три уровня сегментации: 3–6, 6–15, 15+ частей
• с текстом на поверхностях пока справляется неидеально
• лучше работает с моделями выше 720 px
• одна бесплатная сегментация и одна бесплатная генерация в 8K на пользователя
Ну и еще добавили Tripo Team Plan
#3d #segmentation3d #texture
Что добавилось:
• Segmentation V2 — разбиение объектов на смысловые части по геометрии, чёткие границы сегментов
• 8K‑текстуры — фотореалистичное разрешение за 2 минуты
• интеграция с ZBrush (Tripo DCC Bridge) — переход к скульптингу без экспорта и конвертации
• три уровня сегментации: 3–6, 6–15, 15+ частей
• с текстом на поверхностях пока справляется неидеально
• лучше работает с моделями выше 720 px
• одна бесплатная сегментация и одна бесплатная генерация в 8K на пользователя
Ну и еще добавили Tripo Team Plan
#3d #segmentation3d #texture
👍6❤1
Instok3D
Модель для 3D-сцен из обычных фото. Вычленяет объекты в структурированные группы токенов, не требует 3D-разметок.
• декомпозиция сцен в группы токенов по инстансам
• нативная идентификация объектов
• реконструкция, сегментация, манипуляции за один проход
Feed-forward архитектура. Работает с непозиционированными изображениями.
Код ждем
#segmentation3D #3d #imageto3d
Модель для 3D-сцен из обычных фото. Вычленяет объекты в структурированные группы токенов, не требует 3D-разметок.
• декомпозиция сцен в группы токенов по инстансам
• нативная идентификация объектов
• реконструкция, сегментация, манипуляции за один проход
Feed-forward архитектура. Работает с непозиционированными изображениями.
Код ждем
#segmentation3D #3d #imageto3d
👀3🔥2👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Hunyuan3D-Buffalo 1.0
Единая модель понимает 3D-объекты, генерирует их из текста и редактирует по словесной инструкции - в одном пайплайне, без отдельных моделей под каждую задачу.
• отвечает на вопросы про 3D-объект и находит нужную часть по описанию
• генерирует 3D-модель из текстового промпта
• редактирует готовый меш по текстовой инструкции не пересоздавая объект заново
• выделяет отдельные семантические части модели по словесному запросу
Как устроено
• общий бэкбон Hunyuan3D-VLM связывает язык и 3D-представление
• поверх него работают DiT-модули, они отвечают за генерацию, редактирование и построение частей объекта
опенсорс ждем
#3d #textto3d #3dediting #3dlm #segmentation3d
Единая модель понимает 3D-объекты, генерирует их из текста и редактирует по словесной инструкции - в одном пайплайне, без отдельных моделей под каждую задачу.
• отвечает на вопросы про 3D-объект и находит нужную часть по описанию
• генерирует 3D-модель из текстового промпта
• редактирует готовый меш по текстовой инструкции не пересоздавая объект заново
• выделяет отдельные семантические части модели по словесному запросу
Как устроено
• общий бэкбон Hunyuan3D-VLM связывает язык и 3D-представление
• поверх него работают DiT-модули, они отвечают за генерацию, редактирование и построение частей объекта
опенсорс ждем
#3d #textto3d #3dediting #3dlm #segmentation3d
👍15
PanoSeg3R
#SOTA Сегментация 3D-сцен из панорамных снимков без оптимизации под каждую сцену. Панорамы на вход, размеченное 3D-облако точек на выходе
• feed-forward: несколько панорам -> семантическая 3D-сегментация за проход
• стабильная геометрия и метки - байзлайны теряют сцены, модель держит близко к GT
• автосборка данных - размечает неаннотированные панорамы через SAM3, PanSt3R и VLM-фильтр
• zero-shot перенос улучшается на свежих данных
Разметка без датасетов с руками: панорама режется на кадры, SAM3 дает маски, PanSt3R - грубые классы, VLM отсеивает мусор
Код ждем
#segmentation3d
MAX
#SOTA Сегментация 3D-сцен из панорамных снимков без оптимизации под каждую сцену. Панорамы на вход, размеченное 3D-облако точек на выходе
• feed-forward: несколько панорам -> семантическая 3D-сегментация за проход
• стабильная геометрия и метки - байзлайны теряют сцены, модель держит близко к GT
• автосборка данных - размечает неаннотированные панорамы через SAM3, PanSt3R и VLM-фильтр
• zero-shot перенос улучшается на свежих данных
Разметка без датасетов с руками: панорама режется на кадры, SAM3 дает маски, PanSt3R - грубые классы, VLM отсеивает мусор
Код ждем
#segmentation3d
MAX
🔥6👍3❤1