Нейронавт | Нейросети в творчестве

Krea Stage

У Krea AI опять обновка.
Добавили функцию генерации 3D сцен

#image2scene #imageto3d #text2scene #textto3d

👍11❤2

2.24K viewsedited 15:20

0:56

spAItial

Cоздание 3D-контента с помощью пространственных базовых моделей, понимающих геометрию и физику

Судя по видео, создает сцены по текстовому описанию. А судя по анкете, планируют создавать и по фото и по видео

Записаться в вейтлист

#textto3d #text2scene #gaussian

👍9😱3❤2

2.19K views06:34

0:12

0:25

0:28

ImmerseGen: Agent-Guided Immersive World Generation with Alpha-Textured Proxies

Разработка ByteDance.
Создаёт 3D-миры по текстовым описаниям для виртуальной реальности. Сначала формируется базовая местность, а затем добавляются объекты.

Под капотом агенты, работающие на основе визуальных языковых моделей

Код ждем

#VR #vlm #text2scene #text2world

👍9🤯6❤4

2.21K views15:48

"Первый опенсорсный генератор 3D миров, полностью совместимый с графическими пайплайнами"

Создает сцены и 360-градусные панорамы по тексту и по картинке.

В основе работы модели - алгоритм представления и генерации 3D-сцен с семантической иерархией.

В интерактивной демке панорамы на сайте проекта при попытке погулять в генерации очень быстро наталкиваешься на границу, за которую не пускают, как будто там не честное 3D, а картинка натянутая на карту глубины. Так что не вижу в чем он тут "первый", разве что в том что опенсорс. Ну да ладно, это первое впечатление.

Предлагают использовать в VR, геймдеве, физической симуляции, задачах с взаимодействием с объектами

Код
Веса
Попробовать - вход через WeChat. Я залогинился, но дальше сайт не прогружается

Спасибо @iNevestenko

#text2world #image2world #text2panorama #image2panorama #360 #text2scene #image2scene #world

👍10⚡2❤1😱1

1.84K views09:53

0:31

1:17

3D сцены HunyuanWorld 1.0 полностью редактируемые
(ну они так и написали - совместимые с 3D пайплайнами)

Можно попробовать запустить его в Google Colab Pro (нужно 22ГБ VRAM)

Jupiter / Colab

#text2world #image2world #text2panorama #image2panorama #360 #text2scene #image2scene #world

👍7🔥2

1.59K views10:16

Hunyuan World Model 1.0-Lite

Облегченная версия генератора 3D миров HunyuanWorld-1.0

Требования к VRAM снизили с 26 до 17 ГБ благодаря FP8-квантованию. Ну могли бы и до 16 уж дотянуть 🤩

SageAttention уже прикручен.

Гитхаб
Hugging Face
Демо

#text2world #image2world #text2panorama #image2panorama #360 #text2scene #image2scene #world

Please open Telegram to view this post

VIEW IN TELEGRAM

Please open Telegram to view this post

VIEW IN TELEGRAM

👍11❤1😁1

2.02K views12:16

0:37

Media is too big

HunyuanWorld-Voyager

Генерация видео, совмещенная с 3D реконструкцией.
Контроль камеры при генерации
Экспорт 3D моделей
Контроль стиля-освещения-погоды

Со всеми вытекающими - умеет создавать 3D модели по картинке, делать карту глубины и т п.

Опенсорс
При создании видео в 540p расходует 60Гб VRAM

Mirage, есть чем ответить?

Гитхаб
Попробовать - не совсем понятно новая тут демка или старая

#world #text2world #imageto3d #text2video #text2scene

1👍10😱3❤2

2.38K views12:14

SpatialGen: Layout-guided 3D Indoor Scene Generation

По семантическому 3D-макету SpatialGen создает фотореалистичную 3D-сцену в помещении на основе текстовой или графической подсказки. Под капотом Flux с контролнетомй и гауссианы

Код

#gaussian #textto3d #text2scene #mask2scene

👍11👀2

2.2K views15:18

0:37

WorldExplorer: Towards Generating Fully Navigable 3D Scenes

Очередная генерилка миров. Сначала создает картинку по тексту, затем создает еще ракурсы и превращает в сцену на гауссианах

На сайте есть интерактивный вьюер где можно походить по примерам сцен

Может не так нарядно как у некоторых, зато честно

Приблизительное время для RTX 3090:

Генерация каркаса: ~5 минут (быстрый режим)
Расширение сцены: 6-7 часов (полная генерация 3D-сцены)

Гитхаб

#text2world #world #text2scene #gaussian

👍5

2.18K views08:11

Windows-HunyuanWorld-Voyager

Порт HunyuanWorld-Voyager полностью оптимизированный под Windows

#world #text2world #imageto3d #text2video #text2scene #windows

👍6

1.77K views07:11

1:34

WorldGrow: Generating Infinite 3D World

Генератор бесконечных явных 3D-миров, альтернатива существующим симуляторам интерактивных миров

Создаёт бесконечно расширяемые 3D-миры с согласованной геометрией и реалистичным внешним видом

Не страдает от геометрических и визуальных несоответствий, как методы 2D-лифта.

Не ограничивается генерацией объектов, как современные 3D базовые модели, а работает на уровне сцен.

Код ждем

#text2world #world #text2scene

👍12

1.8K views12:16

#text2scene #textto3d #imageto3d #image2scene #3d

1.69K views12:51