Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
WorldGrow: Generating Infinite 3D World

Генератор бесконечных явных 3D-миров, альтернатива существующим симуляторам интерактивных миров

Создаёт бесконечно расширяемые 3D-миры с согласованной геометрией и реалистичным внешним видом

Не страдает от геометрических и визуальных несоответствий, как методы 2D-лифта.

Не ограничивается генерацией объектов, как современные 3D базовые модели, а работает на уровне сцен.

Код ждем

#text2world #world #text2scene
👍12
PAN

Интерактивная модель мира.
Учитывает состояние, причинность и действие.

Решает проблемы связности, причин-последствий, обобщения через абстракцию и мультимодельность.

Короче создает видео с учетом всего вышеуказанного.

На сайте есть интерактивные примеры

Кода нет

#world #text2world #research
👍6
This media is not supported in your browser
VIEW IN TELEGRAM
HY-World 1.5

Обновился генератор миров от Tencent.
Номер версии не пострадал.

Релизнули WorldPlay-5B на базе WAN
Релизнули код обучения WorldPlay-8B на базе HY Video, можно обучать свои миры
Код инференса получил поддержку квантизации и оптимизацию


Гитхаб
Попробовать на олфсайте - говорят что попробовать могут теперь все без очереди

#text2world #image2world #text2panorama #image2panorama #panorama360 #text2scene #image2scene #world #realtime #finetuning
👍9🔥5
This media is not supported in your browser
VIEW IN TELEGRAM
Waypoint-1

Генератор интерактивных игровых миров в реальном времени от Overworld, ориентированный на локальный запуск

Да, он легкий и быcтрый, но но совершенно не помнит что за спиной. Зато легкий и быстрый. Бесполезная штука

Есть модели small (12.5 ГБ) и medium - не отображается в репо

Гитхаб
HF
Попробовать

#world #text2world
👍8😁1
Нейронавт | Нейросети в творчестве
LingBot-Depth: Masked Depth Modeling for Spatial Perception Превращает неточные и неполные данные с датчиков глубины в точные 3D-измерения. Особенно хорошо работает там, где обычные камеры сбоят — например, на стеклянных или металлических поверхностях В…
LingBot-World: Advancing Open-source World Models

Команда LingBot видимо подходит к выпуску продуктов комплексно.

На этот раз выпустили интерактивную (игровую) модель мира

Работает в рилтайме, долго держит контекст, учитывает физику. Заявляют что каждое действие в их модели имеет последствие

Пригодна не только для генерации миров, но и для реконструкции локаций

Выпустили модель LingBot-World-Base (Cam) разрешением 480p и 720p

Ждем LingBot-World-Base (Act) и LingBot-World-Fast

Кодовая база на Wan2.2

Гитхаб
HF

#world #text2world #video2scene #scenereconstruction
🔥11❤4👍2
Project Genie: Experimenting with infinite, interactive worlds

Гугл выдал подписчикам Google AI Ultra в США доступ к Genie 3 - генератору интерактивных игровых миров

Можно изменить готовый мир или создать свой и побродить в нем минуту. И все.

Избранным пробовать тут

#text2world #news #world
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
World Craft: Agentic Framework to Create Visualizable Worlds via Text

Генератор исполняемых игровых сцен и миров по текстовому промпту. Не путать с видеомирами.

Имеет систему мультиагентов, которая занимается сюжетом, генерацией макета и созданием ассетов

Гитхаб

#text2world #world #gaming #text2game
👍5😱1
InSpatio-WorldFM

Генератор 3D миров в реальном времени

В отличие от миро-видеогенераторов, думает в 3D и тем сохраняет консистентность

Создает интерактивные миры по одному фото, по текстовому описанию

Рилтайм не на какихто там H100, а на всего лишь 4090

Ну это на словах. На деле в демо проходишь пару шагов и упираешься в невидимую стену

Гитхаб
HF
Демо

#world #text2world #image2world

Нейронавт в MAX 📲
👍10👎3😁2❤1
WorldCompass

Hunyuan выложил фреймворк для дообучения интерактивных моделей мира

Улучшает длинные взаимодействия в HY-World 1.5

Предлагают потыкать в демо. Оно очень тормозное зато потом красивое нетормозное видео дают скачать и сцену .ply. Но я не смог потому что все на китайском и кривое

Странно что дообученную модель не выпустили как новую версию генератора миров

HF - дообученная модель на на 8B
Демо - я вошел через WeChat

#world #text2world #finetuning

Нейронавт в MAX
👍4
Marble 1.1 / Marble 1.1 Plus

World Labs выпустили обновлённые модели для генерации 3D-миров с последующим редактированием. Модели поумнели, интерфейс стал удобнее

Marble 1.1 — новая базовая модель с улучшенным качеством генерации

Marble 1.1 Plus создаёт более масштабные миры, автоматически расширяя пространство при возможности

Улучшения: новый селектор моделей, визуальные и технические доработки страницы активов, упрощённый доступ к расширенному редактированию.

Marble 1.1 — 1500 кредитов за мир
Marble 1.1 Plus — 1500 базовых кредитов + 300 за каждый дополнительный «динамический куб»

Пробовать тут

Тут есть целая студия где можно анимировать камеру, импортировать сплаты.

Закинул туда свою старую генрацию из флюкса с промптом

Весело но пока качество не радует. Есть видеоэнхенсер но он в платной подписке

#text2world #image2world #2d2world #world
👍3
This media is not supported in your browser
VIEW IN TELEGRAM
Waypoint-1.5

Обновка генератора интерактивных игровых миров в реальном времени от Overworld

Фишка этих ребят в том что ориентируются на домашнее железо и локальный запуск

Две модели: 720p для мощных систем и 360p для более широкого спектра ПК, в будущем — поддержка Apple Silicon

Похоже, даже не для самых богатых конфигураций 60азы при 720p должно быть реально

Установка
Демо
HF демо

Спасибо @EvgenyiPerm

#world #interactive #text2world
🔥8👍4
Odyssey-2 Max

Крупнейшая на сегодня world model - от Odyssey.

Cимулирует развитие сцены в реальном времени, физично реагируя на действия пользователя. В отличие от видеомоделей, акцент сделан на причинно-следственной симуляции кадр за кадром, что улучшает движение, взаимодействие объектов и стабильность длинных последовательностей.

Доступна в закрытой бета-версии для партнёров

Спасибо @Endorpheen

#world #text2world #simulation #realtime
👍5
DreamX-World

Модель интерактивных миров с видеобэкбоуном на Wan2.2

• генерирует реалистичные и фантастические миры (городские, природные, архитектурные, sci‑fi и др.)
• вид от первого и третьего лица
• реагирует на промпты - меняет среду через событийные подсказки
• обеспечивает стабильное поведение камеры и согласованность сцены
• обучена на данных Unreal Engine, геймплее и реальных видео

Обещают выпустить длинную интерактивную рилтайм генерацию, AV-генерацию. То есть видимо на тяжелом WAN все это далеко не рилтайм пока

Гитхаб
HF - выпустили 5B. 14B ждем

#world #intereactive #text2world
🔥4👍2❤1
Media is too big
VIEW IN TELEGRAM
Starchild‑1 (Odyssey)

Мультимодальная модель мира генератор интерактивных сцен в реальном времени. Развитие Odyssey 2

• генерирует видео и звук синхронно
• редактирует и стримит видео в реалтайме
• реагирует на действия пользователя
• принимает голосовые команды
• строит длинные непрерывные сцены

• 20 FPS
• нет публичного демо
• есть техрепорт и видео с пометкой «симуляция в реальном времени»

#text2world #world #av #interactive #realtime
👍3🤔2
This media is not supported in your browser
VIEW IN TELEGRAM
DreamX-World 1.0

Уже была в мае новость про эту видеомодель мира на базе #wan22

Сейчас выпустили
DreamX-World-5B - вроде 5B уже было, но тут свежие веса 🤷‍♂️
DreamX-World-5B-Cam - 5-секундные видео с точным контролем камеры

Минута непрерывного хронометража, интерактивность в рилтайме. Хорошая память - можно крутиться и ничего не пропадет

Обещают выпустить какую-то бету

Гитхаб

#cameracontrol #world #intereactive #text2world #realtime
👍7🤔3
AlayaWorld

Видеогенератор интерактивных миров в рилтайме

Акцент на долгосрочную согласованность мира и мгновенную реакцию на действия - внизу сайта есть демка

• 60+ секунд непрерывного видео 720p 24fps
• управление персонажем через WASD
• каст заклинаний как часть геймплея
• смена стиля прямо в генерации
• 15B параметров

Код / веса ждем

#world #text2world #imagw2world #interactive #realtime
👍6😁2
LingBot-World 2.0

Вот наконец наметился прогресс в генеративных игровых мирах

• час генерации без падения качества (видео на сайте)
• действия и события: атаки, заклинания, стрельба
• 720p/60fps, геймплейный формат

• генерация детализированных сцен с откликом <1 сек
• мультипользовательская сборка мира - игроки и режиссёры в одном пространстве
• агентное поведение плюс прямое вмешательство пользователя
• бесконечное исследование без визуальных артефактов
• учёт динамики и временных зависимостей - движение, события, развитие сцены
• база для симуляций и прогнозирования - робототехника, интерактивные данные

Гитхаб
HF
Демо - управление довольно тупое, физику забыли пригласить, но интерактивность уже есть

#interactive #world #t2w #text2world #i2w
👍7🤔5❤2
Media is too big
VIEW IN TELEGRAM
ABot-World

Генератор интерактивных миров, работает на потребительских GPU с бесконечной генерацией в рилтайме

Гитхаб
HF
Демо
Студия

Спасибо @m_franz

#intecative #realtime #text2world #world #image2world
👍12