Нейронавт | Нейросети в творчестве
13.2K subscribers
7.15K photos
5.66K videos
51 files
7.24K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Cosmos-Predict2

Семейство моделей от NVIDIA для создания изображений, видео и состояний мира с учетом физики - на основе текста, картинок или видеовходов.

2B и 14B

Про 2B пишут что хорошо, хотя втрое медленее SDXL при своей маленькости 😼

Код
Демо
Веса
воркфлоу

#text2image #text2video #image2image #image2video #world #physics
👍6
Pixie: Physics from Pixels

Модель добавляет физические свойства в 3D модели на #nerf и #gaussian
Мапит материалы с физическими свойствами на объекты на основе их внешнего вида за один форвард пасс, что позволяет проводить симуляции в реальном времени

Работает значительно быстрее (в 10³ раз) по сравнению с существующими методами

Код
Jupiter

#simulation #dymanics #material #physics
🔥12
This media is not supported in your browser
VIEW IN TELEGRAM
PhysMaster: Mastering Physical Representation for Video Generation via Reinforcement Learning

Улучшайзер физики для видеогенераторов. Направляет видеогенератор учитывать физические законы при генерации.

Код ждем

#simulation #physics #text2video #conditioning
👍2😐2
PhysicEdit: From Statics to Dynamics: Physics-Aware Image Editing with Latent Transition Priors

Фреймворк от KREA / HuggingFace для правок изображений, где нужно соблюдать физику (преломление, деформация материалов, изменения состояния и т.п.)

Модель разбивает задачу на две ветки: текстовая (Qwen2.5‑VL описывает физические ограничения) и визуальная (обучаемые transition‑запросы задают, как именно должно меняться изображение по шагам).

На их бенчмарках PhysicEdit даёт +5.9% по физическому реализму и +10.1% по знание‑ориентированным правкам относительно Qwen‑Image‑Edit и ставит новый #SOTA среди опенсорс‑методов.

Гитхаб
HF

#imageediting #physics
🔥10👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Code as Worlds

VLM-агент, который пишет код симуляции физики на каждом шаге генерации видео

- Смотрит видео и пишет код сцены: объекты, их свойства, отношения, правила движения, камера, освещение
- Код в симуляторе проверяет как изменится сцена если поменять параметры
- Композиция: можно разобрать сцену на части и менять части
- Отделяет физическое состояние от внешнего вида — знает, что тяжёлый предмет не зависит от того, какого он цвета

Гитхаб
HF
Демо

#vlm #simulation #t2v #physics

VK | MAX
👍9