This media is not supported in your browser
VIEW IN TELEGRAM
Cosmos-Predict2
Семейство моделей от NVIDIA для создания изображений, видео и состояний мира с учетом физики - на основе текста, картинок или видеовходов.
2B и 14B
Про 2B пишут что хорошо, хотя втрое медленее SDXL при своей маленькости 😼
Код
Демо
Веса
воркфлоу
#text2image #text2video #image2image #image2video #world #physics
Семейство моделей от NVIDIA для создания изображений, видео и состояний мира с учетом физики - на основе текста, картинок или видеовходов.
2B и 14B
Про 2B пишут что хорошо, хотя втрое медленее SDXL при своей маленькости 😼
Код
Демо
Веса
воркфлоу
#text2image #text2video #image2image #image2video #world #physics
👍6
Pixie: Physics from Pixels
Модель добавляет физические свойства в 3D модели на #nerf и #gaussian
Мапит материалы с физическими свойствами на объекты на основе их внешнего вида за один форвард пасс, что позволяет проводить симуляции в реальном времени
Работает значительно быстрее (в 10³ раз) по сравнению с существующими методами
Код
Jupiter
#simulation #dymanics #material #physics
Модель добавляет физические свойства в 3D модели на #nerf и #gaussian
Мапит материалы с физическими свойствами на объекты на основе их внешнего вида за один форвард пасс, что позволяет проводить симуляции в реальном времени
Работает значительно быстрее (в 10³ раз) по сравнению с существующими методами
Код
Jupiter
#simulation #dymanics #material #physics
🔥12
This media is not supported in your browser
VIEW IN TELEGRAM
PhysMaster: Mastering Physical Representation for Video Generation via Reinforcement Learning
Улучшайзер физики для видеогенераторов. Направляет видеогенератор учитывать физические законы при генерации.
Код ждем
#simulation #physics #text2video #conditioning
Улучшайзер физики для видеогенераторов. Направляет видеогенератор учитывать физические законы при генерации.
Код ждем
#simulation #physics #text2video #conditioning
👍2😐2
PhysicEdit: From Statics to Dynamics: Physics-Aware Image Editing with Latent Transition Priors
Фреймворк от KREA / HuggingFace для правок изображений, где нужно соблюдать физику (преломление, деформация материалов, изменения состояния и т.п.)
Модель разбивает задачу на две ветки: текстовая (Qwen2.5‑VL описывает физические ограничения) и визуальная (обучаемые transition‑запросы задают, как именно должно меняться изображение по шагам).
На их бенчмарках PhysicEdit даёт +5.9% по физическому реализму и +10.1% по знание‑ориентированным правкам относительно Qwen‑Image‑Edit и ставит новый #SOTA среди опенсорс‑методов.
Гитхаб
HF
#imageediting #physics
Фреймворк от KREA / HuggingFace для правок изображений, где нужно соблюдать физику (преломление, деформация материалов, изменения состояния и т.п.)
Модель разбивает задачу на две ветки: текстовая (Qwen2.5‑VL описывает физические ограничения) и визуальная (обучаемые transition‑запросы задают, как именно должно меняться изображение по шагам).
На их бенчмарках PhysicEdit даёт +5.9% по физическому реализму и +10.1% по знание‑ориентированным правкам относительно Qwen‑Image‑Edit и ставит новый #SOTA среди опенсорс‑методов.
Гитхаб
HF
#imageediting #physics
🔥10👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Code as Worlds
VLM-агент, который пишет код симуляции физики на каждом шаге генерации видео
- Смотрит видео и пишет код сцены: объекты, их свойства, отношения, правила движения, камера, освещение
- Код в симуляторе проверяет как изменится сцена если поменять параметры
- Композиция: можно разобрать сцену на части и менять части
- Отделяет физическое состояние от внешнего вида — знает, что тяжёлый предмет не зависит от того, какого он цвета
Гитхаб
HF
Демо
#vlm #simulation #t2v #physics
VK | MAX
VLM-агент, который пишет код симуляции физики на каждом шаге генерации видео
- Смотрит видео и пишет код сцены: объекты, их свойства, отношения, правила движения, камера, освещение
- Код в симуляторе проверяет как изменится сцена если поменять параметры
- Композиция: можно разобрать сцену на части и менять части
- Отделяет физическое состояние от внешнего вида — знает, что тяжёлый предмет не зависит от того, какого он цвета
Гитхаб
HF
Демо
#vlm #simulation #t2v #physics
VK | MAX
👍9