⚙️ AIsphere выпустила PixVerse R2 - real-time world model с памятью внутри сессии

Компания AIsphere, стоящая за платформой генерации видео PixVerse, представила PixVerse R2 - универсальную real-time модель мира. Вместо фиксированных клипов она генерирует непрерывные интерактивные аудиовизуальные пространства: текст, изображения, аудио и нажатия клавиш принимаются прямо по ходу генерации, а состояние сохраняется на протяжении всей сессии.

Пользователь создаёт мир из текста или картинки, двигает персонажа клавишами WASD, меняет камеру и промптами подменяет героев, добавляет объекты или перестраивает окружение - сцена при этом не останавливается. Введённые ранее действия не исчезают: они меняют состояние мира и влияют на дальнейшее развитие. В интерактивном фильме-игре Zero Mark подношение дракона или листа существу на пути приводит к разным исходам, сгенерированным на ходу.

Технически R2 разводит скорость и качество на два слоя. Бэкбон Omni Causal AR - причинно-авторегрессионная модель, обученная на коротком и длинном видео, мультимодальных референсах, аудио и управляющих сигналах, - масштабируется по пяти измерениям. Слой Real-Time Acceleration дистиллирует его в ultra-few-step версию для live-работы. За постоянство отвечают три канала памяти (правила мира, недавнее движение, состояние объектов) и Error Bank, сокративший дрейф яркости на длинном горизонте на 35,8% во внутренних тестах.

🎨 qvabo.studio/tg · картинки и видео

#AI #PixVerse #AIsphere #worldmodels #VideoGen