⚙️ Alibaba открыла исходники Wan-Animate-2: анимация персонажей достигла уровня коммерческих лидеров

Команда Tongyi Wanxiang выложила в открытый доступ Wan-Animate-2 — сквозной фреймворк для анимации персонажей, работающий в реальном времени со скоростью 24 fps. Главное отличие от прежних пайплайнов — отказ от промежуточного извлечения скелета: модель получает на вход исходное видео и напрямую учит диффузионный трансформер переносить движение на целевого персонажа.

Благодаря этому Wan-Animate-2 избегает сжатия информации на этапе pose estimation и характерных для него сбоев. В сравнительных тестах результат сопоставим с закрытыми коммерческими решениями — Dreamina от ByteDance и KLING MotionControl от Kuaishou. Особенно заметно улучшение качества рук и снижение артефактов при сложных движениях.

Фреймворк поддерживает несколько персонажей и камер: одно видео может управлять сразу несколькими целевыми персонажами, а сцена рендерится с разных позиций камеры без переобучения. Работает с нестандартными пропорциями кадра и разными типами телосложения. Это закрывает главный пробел open-source анимации: раньше именно этап анимации персонажа почти всегда приходилось делать вручную. Выход Wan-Animate-2 вместе с недавним релизом Wan 3.0 переводит открытый видеостек Alibaba на оба конца продакшн-пайплайна — от генерации сцен до управления персонажами.

#AI #Alibaba #WanAnimate2 #Animation #OpenCode