FrankenMotion: Part-level Human Motion Generation and Composition

Модель для генерации и комбинирования движений человека на уровне отдельных частей тела. Учитывает текстовые подсказки для каждой части тела отдельно, благодаря чему движения получаются более точными и контролируемыми

Гитхаб код ждем

#humananimation #animation

OmniLottie: Generating Vector Animations via Parameterized Lottie Tokens

Генератор векторных анимаций по мультимодальным инструкциям на базе Qwen2.5-VL-3B-Instruct

Фишка в том, что он умеет работать с Lottie-файлами на новом уровне

Переорганизует структуру Lottie JSON, уделяя особое внимание слоям и их атрибутам

Превращает иерархический JSON-формат Lottie в последовательность вызовов функций

Рекрафту подвинуться

Гитхаб
HF
Демо

#vector #animation #text2vector #text2video

UMO

Универсальная модель для работы с анимацией человека при участии Meta (запрещено в РФ)

Умеет:

— генерировать и редактировать реалистичные движения по тексту

— заполнять пропуски в движениях

— предсказывать, как будет развиваться движение дальше

— «отматывать» движение назад, восстанавливая предыдущие состояния

— следовать по заданной геометрической траектории, сохраняя естественность движений

— обходить препятствия при движении из точки А в точку Б

— создавать взаимодействия между двумя людьми

Гитхаб ждем

#humananimation #3d #animation

AI4AnimationPy

Фреймворк для ИИ‑анимации персонажей на базе NumPy и PyTorch.

• импортирует данные захвата движения (GLB, FBX, BVH)
• визуализирует результаты в реальном времени (с SSAO, bloom и др.)
• решает обратную кинематику (решатель FABRIK)
• работает в трёх режимах: Standalone, Headless, Manual
• обрабатывает публичные датасеты (Cranberry, LaFan и др.)

Гитхаб
Демо
webGPU

Спасибо @Endorpheen

#animation #characteranimation #mocap

Comfy-Org/SCAIL-2

Comfy-Org опубликовали веса оживлятора SCAIL-2 под комфи

поддержка модели в комфи и воркфлоу тут

Спасибо @alex31415926

#comfyui #workflow #characteranimation #animation #motioncontrol

AnyTop

Модель для генерации анимации персонажей с любыми скелетами. Подходит для 3D-существ вне стандартных ригов.

• адаптация движений под топологию скелета
• экспорт в BVH
• визуализация в Blender

Исследовательский проект, не однокликовый. Хорош для ИИ-тварей

Гитхаб

#animation #3d

Interactive Generative Motion Editing via Scheduled Inpainting

Дисней опять хвастается.
Метод для интерактивного редактирования анимации. Объединяет синтез и правку движения. Не ломает старое, добавляет новое

https://youtu.be/P2jsLNvb1GM?si=16BIMDSsdHAWesGF

#research #animation

MotionBricks.cpp

C++/GGML порт NVIDIA MotionBricks — генерация скелетной анимации в реальном времени на CPU или Vulkan. Не проигрывает готовые клипы, а непрерывно генерирует следующий кусок движения под текущую скорость, направление и позу. 30 FPS, 34 сустава

- 15 стилей движения: ходьба, ползком, скрытно, раненый, зомби и т.д. — можно переключаться в реальном времени

- 0.73 GB F32, 183M параметров — GGUF, можно квантовать
- Interactive WASD demo: переключение направления, стиля и позы на лету
- API

Пока только скелет Unitree G1 (робот-гуманоид), без скиннинга и ретаргетинга. Это не замена UE animation graph, а основа для нейро-рантайм анимации и управления роботами

#animation #3d

VK | MAX

Motion-Omni

Одна модель генерирует и речь и движения тела по диалогу. Вместо того чтобы запускать TTS и анимацию по отдельности и потом синхронизировать все делается из одних и тех же латентных состояний

- 5.4x быстрее каскадных решений, не надо ждать пока каждый компонент отработает по очереди
- Синхронизация зашита в архитектуру, а не доклеивается постфактум
- Подходит для диалоговых аватаров, виртуальных персонажей, anything, где персонаж говорит и движется одновременно

На видео сравнение с MambaTalk

Гитхаб

#tts #animation

VK | MAX

UniMate

Одна модель для анимации любых риггованных 3D-персонажей по тексту. Работает на людях, четвероногих, птицах, насекомых — без дообучения под каждый скелет

Что умеет
• Текст в анимацию для разных скелетов
• Motion in-betweening — переходы между ключами
• Текстовое редактирование — сохраняешь суставы, меняешь остальное
• Motion expansion — расширяешь анимацию по промптам
• Экспорт FBX и GLB с анимацией

SIGGRAPH Asia 2026

Гитхаб
HF
Демо

#animation #3d

MAX

FlowHMR

Физически правдоподобный мокап из обычного видео. Из монокулярного ролика восстанавливает глобальное 3D-движение человека, которое физический контроллер реально может повторить в симуляции.

• 0.46B
• Глобальный 3D-motion из одиночного видео
• Движение физически корректно — симулируемый персонаж может его отследить
• Flow matching + physics-based GRPO
• Демо в 3D-вьювере прямо на сайте

Как применяют
• Робототехника: ретаргет на Unitree G1, трекинг в симуляции через SONIC
• Анимация: реконструкция сцены и ретаргет через GPT-6 Astra
• Text-to-motion: генерация видео через MiniMax H3, затем захват движения FlowHMR

Гитхаб
HF

#mocap #animation

MAX

PAMI

Генерация взаимодействий человека с объектами по тексту и мешу объекта. Из фразы вроде «возьми штатив, перенеси и поставь обратно» получается анимированное движение тела плюс точная траектория объекта. Тюбинген + MPI.

• Полное тело + объект, скоординированные во времени
• Часть-якорное голосование: движение объекта привязывается к частям тела (корпус, запястья, лодыжки)
• Точный контакт рук с объектом — без дрейфа, проваливания и «парящих» предметов
• Рекурсивный рефайнер доводит геометрию контакта, сенсоры ближнего и дальнего действи

Код ждем

#HOI #animation

MAX

ManimGX

Открытый движок 3D-анимации для ИИ-агентов. На Rust и wgpu, полностью совместим с Python API Manim CE. Агент пишет сцену — на выходе готовый MP4

• Совместимость с Manim CE API — писал код под Manim, работает и тут
• Шрифты, набор формул и кодирование видео уже в пакете — ничего докупать не надо

Спасибо @Endorpheen

#animation #agent

MAX

Kimodo / ARDY

NVIDIA обновила семейство генерации движения.

• Kimodo-SOMA-RP-v1.2 — базовая, сглаженный корень, исправленные сплиты
• Kimodo-SOMA-RP-ArdyRep-v1.2 — та же база, но с представлением Ardy: сырая траектория бедра, совместимость с ARDY
• ARDY-SOMA-RP-KimodoRep — авторегрессивная ARDY в представлении Kimodo

• В апреле вышли Kimodo v1.1, где часть тестовых последовательностей попала в обучение — метрики были несравнимы. В v1.2 утечку убрали, скольжение стоп меньше, метрики сопоставимы
• ARDY вышла в июле. Теперь у нее есть вариант в представлении Kimodo
• Kimodo делает клип фиксированной длины одним проходом, ARDY работает авторегрессивно и в реальном времени

• Kimodo: 282M, до 10 с, 30 fps
• ARDY: 192M, история и выход до 8 с

github.com/nv-tlabs/kimodo
hf.co/nvidia/Kimodo-SOMA-RP-v1.2
hf.co/nvidia/Kimodo-SOMA-RP-ArdyRep-v1.2
hf.co/nvidia/ARDY-SOMA-RP-30FPS-KimodoRep-Horizon60

#animation

MAX