MotionBricks.cpp

C++/GGML порт NVIDIA MotionBricks — генерация скелетной анимации в реальном времени на CPU или Vulkan. Не проигрывает готовые клипы, а непрерывно генерирует следующий кусок движения под текущую скорость, направление и позу. 30 FPS, 34 сустава

- 15 стилей движения: ходьба, ползком, скрытно, раненый, зомби и т.д. — можно переключаться в реальном времени

- 0.73 GB F32, 183M параметров — GGUF, можно квантовать
- Interactive WASD demo: переключение направления, стиля и позы на лету
- API

Пока только скелет Unitree G1 (робот-гуманоид), без скиннинга и ретаргетинга. Это не замена UE animation graph, а основа для нейро-рантайм анимации и управления роботами

#animation #3d

VK | MAX

PAIR (Personal AI Router)

Инструмент от NVIDIA объединяет компьютеры в локальной сети в один ИИ-кластер. Находит ПК с RTX, DGX Spark и Mac, решает, куда отправить запрос - на машину где сейчас свободны ресурсы

- Распределяет нагрузку между ПК и Mac в локальной сети — одна карта не справляется, подключаются соседние
- Несколько агентов параллельно: инференс раскидывается между видеокартами и компьютерами без ручного конфигурирования
- Промпты, файлы и контекст не уходят во внешний мир
- Поддерживает Ollama и LM Studio
- Windows, Linux, macOS

#router #tools

VK | MAX

GWM Worlds 2

Исследовательская модель мира от Runway
Генерирует интерактивный 3D-мир в реальном времени со звуком, сменой дня и ночи, погодой и текстовыми командами

- Мир в реальном времени: можно ходить от первого лица, управлять камерой, взаимодействовать с окружением
- Мир меняется по текстовым командам, при этом другой игрок продолжает исследовать
- 720p, 24 fps, со звуком

#interactive #world

VK | MAX

проверяйте

#humor

VK | MAX

#humor

VK | MAX

Viggle-Animate

Viggle подал голос. Последние вести от него были в 2024

Замена персонажа в видео. Перерисовываешь персонажа на одном кадре - модель распространяет эту правку на весь клип. Полный финтюн #MiniMaxH3 ref2va + дистилляция, всего 3 прохода

- Нет промежуточных моделей: без оценки поз, сегментации, трекинга лиц и текстового энкодера
- Работает там, где другим тяжело: быстрое движение, животные, негуманоидные существа, стилизованные персонажи
- Быстро: замена ролика за ~26 секунд, в 6 раз быстрее Wan2.2-Animate

- Можно нарисовать несколько персонажей сразу ("тот что слева")

- Слабое место - липсинк: рот не следит за речью

Демо
Офсайт

Спасибо @m_franz

#characterswap

pocket-tts-ru

Русская дообученная версия pocket-tts - легкий синтезатор речи с клонированием голоса, работает на процессоре

- Клонирование голоса по записи: 10–20 секунд чистой речи
- Компактная - это 6-слойный ученик, дистиллированный из большой 24-слойной модели: быстрее и легче на инференсе

- Вход: текст + референс-аудио голоса
- Выход: WAV-файл речи
- Лицензия CC-BY-NC-4.0 — бесплатно, но только для некоммерческого использования

- Текст нужно готовить: ударения обозначаются знаком «+» перед ударной гласной, числа раскрываются — иначе речь поедет
- Длинные фразы режутся — синтезировать лучше по предложениям
- Качество повторяет промпт: шумная запись голоса даст шумную речь

#tts #russian #compact voicecloning

VK | MAX

Scantic

iPhone-приложение для 3D-сканирования и реконструкции сцены на гауссианах.
меньше минуты на iPhone. Без LiDAR, без облака

автор хотел ускорить тренировку в 1000 раз и неожиданно навайбкодил приложение

качество можете оценить на моем скане Бендера трясущимися руками на айфон 13

Из фич - пока вы бегаете вокруг объекта приложение само выбирает удачные кадры

а вот пример от автора

#gaussian #ios

VK | MAX