Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
😭 SadTalker
Генератор говорящей головы по картинке и аудиофайлу.

Авторы планируют сделать генерацию 3D-голов и поделиться интеграцией в automatic1111.
Среди авторов Tencent AI Lab, известная работами в области реставрации фото и прочими разработками.

Код

#audio2video #audio2animation #speech2animation #speech2avatar #image2video #talkinghead #facialanimation
🔥2
Media is too big
VIEW IN TELEGRAM
Media2Face: Co-speech Facial Animation Generation With Multi-Modality Guidance

Генератор говорящей 3D головы по звуку речи. И поющей. И зевающей. А еще он анимирует не только лицо, но и движения головы.

Код ждем

#talkinghead #speech2head #speech2animation #audioto3D
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
Audio2Face-3D

NVIDIA выпустила в опенсорс свой аниматор говорящих 3D голов по звуку из 2022 года

Насколько помню, раньше она была доступна в Onmiverse
Видимо, технология уже не сильно актуальна?

В SDK есть плагины для #Maya и #UE

HF

#talkinghead #audio2animation #head #speech2animation #lipsync
❤3😁2👍1
LongCat-Video-Avatar

Генератор на базе LongCat-Video создаёт реалистичные длительные видеоролики с липсинком и сохранением идентичности персонажа

Генерирует видео на основе аудио и текста или аудио, текста и изображения

Умеет петь, продлять видео, делать мультидиалог, видеоподкасты, продающие видео

Гитхаб
HF
MS

#ati2v #at2v #avatar #longvideo #characteranimation #speech2animation #image2video
🔥16❤2
LongCat-Video-Avatar 1.5

Обновилась модель от Meituan для создания видео с говорящими аватарами

• превращает фото в видео с говорящим персонажем
• синхронизирует движение губ с аудио (использует Whisper‑Large)
• работает с людьми, аниме‑персонажами, животными
• генерирует видео по аудио + текст (AT2V), аудио + текст + изображение (ATI2V)
• продолжает существующие видео (Video Continuation)
• выдаёт стабильное изображение, сохраняет идентичность персонажа в длинных роликах

Лицензия MIT, оптимизирована через DMD2‑based step distillation (8 NFE), поддерживает одно‑ и многопоточное аудио.

github.com/meituan-longcat/LongCat-Video

huggingface.co/meituan-longcat/LongCat-Video-Avatar-1.5

#ati2v #at2v #avatar #longvideo #characteranimation #speech2animation #image2video #lipsync
👍6🔥4