Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Higgsfield Speak

Видеосервис Higgsfield тоже запустил аватары

Выберите стиль, выберите аватар, напишите сценарий. Сервис создаст кинематографичное движение, голос, эмоции.

Передает язык тела, эмоции и динамичное исполнение.

Вы получаете 16 встроенных типов сцен:

Vlog, Stream, Podcast, Car Talk, Coaching, Fashion, Beauty, Professions, Selling, Emotions, 3D, Forum и другие.
Каждый из них разработан для соответствия реальным форматам контента.

Можно создавать свои аватары

Идеально подходит для:

Библиотек рекламных роликов UGC.
Скетчей и форматов шоу.
Учебного и коучингового контента.
Каналов YouTube без лиц.
Клонов инфлюенсеров.
Вирусных видео с говорящими головами.

Higgsfield Speak доступен на тарифах Pro и Ultimate.

Напишите комментарий 'Speak' к официальному посту чтобы поклянчить промокод с туториалом

По промокоду SPEAK_DISCOUNT дают скидку 20% на 1 месяц
По промокоду SPEAK_EXTRA дают жалкие 15 кредитов на 3 генерации

#humananimation #speech2video #humanavatar
👍8👎1
Media is too big
VIEW IN TELEGRAM
TeGA: Texture Space Gaussian Avatars for High-Resolution DynamicHead Modeling

Аватары на гауссианах от Google
Впечатляющее качество, уделали всех конкурентов, но

Кода нет

#gaussian #humanavatar
👍6🌚1
HeyGem

Опенсорсная альтернатива HeyGen. Ну можно было и по названию догадаться

- Аватар в 4K по отрывку видео 1 секунда (???)
- Клонирование лица и голоса
- Запускается на 1080Ti +

Код

#lipsync #humanavatar #vocecloning #avatar #
😐8🔥7👍3
CAP4D: Creating Animatable 4D Portrait Avatars with Morphable Multi-View Diffusion Models

Создание анимируемых портретных 4D-аватаров. Модель способна генерировать реалистичные 4D-аватары на основе любого количества эталонных изображений

Рендерится в реальном времени

На первом этапе создает много изображений с разных ракурсов при помощи SD 2.1. Далее собирает собственно 4D модель.

Под капотом 3D трекер лица FlowFace (код ждем), FLAME для выражений лица, GaussianAvatars для деформируемой головы на гауссианах

Аватар можно редактировать внешними средствами - упомянуты Stable-Makeup и IC-Light

Плюс ко всему, аватар может управляться звуком речи

Код - FlowFace работает в демо-режиме, только с лицами из демо-набора

#humanavatar #gaussian #head #portraitanimation #tracking #pose
🔥6👍5❤1😁1
Dreamina AI Avatars

Dreamina запустила функцию оживления портрета по звуку и промпту.
Работает с людьми, животными, аниме и др.
——————————————

А также делали бесплатный доступ к Seedream 4.0 до 9 октября.
Но только для правильных стран. Заходите через 3 буквы. Польша не подошла

#portraitanimation #characteranimation #avatar #speech2video #image2video #humanavatar #text2image
👍6
Mirage Studio бесплатно

Сервис говорящих аватаров от Captions объявил бесплатную генерацию видео на эти выходные, до 11:00 понедельника по московскому времени

Попробовать

#humananimation #speech2video #humanavatar #talkinghead #giveaway
❤5👍2🔥1
Live Avatar: Streaming Real-time Audio-Driven Avatar Generation with Infinite Length

Интерактивный видеоаватар в реальном времени (железо см ниже) от Alibaba

— поддерживает потоковую генерацию видео длиной более 10 000 секунд

— позволяет пользователям общаться с аватаром через микрофон и камеру, получая мгновенную визуальную обратную связь

— интегрируется с Qwen3-Omni для создания полностью интерактивных диалоговых агентов

— достигает 20 кадров в секунду на 5 видеокартах H800 при 4-шаговом сэмплинге

— решает проблемы деградации качества при длительной генерации (дрейф идентичности, сдвиг цветов, накопление ошибок)

Код ждем на днях
HF - там уже что-то есть но тоже ждем, ибо основная модель на 14B параметров

спасибо @m_franz

#avatar #characteranimation #realtime #streaming #humanavatar
👍7❤3
PersonaLive! : Expressive Portrait Image Animation for Live Streaming

Потоковый рилтаймовый аватар - оживлятор портретов от Dzine.ai

Под капотом #SD15 зато всего 12ГБ VRAM кушает и не ограничен хронометражом

Гитхаб
HF

#avatar #humanavatar #portraitaniimation
👍12
This media is not supported in your browser
VIEW IN TELEGRAM
Relightable Full-body Gaussian Codec Avatars

Реалистичный аватар на гауссианах, взаимодействующий с освещением

Работа без кода, так, пооблизываться

Но не огорчайтесь, все равно у вас нет светового шара с 512 камерами захвата для создания массива входных данных

#gaussian #humanavatar #humanreconstruction #research
👍6👎2🔥1🥴1
InteractAvatar: Text-Driven Human-Object Interaction

Видео-аватар на базе wan22-5b

— работает с несколькими объектами одновременно

— выполняет сложные многоступенчатые команды

— создаёт реалистичные движения и жесты в такт песне

— реагирует на аудио и движения, а не только на текст

Гитхаб
HF

Спасибо @m_franz

#humanavatar #characteranimation #portrainanimation #lipsync
👍7❤4🔥1😁1
Media is too big
VIEW IN TELEGRAM
Phoenix-4: Real-Time Human Rendering with Emotional Intelligence

Tavus (авторы Sparrow-1) выкатили модель для real-time видео-звонков с ИИ-аватарами. Это уже не просто «говорящая голова», а полноценный цифровой двойник.

- Задержка <150 мс: Общение без пауз, как в живом Zoom.

- Эмоциональный интеллект: Аватар считывает контекст и меняет мимику на лету.

- Масштабируемость: Один человек может «присутствовать» на тысячах встреч одновременно

- работает в HD (1080p) с частотой 40 кадров в секунду, без потери качества и задержек; 3

- не просто анимирует речь, а создаёт непрерывное и естественное поведение во время всего разговора, включая паузы и слушание

Демо - нет ощущения что с человеком общаешься. во первых он отстает, во вторых ощущение как от ChatGPT: "я так хороший позитивный чувак я пытаюсь тебе угодить"

#assistant #voicemode #talkinghead #realtime #humanavatar #avatar
👍7❤3
Media is too big
VIEW IN TELEGRAM
Pika AI Selves

Ну я так и думал что речь о цифровых двойниках

Анонсировали сервис цифровых двойников, которые становятся продолжением пользователя. Эти ИИ-сущности обладают памятью, характером и могут выполнять разные задачи от имени владельца.

— могут отправлять картинки в групповые чаты

— помогают создавать видеоигры

— способны звонить вместо пользователя

— имеют постоянную память

— могут обладать уникальными чертами, например, аллергией на арахи

— представляют собой многогранных существ, а не просто инструменты

На сайте можно записаться в вейтлист

#humanavatar #digitaltwin
👍4😱1😭1
This media is not supported in your browser
VIEW IN TELEGRAM
Цифровые двойники Pika AI Selves обзавелись телефонными номерами

Что позволяет

- как бы быть на связи, когда вас нет рядом

- улаживать споры в групповых чатах

дальше сами нафантазируйте

Кроме того, открывают доступ к AI Selves большему числу людей - можно получить код раннего доступа за ретвит

#humanavatar #digitaltwin #agent
👍3
This media is not supported in your browser
VIEW IN TELEGRAM
Pika предложила пользователям монетизировать цифровых двойников AI Selfes

https://www.pika.me/onboarding

#humanavatar #digitaltwin #agent
👀4🌚11
This media is not supported in your browser
VIEW IN TELEGRAM
OmniShow

Модель для создания видео взаимодействия людей с предметами. Видеогенерация управляется текстом, изображением, аудио и позами одновременно

- Видео реалистичнее и динамичнее, чем у HunyuanCustom, HuMo-17B, VACE и Phantom-14B

- Сохраняет личность персонажа и синхронизирует движения со звуком лучше, чем HunyuanCustom и HuMo-17B

- синхронизирует аудио с видео

- подходит для разных задач, например, создания аватаров, замены объектов в видео или ремикса видео

Гитхаб ждем

#humanavatar #humananimation #lipsync #av #referencing #pose2video #characterswap #characteranimation #any2video
👍9🤷‍♂2🥴1
Habitat-GS

Продолжаем день виртуальных миров

Симулятор для обучения роботов навигации в динамическом виртуальном пространстве на гауссианах с интегрированным движком аватвров

— фотореалистичный рендеринг

— импорт разных 3D-ассетов, включая самовосстановленные сцены и публичные датасеты

— совместим с Habitat ecosystem и позволяет тренировать и оценивать навигационных агентов прямо в Habitat-Lab

— включает систему HabitatAgent, которая понимает команды на естественном языке и может исследовать сцены через чат

На сайте есть интерактивный вьюер - можно побродить. Мне понравилось

Гитхаб

#gaussian #interactive #world #humanavatar
❤5
FlexAvatar

Создаёт реалистичные 3D‑аватары головы по одному фото и анимирует их

• контроль выражения лица и ракурса
• работает с одно‑ и многокамерными данными
• обеспечивает полноту 3D‑модели за счёт мультивидовых данных при обучении
• интерполирует идентичность под любое количество входных данных

Код ждем

Спасибо @m_franz

#head #humanavatar #image2avatar #portrainanimation
🔥9👍4
MUA: Mobile Ultra-detailed Animatable Avatars

Ультрадетальные анимируемые аватары

Дистиллировали свою же модель UMA и получили производительность в 1000 раз выше, рилтайм на PC

Вход: скелетные позы, данные камеры.
Выход: детализированная геометрия, рендеры одетых людей с сохранением динамики одежды.

Работает в реальном времени: 24 FPS на Meta Quest 3, 72–90 FPS на RTX 3090.

Код ждем

#humanavatar #VR #realtime
1👍6🔥4❤1