BlendFields: Few-Shot Example-Driven Facial Modeling

Коротко говоря, #NeRF обучили по нескольким ракурсам восстанавливать анимируемые лица. С мелкими деталями и деформациями, делающими результат более реалистичным. На видео они показывают полигональную сетку, интересно откуда такая сетка, неужели сгенерированная? Среди авторов Microsoft, Google BRAIN и прочие

Кода нет, демо нет

#image2face #imageto3D #image2avatar #facialanimation

Human-SGD: Single-Image 3D Human Digitization with Shape-Guided Diffusion

Реконструкция 3D модели человека по одному изображению.

Генерируют недостающие ракурсы 2D диффузией, потом собирают по ним 3D модель - текстурированную сетку.

Код обещают выложить

#imageto3D #image2avatar #humanavatar

Humva: Your Easiest Go-To Avatar Tool

Простейший, как заявлено в названии, инструмент для создания аватара. Хорошо говорит по-русски

В топе на Producthunt

Проверил, он довольно капризный. Аватар создается за 5-10 минут. Если создастся вообще. Закидываем фото, выбираем тему и окружение, голос и ждем.
Или можно выбрать один из готовых аватаров.

При попытке создать аватар из фото знаменитостей может выдать ошибку, и второго шанса создать свой аватар не даст. Но Юра Борисов, видимо не настолько знаменит

И не факт что ваш аватар сможет быть полезен. Мой кастомный аватар долго не мог ничего сказать на русском все время ошибка. Хотя голос стандартный, с библиотечными аватарами работает. Видимо, текст слишком длинный

Бесплатно можно создать 4 говорящих видео по 30 секунд. На вход можно подать текст, а можно готовое аудио с речью

#voicecloning #humanavatar #talkinghead #portraitanimation #facialanimation #text2speech #tts #image2avatar

AvatarArtist: Open-Domain 4D Avatarization

Создает 4D аватар по одному портрету
От авторов Follow-Your-Emoji

Код
Демо ждем

#image2avatar #head

Hedra Live Avatars

Аватары в реальном времени от Hedra
За болтовню на том конце отвечают Gemini, ElevenLabs или OpenAI

Попробовать если у вас есть кредиты

#avatar #realtime #voicemode #image2avatar

AGORA

Проект над которым работал наш подписчик @ramazan2k

Генерация анимируемых 3D аватаров голов на 3DGS, работает в реальном времени прямо на телефоне (60 FPS), обучается только на обычных 2D фотках без видео и multi-view.

Гитхаб - Код ждем до конца мая после ревью

#avatar #head #gaussian #portrainanimation #image2avatar

MATCH: Feed-forward Gaussian Registration for Head Avatar Creation and Editing

Создание и редактирование аватаров голов на гауссианах с помощью мультивидовых изображений. Работа с участие Гугла

Создаёт аватары за 0,5 секунды на кадр

Позволяет редактировать аватары, переносить выражения лица, делать интерполяцию образов, то есть создание промежуточных образов между разными людьми.

Гитхаб ждем

#avatar #head #gaussian #portrainanimation #image2avatar

AvatarPointillist

Проект от HKUST, создание динамических фотореалистичных и управляемых 4D-аватаров на гауссианах из одного портретного изображения

Предсказывает информацию о привязке для анимации

Преобразует точки в рендерные атрибуты с помощью Gaussian декодера

Гитхаб ждем

#avatar #head #gaussian #portrainanimation #image2avatar

FlexAvatar

Создаёт реалистичные 3D‑аватары головы по одному фото и анимирует их

• контроль выражения лица и ракурса
• работает с одно‑ и многокамерными данными
• обеспечивает полноту 3D‑модели за счёт мультивидовых данных при обучении
• интерполирует идентичность под любое количество входных данных

Код ждем

Спасибо @m_franz

#head #humanavatar #image2avatar #portrainanimation