Помахали камерой перед лицом, покорчили рожи на камеру - и вот он, ваш 3Д-аватар, с текстурами и даже лицевым ригом! Фб зажигает, Метахьюман нервно закуривает. Подробности ниже.

https://www.youtube.com/watch?v=t7_TMD7v0Xs
Я писал недавно про мощный лицевой риг от FB Reality Labs под названием Mugsy, состоящий из 171 камеры высокого разрешения внутри гигантской сферы, необходимых для создания 3D-аватаров. Он записывал 180 ГБ данных каждую секунду, и человеку, которого оцифровывали, приходилось сидеть в центре сферы с камерами около часа, читая сценарии и строя страшные рожи. Это давало отличные результаты, но было несколько непрактичным способом оцифровки ширнармасс.

Теперь FB Reality Labs выпустили все тоже самое но только с фронтальной камерой телефона!!!
Вместо того чтобы корчиться в кресле в окружении сотен камер, вам нужно просто провести смартфоном из стороны в сторону, а затем воспроизвести лицом серию из 65 определенных выражений. Теперь этот процесс занимает около трех с половиной минут, и с помощью нейронки, которая ранее была обучена на 3Д-данных, полученных из Mugsy, можно быстро создавать реалистичные 3D-аватары.

Процесс все еще не мгновенный. После сканирования лица и фиксации различных выражений, требуется около шести часов для обработки результатов. Также пока есть проблемы с очками и бородами.

Для совсем умных:
"Мы достигаем этого с помощью новой универсальной модели аватара, которая была обучена на высококачественных многоракурсных видеозаписях лиц сотен людей. Путем точной настройки модели с помощью инверсного рендеринга мы добиваемся повышенной реалистичности и персонализации диапазона движения."

Там еще и риг генерируется. Подробности и ссылки на бумагу ниже. И сдается мне там где-то порылся Avatar SDK.

И да, это не ответ Метахьюману - это легковесные аватары в другой весовой категории. Но в связи с появлением пайплайна Скан Лица -> Metahuman, о котором я тоже недавно писал, можно подумать про будущие простые решения для ксерокопирования себя.

Вот вам пример трушного метаверса. Только связка реального и метареального миров могут дать ютилити и механики, которые пытаются придумать мамкины метаверсеры.

Live2Earn - все уже придумано до вас.

Это крупнейший в мире 100%-но автоматизированный контейнерный шанхайский порт Яншань, расположенный в самом сердце Нового Шелкового пути с прицелом на будущее. Он работает на базе службы динамического высокоточного позиционирования навигационной системы BeiDou и коммуникационной технологии Huawei на частоте 5,8 ГГц.

При этом миллиард(!)китайцев:
• живет и работает в материальном мире;
• осуществляет логистику, хранение и транспортировку материальных грузов в интегрированном пространстве Метаверса физической и цифровой реальности;
• и зарабатывает на этом десятки миллиардов вполне материальных долларов.

Взято у великолепного Сергея Карелова:
https://t.me/theworldisnoteasy/1428

Хирургический Метаверс.
Тренируемся на реальных и виртуальных трупах. Одновременно. HapticVR и Fundamental Surgery.
Еще один пример совмещения реальностей.
Это вам не звук выключать для метапсихов...
https://fundamentalsurgery.com/

Подборка ИИ-стартапов (и не только стартапов) в области звука, музыки, аудио-генерации, речи, распознавания, сплиттинга и прочая.
Про Айва, Эндель и Муберт я уже писал, но там десятки новых и старых имен.
Звукачи, налетай.
https://github.com/csteinmetz1/ai-audio-startups
Стащил тут: https://t.me/DeepFaker

Кверс - мамкин метаверс от Qatar Airlines.
Канонический пример, когда слово метаверс можно заменить на "новый сайт" или "сайт с 3Д" без потери какого-либо смысла.
Я отдаю должное бойцам графики, которые пилили вот это вот все, но мракетологи, придумавшие весь этот треш и гордо поименовавшие это метаверсом будут через год называть то же самое трансверсом или мегаспейсом. И гордицца.
Один плюс - в графике будет больше работы.
Вишенка: свое имя вбиваешь пальчиками. Голосовой ввод и метааверс? Нет, не слышали, ашоэто?
Кто еще не испугался, проходите по ссылке, поищите смысл происходящего.
https://www.qatarairways.com/html/redirect/qverse/

https://community.dronesumo.com/t/ai-racing-fpv-drone-full-send-a-i-vs-humans-university-of-zurich/269

Оказывается, за гонками дронов стоит огромный ресерч в области комп зрения. Посмотрите статью, там много подробностей про сбор данных и состояние области.

Тут процитирую лишь выжимку.

БПЛА в настоящее время широко используются в нескольких транспортных областях, но планирование оптимальных по времени траекторий на пределе срабатывания через множество путевых точек остается открытой проблемой. Поэтому лаборатория робототехники Цюрихского университета обратила свое внимание на FPV, чтобы загрузить новые алгоритмические системы в этот высокоскоростной вид спорта для достижения максимально быстрого полета.

За неделю до гонки лаборатория пригласила трех чемпионов мира, Томаса Битматта, Алекса Вановера и Марвина Шеппера, чтобы начать тренировки, сбор данных о движении глаз и другие оптимизации алгоритмов ИИ. Здесь трасса и дроны были построены для ИИ, в комплекте с 36 камерами и датчиками, что эквивалентно добавлению 36 мощных мозгов к ИИ-алгоритмам!

Там также хорошо отпиариласть Vicon со своими камерами и трекерами.

Пока теслафилы и теслафобы рядятся, у кого автопилот круче - у ИИ или у ЕИ, пилоты дронов похоже решили этот вопрос.
И пригорюнились. Особенно Алекс Вановер

Также я преступно забыл упомянуть ииаудиосервис от Дениса Ширяева, который умеет не только в картинки и видео, но и в звук.

К - Компетенции.
П - Профстандарты.

Глава Роскомнадзора уверенно вещает на ПМЭФ, что фб придумал лайк в 1997 году и "в том же году" Твиттер придумал ретвит.

Главный. В Роскомнадзоре. Говорит про интернет. Уверенно.

И правда, какая разница, он же в целом имеет представление, что есть Интернет. Или что нет Интернета.

Ничего не меняется. Лет сто уже. Можно нести любую ахинею. Лишь бы баре были довольны.

Грустно и точка.

https://rutube.ru/spief21/video/d26ab0fb71ec4a983b7b593b7f803a98/

Посмотрите сами. Таймкод на православном рутубе 56:38.
Пока не снесли.

In3D сделали автоматическую генерацию текстуры их аватара в Metahuman и запилили туториал. Пишут, что если бы сама генерация метахьюмана на стороне эпика не была такой долгой, то процесс создания метахьюмана себя можно было бы уложить в 10 мин.
https://youtu.be/BK-ayKR8NlQ

⚡️Snap опять взрывает серую реальность, на этот раз нефиговым 3D Body Tracking'ом

Тут и быстрый трекинг нескольких тел в 3D, и симуляция столкновений с виртуальными объектами. Довольно веселая штука! И все это на мобильнике!

*Советую смотреть со звуком.

@ai_newz