Метаверсище и ИИще
53.4K subscribers
6.76K photos
5.75K videos
50 files
7.92K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
Вот, что бывает, когда простой Mirror радикально меняет смыслы.
Мощный криптоперец выходит...
В общем Эпик решил серьезно потеснить всех этих олдскульных медленных анимационных персонажей с их неторопливыми пайплайнами.
Анимация на Метахьюманах!
Так глядишь и до живых акторов доберется, ИИ ему в помощь..

"С MetaHuman Creator мы обошли весь этот процесс сканирования. Мы получили риггированных, готовых к экранизации персонажей прямо из коробки, которых мы могли затем использовать для других эпизодов".

Повышение эффективности конвейера означает, что команда Plastic Wax могла итерационно разрабатывать дизайн персонажей и костюмов, пока сценарии еще находились в стадии разработки, а затем начинать тестировать анимацию и освещение на съемочной площадке, чтобы увидеть, как будут выглядеть персонажи на ранних этапах производственного процесса. Этот асинхронный конвейер был особенно полезен при создании "Невесты Франкенштейна".

Удивительно, но Motion Builder еще жив: "Движения тела каждого исполнителя сначала были сняты с помощью Vicon Shōgun, а затем ретаргетированы на риг MetaHuman с помощью MotionBuilder. Затем команда Plastic Wax записала всю лицевую анимацию с помощью iPhone 12 и приложения Unreal Engine Live Link Face"

Ну и вишенка на торте: "Когда вся анимация MetaHuman была завершена, она была экспортирована в Maya, где каждый дубль дорабатывался вручную отделом анимации. После завершения работы персонажей можно было перенести в Unreal Engine, где команда Plastic Wax создала в реальном времени версии уличных и храмовых декораций проекта, которые можно было виртуально исследовать с помощью гарнитуры VR."

Без бабушки Mайи и дедушки МоушенБильдера - никуда!
https://www.unrealengine.com/en-US/spotlights/universal-monsters-are-back-how-plastic-wax-made-a-monsters-themed-fortnite-mini-series
Маск - просто красавчик!
Протролил сразу всех. Метаверсеров, нфтшников и, конечно, Эппле.
Свистелки и перделки теперь можно купить буквально, осязаемо и за 50 баксов.

Читаем на сайте Теслы.

"Киберсвисток Cyberwhistle, выпущенный ограниченным тиражом, представляет собой коллекционный экземпляр премиум-класса, изготовленный из медицинской нержавеющей стали с полированной отделкой. Свисток оснащен встроенной функцией крепления для большей универсальности."

"коллекционный экземпляр премиум-класса!" - умойтесь рарибле и фаундейшен.

Дальше вишенка:
"Не тратьте деньги на эту глупую тряпочку от Эппле, лучше купите наш свисток!" - написал он в своем твитторе
Don’t waste your money on that silly Apple Cloth, buy our whistle instead!

Свисток мгновенно был распродан. Sold out и Out of stock.

Ждем, чем ответит мастер свиста в твиттере Димон Рогозин.
Свирель с хохломой?
А вот это уже горячо!
Помните я приподванговывал, что Фортнайт может стать платформой для ивентов, вплоть до конференций.
А теперь внимание.
"Мы рады представить вам новый режим: «Вечеринки». Это места, где игроки могут расслабиться, поиграть в приятные мини-игры и найти новых друзей. "
Итак, нельзя палить в башку соседа, нельзя прыгать с острова на остров, нельзя искать другие игры.
Зато можно строить свои Пространства!!
Это что, у нас будет Майнкрафт с розовым человеческим лицом?!
Ну и самое главное: "«Вечеринки» должны способствовать социальному взаимодействию, позволять людям находить новых друзей или собираться со старыми друзьями в новом контексте."
Чувствуете, как дохнуло мощным метаверсом?
"«Вечеринки» должны фокусироваться в первую очередь на самовыражении через эмоции, граффити, экипировки или другие механики."
Моделлеры и лайаутеры, хорош страдать фигней, го строить Пространства в Фортнайт!
Там скоро будет много метаденег (читай крипты).
Очень много.
Спасибо за наводку @CGIT_Vines
https://www.epicgames.com/fortnite/ru/news/introducing-fortnite-party-worlds?lang=ru
Метаверс в отдельно взятом автомобиле.
И как тебе такое, Илон Маск?
WayRay Holograktor – электрокар с голографическими поверхностями повсюду.
Внутри него ни театра, ни кино, один сплошной контент и метаверс.
Как пишет экзальтированная пресса: "Он адресован поколению Z – людям, которые хотят играть, создавать и потреблять контент."

WayRay Holograktor преподносится как автомобиль с голографическим AR-остеклением для игр и развлечений во время поездки. Главный по авто, Виталий Пономарев считает, что «контент в автомобиле будет следующей горячей темой».
Указаны запас хода (600 км), максимальная скорость (200 км/ч) и время разгона до 100 км/ч (3,9 с). При этом разработчики уточняют, что «машина задумана для комфортного взаимодействия с контентом, поэтому время разгона менее важно, чем уровень комфорта и технологии внутри салона».
Сдается мне, очень правильная мысль. Ибо контент будет решать все больше.
А компьютерная графика не останется без работы.
Даешь метаверс в каждый car!
https://holograktor.com/
Памятуя историю отношений Фейсбука с криптой (в том числе со своей валютой Libra), я все ждал, когда Марк либо крестик оденет, либо трусы снимет. Ибо как он собирается метаверсить без метавалюты.

Похоже решил снимать трусы. А точнее запреты на рекламу криптопроектов и крипты, которые уже три года сурово пресекают все попытки криптанов продвигаться в фейсбуке.

Как пишет СNBC - "Facebook в среду объявил о своем решении отменить давнюю политику, которая не позволяла большинству криптовалютных компаний размещать рекламу на его сервисах."

Криптолед тронулся.. и потихонечку оттаивает. В Мете.
https://www.cnbc.com/2021/12/01/facebook-ends-ban-on-cryptocurrency-ads.html
Маск, что ты делаешь, прекрати!
Мы еще от свистка не отошли!

"Cyberquad for Kids работает от литий-ионного аккумулятора с запасом хода до 15 миль и настраиваемой максимальной скоростью 10 миль в час и подходит для детей от 8 лет и старше."

"Вдохновленный нашим культовым дизайном Cybertruck, четырехколесный квадроцикл имеет полностью стальную раму, мягкое сиденье и регулируемую подвеску с задним дисковым тормозом и светодиодными фарами"

Ждем ответа от Димона.
Киберчук и Кибергек?
Media is too big
VIEW IN TELEGRAM
Концепт Метавселенной для китайского города Чэнду.
Ух, моя любимая тема. Генерация контента на основе нейрофизиологических показателей.
Проще начать со страха, конечно.

Обнаружилась группа товарищей которые, дословно: "Мы будем создавать и развивать VR-ужастик (VR horror experience), способный адаптироваться к страхам игроков в режиме реального времени на основе психофизиологических показателей!"

Пишет это Consulting FACS director @ Rockstar Games, вместе с которым целая команда исследователей страха и ИИ. Подняли денег в инновационном датском фонде.
А у самого Thomas Terkildsen даже есть сайт Физиология Страха. Ссылка внизу, но я вас предупреждал.
Готовьте свои страхи, а также дыхание, моргание, влажность кожи и все, что можно измерить пока еще неуклюжими виар-устройствами. Но пример Омницепта от HP показывает, что скоро шлемы и очки обрастут гроздьями сенсоров. И тогда вашим страхам конец! Всех измерят и пустят в дело.
Sweet spot of fear на картинке - прям будоражит.
https://twitter.com/TTerkildsen/status/1465653679424479241
https://psychologyofhorror.com
❤1👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Ну и чтобы два раза не вставать, вот вам рендер.
https://synthia.media/
90 000 подписчиков в тиктоке.
Обычная, цифровая, metaverse-ready
This media is not supported in your browser
VIEW IN TELEGRAM
Ziva плюс UE5
ИИ-риг для лица.
This media is not supported in your browser
VIEW IN TELEGRAM
Ух ты какой классный новый Нерф!

RegNeRF позволяет рендерить вот такое как бы 3Д на основе всего лишь 3 входных изображений.

Ну и подумалось, что мы тут все представляем все эти мощныя метаверсищща, как 3Д-движки с 3Д же рендером на борту.
Но не 3Д единым.
Нейрорендеринг развивается очень быстро. И сдается мне, что этой прорвы фоток с Гугль Мапс хватить чтобы отНерфить наши города и села.
Писал уже про такие проекты для отдельно взятых локаций.
А если думать про цифровой двойник нашего утлого мира - то может проще его отфоткать (что гугль уже сделал) и отнерфить. Точнее нерфить ondemand.
https://m-niemeyer.github.io/regnerf/index.html
Ну, за груминг! А также Орнатикс, Иксген и прочую братию.

Дисней показал гибридный ИИ-рендер человеческих голов.
Идея в том, чтобы считать традиционным способом (георендером) только "маску", то есть лицо, но без волос, глаз, ресниц и что там во рту.
Тут можно сколько угодно точить шейдер кожи, освещение, камеру и также быть уверенным, что это "нужное" лицо, то есть похожее на замысел. С эмоциями и вот этим вот всем.

А потом, это лицо скармливают в латентное пространство предварительно обученной нейронки, которая умеет генерировать произвольные реалистичные изображения лица (StyleGAN2). В результате получается последовательность реалистичных изображений лица, которые соответствуют личности и внешнему виду 3D-персонажа на уровне кожи и эмоций, но дополнены естественно синтезированными волосами, глазами, внутренним ртом и окружением.

Классная идея, с учетом того, что вся эта работа с волосами и деталями изначально была "чужеродным" (по отношению к традиционному 3Д и геометрическому рендеру) инструментом. Свой рендер, свой недомоделлер(читай гемор с грумингом), адовая анимация впополам с симуляцией, свои странные шейдеры.

А теперь всем этим занимается ИИ. И рендерит и вкомпаживает.

И да, примеры анимации тоже есть на видео.

Ну и одно из мощнейших применений - это синтетические твари и где они обитают. То есть генерация датасетов для обучения всех этих facial ID, камер распознавания, детекции эмоций. ИИ сам себя кормит, поит, одевает и учит.

У меня только вопросы к глазам - которые, как зеркало души, в первую очередь притягивают взгляд. Сможет ли ИИ генерить их достаточно ловко?

Думаю сможет. Ибо И.

Смотрите полное видео.

https://studios.disneyresearch.com/2021/11/30/rendering-with-style-combining-traditional-and-neural-approaches-for-high-quality-face-rendering/
Вот немного субботнего 3Д.
Барышня справа немного нарывается на бан фейсбуком и торчит по свету и шейдингу. Но поглядите на все остальное.
Срочно в НФТ!
http://en.rootworkshop.cn/?post_type=products&page_id=23720/
Media is too big
VIEW IN TELEGRAM
Рендер или видео?
Тут понятно, что видео.
Но если взять отрывки, где пузыри на воде, то это немного взламывает мозг.
Там и рендер нереалистичный, и симуляция неправильная...
Индусы - красавцы.
Глава Twitter– Параг Агравал.
Глава Microsoft – Сатья Наделла.
Глава Google – Сундар Пичай.
Глава IBM – Арвинд Кришна.
Глава Adobe – Шантану Нарайен.
Глава Nokia Networks – Раджив Сури.
Глава Mastercard – Сингх Банга.