Метаверсище и ИИще
53.5K subscribers
6.78K photos
5.81K videos
50 files
7.98K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
Ух, моя любимая тема. Генерация контента на основе нейрофизиологических показателей.
Проще начать со страха, конечно.

Обнаружилась группа товарищей которые, дословно: "Мы будем создавать и развивать VR-ужастик (VR horror experience), способный адаптироваться к страхам игроков в режиме реального времени на основе психофизиологических показателей!"

Пишет это Consulting FACS director @ Rockstar Games, вместе с которым целая команда исследователей страха и ИИ. Подняли денег в инновационном датском фонде.
А у самого Thomas Terkildsen даже есть сайт Физиология Страха. Ссылка внизу, но я вас предупреждал.
Готовьте свои страхи, а также дыхание, моргание, влажность кожи и все, что можно измерить пока еще неуклюжими виар-устройствами. Но пример Омницепта от HP показывает, что скоро шлемы и очки обрастут гроздьями сенсоров. И тогда вашим страхам конец! Всех измерят и пустят в дело.
Sweet spot of fear на картинке - прям будоражит.
https://twitter.com/TTerkildsen/status/1465653679424479241
https://psychologyofhorror.com
❤1👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Ну и чтобы два раза не вставать, вот вам рендер.
https://synthia.media/
90 000 подписчиков в тиктоке.
Обычная, цифровая, metaverse-ready
This media is not supported in your browser
VIEW IN TELEGRAM
Ziva плюс UE5
ИИ-риг для лица.
This media is not supported in your browser
VIEW IN TELEGRAM
Ух ты какой классный новый Нерф!

RegNeRF позволяет рендерить вот такое как бы 3Д на основе всего лишь 3 входных изображений.

Ну и подумалось, что мы тут все представляем все эти мощныя метаверсищща, как 3Д-движки с 3Д же рендером на борту.
Но не 3Д единым.
Нейрорендеринг развивается очень быстро. И сдается мне, что этой прорвы фоток с Гугль Мапс хватить чтобы отНерфить наши города и села.
Писал уже про такие проекты для отдельно взятых локаций.
А если думать про цифровой двойник нашего утлого мира - то может проще его отфоткать (что гугль уже сделал) и отнерфить. Точнее нерфить ondemand.
https://m-niemeyer.github.io/regnerf/index.html
Ну, за груминг! А также Орнатикс, Иксген и прочую братию.

Дисней показал гибридный ИИ-рендер человеческих голов.
Идея в том, чтобы считать традиционным способом (георендером) только "маску", то есть лицо, но без волос, глаз, ресниц и что там во рту.
Тут можно сколько угодно точить шейдер кожи, освещение, камеру и также быть уверенным, что это "нужное" лицо, то есть похожее на замысел. С эмоциями и вот этим вот всем.

А потом, это лицо скармливают в латентное пространство предварительно обученной нейронки, которая умеет генерировать произвольные реалистичные изображения лица (StyleGAN2). В результате получается последовательность реалистичных изображений лица, которые соответствуют личности и внешнему виду 3D-персонажа на уровне кожи и эмоций, но дополнены естественно синтезированными волосами, глазами, внутренним ртом и окружением.

Классная идея, с учетом того, что вся эта работа с волосами и деталями изначально была "чужеродным" (по отношению к традиционному 3Д и геометрическому рендеру) инструментом. Свой рендер, свой недомоделлер(читай гемор с грумингом), адовая анимация впополам с симуляцией, свои странные шейдеры.

А теперь всем этим занимается ИИ. И рендерит и вкомпаживает.

И да, примеры анимации тоже есть на видео.

Ну и одно из мощнейших применений - это синтетические твари и где они обитают. То есть генерация датасетов для обучения всех этих facial ID, камер распознавания, детекции эмоций. ИИ сам себя кормит, поит, одевает и учит.

У меня только вопросы к глазам - которые, как зеркало души, в первую очередь притягивают взгляд. Сможет ли ИИ генерить их достаточно ловко?

Думаю сможет. Ибо И.

Смотрите полное видео.

https://studios.disneyresearch.com/2021/11/30/rendering-with-style-combining-traditional-and-neural-approaches-for-high-quality-face-rendering/
Вот немного субботнего 3Д.
Барышня справа немного нарывается на бан фейсбуком и торчит по свету и шейдингу. Но поглядите на все остальное.
Срочно в НФТ!
http://en.rootworkshop.cn/?post_type=products&page_id=23720/
Media is too big
VIEW IN TELEGRAM
Рендер или видео?
Тут понятно, что видео.
Но если взять отрывки, где пузыри на воде, то это немного взламывает мозг.
Там и рендер нереалистичный, и симуляция неправильная...
Индусы - красавцы.
Глава Twitter– Параг Агравал.
Глава Microsoft – Сатья Наделла.
Глава Google – Сундар Пичай.
Глава IBM – Арвинд Кришна.
Глава Adobe – Шантану Нарайен.
Глава Nokia Networks – Раджив Сури.
Глава Mastercard – Сингх Банга.
record_211207_124916.gif
48.1 MB
К вопросу о процедурных генераторах городов.
Смотрите какая милотищща!
Работает в браузере. Сцену можно крутить. Можно даже освещение менять. Работает плавно.
КАК?
Зайдите в настройки, не поленитесь.
https://oskarstalberg.com/Townscaper/
Нашел вот такой коллаб - ArcaneGAN inference
И подумалось мне, что в связи с концепцией удерживания зрителя в [мета]вселенных того или иного фильма, Netflix и иже с ними должны немедленно выпускать приложения для Арканизации, Бондификации, Миядзакизации и прочей стилизации населения после выхода новых тайтлов.
https://t.me/derplearning/960?single

Найдено на https://t.me/derplearning
Forwarded from Derp Learning
Товарищ Rasul Hasan запилил постер с помощью ArcaneGANv0.2

Мотивирует ковыряться дальше, скажу я вам :3
А вот это уже не просто примета времени, это симптоматика нашего безумного мета2021 года.
Decentraland вонзает денег в Blender. Он присоединился к фонду развития последнего.
За всем этим видится мощный (если не сказать протестный) манифест. Децентрализованные прикриптованные ребята объединяются с опесорсными пацанами.
Учитывая, что Блендер скоро зайдет в сеть RenderCoin - это становится еще более симптоматичным.
А мы то гадали, на чем строить мамкины метаверсы...

"Ton Roosendaal объявил об этой новости и подтвердил приверженность Blender к расширению возможностей художников и творцов во всем мире, в частности, к доступу к открытым инициативам metaverse в Интернете."
https://t.me/CGIT_Vines/1340
Forwarded from Denis Sexy IT 🤖
Media is too big
VIEW IN TELEGRAM
Почитал статью, она пока без особых пруфов, но выглядит интересно — китайцы говорят что разрабатывают электромагнитное оружие, и в этом им помогает ИИ.

В электромагнитном оружии придание скорости снаряду осуществляется за счёт электромагнитного поля (создаётся катушками), типа пушки Гаусса.

Прототип разработанный китайцами, по их словам имеет ствол длиной 12 см, где кинетическая энергия может достигать 150 джоулей – это в два раза больше чем энергия, необходимая для смертоносного выстрела (показатель настраивается).

ИИ помогает совершенствовать конструкцию, учась на предыдущих выстрелах и помогает понять на каких узлах существуют проблемы, чтобы их устранить. Благодаря этому китайцам удалось обойти самое мощное электромагнитное ружьё, GR-1 «Anvil» из США.

Образцы оружия пока не показывали, зато есть видео всяких корабельных электромагнитных пушек с дальностью выстрела почти 200 км, которые разрабатывали и китайцы и американцы, выглядит мощно.

Оружие из Fallout почти тут, осталось немного подождать ✨
👍1
Forwarded from CGIT_Vines (Marvin Heemeyer)
Сегодня Ubisoft заанонсили запуск сервиса Quartz.
Нужен он для покупки внутриигровых предметов. Валютой покупки - что бы вы думали выступит? - правильно, NFT под местным названием Digits.

В тренде зелёных технологий площадка будет работать по технологии Proof-of-Stake, с наименьшим энергопотреблением. Если вас тоже бомбит, значит, вы выпадаете из обоймы.

https://youtu.be/eSVoJ0WUQfY
Я просто оставлю это тут.
Когда мы перебеседовали с Максом Козловым я немного офигел о того, что творится в застенках SBER AR/VR LAB.
Там ребята ушли от рынка далеко вперед по части разработок и внедрений.
А вольюметрическая студия и работа с 360 - это просто космос.
В то время, когда Интел закрывает свой знаменитый вольюметрический купол - ребята фигачат #Сбертанцы в реальном времени.
В общем на Ивенте опять будет эксклюзив, который вы нигде и никогда не найдете в сети.
Внутрянка. С возможностью доступа к телу.
Вот пара сливок:
Как мы построили первую Volumetric студию в России и проект #СБЕРТАНЦЫ
Пайплайн для обработки Volumetric Video на основе Houdini
Нейрореабилитация в VR. Как сделать сервис, который
устроит всех.
Викенд будет горячий..
👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Новый нормальный риггинг!
Вот человек уже нырнул в метаверс и там полностью делает риг персонажа.
В Виаре.
Вот эти вот все кости, скелеты и даже skin weights - все это в виаре.
Там у него просто новая нормальная Майя.
Точнее Юнити.
Это совершенно безумный comics/2D/3D/VR artist/animator/director/dev/doodler из Голандии, который строит свой метаверс с хорошим названием A Piece Of The Universe.
Причем он его строит уже в метаверсе. Изнутри, так сказать. А не то, что мы, сидя на кожаных стульях кожаными задницами.
Мужик! (Точнее - Метамужик!)
https://naam.itch.io/apotu
Forwarded from Denis Sexy IT 🤖
Media is too big
VIEW IN TELEGRAM
На Washington Post очень клевая статья сверстанная со вставками Lidar-сканов реальных помещений:
https://wapo.st/3GhSbOA

Хочется побольше такого материала от разных музеев, идеально же для всяких AR/VR/Web экспериментов.

Я и сам часто начал пользоваться сканированием помещений лидаром – особенно каких-то родных мне мест, вроде квартиры бабушки и дедушки в Одессе. Такой скан потом позволяет легко окунуться в атмосферу, прогуляться по ней, не передаваемое по фото чувство.
👍1