Нейрорендеринг как он есть.
Контент залетает напрямую в мозг, минуя трактовки и ассоциации.
И воздействует напрямую, минуя гематоэнцефалитический барьер смысловых интерпретаций.
Простой художник с обратной ̶ж̶о̶п̶ы̶ стороны мира (Перт, Австралия) фигачит в 4К какую-то невообразимую красоту.
У него там все нвидии мира под столом?
Причем он за последние 10 дней выложил целую пачку таких видосов.
Я расчехлил youtube-dl и качнул 4К-версиию.
Раскрыл на весь монитор и залип.
Увидимся завтра.
P/S/ Когда останавливаешь видео. Картинка еще долго плывет сама по себе. У меня одного так?

Ну все, за риггеров и метахьюманов!
ИИ-облачный-лицевой-риг!
И не от какой-нибудь меты-шметы, а от Зивы - гуру рига!
Я уже давно поджидал чего-то такого, особенно, когда два года назад Крис Ландрет выкатил ИИ-авториг для тел в любым количеством конечностей. Но коль скоро мы теперь сходим с ума по аватарам, пришло время тренировать и ригать головы.
Ziva Dyamics выкатили ZRT Face Trainer - облачный(!) сервис по ригу лица на основе ИИ, реалтаймовый притом.
Как мы читаем на сайте, он "позволяет превратить любую полигональную модель лица в real-time puppet за один час".
Каково?!
Они натренировали в облаке свою платформу для рига лица воссоздавать различные выражения кожаных актеров, используя библиотеку данных 4D-сканирования объемом 15 ТБ. Как утверждается, система преобразует загруженную модель головы в "реалтаймовый персонаж", который может выражать более 72 000 лицевых форм (facial shapes). И делает это преобразование в течение часа.
Кстати, губы выглядят просто потрясающе, после всех этих метахьюмановских силиконовых сосисок.
Дальше резонный вопрос про ретоп. А вот и ответ:
"для обработки сетки головы ее сначала нужно заклинапить и заретопить вручную, чтобы она соответствовала стандартному порядку точек (standard point order - хмм)"
А для тех, у кого еще больше вопросов и кто не любит видосы, в первом коменте есть совершенно чудесный пдф, к котором все рассказано и показано.
И там они рекомендуют юзать наш любимый Wrap3 от Andrew Krovopuskov для ретопа.
А потом гнать это все в Maya.
Дальше для гиков:
The face puppets are “only 30MB at runtime”, and run at 3ms/frame on a single CPU thread, making them suitable for use in games and real-time applications.
На сайте не указано, на каком движке были получены эти цифры, но на главной странице ехидно кривляется тетенька в Unreal Engine 5. (См след пост)
На сайте также не только люди, но и несколько гуманоидов и инопланетян.
Риггеры, выходи строиться. ИИ пришел.
https://zivadynamics.com/zrt-face-trainer

Ну и чтобы добить выживших в предыдущем посте, кину сюда вот это:
Ziva RT face puppet, in realtime
Unreal Engine 5 (4k @ 60fps)
Ну, за метахьюманов?

Слушайте, сегодня киберпанк реально атакует со всех сторон.
То запрещенные репперы дают разрешенные концерты с помощью голограмм, то вот теперь прокачка персонажей преследуется омоном.
Причем майнинг - это уже винтаж, а вот прокачка - это фермы, тысячи компов, обыски и пр.

Дивные новости из Винницы от 23 ноября:

8 июля 2021 года Служба безопасности Украины (СБУ) заявила, что раскрыла «майнинговую ферму», которая незаконно пользовалась электричеством Винницы, у нее изъяли 3800 игровых приставок. Позже оказалось, что теперь ее обвиняют уже не в майнинге, а в незаконной прокачке игровых персонажей

Вот что заявляет прокурор: "Служебные лица ММІ Engineering, действуя на территории Винницы, действуя умышленно и с целью получения выгоды, соединили в одну сеть указанные консоли. Для того, чтобы создавать аккаунты, «совершенствовать их с помощью стороннего программного обеспечения с целью дальнейшей перепродажи в сети интернет»"

Такую практику разработчики и издатели игры часто запрещают в пользовательских соглашениях, но в законодательстве Украины на этот счет нет ограничений.

При этом, иска от компании Sony Interactive Entertainment Europe Ltd вроде как нет.

И даже счета за электричество оплачены..

Киберпанк, чо!
https://ain.ua/2021/11/23/it-kompaniyu-obvinyayut-v-nezakonnoj-prokachke-personazhej-igry/

Ну, вот же он - Метаверрс. Прямо под ногами. Мы просто его не видим.
А он есть. Надо просто надеть волшебные очки.

¯\_(ツ)_/¯
Как не крути, а всё идёт к одному...
https://cleanup.pictures

Ну и конечно тут стоит упомянуть нейросеть 2019 года
- deepнадя

Это прекрасно.
Метаверс должен быть открыт не только для кожаных мешков.
Нашел на ДТФ.
Нейроинженер обучил крысят с кличками Кармак и Ромеро проходить уровень на движке DOOM II
VR для крыс!
В основе конструкции находится полистироловый шар с датчиками, которые отслеживают движение крысы и передают данные в игру. Грызун может стрелять, немного поднимая свою тушку, что также фиксируют датчики.
Перед крысой располагается трубка, из которой поступает сладкая вода, если грызун выполняет «правильные» действия: бежит по коридору или стреляет во врага, находящегося перед ним. Тем самым нейроинженер использовал стимул положительного подкрепления, чтобы обучить животных.
После непродолжительных тренировок крысы научились самостоятельно проходить уровень до конца без помощи хозяина.
"Кто играет лучше: свинья или крыса? Могут ли они вместе соревноваться в режиме deathmatch? Всё это большие вопросы для науки, на которые нам предстоит ответить."

https://cutt.ly/LTHxdlM

​​Meta AI + Google AI cоздают единую модель понимания всей человеческой речи.
В 2021 это уже не фантастика, а чисто инженерная задача.
Под дымовую завесу пустопорожней полемики о реализуемости сильного ИИ (AGI), БигТех проявляет бульдожью хватку при решении самых востребованных для бизнеса задач. И пока ширнармассы всюду где попало щеголяют знанием в реальности уже устаревшего термина «Большие Данные», БигТех уже сделал ставку на понятии нового поколения - «Большие Модели».

В новой системе самостоятельного обучения речи на 128 языках используется очень большая модель. XLS-R – это нейронная сеть для распознавания речи, определения языка и перевода. Она использует 2 млрд параметров и почти полумиллиона часов общедоступной речевой аудиозаписи на 128 языках, что почти в 10 раз больше, чем в предыдущей системе Facebook, созданной в прошлом году. Результат уже впечатляет - снижение уровеня ошибок в среднем на 14-34%.

Бизнес цель планируемого прорыва двойная:
• Окончательное решение вопроса синхронного перевода человеческой речи, с помощью мобильных гаджетов (мечта фантастов 20го века)
• Голосовое общение человеко-машинных сущностей в виртуальных средах Метавселенной (на что фантастам не хватило фантазии, а вот БигТеху хватило)

Объявление
Подробное описание
#NLP

А теперь об углеродном метаверсе.
Я тут пообщался с Максим Прасолов и он немного поправил мне оптику, через которую я смотрю на мир.
Вы знаете, что тренировка модели типа GPT 4 до уровня 96% аккуратности даёт столько же углеродного следа, сколько весь Нью-Йорк за МЕСЯЦ?
Или что датацентры «большой тройки» генерируют больше 1.5% всего CO2 ?
Или, согласно отчету CNBC, майнинг биткойнов составляет около 35,95 млн. тонн выбросов сarbon dioxide каждый год - примерно столько же, что и Новая Зеландия.
Или, дата центры пользуют 15% энергии всего IT.
Биток использует 121 тераватт-час электричества каждый год.
Globally, data centers were estimated to use between 196 terawatt hours (TWh) (Masanet et al, 2020) and 400 TWh (Hintemann, 2020) in 2020. This would mean data centers consume between 1-2% of global electricity demand.
За сим получается, что все наши мамкины метаверсы скоро могут потребовать от 10% до 20% всей электроэнергии планеты.
И тут хочется заострить внимание на том, что весь этот Compute будет жрать все больше и больше энергии.
Нам же надо в реалтайме и вчера, а у нас обычно впереди неделя и на рендер-ферме.
А про ИИ для обслуживания Больших Моделей я вообще молчу.
Интересно, как человек, когда-то добывший огонь, постепенно сжигает весь этот огонь, чтобы что-то понять про себя - именно так я рассматриваю предназначение языковых моделей, ГАНов да и того самого метаверса, который один на всех.
Однако, Макс обрушил на меня совершенно потрясающую новость. Оказывается можно компьютить и ML-ить без углерода!
Более того, они запустили zero-emissions AI cloud!!
На чем?
А на вулканах! Как Сальвадор:)
А если быть точнее, на геотермальной энергии.
И у них огромный дата-центр в Исландии.
Который green и не углеродит.
Еще раз, они используют на 100% возобновляемые источники геотермальной и гидроэнергии, а также естественное воздушное охлаждение, так как центр обработки данных расположен в Арктике в Исландии.
И еще у них цены на суперкомпьютеры на DGX на 30% ниже, чем в AWS.
В общем я читаю сейчас новости про Neu.ro и немного офигеваю. Другой мир, другая планета, другой уровень мышления.
Зеленая энергия, геотермалка, Арктика.
Ссылки:

https://techcrunch.com/2021/11/22/neu-ro-announces-zero-emissions-model-building-solution/

https://neu.ro/ai-cloud/

https://davidmytton.blog/how-much-energy-do-data-centers-use/

https://spectrum.ieee.org/deep-learning-computational-cost

Брат 2077.
Очень круто.

Смотрится реально киберпанково. И да, это не кинопоспродакшен. Это человек в одиночку фигачит контент.
Кто-то знает его?

Ненавижу пресс-релизы. Их вообще кто-нибудь читает? Или только рассылают?

Именно поэтому я пишу развеселые тексты, чтобы самому было в кайф.

А уж что потом с ними будет решат алгоритмы соц. сетей. И ваши репосты.

Ну и я подумал, почему я так мало тут наваливаю про CG EVENT.

Стесняюсь. А зря.

Вот вам лонгметабред вместо пресс-релиза.

Где искать подробности, сами знаете.

Метарепост!

Не так давно компьютерную графику еще можно было разделить на кино, анимацию, игры, motion design и прочие романтические названия, но сейчас глобализация технологий стремительно закручивает разные отрасли графики в один крутой пестрый замес, названия которому нет, да и не будет, оно устареет раньше, чем его произнесут всуе.

И если мы ждали межжанровых слияний типа кино+игры, то сейчас становится понятно, что вся эта безумная компьютерная графика призвана быть оболочкой для несущегося на нас непонятного Метаверса. Мир стремительно оцифровывается. Мы, со своими ID, INN, маршрутами в такси и лавиной данных с телефонов и фитнес-трекеров. Наши дома со всеми BIM-потрохами. Наши города со всеми камерами наблюдения. Все это – миллиарды записей в базах данных. Которые ждут, когда кто-то, наконец, прикрутит к ним 3Д-оболочку и построит параллельную копию этого мира, которая будет жить рядом с нами. А накопленные технологии кино, анимации, рендеринга и композа будут призваны сделать весь это Метаверс еще выразительнее и реалистичнее.

Мы стремительно оцифровываемся. Анимация сливается с цифрой через Motion Capture. Моделинг – через фотограмметрию. Съемка – через Virtual Production. Facial Animation – через DeepFake. Озвучка – через DeepSound. Арт – через NFT. А рендеринг и композ – алкают ИИ. Персонажи становятся Аватарами. Аватары – Цифровыми Инфлюенсерами.

Поэтому компьютерная графика явно не останется без работы, а CG EVENT METAVERSE 2021 призван собрать всех профессионалов в этой области и рассказать о том, какой будет эта работа. 11-12 декабря. Приходите.

https://cgevent.ru/archives/34269

Шикарное интервью с Виталиком Булгаровым у Нвидии.
Огромный поток любви в коментах. И это в коментах на Ютюбе. Какой же он классный!
https://youtu.be/QFYaTXOfWbg

Связанные одной сетью..

Вот это номер! Заклятые друзья теперь в одной сети..

OTOY и Maxon объявили о том, что Redshift появится в сети Render Network, предоставляя пользователям Redshift возможность считать свои задачи на миллионы распределенных GPU в Render Network.

В рамках партнерства OTOY и Maxon также будут разрабатывать встроенную интеграцию Cinema 4D в Render Network, предоставляя решение для загрузки в Render Network одним кликом, минуя необходимость конвертации и экспорта сцен.

И тут Юлик такой, ввернул про метаверс: "Эта интеграция между Cinema 4D, Redshift и Render Network является важной вехой в нашей десятилетней миссии по демократизации создания высококлассного 3D-контента и прорывом в развитии Открытого Метаверса".

Юлик, кстати, регулярно выступает на конференциях у криптанов, после чего RenderCoin также регулярно подскакивает, а потом отскакивает. Хотите профита, просто последите за его расписанием выступлений и вооружите ботов.

Кстати, Render Network, известный в девичестве как RNDR, уже поддерживает Арнольд, как Юлик бодро объявил еще в прошлом году.

Render Network - это распределенная сеть для рендеринга на GPU, построенная на блокчейне Ethereum. Этакий render-torrent.

Помимо того, что юзеры могут рендерить на GPU в облаке, Render Network позволяет им предоставлять свои собственные машины другим пользователям в обмен на рендер-койны.

Которые давно торгуются на биржах.
Я немного взял...

Ну и возвращаясь в топик, Cinema 4D также станет первой , которое сможет запускать рендеринг непосредственно в сеть, вместо того, чтобы пользователи экспортировали сцену в формат ORBX, разработанный Otoy.
https://www.maxon.net/es/article/otoy-adds-redshift-support-to-the-render-network

Эндрю Уилсон, генеральный директор Electronic Arts, сделал тысячу оговорок, реверансов, осторожных "очень рано", открестился от всего на свете, но в итоге заявил, что NFT и Play-to-Earn - это часть будущего игровой индустрии.

На вопрос о переговорах о лицензии ФИФА, Уилсон заявил:

"Когда мы взаимодействуем с сотнями миллионов наших футбольных фанатов... они хотят больше возможностей внутри игры, которые выходят за рамки простого футбола 11 на 11. Они хотят больше цифрового опыта за пределами игры, E-спорта, NFTs broader sports consumption, и они хотят, чтобы мы двигались очень, очень быстро".

В общем продажа вселенных, о которой заговорили сценаристы 10 лет назад, выходит за рамки кино и игр.
И идет к пользователю уже не с билетами в кино наперевес, а с NFT-предложениями всех цветов и размеров.

Люди сбиваются в коллабы, пытаясь произвести контент.
Надо сбиваться во вселенные. Только они интересны зрителю, умученному Марвелом и DC.

https://news.bitcoin.com/electronic-arts-ceo-thinks-nfts-and-play-to-earn-are-part-of-the-future-of-the-gaming-industry/