Вот уже не новый виар-кейс (2020), но я до сих пор не знаю, как реагировать.
Это небольшая документалка "Мать встретилась со своей умершей дочерью с помощью VR-технологий".
60К коментов. Народ рыдает. Там уже и католики подключились и пошли дискуссии о "законности".
А не могу для себя решить, может ли это быть возможностью, доступной каждому?

Да, я читал про отличные кейсы, когда у людей излечивают арахнофобию, показывая им виртуальных пауков в нужных дозах.
Но даже там, это было под контролем психотерапевта.

Кто-то получит облегчение, кто-то застрянет в прошлом. Как узнать заранее?
А пока я бы точно такую технологию отнес к разряду рецептурных.
https://youtu.be/uflTK8c4w0c

Далеко ль до Метаверсу?
Как до Луны пешком, вестимо...

Еще одно видео, которое нельзя развидеть.
Это, на минуточку, 5th International VR Awards Opening Speech.
2021 год.
Открытие церемонии.
В VR.
У меня, пожалуй, всё.
Стереозвук дополняет, так сказать.

Not Boring Tech — уникальный канал про технологии и стартапы. Автор рассказывает о новых продуктах, нейросетях и других технологиях из мира IT.

• Стартап из Тель-Авива превращает петухов в куриц, чтобы они откладывали яйца;
• Как найти баланс и не выгореть: о принципе work life harmony;
• Оживление вымерших 4 тысячи лет назад мамонтов с помощью технологий.

Подписывайтесь на @notboring_tech
#promo

Гениально.
Особенно, если кофе тебе наливает автомат с AI и IoT на борту.
Который одним computer vision глазом читает сами знаете чей фейсбук, а потом генерит рисунки для стаканов.

Как тебе такое, Илон Маск?

Димон слов на ветер не бросает: "Доставка напрямую на мобильные телефоны с помощью того самого интернета так называемого контента сугубо политического и, скорее всего, антироссийского, чтобы мы не могли суверенно защитить свой собственный интернет"

Россия получит интернет из космоса в 2024 году.

И работает над этим не кто-нибудь, а госкорпорация Роскосмос. Дмитрий Рогозин заявил, что, если все пойдет по плану, то страна получит интернет из космоса уже в 2024 году.
Димон отметил, что Роскосмосу уже выделили первые средства на формирование научно-технической стадии проекта, а в следующем году будет выделено еще 7 000 000 000 рублей.

Эти средства пойдут на создание двух прототипов космических аппаратов «Скиф» и «Марафон», которые будут запущены на орбиту в 2022 и в 2023 году. Первый предназначен для обеспечения обычного интернета, а второй — для обеспечения связью устройств интернета вещей. Оппаньки! Вот это уже интересно!!

Куда катится мир?

Нетфликс купил Сканлайн.

Да, тот самый Scanline, у которого самая крутая вода и Flowline и офисы в Vancouver, Montreal, Los Angeles, London, Munich, Stuttgart, and Seoul.

Netflix will invest in Scanline’s pipeline, infrastructure and workforce and continue to support the pioneering work that Scanline’s Eyeline Studios is doing in virtual production to push the boundaries of what is visibly possible.


https://about.netflix.com/en/news/bringing-more-vfx-magic-to-our-members-with-scanline-vfx

Обыденно так. Киберпанк-то на дворе.
Новости москвы устало пишут:
Kizaru выступил на концерте в Москве в виде голограммы
Из-за проблем с законом артист не может приехать в Россию, поэтому на сцене рэпера заменила его голограмма.

И похоже толпу в зале штырит не хуже чем "живьем".

Хотя погодите, а что сейчас считать "живьем"?

В общем, пока мы тут рядились в метаверсы, в мире полным ходом идут концерты голограмм.
И, как изрек Боня Титомир, пипл хавает.
Видать что-то знал, про природу зрителя..
(Последнее - не сарказм).

Помните я постил про шоу Альтер-Эго от Фокс, где на сцене будут аватары.

Там оказывается уже 9 эпизодов (все есть на ютюбе) и оно летит огого как.

Более того, его также будут делать в России на канале Пятница (Первый, ну ты чо?), которые запартнерились в Фоксом.

И я не знаю, почему об этом не пишут на каждом углу, но это полный метаверс. По крайней мере, это отличный прототип как по техническому замыслу, так и по замыслу, скажем, так, ментальному.

Ибо, цитирую: «Если ты 60-летний фельдшер из села, но прекрасно поёшь, ты можешь выйти на сцену в образе феи и показать свой музыкальный талант всей стране».
Поглядите, это забавно. Особенно члены жюри, которые без всякого виара взаимодействуют со всем этим метаверсом.

Как я уже притапливал в узких кругах, мы исторгаем из себя огромный поток цифры. Данных. Ежесекундно. Осталось все эти данные визуализировать, натянуть на них 3Д (или не 3Д) оболочку и выпустить их в Метаверсину гулять. А уж будет ли это сельский фельдшер или розовая фея, решает баланс вашего метакошелька.

Не надо "создавать" никаких метаверсов, он уже давно есть, он один, просто не отрендеренный, и пока существует в тексте и картинках (в риб файлах, если для гиков).

Поглядите, как люди лихо воплощают все свои фантазии на сцене.
А теперь вспомните, как люди лихо выплескивают свои комплексы в соц. сетях, только в текстовом виде.
Дайте им хороший скин(аватар) и логин в метаверс и они вам устроят киберпанк!
Который уже здесь, просто голый пока, многабуквенный...

И заметьте, никого виара.

Тут блохоискатели возопят: дык у них же костюмы и вощевсесложно.

Дайте время.

Я давно вангую за дикую демократизацию рынка мокапа и появление умной одежды, которая запросто снимает все ваши неуклюже движения, а нейросетка чистит артефакты, вызванные складками, неприлеганием и болтанием. И не только одежды. Этот дикий поток цифры с тушки кожаного мешка будет литься в метаверс через чипы, умные тату, смарт пластыри, мокап-маникюр (стартаперы, налетай!), а олдскульные фитнес-браслеты будут носить только любители винтажа.

А вам останется только покупать аватары, скины, цифровую одежду, мебель, косметику и пр..

Что уже и делают участники Альтер Эго. В отдельно взятом шоу.
https://www.fox.com/alter-ego/

Нейрорендеринг как он есть.
Контент залетает напрямую в мозг, минуя трактовки и ассоциации.
И воздействует напрямую, минуя гематоэнцефалитический барьер смысловых интерпретаций.
Простой художник с обратной ̶ж̶о̶п̶ы̶ стороны мира (Перт, Австралия) фигачит в 4К какую-то невообразимую красоту.
У него там все нвидии мира под столом?
Причем он за последние 10 дней выложил целую пачку таких видосов.
Я расчехлил youtube-dl и качнул 4К-версиию.
Раскрыл на весь монитор и залип.
Увидимся завтра.
P/S/ Когда останавливаешь видео. Картинка еще долго плывет сама по себе. У меня одного так?

Ну все, за риггеров и метахьюманов!
ИИ-облачный-лицевой-риг!
И не от какой-нибудь меты-шметы, а от Зивы - гуру рига!
Я уже давно поджидал чего-то такого, особенно, когда два года назад Крис Ландрет выкатил ИИ-авториг для тел в любым количеством конечностей. Но коль скоро мы теперь сходим с ума по аватарам, пришло время тренировать и ригать головы.
Ziva Dyamics выкатили ZRT Face Trainer - облачный(!) сервис по ригу лица на основе ИИ, реалтаймовый притом.
Как мы читаем на сайте, он "позволяет превратить любую полигональную модель лица в real-time puppet за один час".
Каково?!
Они натренировали в облаке свою платформу для рига лица воссоздавать различные выражения кожаных актеров, используя библиотеку данных 4D-сканирования объемом 15 ТБ. Как утверждается, система преобразует загруженную модель головы в "реалтаймовый персонаж", который может выражать более 72 000 лицевых форм (facial shapes). И делает это преобразование в течение часа.
Кстати, губы выглядят просто потрясающе, после всех этих метахьюмановских силиконовых сосисок.
Дальше резонный вопрос про ретоп. А вот и ответ:
"для обработки сетки головы ее сначала нужно заклинапить и заретопить вручную, чтобы она соответствовала стандартному порядку точек (standard point order - хмм)"
А для тех, у кого еще больше вопросов и кто не любит видосы, в первом коменте есть совершенно чудесный пдф, к котором все рассказано и показано.
И там они рекомендуют юзать наш любимый Wrap3 от Andrew Krovopuskov для ретопа.
А потом гнать это все в Maya.
Дальше для гиков:
The face puppets are “only 30MB at runtime”, and run at 3ms/frame on a single CPU thread, making them suitable for use in games and real-time applications.
На сайте не указано, на каком движке были получены эти цифры, но на главной странице ехидно кривляется тетенька в Unreal Engine 5. (См след пост)
На сайте также не только люди, но и несколько гуманоидов и инопланетян.
Риггеры, выходи строиться. ИИ пришел.
https://zivadynamics.com/zrt-face-trainer

Ну и чтобы добить выживших в предыдущем посте, кину сюда вот это:
Ziva RT face puppet, in realtime
Unreal Engine 5 (4k @ 60fps)
Ну, за метахьюманов?

Слушайте, сегодня киберпанк реально атакует со всех сторон.
То запрещенные репперы дают разрешенные концерты с помощью голограмм, то вот теперь прокачка персонажей преследуется омоном.
Причем майнинг - это уже винтаж, а вот прокачка - это фермы, тысячи компов, обыски и пр.

Дивные новости из Винницы от 23 ноября:

8 июля 2021 года Служба безопасности Украины (СБУ) заявила, что раскрыла «майнинговую ферму», которая незаконно пользовалась электричеством Винницы, у нее изъяли 3800 игровых приставок. Позже оказалось, что теперь ее обвиняют уже не в майнинге, а в незаконной прокачке игровых персонажей

Вот что заявляет прокурор: "Служебные лица ММІ Engineering, действуя на территории Винницы, действуя умышленно и с целью получения выгоды, соединили в одну сеть указанные консоли. Для того, чтобы создавать аккаунты, «совершенствовать их с помощью стороннего программного обеспечения с целью дальнейшей перепродажи в сети интернет»"

Такую практику разработчики и издатели игры часто запрещают в пользовательских соглашениях, но в законодательстве Украины на этот счет нет ограничений.

При этом, иска от компании Sony Interactive Entertainment Europe Ltd вроде как нет.

И даже счета за электричество оплачены..

Киберпанк, чо!
https://ain.ua/2021/11/23/it-kompaniyu-obvinyayut-v-nezakonnoj-prokachke-personazhej-igry/

Ну, вот же он - Метаверрс. Прямо под ногами. Мы просто его не видим.
А он есть. Надо просто надеть волшебные очки.

¯\_(ツ)_/¯
Как не крути, а всё идёт к одному...
https://cleanup.pictures

Ну и конечно тут стоит упомянуть нейросеть 2019 года
- deepнадя

Это прекрасно.
Метаверс должен быть открыт не только для кожаных мешков.
Нашел на ДТФ.
Нейроинженер обучил крысят с кличками Кармак и Ромеро проходить уровень на движке DOOM II
VR для крыс!
В основе конструкции находится полистироловый шар с датчиками, которые отслеживают движение крысы и передают данные в игру. Грызун может стрелять, немного поднимая свою тушку, что также фиксируют датчики.
Перед крысой располагается трубка, из которой поступает сладкая вода, если грызун выполняет «правильные» действия: бежит по коридору или стреляет во врага, находящегося перед ним. Тем самым нейроинженер использовал стимул положительного подкрепления, чтобы обучить животных.
После непродолжительных тренировок крысы научились самостоятельно проходить уровень до конца без помощи хозяина.
"Кто играет лучше: свинья или крыса? Могут ли они вместе соревноваться в режиме deathmatch? Всё это большие вопросы для науки, на которые нам предстоит ответить."

https://cutt.ly/LTHxdlM

​​Meta AI + Google AI cоздают единую модель понимания всей человеческой речи.
В 2021 это уже не фантастика, а чисто инженерная задача.
Под дымовую завесу пустопорожней полемики о реализуемости сильного ИИ (AGI), БигТех проявляет бульдожью хватку при решении самых востребованных для бизнеса задач. И пока ширнармассы всюду где попало щеголяют знанием в реальности уже устаревшего термина «Большие Данные», БигТех уже сделал ставку на понятии нового поколения - «Большие Модели».

В новой системе самостоятельного обучения речи на 128 языках используется очень большая модель. XLS-R – это нейронная сеть для распознавания речи, определения языка и перевода. Она использует 2 млрд параметров и почти полумиллиона часов общедоступной речевой аудиозаписи на 128 языках, что почти в 10 раз больше, чем в предыдущей системе Facebook, созданной в прошлом году. Результат уже впечатляет - снижение уровеня ошибок в среднем на 14-34%.

Бизнес цель планируемого прорыва двойная:
• Окончательное решение вопроса синхронного перевода человеческой речи, с помощью мобильных гаджетов (мечта фантастов 20го века)
• Голосовое общение человеко-машинных сущностей в виртуальных средах Метавселенной (на что фантастам не хватило фантазии, а вот БигТеху хватило)

Объявление
Подробное описание
#NLP

А теперь об углеродном метаверсе.
Я тут пообщался с Максим Прасолов и он немного поправил мне оптику, через которую я смотрю на мир.
Вы знаете, что тренировка модели типа GPT 4 до уровня 96% аккуратности даёт столько же углеродного следа, сколько весь Нью-Йорк за МЕСЯЦ?
Или что датацентры «большой тройки» генерируют больше 1.5% всего CO2 ?
Или, согласно отчету CNBC, майнинг биткойнов составляет около 35,95 млн. тонн выбросов сarbon dioxide каждый год - примерно столько же, что и Новая Зеландия.
Или, дата центры пользуют 15% энергии всего IT.
Биток использует 121 тераватт-час электричества каждый год.
Globally, data centers were estimated to use between 196 terawatt hours (TWh) (Masanet et al, 2020) and 400 TWh (Hintemann, 2020) in 2020. This would mean data centers consume between 1-2% of global electricity demand.
За сим получается, что все наши мамкины метаверсы скоро могут потребовать от 10% до 20% всей электроэнергии планеты.
И тут хочется заострить внимание на том, что весь этот Compute будет жрать все больше и больше энергии.
Нам же надо в реалтайме и вчера, а у нас обычно впереди неделя и на рендер-ферме.
А про ИИ для обслуживания Больших Моделей я вообще молчу.
Интересно, как человек, когда-то добывший огонь, постепенно сжигает весь этот огонь, чтобы что-то понять про себя - именно так я рассматриваю предназначение языковых моделей, ГАНов да и того самого метаверса, который один на всех.
Однако, Макс обрушил на меня совершенно потрясающую новость. Оказывается можно компьютить и ML-ить без углерода!
Более того, они запустили zero-emissions AI cloud!!
На чем?
А на вулканах! Как Сальвадор:)
А если быть точнее, на геотермальной энергии.
И у них огромный дата-центр в Исландии.
Который green и не углеродит.
Еще раз, они используют на 100% возобновляемые источники геотермальной и гидроэнергии, а также естественное воздушное охлаждение, так как центр обработки данных расположен в Арктике в Исландии.
И еще у них цены на суперкомпьютеры на DGX на 30% ниже, чем в AWS.
В общем я читаю сейчас новости про Neu.ro и немного офигеваю. Другой мир, другая планета, другой уровень мышления.
Зеленая энергия, геотермалка, Арктика.
Ссылки:

https://techcrunch.com/2021/11/22/neu-ro-announces-zero-emissions-model-building-solution/

https://neu.ro/ai-cloud/

https://davidmytton.blog/how-much-energy-do-data-centers-use/

https://spectrum.ieee.org/deep-learning-computational-cost