Метаверсище и ИИще
53.5K subscribers
6.78K photos
5.81K videos
50 files
7.98K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
Помните я постил про шоу Альтер-Эго от Фокс, где на сцене будут аватары.

Там оказывается уже 9 эпизодов (все есть на ютюбе) и оно летит огого как.

Более того, его также будут делать в России на канале Пятница (Первый, ну ты чо?), которые запартнерились в Фоксом.

И я не знаю, почему об этом не пишут на каждом углу, но это полный метаверс. По крайней мере, это отличный прототип как по техническому замыслу, так и по замыслу, скажем, так, ментальному.

Ибо, цитирую: «Если ты 60-летний фельдшер из села, но прекрасно поёшь, ты можешь выйти на сцену в образе феи и показать свой музыкальный талант всей стране».
Поглядите, это забавно. Особенно члены жюри, которые без всякого виара взаимодействуют со всем этим метаверсом.

Как я уже притапливал в узких кругах, мы исторгаем из себя огромный поток цифры. Данных. Ежесекундно. Осталось все эти данные визуализировать, натянуть на них 3Д (или не 3Д) оболочку и выпустить их в Метаверсину гулять. А уж будет ли это сельский фельдшер или розовая фея, решает баланс вашего метакошелька.

Не надо "создавать" никаких метаверсов, он уже давно есть, он один, просто не отрендеренный, и пока существует в тексте и картинках (в риб файлах, если для гиков).

Поглядите, как люди лихо воплощают все свои фантазии на сцене.
А теперь вспомните, как люди лихо выплескивают свои комплексы в соц. сетях, только в текстовом виде.
Дайте им хороший скин(аватар) и логин в метаверс и они вам устроят киберпанк!
Который уже здесь, просто голый пока, многабуквенный...

И заметьте, никого виара.

Тут блохоискатели возопят: дык у них же костюмы и вощевсесложно.

Дайте время.

Я давно вангую за дикую демократизацию рынка мокапа и появление умной одежды, которая запросто снимает все ваши неуклюже движения, а нейросетка чистит артефакты, вызванные складками, неприлеганием и болтанием. И не только одежды. Этот дикий поток цифры с тушки кожаного мешка будет литься в метаверс через чипы, умные тату, смарт пластыри, мокап-маникюр (стартаперы, налетай!), а олдскульные фитнес-браслеты будут носить только любители винтажа.

А вам останется только покупать аватары, скины, цифровую одежду, мебель, косметику и пр..

Что уже и делают участники Альтер Эго. В отдельно взятом шоу.
https://www.fox.com/alter-ego/
Media is too big
VIEW IN TELEGRAM
Нейрорендеринг как он есть.
Контент залетает напрямую в мозг, минуя трактовки и ассоциации.
И воздействует напрямую, минуя гематоэнцефалитический барьер смысловых интерпретаций.
Простой художник с обратной ̶ж̶о̶п̶ы̶ стороны мира (Перт, Австралия) фигачит в 4К какую-то невообразимую красоту.
У него там все нвидии мира под столом?
Причем он за последние 10 дней выложил целую пачку таких видосов.
Я расчехлил youtube-dl и качнул 4К-версиию.
Раскрыл на весь монитор и залип.
Увидимся завтра.
P/S/ Когда останавливаешь видео. Картинка еще долго плывет сама по себе. У меня одного так?
Ну все, за риггеров и метахьюманов!
ИИ-облачный-лицевой-риг!
И не от какой-нибудь меты-шметы, а от Зивы - гуру рига!
Я уже давно поджидал чего-то такого, особенно, когда два года назад Крис Ландрет выкатил ИИ-авториг для тел в любым количеством конечностей. Но коль скоро мы теперь сходим с ума по аватарам, пришло время тренировать и ригать головы.
Ziva Dyamics выкатили ZRT Face Trainer - облачный(!) сервис по ригу лица на основе ИИ, реалтаймовый притом.
Как мы читаем на сайте, он "позволяет превратить любую полигональную модель лица в real-time puppet за один час".
Каково?!
Они натренировали в облаке свою платформу для рига лица воссоздавать различные выражения кожаных актеров, используя библиотеку данных 4D-сканирования объемом 15 ТБ. Как утверждается, система преобразует загруженную модель головы в "реалтаймовый персонаж", который может выражать более 72 000 лицевых форм (facial shapes). И делает это преобразование в течение часа.
Кстати, губы выглядят просто потрясающе, после всех этих метахьюмановских силиконовых сосисок.
Дальше резонный вопрос про ретоп. А вот и ответ:
"для обработки сетки головы ее сначала нужно заклинапить и заретопить вручную, чтобы она соответствовала стандартному порядку точек (standard point order - хмм)"
А для тех, у кого еще больше вопросов и кто не любит видосы, в первом коменте есть совершенно чудесный пдф, к котором все рассказано и показано.
И там они рекомендуют юзать наш любимый Wrap3 от Andrew Krovopuskov для ретопа.
А потом гнать это все в Maya.
Дальше для гиков:
The face puppets are “only 30MB at runtime”, and run at 3ms/frame on a single CPU thread, making them suitable for use in games and real-time applications.
На сайте не указано, на каком движке были получены эти цифры, но на главной странице ехидно кривляется тетенька в Unreal Engine 5. (См след пост)
На сайте также не только люди, но и несколько гуманоидов и инопланетян.
Риггеры, выходи строиться. ИИ пришел.
https://zivadynamics.com/zrt-face-trainer
This media is not supported in your browser
VIEW IN TELEGRAM
Ну и чтобы добить выживших в предыдущем посте, кину сюда вот это:
Ziva RT face puppet, in realtime
Unreal Engine 5 (4k @ 60fps)
Ну, за метахьюманов?
Слушайте, сегодня киберпанк реально атакует со всех сторон.
То запрещенные репперы дают разрешенные концерты с помощью голограмм, то вот теперь прокачка персонажей преследуется омоном.
Причем майнинг - это уже винтаж, а вот прокачка - это фермы, тысячи компов, обыски и пр.

Дивные новости из Винницы от 23 ноября:

8 июля 2021 года Служба безопасности Украины (СБУ) заявила, что раскрыла «майнинговую ферму», которая незаконно пользовалась электричеством Винницы, у нее изъяли 3800 игровых приставок. Позже оказалось, что теперь ее обвиняют уже не в майнинге, а в незаконной прокачке игровых персонажей

Вот что заявляет прокурор: "Служебные лица ММІ Engineering, действуя на территории Винницы, действуя умышленно и с целью получения выгоды, соединили в одну сеть указанные консоли. Для того, чтобы создавать аккаунты, «совершенствовать их с помощью стороннего программного обеспечения с целью дальнейшей перепродажи в сети интернет»"

Такую практику разработчики и издатели игры часто запрещают в пользовательских соглашениях, но в законодательстве Украины на этот счет нет ограничений.

При этом, иска от компании Sony Interactive Entertainment Europe Ltd вроде как нет.

И даже счета за электричество оплачены..

Киберпанк, чо!
https://ain.ua/2021/11/23/it-kompaniyu-obvinyayut-v-nezakonnoj-prokachke-personazhej-igry/
Media is too big
VIEW IN TELEGRAM
Ну, вот же он - Метаверрс. Прямо под ногами. Мы просто его не видим.
А он есть. Надо просто надеть волшебные очки.
Forwarded from Технологии | Нейросети | Боты
This media is not supported in your browser
VIEW IN TELEGRAM
¯\_(ツ)_/¯
Как не крути, а всё идёт к одному...
https://cleanup.pictures

Ну и конечно тут стоит упомянуть нейросеть 2019 года
- deepнадя
👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Это прекрасно.
Метаверс должен быть открыт не только для кожаных мешков.
Нашел на ДТФ.
Нейроинженер обучил крысят с кличками Кармак и Ромеро проходить уровень на движке DOOM II
VR для крыс!
В основе конструкции находится полистироловый шар с датчиками, которые отслеживают движение крысы и передают данные в игру. Грызун может стрелять, немного поднимая свою тушку, что также фиксируют датчики.
Перед крысой располагается трубка, из которой поступает сладкая вода, если грызун выполняет «правильные» действия: бежит по коридору или стреляет во врага, находящегося перед ним. Тем самым нейроинженер использовал стимул положительного подкрепления, чтобы обучить животных.
После непродолжительных тренировок крысы научились самостоятельно проходить уровень до конца без помощи хозяина.
"Кто играет лучше: свинья или крыса? Могут ли они вместе соревноваться в режиме deathmatch? Всё это большие вопросы для науки, на которые нам предстоит ответить."

https://cutt.ly/LTHxdlM
​​Meta AI + Google AI cоздают единую модель понимания всей человеческой речи.
В 2021 это уже не фантастика, а чисто инженерная задача.

Под дымовую завесу пустопорожней полемики о реализуемости сильного ИИ (AGI), БигТех проявляет бульдожью хватку при решении самых востребованных для бизнеса задач. И пока ширнармассы всюду где попало щеголяют знанием в реальности уже устаревшего термина «Большие Данные», БигТех уже сделал ставку на понятии нового поколения - «Большие Модели».

В новой системе самостоятельного обучения речи на 128 языках используется очень большая модель. XLS-R – это нейронная сеть для распознавания речи, определения языка и перевода. Она использует 2 млрд параметров и почти полумиллиона часов общедоступной речевой аудиозаписи на 128 языках, что почти в 10 раз больше, чем в предыдущей системе Facebook, созданной в прошлом году. Результат уже впечатляет - снижение уровеня ошибок в среднем на 14-34%.

Бизнес цель планируемого прорыва двойная:
• Окончательное решение вопроса синхронного перевода человеческой речи, с помощью мобильных гаджетов (мечта фантастов 20го века)
• Голосовое общение человеко-машинных сущностей в виртуальных средах Метавселенной (на что фантастам не хватило фантазии, а вот БигТеху хватило)

Объявление
Подробное описание
#NLP
А теперь об углеродном метаверсе.
Я тут пообщался с Максим Прасолов и он немного поправил мне оптику, через которую я смотрю на мир.
Вы знаете, что тренировка модели типа GPT 4 до уровня 96% аккуратности даёт столько же углеродного следа, сколько весь Нью-Йорк за МЕСЯЦ?
Или что датацентры «большой тройки» генерируют больше 1.5% всего CO2 ?
Или, согласно отчету CNBC, майнинг биткойнов составляет около 35,95 млн. тонн выбросов сarbon dioxide каждый год - примерно столько же, что и Новая Зеландия.
Или, дата центры пользуют 15% энергии всего IT.
Биток использует 121 тераватт-час электричества каждый год.
Globally, data centers were estimated to use between 196 terawatt hours (TWh) (Masanet et al, 2020) and 400 TWh (Hintemann, 2020) in 2020. This would mean data centers consume between 1-2% of global electricity demand.
За сим получается, что все наши мамкины метаверсы скоро могут потребовать от 10% до 20% всей электроэнергии планеты.
И тут хочется заострить внимание на том, что весь этот Compute будет жрать все больше и больше энергии.
Нам же надо в реалтайме и вчера, а у нас обычно впереди неделя и на рендер-ферме.
А про ИИ для обслуживания Больших Моделей я вообще молчу.
Интересно, как человек, когда-то добывший огонь, постепенно сжигает весь этот огонь, чтобы что-то понять про себя - именно так я рассматриваю предназначение языковых моделей, ГАНов да и того самого метаверса, который один на всех.
Однако, Макс обрушил на меня совершенно потрясающую новость. Оказывается можно компьютить и ML-ить без углерода!
Более того, они запустили zero-emissions AI cloud!!
На чем?
А на вулканах! Как Сальвадор:)
А если быть точнее, на геотермальной энергии.
И у них огромный дата-центр в Исландии.
Который green и не углеродит.
Еще раз, они используют на 100% возобновляемые источники геотермальной и гидроэнергии, а также естественное воздушное охлаждение, так как центр обработки данных расположен в Арктике в Исландии.
И еще у них цены на суперкомпьютеры на DGX на 30% ниже, чем в AWS.
В общем я читаю сейчас новости про Neu.ro и немного офигеваю. Другой мир, другая планета, другой уровень мышления.
Зеленая энергия, геотермалка, Арктика.
Ссылки:

https://techcrunch.com/2021/11/22/neu-ro-announces-zero-emissions-model-building-solution/

https://neu.ro/ai-cloud/

https://davidmytton.blog/how-much-energy-do-data-centers-use/

https://spectrum.ieee.org/deep-learning-computational-cost
Forwarded from Denis Sexy IT 🤖
neural.love продолжает улучшать свои модельки, и в этот раз дошла очередь до нейронки для генерации портретов – вот вам Лев Толстой в молодости сгенерированный на еще не опубликованной модельке – слева оригинал из которого генерировалось лицо.

Да, в цвет глаз оно еще не умеет, но уже намного ближе к оригиналу чем в прошлой версии сервиса ✨ Напишу когда выкатим обновление

Текущая версия генерации портретных фото доступна тут: 
https://neural.love/portraits
Media is too big
VIEW IN TELEGRAM
Брат 2077.
Очень круто.

Смотрится реально киберпанково. И да, это не кинопоспродакшен. Это человек в одиночку фигачит контент.
Кто-то знает его?
Ненавижу пресс-релизы. Их вообще кто-нибудь читает? Или только рассылают?

Именно поэтому я пишу развеселые тексты, чтобы самому было в кайф.

А уж что потом с ними будет решат алгоритмы соц. сетей. И ваши репосты.

Ну и я подумал, почему я так мало тут наваливаю про CG EVENT.

Стесняюсь. А зря.

Вот вам лонгметабред вместо пресс-релиза.

Где искать подробности, сами знаете.

Метарепост!

Не так давно компьютерную графику еще можно было разделить на кино, анимацию, игры, motion design и прочие романтические названия, но сейчас глобализация технологий стремительно закручивает разные отрасли графики в один крутой пестрый замес, названия которому нет, да и не будет, оно устареет раньше, чем его произнесут всуе.

И если мы ждали межжанровых слияний типа кино+игры, то сейчас становится понятно, что вся эта безумная компьютерная графика призвана быть оболочкой для несущегося на нас непонятного Метаверса. Мир стремительно оцифровывается. Мы, со своими ID, INN, маршрутами в такси и лавиной данных с телефонов и фитнес-трекеров. Наши дома со всеми BIM-потрохами. Наши города со всеми камерами наблюдения. Все это – миллиарды записей в базах данных. Которые ждут, когда кто-то, наконец, прикрутит к ним 3Д-оболочку и построит параллельную копию этого мира, которая будет жить рядом с нами. А накопленные технологии кино, анимации, рендеринга и композа будут призваны сделать весь это Метаверс еще выразительнее и реалистичнее.

Мы стремительно оцифровываемся. Анимация сливается с цифрой через Motion Capture. Моделинг – через фотограмметрию. Съемка – через Virtual Production. Facial Animation – через DeepFake. Озвучка – через DeepSound. Арт – через NFT. А рендеринг и композ – алкают ИИ. Персонажи становятся Аватарами. Аватары – Цифровыми Инфлюенсерами.

Поэтому компьютерная графика явно не останется без работы, а CG EVENT METAVERSE 2021 призван собрать всех профессионалов в этой области и рассказать о том, какой будет эта работа. 11-12 декабря. Приходите.

https://cgevent.ru/archives/34269
Шикарное интервью с Виталиком Булгаровым у Нвидии.
Огромный поток любви в коментах. И это в коментах на Ютюбе. Какой же он классный!
https://youtu.be/QFYaTXOfWbg
Связанные одной сетью..

Вот это номер! Заклятые друзья теперь в одной сети..

OTOY и Maxon объявили о том, что Redshift появится в сети Render Network, предоставляя пользователям Redshift возможность считать свои задачи на миллионы распределенных GPU в Render Network.

В рамках партнерства OTOY и Maxon также будут разрабатывать встроенную интеграцию Cinema 4D в Render Network, предоставляя решение для загрузки в Render Network одним кликом, минуя необходимость конвертации и экспорта сцен.

И тут Юлик такой, ввернул про метаверс: "Эта интеграция между Cinema 4D, Redshift и Render Network является важной вехой в нашей десятилетней миссии по демократизации создания высококлассного 3D-контента и прорывом в развитии Открытого Метаверса".

Юлик, кстати, регулярно выступает на конференциях у криптанов, после чего RenderCoin также регулярно подскакивает, а потом отскакивает. Хотите профита, просто последите за его расписанием выступлений и вооружите ботов.