Метаверсище и ИИще
53.5K subscribers
6.77K photos
5.78K videos
50 files
7.95K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Про CogVideo я уже писал.
Кратко повторюсь.
С художниками практически разобрались, переходим к режиссерам, операторам и монтажерам.
В перспективе реальный web3 для контента. Никаких больше Халивудов и монополистов. Сидят кожаные мешки, бормочут свои влажные фантазии, а ИИ показывает им кино. Каждому свое.

В общем это китайская нейронка, которая генерит ВИДЕО из текста.
Китайцы за базар ответили и выкатили не только код, но и демо-сайт (и даже на английском).
Там уже разрешение 480х480 и много смешных примеров.
Можно выбирать, например, "слушать музыку в наушниках (серия 10)", а потом уточнить:
кошка
собака
лев
лошадь
птица

Бах, и ИИ генерит видео, где собака слушает музыку вместо ребенка.

Эфыксеры могут выбрать "пламенное сердце" или "горящий стакан воды".

Бах, и ИИ генерит шот.

Сайт: https://wudao.aminer.cn/cogvideo/
Выбор языка справа вверху.

Код:
https://github.com/THUDM/CogVideo
https://arxiv.org/abs/2205.15868
🔥5👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Это дико смешно.
Вся суть Степн за полторы минуты Южного парка.
https://youtu.be/rhzjDUlqoVk
🔥31👍5
Вот вам пример технологии, которая может создать копию нашего кожаного и бетонного мира в едином метаверсе.

И пока все бегают с игровыми движками и классической фотограмметрией, Instant NeRF от Нвидия (о котором я уже писал) просто творит чудеса.
Более того, не надо быть программистом или Илоном Маском, чтобы собирать вот такие видео.
Нвидия даже запустила конкурс для всех под названием #InstantNeRFSweepstakes, где разыгрывает видеокарты. Все, что нужно, это отщелкать много фото, а потом с помощью ИИ по туториалу собрать вот такие чудеса. Меня особенно впечатлило включение дронов в процесс - облеты получаются просто феерические.
По ссылке лента твиттера с нужным хештегом. Поглядите, что творит народ.
https://twitter.com/hashtag/InstantNeRFSweepstakes
👍14🔥3
This media is not supported in your browser
VIEW IN TELEGRAM
Ну, за коллажистов и иллюстраторов.

А вот это уже попытка сделать управляемой вот эту вот всю безумную генерацию картинок из текста. И не в очередном китайском коллабе, а от самих создателей великого Артбридера.
Поглядите, что они показывают у себя в твитторе и даже приглашают попробовать.
Го тестировать ИИ-коллажи.
https://collage.artbreeder.com/
https://twitter.com/Artbreeder/status/1547716040670334979
🔥12👍11
Комиссия по ценным бумагам и биржам США сообщает, что за первые шесть месяцев 2022 года слово « метавселенная » появилось в документах регулирующих органов более 1100 раз.

В Таймс вышла статься-выжимка из новой книги Мэтью Болла «Метавселенная: и как она изменит все».

Если дать себе труд ее внимательно прочитать, то автор довольно ловко и гибко дает определение метаверсу: "думайте о метавселенной как о четвертой эре вычислений и сетей".

Он также (как и я) сторонник единого и неделимого трушного метаверса: "думайте о метавселенной как об единственном числе, точно так же, как мы говорим «интернет», а не «интернетЫ»".

Ну и если перечитать статью пару раз, то становится понятно, что метаверса как такового нет, а есть очередной этап развития интернета, обусловленный прежде всего прокачкой каналов передачи и растущей мощностью облаков.

И если раньше, например, Интранет скромно именовали корпоративным интернетом и не лепили на него художественные ярлыки типа ДизельПанк или КорпоНет, то нынче мы живем в золотой век хайпа, и поэтому новому этапу (с неявными временными рамками) было принято решение присвоить красивое имя Метаверс и броситься на нем наживаться.

Поэтому, если для мамкиных метаверсов, типа катарских авиалиний, каталонских басков и нижегородских студентов, я всегда предлагал без ущерба для смысла заменять слово "метавселенная" на "новый сайт" или "крутая страничка", то для трушного метаверса вырисовывается вполне (ну ок, не вполне) осязаемое определение - "очередной этап развития интернета".
Историки будут потом писать "это период 2021-2025, когда все сошли с ума и называли интернет метаверсом".

В общем метаверс - это период. Дай вам Бог, его пережить..

Также радует, что автор не топит за телевизоры на носу, а скорее наоборот.

"это — не только очки виртуальной реальности, но и такие вещи, как голографические дисплеи, ультразвуковые генераторы силового поля и, как бы жутко это ни звучало, устройства для захвата электрических сигналов, посылаемых через мышцы."

Интернет - внутримышечно и внутривенно, вот, что такое Метаверс - четвертая эра развития сетей.
Что, кстати, отлично бьется с идеями носимых и вживляемых устройств, которые я озвучивал в интервью у Виктора Осыки.

Ну и последнее, автор призывает думать о метавселенной как о параллельном виртуальном плане существования, в чем я с ним согласен, но ловко обходит тему того, что Мета, Микрософт, Децентраленд и легион остальных "метаверсов" никогда в жизни не договорятся о стандартах обмена ассетами (ибо IP и история транзакций), а по сему действительно давайте называть метаверсом просто период массового помешательства на красивых терминах и этап развития сетей.
https://time.com/6197849/metaverse-future-matthew-ball/

https://t.me/cgevent/3682
👍15👎1
Киберпанк, который мы заслужили.
Оплата через терминал, сжигание грехов в блокчейне, рейтинги благодати.
Не фейк.
👎7🔥7👍1
Теперь точно за фотографов, портретных притом.

Потрясающий тред в твиттере, где Michael Green пихает в DALLE-2 запрос "Photo of a young Mexican woman in the style of [photographer]”
А дальше идут:
Helmut Newton
Dorothea Lange
Annie Leibovitz

И еще десятки(!) других культовых фигур.

Автор выбирает 4 лучших варианта, да еще и комментирует их. Фантастическая работа.

Обязательно поглядите, ибо мозг отказывается понять, как это происходит.

Ну и любителям ловить блох, тоже найдется работа - где-то глазик косит, где-то зубик некрасивый.

Но я повторюсь, ИИ генерит несуществующие портреты в стилистике любого фотографа. С нуля. Это не стайлтрансфер на свои картинки.

Давайте накатим не чокаясь также за кураторов вот этих вот модных выставок и кастинг скаутов.

Спасибо за наводку https://t.me/monkeyinlaw - отличный канал с тонной ИИ-визуала.

Ну и самое главное. Вы, конечно, можете уйти в отрицание очевидного, но в этих портретах в полный рост считывается ЭМОЦИЯ. Он звучит настолько сильно, что глупо это отрицать. Что прекрасно бьется с информацией о том, что синтетические лица считываются людьми как более приятные и располагающие.
ИИ прекрасно знает, как вызвать ваши эмоции, как бы вы не вытесняли отрицательное. Поглядите еще раз на портреты.
https://twitter.com/triplux/status/1542529379485396995
🔥5
This media is not supported in your browser
VIEW IN TELEGRAM
Не секрет, что беспилотные автомобили тренируются на синтетических городах. Созданных (в основном) в Unity. Ибо картинка с 3Д-камеры размечена идеально: вот дерево, вот светофор, вот фонтан.
А теперь Микрософт сделал метаверс для тренировки дронов. Это целый сервис AirSim - это полигон для тестирования разных вариантов использования дронов от городской доставки пиццы до инспектирования линий электропередач.
А я вот тут задумался, а чем собаки и лошади хуже. Все, что нужно, это большая поляна и виар-шлем для друзей человека. Конкур и дрессура в метаверсе...

https://www.bbc.com/news/technology-62202118
👍12🔥1
Куда катится мир?

Netflix пожрала студию Animal Logic.

Ту самую, которая делала полные 3Д-метры Happy Feet, Legend of the Guardians: The Owls of Ga'Hoole, The Lego Movies и Peter Rabbit.
И ещё тыщщу анимационных и кинопроектов.

Это произошло после того, как генеральный директор Netflix Рид Хастингс заявил в прошлом году, что он строит свое анимационное подразделение в надежде конкурировать с Disney в области семейной анимации.

Ранее Netflix пожрала студию Scanline VFX («Очень странные дела», FlowLine), и недавно заглотила множество игровых компаний.

Стриминговая компания скупает культовые студии (Animal Logic 30 лет).

Куда катится мир?
https://deadline.com/2022/07/netflix-acquires-animation-studio-animal-logic-1235072619/
👍9
Основная проблема мамкиных метаверсов в том, что графика там выглядит как детский виар-утренник в начале нулевых. Убого.
Похоже грядет кейс, от которого можно ожидать поднятия планки на уровень современного постпродакшена.
Ибо за дело берется студия The Third Floor.
TTF - это огромная VFX-студия работающая в кино, телевидении, видеоиграх, VR/AR и интерактивных развлечениях. Знаменитая также тем, что делает превизы (PreViz) практически для всех голливудских проектов.
Марвел, Звездные войны и вот это вот все - The Third Floor там всегда в подрядчиках.
А теперь внимание:
"Компания Shiba Inu выбрала студию визуализации мирового класса The Third Floor (TTF) для проектирования и строительства своего долгожданного проекта SHIB.io The Metaverse Project"

Подробностей. как вы понимаете нет, только порцайка высокохолестеринового хайпа, как положено в метаверсах:
"SHIB.io Metaverse станет кульминацией истории Shiba Inu как сообщества, отображенной виртуально, в слое красивых визуальных образов, демонстрирующих инновации и единство, с местом для криптосообщества ShibArmy, которое можно назвать своим домом. Мы создаем иммерсивный опыт, который позволит пользователям исследовать, извлекать пользу и взаимодействовать в виртуальном пространстве, подобного которому нет нигде.

Наша миссия - создать уникальный, веселый и захватывающий способ, позволяющий пользователям по-настоящему формировать опыт, собирать игровые ресурсы, генерировать награды и даже позволить им иметь личное пространство, в котором они смогут создавать и управлять своими собственными проектами. Этот мир будет охватывать всю экосистему Shiba Inu и ее технологические основы с SHIB в центре всего этого."

В общем все как обычно, но есть надежда на красивую картинку.
https://blog.shibaswap.com/shiba-welcomes-thethirdfloor/
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
Ну, за мокап.
За вот эти вот маркеры, датчики, камеры, рамные конструкции, передатчики и кожаных операторов всего этого безобразия.
Держите немного нейромокапной магии от китайцев. Восстановление не только движений, а полной сетки для тела. Детализация впечатляет. На входе - обычное видео, никаких лидаров-шмидаров.
Код и бумага присутствуют, все по-честному, а PyMAF проапгрейдили до PyMAF-X.
https://www.liuyebin.com/pymaf-x/
👍8🔥2