Метаверсище и ИИще
53.4K subscribers
6.76K photos
5.75K videos
50 files
7.92K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Верблюд из кирпичей. В какое нфт выкладывать?
Расчехляем Дипфейки...
This media is not supported in your browser
VIEW IN TELEGRAM
Ну, за персонажников.

Как я уже писал постом выше, ИИ пришел за трехмерщиками.

И это вам не просто красивые картинки от СтайлГана и прочих "этих людей не существует".
Это реконструкция трехмерной сетки и нейрорендеринг ея же.
Вместо того, чтобы моделить вот эти вот все лица красивые лица, можно попросить ИИ сгенерить их вместе с сетками.
Нвидия и Стенфорд приручили StyleGAN2 и другие генераторы, чтобы не только считать картинки с разных ракурсов (как мы тут недавно восторгались), а восстанавливать по дороге трехмерную сетку. Поглядите в статью, там котиков конкретно обмешили.

Еще немного и можно будет переселяться в метаверсину, а вопрос с аватарами будет решен с помощью ИИ и нейрорендеринга. Пока движки переобуваются и пишут пресс-релизы.

Видео выше работает в реалтайме.
Зацените, как они следят за вами...

P.S. Отдельно доставило про Demomonstration. Нвидия шутники...
https://matthew-a-chan.github.io/EG3D/
И как тебе такое, Илон Маск?! Фото или рендер?
И хотя росинтернет уже взорал заголовками типа "Концерн «Алмаз-Антей» показал первые фото своего электро-автомобиля" сдается мне, что это рендер.
И я не то, чтобы против ответа Илону Маску от Димона Рогозина, я против вот таких вот пресс-релизов и мегастранных вбросов.
https://autoreview.ru/news/oboronnyy-koncern-almaz-antey-anonsiroval-krossover

"В пике силовая установка кроссовера сможет развивать 824 Нм крутящего момента, благодаря чему автомобиль будет способен разгоняться с места до 60 км/ч за 2,7 секунды. Максимальная скорость составит 197 км в час. Без подзарядки батарей электромобиль сможет проехать до 463 километров. Объем багажного отделения составит 610 литров."

СМИ уже возопили (даже уважаемый рбк) "Новый российский кроссовер: быстрее, чем Tesla (фото и подробности)"

А вот эти вот скрепные 60км/ч - это зачем? Национальная самоидентификация? Почему не версты/мгновения тогда?

Далее: вот этот вот руль от шкоды - это зачем?

Ну и самое главное: а зачем выпускать пресс-релиз и НЕ показывать автомобиль? Вот этот вот стыдливый нетофото-неторендер левой фары - это что?

Я не поленился, погуглил, сразу нашел эскизы и то, что в его разработке участвовал санкт-петербургский политех.

Эскизы машины также есть в патентной онлайн-базе. В основе кроссовера лежит платформа Neva: ее макетный образец был показан еще в августе на выставке Армия-2021, хотя это сугубо «гражданская» разработка. Заявлено, что платформа спроектирована входящим в концерн Алмаз-Антей Обуховским заводом, который занимается изготовлением командных пунктов для ракетных войск. Тех самых C-300.

В общем ниже самая пожалуй подробная и вменяемая ссылка на autoreview - там и про эскизы и про шкоду и про остальное.

Поглядите, напишите что думаете, я-то тот еще автолюбитель, езжу на хонде 1999 года и понимаю только в пресс-релизах. Которые могут вот так вот обосрать любой проект.
И - Инфографика. Отдельное искусство.
ВВП по странам.
США и Китай - 42% мирового ВВП.
Практически разбиение по Вороному.
Метавселенная по Маску (и Дорси).

Маск, как обычно, красавелищще.

Дал шикарное интервью Babilon Bee. Обо всем.

Для начала унизил Виар, как способ захаживать в метаверс:
«Конечно, вы можете поставить себе телевизор на нос, однако неудобно постоянно держать эту штуку привязанной к голове».

Потом согласился с Грефом:
«Вы можете играть на своей приставке, вы можете проходить игру от первого лица и быстро двигаться, и при этом вас не укачает. Но если вы попытаетесь сделать это с очками виртуальной реальности, вас точно укачает».

Также он вспомнил, что в детстве ему говорили не сидеть слишком близко к экрану телевизора, так как это вредно для его зрения, а обитать в метавселенной означает долго носить очки AR или VR.

Альтернативой телевизору на носу он считает (в далекой перспективе) развитие Нейралинка и хаживание в метаверс через него.

Он кстати, заметил, что мир, возможно, уже сейчас находится в «метавселенной». Точно поглядывает в мою ленту.

Также он саркастично разнес метаверс-истерику и Web 3.0 хайп. Сказав, что он на такую байду не купится.

Тут уместно вспомнить, как бывший главный Твиттор - Джек Дорси - неделю назад разнес концепцию Web 3.0, заявив, что все эти влажные мечты о децентрализации интернет (и прочий хайп) останутся под контролем олигархов "between a and z", прозрачно намекнув на фонд a16z, Марка Андриссена и его дружков-инвесторов.

"Вы не владеете web3. Им владеют венчурные капиталисты и их партнеры. Это никогда не ускользнет от них. В конечном итоге это (web3) всего лишь централизованная организация с другим названием. Знайте, во что вы ввязываетесь"

Маск, пылко поддержал Дорси:
"Кто нибудь видел web3? Никак не могу его найти”. На что Дорси ответил “"он где-то между A и Z".

На итоге Марк Андриссен заблокировал Джека Дорси в твиттере. А Дорси в ответ отлично пошутил, что теперь он "официально забанен в web3"

Дивная Санта-Барбара.

Возвращаясь к Интервью, Маск умыл местных сенаторов, лающих на слона, заявив, что он платит Самый Большой Налог в Америке, на который они, собственно и живут. В этом году он заплатит более $11 млрд налогов.

Ну и журнал TIME назвал Илона Маска «Человеком года».

Красавчик, чо.
https://youtu.be/jvGnw1sHh9M
👍1
С виртуальной одежкой разобрались, поехали разбираться с виртуальным транспортом. Jadu Hoverboards - это NFT, позволяющие вашим аватарам летать в Метавселенной.

Пока вы тут рядитесь про крипту и нфт, реальные пацаны просто берут и делают. Точнее собирают ровные деньги.
Все, что вы хотели знать про то, как устроен мир накануне 2022:
Крипто-стартап Jadu, который заработал миллионы долларов на продаже пикселированных реактивных ранцев и ховербордов в НФТ, получил венчурное финансирование в размере 7 миллионов долларов от General Catalyst и дополнительное финансирование от Coinbase Ventures, The VR Fund, Sound Ventures и Guy Oseary, среди прочих.

В выходные компания продала 6 666 ховербордов NFT за 4,4 миллиона долларов в эфирах.

А дальше время откровений:

"Мы можем доить людей прямо сейчас, поскольку интерес достаточно велик, и если мы хотим, мы можем сказать, что выпускаем аватар и we’re going to do like 1 ETH mints, и мы, вероятно, сможем заработать 20-30 миллионов долларов"
А вот метаверс, единый и всемогущий, о котором я так пылко толковал на стримах и ивентах, проступает сквозь туман (точнее сквозь облака) и становится понятно, что мы давно уже в нём и никакой телевизор или перископ на носу нам не нужен.
Помните как мы восторгались НеРФами - Neural Radiance Fields - когда по нескольким фотачкам ИИ выдает вам облет уже объемной трехмерной сцены в некотором диапазоне углов камеры. (Для гиков - подборка видосов по этой теме в конце). А я последний месяц начинаю склоняться к мысли, что не движками трехмерными игровыми прирастает метаверс, но нейронным рендерингом. (Это такое красивое и страшное сочетание слов, когда ИИ сразу генерит вам картинку мира, без вот этих вот трехмерных сцен, текстур, материалов и геометрического рендеринга на итоге). Откуда он ее, картинку, берет?
Дык, мы уже накопили столько данных о нашем утлом мире, что просто бери и одевай эти данные в красивую оболочку и вот он метаверс - ортодоксальный и неделимый.
Просто надо скормить ИИ все многочисленные спутниковые снимки (это еще вояк не распотрощили), а он их заНеРФит, то есть пережует нейронным рендерингом и выдаст копию нашего мира в 3Д. И какую!
Поглядите на проект CityNeRF - ну классно же! Взяли и оцифровали планетку.
А олдскульные архаичные трехмерщики до сих пор делают ручками вот эти вот смешные эффекты для кино типа "летим камерой со спутника через калифорнию в ухо главного героя".
И без всяких лидаров, шмидаров и прочих reality capture.
Осталось взять все эти бездонные селфи из инсты, фб и других космических агенств, и скормить их ИИ - и вот уже отнейрорендеренные аватары заселяют оцифрованную планету. Где проблема цифровой одежды и транспорта уже решена, как я писал вчера.
А вы пока ищите метаверс на своих дорожных картах, только тяжелые очки снимите с носа, а то они заслоняют то, что под ним, носом.

Проект - https://www.louisbouchard.ai/citynerf/

Подборка про Нерфы: https://t.me/mishin_learning/486
Слушайте, только написал предыдущий пост про оцифровку планеты с помощью спутниковых снимков и [не]уклюже пошутил про оцифровку нас через космические агенства типа Инсты и ФБ. Как Артем их Меты (https://t.me/ai_newz/884) пригнал вот такую статью!

ИИ восстанавливает живых тварей из [мертвых] обычных видео - в 3Д. 3D-модели воскрешаются из нескольких случайных роликов и не требуют специализированных датчиков или заранее подготовленных шаблонов.

Ну, что и мы все уже в нём, в метаверсе. Причем с анимацией, прыжками, ужимками, ригом, skin-weights и прочая дата.

Немного перевода диплом для гиков:

Предыдущие работы по восстановлению трехмерной формы со скелетом часто опираются на специализированные датчики (например, синхронизированные многокамерные системы) или предварительно созданные трехмерные деформируемые модели (например, SMAL или SMPL). Такие методы не способны масштабироваться на разнообразные наборы объектов в естественных условиях.
Мы представляем BANMo, метод, который не требует ни специализированного датчика, ни заранее заданной формы шаблона. BANMo строит высокоточные, скелетные(articulated) 3D-модели (включая форму и анимируемые веса скиннинга!!!) из множества монокулярных случайных видео в рамках дифференцируемого рендеринга. Хотя использование множества видеозаписей обеспечивает больший охват видов камеры и объектов, они создают значительные проблемы в установлении соответствия между сценами с различным фоном, условиями освещения и т.д.
Наша ключевая идея заключается в объединении трех направлений мысли:
(1) классические модели деформируемой формы, использующие сочлененные кости и бленд-скиннинг,
(2) объемные нейронные поля сияния (NeRFs), которые поддаются оптимизации на основе градиента,
(3) канонические embeddings, генерирующие соответствия между пикселями и моделью.

Мы вводим модели нейронного блендинга, которая описывает дифференцируемые и инвертируемые деформации скелетов.
На реальных и синтетических наборах данных BANMo демонстрирует более высокую точность 3D-реконструкции, чем предыдущие работы для людей и животных, с возможностью визуализации реалистичных изображений с новых точек зрения и в новых позах.

Го в метаверс, точнее оглянитесь вокруг, улыбайтесь и машите.

https://banmo-www.github.io/
ИИ - художник, он так видит.

Даже если вы ничего не знаете про нерфы (или я вас уже достал), нейрорендеринг и английский, поглядите это видео (ссылки ниже).
ГиперНерф от Гугла - опять восстановление 3Д из видео, но с какой-то конской точностью.

Ну и стоит подумать, что это отличная симуляция работы кожаного мозга, который постоянно реконструирует 3Д сцену, получая на вход две плоские картинки. И чем хороши такие работы, что они не только позволяют не чокаясь выпивать за трехмерщиков и композеров, но продвигают к нас к пониманию, как устроен "транспорт" и "АЦП" в кожаной голове, то есть к пониманию самих себя.

Ну и поглядите, как они замораживают время и могут делать облет внутри одного кадра. Матрица среди нас!

А щас немного воскресного умничания о том, почему именно ГиперНерф. Философия в конце.

Предыдущие нерф-подходы, основанные на деформации, не позволяют моделировать изменения в топологии, поскольку топологические изменения требуют разрыва в поле деформации, но эти поля деформации непрерывны по сути.

Гугл устраняет это ограничение, поднимая NeRFs в пространство более высокой размерности и представляя 5D radiance поле, соответствующее каждому отдельному входному изображению, как срез этого "гиперпространства". Level sets моделируют эволюцию поверхностей как срезы через гиперповерхность более высокой размерности. И там происходит плавная интерполяция между "моментами", то есть конфигурациями сцены, видимыми на входных изображениях, с сохранением визуального правдоподобия, и синтез нового вида в фиксированные моменты.

Короче, расширяем сознание, выходим в гипермышление, делаем магию и вуду, а потом возвращаемся в привычное унылое 3Д и делаем вид, что ничего не произошло.

В общем, все как в жизни...

https://www.youtube.com/watch?v=B-zxoJ9o7s0

https://hypernerf.github.io/
Ну за прокуроров, не чокаясь.

Китайцы уже сделали ИИ, который выносит приговоры.
Сам.
Без кожаных присяжных и прочих белковых глупостей..

ИИ пока способен идентифицировать восемь распространенных преступлений, таких как мошенничество, азартные игры, опасное вождение и "разжигание ссор", говорят в South China Morning Star.

Его обучали и проверяли на более чем 17 тыс. реальных дел.

Прокуроры в Китае уже используют инструмент ИИ для оценки доказательств и определения того, насколько опасен подозреваемый для общества.

«ИИ-прокурор» был разработан в лаборатории Китайской академии наук. Он детально анализирует все данные из уголовного дела, сортирует их, откидывая ненужные материалы и бесполезные сведения. После этого ИИ преобразовывает все важные данные в формат, понятный компьютеру, в который интегрирован «прокурор».
Китайцы утверждают, что их разработка может с точностью более 97% предъявить обвинение человеку. Для каждого подозреваемого «ИИ-прокурор» выдвигает обвинение на основе тысячи характеристик, полученных из текста описания дела.

Не верите? Читайте статью.https://www.scmp.com/news/china/science/article/3160997/chinese-scientists-develop-ai-prosecutor-can-press-its-own
This media is not supported in your browser
VIEW IN TELEGRAM
Пока мы тут все никак не начнем ворочать мешки и поём про нейрорендеринг, движки, аватаров и метаверс, Снапчат берет и делает.
Взяли и выпустили линзу, которая показывает как вы будете выглядеть в метаверсине. Без всяких там 3Д, видеокарт, облаков, движков и телевизоров на носу.
На телефоне. Здесь и сейчас.
Молодцычо.
(линза имеет замысловатое название - avatar)
На прошлой неделе запостил инфографику про ВВП разных стран.
Прочитал много интересного в коментах.
Наиболее любопытный был такой:
"Ждём такую же инфографику по уровню счастья населения! Мне кажется это более важный показатель чем абстрактный ВВП и "уровень потребления", две третьих которого просто уходит в помойку!"
И тут умный ИИ мне подсовывает материал именно по уровню счастья. Gallup, оказывается уже собрал данные.
Индекс счастья — это разница между довольными и недовольными жизнью. По этому показателю Россия заняла пятое место с конца, опередив только Гану, Афганистан, Гонконг и Ирак. Индекс счастья в России остается на самом низком уровне за последние десять лет. В 2013-м он составлял 24 пункта, в 2014 году резко вырос до 59, затем только снижался — до 18 в 2021 году.
Подробнее на русском на Форбсе. Там же источники.
https://www.forbes.ru/society/451281-rossia-okazalas-v-paterke-samyh-nescastlivyh-stran
This media is not supported in your browser
VIEW IN TELEGRAM
Роботы - тоже люди! Уважайте их личное пространство.
Рендер или видео?
(еще одна версия метаверса)
В сентябре The Wall Street Journal публиковала серию статей под названием "Досье Facebook", в которых говорилось о вреде, наносимом фб, и о проблемах, с которыми он сталкивается при их устранении. Статьи, подробно рассказывали о том, как алгоритм Facebook способствует разжиганию вражды и как исследователи компании пришли к выводу, что ее платформы, особенно Instagram, могут негативно влиять на психическое здоровье подростков.

Позже Марк Цукерберг переобулся в Meta Platforms Inc., чтобы свитчнуться на создании metaverse, как следующего этапа развития интернета.

По словам людей, знакомых с ходом совещаний, он проводит встречи в виртуальной реальности, где вместо руководителей выступают цифровые аватары. Он призвал других сотрудников делать то же самое.

Подразумевается, что Facebook должен смотреть в будущее и не увязать в грязном прошлом.
The implication is that Facebook should look toward the future and not get bogged down in the messy past.

Бывшие руководители говорят, что Цукерберг сказал сотрудникам не извиняться. В отличие от предыдущих конфликтов, в которых генеральный директор публично заявлял о своей ответственности за ошибки компании и обычно решал их в лоб, Цукерберг мало говорил публично о разоблачениях и послал своих заместителей для дачи показаний в Конгрессе.

А сам нырнул в Метаверс и призвал остальных делать то же самое.
https://www.wsj.com/articles/facebook-whistleblower-pushback-political-spin-zuckerberg-11640786831
This media is not supported in your browser
VIEW IN TELEGRAM
Больше камер наблюдения.
ИИ жрать нечего, подайте на пропитание

Согласно новому исследованию компании Datagen, 99% команд по компьютерному зрению (CV) отменили проект машинного обучения (ML) из-за недостаточного количества обучающих данных. Задержки, между тем, кажутся поистине повсеместными: 100% команд сообщили о значительных задержках в реализации проектов из-за недостаточного количества данных для обучения. Исследование также показывает, что эти проблемы с учебными данными проявляются в разных формах и практически в равной степени затрагивают команды CV. Среди основных проблем, с которыми сталкиваются команды CV, - плохое аннотирование (48%), недостаточный охват домена (47%) и простая нехватка (44%).
Итоги года, мне кажется, отлично подвел фильм "Не смотри наверх", которые все уже наверняка посмотрели.

2021 прекрасно показал, что человечество окончательно перешло на питание твитами от Илона Маска и послушно следует за дудочкой Марка Цукерберга, зовущего человечество в Метаверс.

Поэтому я подведу итоги вот такой вот фоткой, наглядно характеризующей прекрасную эпоху. И хотя год безумного Кролика наступит ровно через год, он уже манит нас морковками роста курса, иксов на всём и хайпа метатворящего.

И пора уже перестать ворчать об этом, а просто выбирать соответствующие стратегии, которые в условиях наногоризонтов планирования, схлапываются в тактики.

Которые, впрочем, никто не отменял.
Всем удачных тактик, денег и здоровья!!

Follow the White Rabbit - спасибо всем фоловерам и подписчикам!
👍1