Метаверсище и ИИще
53.5K subscribers
6.78K photos
5.8K videos
50 files
7.97K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
А вот метаверс, единый и всемогущий, о котором я так пылко толковал на стримах и ивентах, проступает сквозь туман (точнее сквозь облака) и становится понятно, что мы давно уже в нём и никакой телевизор или перископ на носу нам не нужен.
Помните как мы восторгались НеРФами - Neural Radiance Fields - когда по нескольким фотачкам ИИ выдает вам облет уже объемной трехмерной сцены в некотором диапазоне углов камеры. (Для гиков - подборка видосов по этой теме в конце). А я последний месяц начинаю склоняться к мысли, что не движками трехмерными игровыми прирастает метаверс, но нейронным рендерингом. (Это такое красивое и страшное сочетание слов, когда ИИ сразу генерит вам картинку мира, без вот этих вот трехмерных сцен, текстур, материалов и геометрического рендеринга на итоге). Откуда он ее, картинку, берет?
Дык, мы уже накопили столько данных о нашем утлом мире, что просто бери и одевай эти данные в красивую оболочку и вот он метаверс - ортодоксальный и неделимый.
Просто надо скормить ИИ все многочисленные спутниковые снимки (это еще вояк не распотрощили), а он их заНеРФит, то есть пережует нейронным рендерингом и выдаст копию нашего мира в 3Д. И какую!
Поглядите на проект CityNeRF - ну классно же! Взяли и оцифровали планетку.
А олдскульные архаичные трехмерщики до сих пор делают ручками вот эти вот смешные эффекты для кино типа "летим камерой со спутника через калифорнию в ухо главного героя".
И без всяких лидаров, шмидаров и прочих reality capture.
Осталось взять все эти бездонные селфи из инсты, фб и других космических агенств, и скормить их ИИ - и вот уже отнейрорендеренные аватары заселяют оцифрованную планету. Где проблема цифровой одежды и транспорта уже решена, как я писал вчера.
А вы пока ищите метаверс на своих дорожных картах, только тяжелые очки снимите с носа, а то они заслоняют то, что под ним, носом.

Проект - https://www.louisbouchard.ai/citynerf/

Подборка про Нерфы: https://t.me/mishin_learning/486
Слушайте, только написал предыдущий пост про оцифровку планеты с помощью спутниковых снимков и [не]уклюже пошутил про оцифровку нас через космические агенства типа Инсты и ФБ. Как Артем их Меты (https://t.me/ai_newz/884) пригнал вот такую статью!

ИИ восстанавливает живых тварей из [мертвых] обычных видео - в 3Д. 3D-модели воскрешаются из нескольких случайных роликов и не требуют специализированных датчиков или заранее подготовленных шаблонов.

Ну, что и мы все уже в нём, в метаверсе. Причем с анимацией, прыжками, ужимками, ригом, skin-weights и прочая дата.

Немного перевода диплом для гиков:

Предыдущие работы по восстановлению трехмерной формы со скелетом часто опираются на специализированные датчики (например, синхронизированные многокамерные системы) или предварительно созданные трехмерные деформируемые модели (например, SMAL или SMPL). Такие методы не способны масштабироваться на разнообразные наборы объектов в естественных условиях.
Мы представляем BANMo, метод, который не требует ни специализированного датчика, ни заранее заданной формы шаблона. BANMo строит высокоточные, скелетные(articulated) 3D-модели (включая форму и анимируемые веса скиннинга!!!) из множества монокулярных случайных видео в рамках дифференцируемого рендеринга. Хотя использование множества видеозаписей обеспечивает больший охват видов камеры и объектов, они создают значительные проблемы в установлении соответствия между сценами с различным фоном, условиями освещения и т.д.
Наша ключевая идея заключается в объединении трех направлений мысли:
(1) классические модели деформируемой формы, использующие сочлененные кости и бленд-скиннинг,
(2) объемные нейронные поля сияния (NeRFs), которые поддаются оптимизации на основе градиента,
(3) канонические embeddings, генерирующие соответствия между пикселями и моделью.

Мы вводим модели нейронного блендинга, которая описывает дифференцируемые и инвертируемые деформации скелетов.
На реальных и синтетических наборах данных BANMo демонстрирует более высокую точность 3D-реконструкции, чем предыдущие работы для людей и животных, с возможностью визуализации реалистичных изображений с новых точек зрения и в новых позах.

Го в метаверс, точнее оглянитесь вокруг, улыбайтесь и машите.

https://banmo-www.github.io/
ИИ - художник, он так видит.

Даже если вы ничего не знаете про нерфы (или я вас уже достал), нейрорендеринг и английский, поглядите это видео (ссылки ниже).
ГиперНерф от Гугла - опять восстановление 3Д из видео, но с какой-то конской точностью.

Ну и стоит подумать, что это отличная симуляция работы кожаного мозга, который постоянно реконструирует 3Д сцену, получая на вход две плоские картинки. И чем хороши такие работы, что они не только позволяют не чокаясь выпивать за трехмерщиков и композеров, но продвигают к нас к пониманию, как устроен "транспорт" и "АЦП" в кожаной голове, то есть к пониманию самих себя.

Ну и поглядите, как они замораживают время и могут делать облет внутри одного кадра. Матрица среди нас!

А щас немного воскресного умничания о том, почему именно ГиперНерф. Философия в конце.

Предыдущие нерф-подходы, основанные на деформации, не позволяют моделировать изменения в топологии, поскольку топологические изменения требуют разрыва в поле деформации, но эти поля деформации непрерывны по сути.

Гугл устраняет это ограничение, поднимая NeRFs в пространство более высокой размерности и представляя 5D radiance поле, соответствующее каждому отдельному входному изображению, как срез этого "гиперпространства". Level sets моделируют эволюцию поверхностей как срезы через гиперповерхность более высокой размерности. И там происходит плавная интерполяция между "моментами", то есть конфигурациями сцены, видимыми на входных изображениях, с сохранением визуального правдоподобия, и синтез нового вида в фиксированные моменты.

Короче, расширяем сознание, выходим в гипермышление, делаем магию и вуду, а потом возвращаемся в привычное унылое 3Д и делаем вид, что ничего не произошло.

В общем, все как в жизни...

https://www.youtube.com/watch?v=B-zxoJ9o7s0

https://hypernerf.github.io/
Ну за прокуроров, не чокаясь.

Китайцы уже сделали ИИ, который выносит приговоры.
Сам.
Без кожаных присяжных и прочих белковых глупостей..

ИИ пока способен идентифицировать восемь распространенных преступлений, таких как мошенничество, азартные игры, опасное вождение и "разжигание ссор", говорят в South China Morning Star.

Его обучали и проверяли на более чем 17 тыс. реальных дел.

Прокуроры в Китае уже используют инструмент ИИ для оценки доказательств и определения того, насколько опасен подозреваемый для общества.

«ИИ-прокурор» был разработан в лаборатории Китайской академии наук. Он детально анализирует все данные из уголовного дела, сортирует их, откидывая ненужные материалы и бесполезные сведения. После этого ИИ преобразовывает все важные данные в формат, понятный компьютеру, в который интегрирован «прокурор».
Китайцы утверждают, что их разработка может с точностью более 97% предъявить обвинение человеку. Для каждого подозреваемого «ИИ-прокурор» выдвигает обвинение на основе тысячи характеристик, полученных из текста описания дела.

Не верите? Читайте статью.https://www.scmp.com/news/china/science/article/3160997/chinese-scientists-develop-ai-prosecutor-can-press-its-own
This media is not supported in your browser
VIEW IN TELEGRAM
Пока мы тут все никак не начнем ворочать мешки и поём про нейрорендеринг, движки, аватаров и метаверс, Снапчат берет и делает.
Взяли и выпустили линзу, которая показывает как вы будете выглядеть в метаверсине. Без всяких там 3Д, видеокарт, облаков, движков и телевизоров на носу.
На телефоне. Здесь и сейчас.
Молодцычо.
(линза имеет замысловатое название - avatar)
На прошлой неделе запостил инфографику про ВВП разных стран.
Прочитал много интересного в коментах.
Наиболее любопытный был такой:
"Ждём такую же инфографику по уровню счастья населения! Мне кажется это более важный показатель чем абстрактный ВВП и "уровень потребления", две третьих которого просто уходит в помойку!"
И тут умный ИИ мне подсовывает материал именно по уровню счастья. Gallup, оказывается уже собрал данные.
Индекс счастья — это разница между довольными и недовольными жизнью. По этому показателю Россия заняла пятое место с конца, опередив только Гану, Афганистан, Гонконг и Ирак. Индекс счастья в России остается на самом низком уровне за последние десять лет. В 2013-м он составлял 24 пункта, в 2014 году резко вырос до 59, затем только снижался — до 18 в 2021 году.
Подробнее на русском на Форбсе. Там же источники.
https://www.forbes.ru/society/451281-rossia-okazalas-v-paterke-samyh-nescastlivyh-stran
This media is not supported in your browser
VIEW IN TELEGRAM
Роботы - тоже люди! Уважайте их личное пространство.
Рендер или видео?
(еще одна версия метаверса)
В сентябре The Wall Street Journal публиковала серию статей под названием "Досье Facebook", в которых говорилось о вреде, наносимом фб, и о проблемах, с которыми он сталкивается при их устранении. Статьи, подробно рассказывали о том, как алгоритм Facebook способствует разжиганию вражды и как исследователи компании пришли к выводу, что ее платформы, особенно Instagram, могут негативно влиять на психическое здоровье подростков.

Позже Марк Цукерберг переобулся в Meta Platforms Inc., чтобы свитчнуться на создании metaverse, как следующего этапа развития интернета.

По словам людей, знакомых с ходом совещаний, он проводит встречи в виртуальной реальности, где вместо руководителей выступают цифровые аватары. Он призвал других сотрудников делать то же самое.

Подразумевается, что Facebook должен смотреть в будущее и не увязать в грязном прошлом.
The implication is that Facebook should look toward the future and not get bogged down in the messy past.

Бывшие руководители говорят, что Цукерберг сказал сотрудникам не извиняться. В отличие от предыдущих конфликтов, в которых генеральный директор публично заявлял о своей ответственности за ошибки компании и обычно решал их в лоб, Цукерберг мало говорил публично о разоблачениях и послал своих заместителей для дачи показаний в Конгрессе.

А сам нырнул в Метаверс и призвал остальных делать то же самое.
https://www.wsj.com/articles/facebook-whistleblower-pushback-political-spin-zuckerberg-11640786831
This media is not supported in your browser
VIEW IN TELEGRAM
Больше камер наблюдения.
ИИ жрать нечего, подайте на пропитание

Согласно новому исследованию компании Datagen, 99% команд по компьютерному зрению (CV) отменили проект машинного обучения (ML) из-за недостаточного количества обучающих данных. Задержки, между тем, кажутся поистине повсеместными: 100% команд сообщили о значительных задержках в реализации проектов из-за недостаточного количества данных для обучения. Исследование также показывает, что эти проблемы с учебными данными проявляются в разных формах и практически в равной степени затрагивают команды CV. Среди основных проблем, с которыми сталкиваются команды CV, - плохое аннотирование (48%), недостаточный охват домена (47%) и простая нехватка (44%).
Итоги года, мне кажется, отлично подвел фильм "Не смотри наверх", которые все уже наверняка посмотрели.

2021 прекрасно показал, что человечество окончательно перешло на питание твитами от Илона Маска и послушно следует за дудочкой Марка Цукерберга, зовущего человечество в Метаверс.

Поэтому я подведу итоги вот такой вот фоткой, наглядно характеризующей прекрасную эпоху. И хотя год безумного Кролика наступит ровно через год, он уже манит нас морковками роста курса, иксов на всём и хайпа метатворящего.

И пора уже перестать ворчать об этом, а просто выбирать соответствующие стратегии, которые в условиях наногоризонтов планирования, схлапываются в тактики.

Которые, впрочем, никто не отменял.
Всем удачных тактик, денег и здоровья!!

Follow the White Rabbit - спасибо всем фоловерам и подписчикам!
👍1
Вопрос с платформой для строительства метаверса закрыт - версия 2.
Закрыт со стороны Меты.
Несколько лет Фейсбук разрабатывал свою собственную операционку для Виар/Аар устройств и соответственно для мета-обвязки всей этой виар-тусовки.
Сотни спецов, несколько лет - но метаверса не случилось.
Статья ссылается на источники, которые утверждают, что проект закрыт.
Круг сужается до Нвидия..
https://www.theinformation.com/articles/meta-platforms-halts-vr-and-ar-operating-system-project
За бортом бушует CES 2022 и там много железных новостей.

В первых рядах отжигает Нвидия, которая представила GeForce RTX 3090 Ti. Который будет иметь 24 ГБ GDDR6X, работающей на скорости 21 Гбит/с, и почти на 7,7% более высокую тактовую частоту памяти, что обеспечит дополнительную производительность для всеговсего.

Производительность GPU RTX 3090 Ti составит 40 терафлопс, что на 11% выше, чем у RTX 3090 с 36 терафлопс. Новый GPU также обеспечит 78 терафлопс для трассировки лучей и 320 терафлопс для задач искусственного интеллекта.

Про цену писать бессмысленно, она определяется майнерами...

Но выглядит, конечно, сладко...

Они также объявили о новом выводке решений для игровых ноутбуков: RTX 3070 Ti и RTX 3080 Ti, которые появятся в ноутбуках по цене $1 499 и $2 499 соответственно. Они появятся в продаже 1 февраля у разных партнеров NVIDIA.
И эти игрушки, похоже, будут несовместимы с майнингом
https://venturebeat.com/2022/01/04/nvidia-unveils-geforce-rtx-3050-3070-ti-3080-ti-and-3090-ti-graphics-cards/
👍2
Больше железяк с CES 2022.

Вот такой телевизор я бы взял!

Диагональ два с половиной метра.

Это уже не окно в метаверс, а целая дверь.

Через которую туда удобно хаживать, вместо того, чтобы городить телевизор на носу.

Кстати, недавно смартфоны и планшеты обскакали телевизоры, киноэкраны и прочие олдскульные медиа и переместились из унизительной категории "второй экран" в категорию "основной экран". А вся эта традиционная братия теперь играет роль второго экрана по отношению к китайским телефонам к каждом кармане.

LG G2 OLED: available in 97-, 83-. 77-, 65-, and 55-inch sizes

LG C2 OLED: available in 83-, 77-, 65-, 55, 48-, and 42-inch sizes
This media is not supported in your browser
VIEW IN TELEGRAM
БМВ хамелеон или грязеподавление.
На CES 2022 показали кроссовер БМВ iX, который меняет цвет кузова по нажатию кнопки.

Мощность составляет 619 л.с., крутящий момент составляет 1015 Нм.
Разгон от нуля до сотни — всего за 3,8 секунды. Максимальная скорость составляет 250 км/ч, что на 50 км/ч выше аналогичного показателя модели BMW iX xDrive50. Максимальный запас хода BMW iX М60 на одном заряде батареи — 566 км.

Сразу идея для российского стартапа - кузов с грязеподавлением. По нажатию кнопки кузов перекрашивается в цвет, делающий грязь невидимой.

Также интересно, что будут писать в паспорт машины и как гаишники будут передавать по рации "останавливаем серый, нет белый, нет коричневый бмв, но это не точно"
👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Нвидия Канвас (в девичестве Гоген) обновился до версии 1.1.
И там уже появились первые признаки (очень первичные) pipeline ready инструмента.
В 4 раза большее разрешение, новая ИИ модель с улучшенным качеством и минимизацией артефактов.
И там появился экспорт в Фотошоп!
Где все ваши безумные мазки раскиданы по слоям.
В общем ИИ настойчиво рекомендует "spend more time visualizing ideas" или "ИИ все дорисует за вас".
Пробуем тут: https://www.nvidia.com/en-us/studio/canvas/
Криптопанк уже здесь.
Новый антивирус Norton 360 ставит на компы пользователей майнер эфира.
По умолчанию.
И когда компы ничего не делают, они начинают неистово майнить.
Эфир (пока).
При этом антивирус сам создает эфирный криптокошелек (за пользователя) и хранит валютку на серверах Нортона (естественно)
Можно ли вывести эфирчик?
Да можно, переводом на Coinbase.
При этом добрый доктор Нортон возьмет себе 15 процентов. Газ на пользователе.
Все это совершенно официально, по ссылке faq от нортона.
https://community.norton.com/en/forums/faq-norton-crypto
Forwarded from Denis Sexy IT 🤖
Наткнулся на любопытный пост о том, какой эволюционный скачок прошли приложения/сервисы, которые, наверное, установлены уже на всех смартфонах. Многие проекты в свое время совершили успешный «пивот» (разворот стратегии бизнеса), что позволило сервисам захватить рынок и нишу – для стартапов вообще одно из самых важных умений это мгновенно менять продукт и пересобирать все что было:

WhatsApp создавался как приложение, показывающее статусы других людей, типа «Я в самолёте, пишите мне email». Пользователи начали использовать статусы по-своему — они просто начали обмениваться ими, что и трансформировалось в обычный мессенджер.

Это многие знают, но стоит упомянуть: Youtube был сайтом знакомств, где одинокие люди могли снять видос о себе и найти вторую половинку. Женщинам даже хотели платить 20$ за то, чтобы они загрузили видео, но никто не отозвался. В итоге решили убрать раздел знакомств и разрешили заливать все типы видео.

Instagram вообще раньше был Burbn (ага, в честь алкоголя), где можно было чекиниться, строить планы с на тусовки с друзьями, зарабатывать баллы, размещать фотки и т. д. (тут пример интерфейса). Была куча сложных функций, от которых в итоге избавились, оставив лишь загрузку фоток, комментариев и лайков. Кстати, одного из создателей Instagram во время отпуска вдохновила жена на идею с фильтрами, считайте ее идея.

Twitter был платформой подкастов Odeo, но Apple выпустила iTunes, захватив весь рынок. Odeo осознали опасность и начали проводить хакатоны для поиска новых продуктов. Одним их них и оказался Twitter.

Netflix были онлайн-магазином проката DVD, отправляя их по почте. С приходом Youtube в середине 2000-х они убедились в популярности потоковых сервисов, чтобы сейчас вы смотрели Ведьмаков и прочие ништяки.

Android был операционной системой для цифровых камер, но слегка вырос из своих амбиций и решил двигаться на другие платформы. Кстати, одной из первых камер на андроиде была Nikon Coolpix S800C, можете тут почитать.

Как по мне, самая забавная это история про Slack и Flickr – проекты делали одни и те же чуваки в разные этапы жизни. В первый раз они попытались сделать игру – получилось так себе, выкинули лишние функции из игры и выкатили Flickr. Продав Flickr, создатели снова вернулись к идее сделать игру, запустили ее, получилось так себе – игру закрыли, а вот инструмент в котором команда разработки обсуждала создание игры (аля Slack 0.1) остался и из него сделали продукт.

Серьезно, два раза чуваки пытаясь вкатиться в Gamedev захватили свои ниши 🥲

В источнике примеров еще больше, там и Toyota, и Twitch, и Nokia, в общем полистайте для интереса.
👍1