Метаверсище и ИИще
53.6K subscribers
6.81K photos
5.83K videos
50 files
8.01K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
Если формально, то "Sony заявляет, что выступление певицы в роли «сверхреалистичного виртуального аватара» было «основано на передовых инновациях в технологии создания 3D в реальном времени».
Если неформально, то здесь тут самый фарш, о котором я тут пою последний год: мокап, реалтайм, unreal, виар, уход в цифровую реальность, аватары, инфлюенсеры, и плавная миграция населения из реального мира в уютные виртуальные кресла с экранами присосочками.
This media is not supported in your browser
VIEW IN TELEGRAM
Продолжаем киберпаковствовать.
Вслед за дизайнерам одежды с виртальный мир сваливает концертная индустрия.
И если прошлогодние концерты в Фортнайте смотрелись как эксперименты, то сегодня на эту поляну выходит не кто-нибудь, а сама Sony.
Которая под это дело запилила целый новый бизнес: Sony Immersive Music Studios
Вектор - digital strategy related to new verticals such as Virtual Reality, Augmented Reality, Blockchain, Artificial Intelligence and Hi-Res Audio
А на CES 2021 они представили первый проект, сделанный не без помощи кого? Правильно, Unreal Engine.

Виртуальное выступление певицы Мэдисон Бир, в партнерстве с Verizon, чтобы продемонстрировать песни из ее дебютного альбома Life Support.

Кстати Sony в прошлом году ввалила в Epic Games 250 миллонов долларов, прикупив немного акций (что-то знают).
https://www.musicbusinessworldwide.com/sony-takes-wraps-off-secret-unreal-engine-project-unveils-new-subsidiary-sony-immersive-music-studios/
И еще немного про Дипфейки и политику.
Статья в Рейтерс:
"Пользователи социальных сетей поделились сообщением, в котором утверждается, что видео, в котором уходящий президент Дональд Трамп признает, что победа избранного президента Байдена на волне хаоса протестов Капитолия была подтверждена как дипфейк.

Белый дом сообщил агентству Рейтер, что видео не является дипфейком."
https://www.reuters.com/article/uk-factcheck-trump-consession-video-deep/fact-check-donald-trump-concession-video-not-a-confirmed-deepfake-idUSKBN29G2NL

Что мы имеем в итоге.
Пол-интернета обсуждает, а не является ли видео дипфейком.
Тот же Рейтерс приводит ссылки не только на Твиттер (вот она ирония времени - Рейтерс ссылается на Твиттер), но и на Гардиан, которая тоже всерьез обсуждает, а не фейк ли дип?
https://www.theguardian.com/us-news/2021/jan/08/trump-incites-anger-among-acolytes-let-down-by-lack-of-support
Никто не ссылается на систему обнаружения фейков или анти-дипфейк-нейросети. Ибо люди слышат то, что хотят слышать.
Никто не привлекает технарей.

Все по старинке ждут, что скажет Белый дом. И тот (о боги) включается в это шоу и делает заявление "Нет, это не дипфейк!".

А поклонники Трампа, конечно, ему не верят, и говорят, что барин на самом деле все так и задумал:
https://www.newsweek.com/parler-users-call-trumps-concession-video-deep-fake-worry-hell-sell-us-out-1559895

И обо всем этом пишет Newsweek.

Мир точно сходит с ума. Кризис доверия к любым источникам информации. И это на фоне кризиса наличия критического мышления.

И только разумный ИИ устало наблюдает за этим цирком и вздыхает: "Когда они уже что-то про себя поймут.. я устал им показывать в зеркале их самих".
Тут Хабр взорвала статья про РЖД и безопасность.
Читается как детектив.
Не знаю как вы, а я застал времена, когда на вокзале тебя могли, скажем так, пожурить (а то и принять) сотрудники в форме за то, что ты фотографируешь друзей перед отъездом.
Типа объект стратегического назначения, не положено фотографировать.
А тут можно кино снимать про вокзалы, любые, по всей стране, не выходя из дома.
И я так понимаю, автор просто сходил в сектор с вебкамерами, а в сектор перевода стрелок просто не заглядывал, чего стрелки зря переводить...
Познавательное чтение, но как-то потом не по себе.
Ибо понятие "уязвимость" перестает восприниматься как как термин ИБ, а начинает ощущаться .. биологически что ли.
И докрутите до конца, там пасхалочка про новое назначение главного героя статьи.
https://habr.com/ru/post/536750/
Вернемся виртуальному эскапизму.
Аватары, инфлюенсеры, одежда, которая только на фотках и вот это вот все.
Похоже тренд настолько мощный, что в этот поезд ломятся взрослые игроки, не всегда уклюже (пардон, но слово смешное без "не"), но с размахом.
У Самсунга есть такой проект НЕОН:
Our First Artificial Human
NEON is a computationally created virtual being that looks and behaves like us.
Типа "цифровая тварь, которая выглядит и ведет себя как мы"
(Кстати на главной странице проекта рендеры ну очень фоторильного качества, а рендеры ли?).
А сейчас на сайте появился раздел Studio
Вот с таким посылом:
the power to create, customize, and publish video content at scale. No lights, cameras, or actors needed. Just your computer.
Никаких актеров, камер, светиков.

И вот такой пайплайн:
Choose any NEON and create a new project
Enter your script or audio file in the language of your choice
Adjust facial expressions, or behavior that suits your content
Apply voice stylings such as emphasis, volume, and pauses
Customize the look, apply make-up, and change backgrounds
Preview your content frame-by-frame and modify until it is perfect
Publish content securely into the cloud or stream it live
View or download all your published content from your User Portal

В общем некий комбайн для оживления виртуальных персонажей. Без вот этих вот всех глупостей типа моделинга, анимации, света, рендера..
С учетом того, что количество ассетов будет непрерывно расти (как моделей, так и анимации, мокапа, липсинка), такой подход будет все больше заходить на территорию бродкаста и анимации.
Стоит ли начать выпивать не чокаясь или может пронесет?
https://neon.life/studio
Институт Макса Планка предупреждает: мы не сможем управлять ИИ. По умолчанию.

Выдержка из статьи:

"Ученые исследовали две разные идеи того, как можно управлять сверхразумным ИИ. С одной стороны, возможности сверхразумного ИИ можно было бы конкретно ограничить, например, отгородив его от Интернета и всех других технических устройств, чтобы он не мог контактировать с внешним миром, но это сделало бы сверхразумный ИИ значительно менее мощным, менее способны отвечать на гуманитарные задания. Не имея такой возможности, ИИ с самого начала мог бы быть мотивирован преследовать только цели, отвечающие интересам человечества, например, запрограммировав в него этические принципы. Однако исследователи также показывают, что эти и другие современные и исторические идеи по управлению сверхразумным ИИ имеют свои пределы.

В своем исследовании команда разработала теоретический алгоритм сдерживания, который гарантирует, что сверхразумный ИИ не может причинить вред людям ни при каких обстоятельствах, сначала моделируя поведение ИИ и останавливая его, если он считается вредным. Но тщательный анализ показывает, что в нашей нынешней парадигме вычислений такой алгоритм не может быть построен.

«Если разложить проблему на основные правила теоретической информатики, окажется, что алгоритм, который приказал бы ИИ не разрушать мир, мог бы непреднамеренно остановить свои собственные операции. Если это произойдет, вы не узнаете, продолжает ли алгоритм сдерживания анализировать угрозу или он остановился, чтобы сдерживать вредоносный ИИ. По сути, это делает алгоритм сдерживания непригодным для использования », - говорит Ияд Рахван, директор Центра людей и машин.

Основываясь на этих расчетах, проблема сдерживания невыполнима, то есть ни один алгоритм не может найти решение для определения того, причинит ли ИИ вред миру. Более того, исследователи демонстрируют, что мы можем даже не знать, когда появились сверхразумные машины, потому что решение о том, обладает ли машина интеллектом, превосходящим человеческий, находится в той же сфере, что и проблема сдерживания."
https://www.mpg.de/16231640/0108-bild-computer-scientists-we-wouldn-t-be-able-to-control-superintelligent-machines-149835-x
"Nvidia думает над тем, чтобы выпустить специальные решения для майнинга"

Почему мне все чаще чудится в эфире копчёный аромат киберпанка?

Виртуальная одежда за реальные деньги.
Реальные железки для виртуальных денег.

Прав Ruslan Ogorodnik, на очереди виртуальная еда, поддерживающая мозг кожного мешка в состоянии постоянного потребления цифрового контента.

А Нвидия молодцы. Нужен вам майнинг, кожмешки? Будет вам майнинг.
Любой каприз, за ваши деньги. Только бойтесь своих капризов.

"Если спрос в этом направлении повысится или мы увидим возможности значительного заработка, мы можем использовать их для перезапуска линейки продуктов CMP [графические процессоры для майнинга] для удовлетворения текущего спроса со стороны майнеров"

Мрачновато вышло. Но неплохая идея для сценария.

Пойду дальше смотреть сериал neXt..

https://www.ixbt.com/news/2021/01/15/geforce-rtx-3000-nvidia.html
Forwarded from MarketTwits
💥🔥🇨🇳#китай #батареи #электрокары
EVE Energy Co выпустила первый аккумулятор для электромобилей с полной зарядкой за 5 минут, произведенный на стандартных производственных линиях (т.е. не прототип и не единичный экземпляр)

Литий-ионные аккумуляторы разработаны израильской компанией StoreDot.
—————————
На данный момент, Китай - король на мировом рынке производства батарей. Китай обеспечивает 79% мировых поставок.
This media is not supported in your browser
VIEW IN TELEGRAM
Вернемся к нашим киберпанкам.
Вот тут отличная упаковка ИИ, комп зрения и можно сказать бота в один консьюмерский продукт.
Cradlewise делает бота, который укачивает вашего ребенка, следит за ним и даже предсказывает, что он будет делать через пару минут - проснется, нагадит, а может и чего похуже.
Логичное развитие концепции аудионяни и видеоняни. Только здесь уже появляется интерактив - воздействие на ребенка.
Предположу дальнейшее развитие - сбор статистики по засыпанию, подбор ритма укачивания для удлиннения сна, сбор визуальной информации, мягкие медицинские рекомендации и пр.
В общем киберняни уже тут, а не в смешных кино.
https://cradlewise.com/
Интересная статья, про то как в Пиксар делали Soul и, в частности, как доделылвал фильм, полностью уйдя на удаленку.
Цитирую последний раздел:

"SIGGRAPH: В этом году многие из нас перешли на удаленную работу. Не могли бы вы рассказать немного больше о своем опыте завершения этого фильма на удаленке и о том, как это повлияло на ваши творческие усилия?

Bill Watral (effects supervisor): Когда разразилась пандемия, мы были в гуще событий. У нас была целая серия шотов, которые были очень насыщенными эффектами, и мы были в середине их работы. В частности, у нас был один шот, который все еще находился на бумаге, и мы как раз решали что с ним делать. Технические детали этого проекта все еще разрабатывались. Самой большой проблемой было попытаться все настроить, а также творчески общаться и анализировать работу. Было так неловко переходить к этому стилю общения, когда Zoom прерывает ваш голос, когда кто-то говорит, и есть три разных технологии, которые вам нужно использовать для просмотра изображения, и только одна из них работает с такой частотой кадров, но не работает для коррекции цвета или для других технических вещей. Это было невероятно сложно. Снимаю шляпу перед нашими админами в Pixar за то, что они сколотили все, что было в области технологий, чтобы заставить вещи работать на нас. Они сделали все возможное. Было удивительно, насколько мы продвинулись за две или три недели с того момента, когда мы впервые подключили наши маленькие дистанционные коробки, до того момента, когда мы начали готовить шоты для финального фильма. А потом был весь этот страх перед тем, как все это выглядит на большом экране по сравнению с нашими маленькими экранами в наших домашних офисах.

Michael Fong (supervising technical director): У нас было около 600 шотов, которые не были сделаны, когда нас всех отправили домой. Билл не шутит, когда нас отправили домой, мы получили электронные письма с просьбой отсоединить remote box от стола. Возьмите домой монитор и не забудьте клавиатуру. Админы проделали действительно хорошую работу по планированию. Мы начали волноваться за пару недель до того, как нас отправили домой, и начали думать о процедурах, которые нам нужно было внедрить. Как мы можем поддерживать такое количество удаленных пользователей? Достаточно ли у нас мониторов, кронштейнов для мониторов, эргономичных настроек? Все это накапливалось, а потом округ уведомил нас, что мы должны уйти. Поразительно, сколько усилий было вложено в быстрое создание инструментов, позволяющих просматривать все на наших маленьких экранах. Через три или четыре дня у нас уже были новые инструменты, которые можно было пробовать, мы делились экранами, спрашивали, что и как работает друг друга. Это было пугающее, но новое время для нас. ( It was a scary but new time for us.)"
https://blog.siggraph.org/2020/12/a-behind-the-scenes-look-at-the-heart-and-soul-of-pixars-latest-feature.html/
А давайте еще больше киберпанка.
В догонку к предыдущему посту про бота, укачивающего вашего ребенка, предлагаю положить вместо ребенка ... кибер-ребенка.
Типа такую неведомую зверушку, запредельной милоты.
Которая не орет, не гадит, не требует от вас непонятно чего.
Она просто радует.
На CES 2021 (отличный источник киберпанка в этом году) показали вот такую тварюгу. Среднее между морской свиньей, кошкой и нутрией.

По замыслу - это котик (или даже ребенок), который пришел к хозяину — его можно гладить и даже (о боги) разговаривать с ним, для этого внутри есть специальные датчики и микрофон. В ответ кибер-питомец будет издавать различные звуки и вибрировать(гусары молчать).
В число датчиков входят акселерометры с гироскопами, сенсорные датчики и микрофоны. Все по-взрослому, это вам не Сири с Алексой.

Внутри у твари (ну конечно) ИИ, чтобы она могла постоянно обучаться. ИИ-милота умеет передавать большой спектр эмоций — от спокойствия до нервной дрожи. И к тому же она умеет различать голоса людей, и с каждым поведение будет разное. Чуете с кого срисовано?

"По заявлению компании, со временем каждый Moflin разовьется в индивидуальную личность, в зависимости от окружающей среды и «того, как их владельцы относятся к ним», проявляя эмоции, включающие тревогу, спокойствие, счастье, возбуждение и т.д., прямо как настоящий питомцы."
В личность, Карл! В личность...

Заряжать его можно, просто положив в кибер-корзинку. Типа котик прилег поспать.

Самое смешное (и пугающее), что судя по популярности котиков в сети, эта тварь зайдет людям, измученным изоляцией, как в мелкий белый песочек.
И вот он дивный новый мир - цифровые ин-матьего-флюенсеры на экранах и кибер-твари на коленях.
И вот уже сидит кожаный мешочек перед экраном, внимает инстаграмма, гладит кибер-крысу, а через масочку ему доставляют и питание, и вейпы, и настроение.
Про маски не шутка. Пишу следующий пост.

P.S. С точки зрения графики - это хорошая новость.
Во-первых, для экранов надо генерить контент.
Во-вторых, вот такие кибер-твари будут персонажами новых фильмов и новых игр. Которыми экраны будут кормить кожаного мешочка.

https://i2hard.ru/publications/26589/
Недавно писал пост про процессоры.
Похоже, дедушка не зря гадает на новостной гуще (пора в трейдер однако).
Короче, Эппле окончательно разворошила рынок процессоров.
Идея брать ARM-чип, накачивать его стероидами и делать процессор для ноутбуков и даже рабочих станций пошла в массы (ну если не в массы, так в умы).

Во-первых, раскололся Qualcomm Snapdragon.
Его SC8280 — преемник Snapdragon 8cx Gen 2 - призван надрать задницу эппловскому M1.
Он будет использоваться в компьютерах, работающих на специальной Windows 10 для ARM. Квалкомм уже проводит внутреннее тестирование некоего 14-дюймового ноутбука с SC8280 и 32 Гбайт оперативной памяти LPDDR5.
За спиной у них Микрософт, которая пообещала крепко сотрудничать с Qualcomm и OEM-производителями над оптимизацией Windows для ARM-платформ.
Подробности тут: https://www.windowslatest.com/2021/01/16/look-out-apple-m1-windows-on-arm-is-getting-a-powerful-qualcomm-chip/

Во-вторых, оказывается и Самсунг тоже не выдержал и тоже решил сыграть в эти игры. Он тоже пилит ARM-процессор для компьютеров, в основу которого ляжет недавно вышедший 5-нм Exynos 2100, на котором работают Samsung S21. Возможно, в Samsung пойдут даже дальше Apple и предусмотрят поддержку процессором поддержку внешних видеокарт — говорят это будет AMD.
Ну и он тоже, скорее всего, будет работать с операционной системой Windows 10X.
https://wccftech.com/samsung-bringing-exynos-chipsets-to-computers/

Про Хуавей и Купенг я уже писал. В общем в 2021 году на рынке ноутбуков (по крайней мере) будет весело.

А дальше будет интересно понаблюдать, как будут сращиваться мобильные и десктопные эко/операционные/системы.
И Эппле, и Миекрософт, и Хуавей неумолимо идут к общей системе для всех приложений. От часов до десктопов.
Не могу не пошарить видео от VFXLAB про виртуальный продакшен.
Ибо солирует там ветеран поста и продакшена Дан Золотаренко
И это тот хороший пример, когда просто о сложном и понятно о непоймиочём.
Ораторское мастерство Дена экспоненциально выросло за период изоляции, а его низкоэмоциональный стиль позволяет сосредоточиться на сути вопроса.
Ну и отличное определение вирт продакшена через мультикамерный геймплей.
Всем кто в теме - рекомендую. Плотно, понятно, по делу.
https://youtu.be/HHK3Di6nu-8

И хорошие видео-вставки, приятно радующие глаз на фоне приевшихся онлайн-сессий.
This media is not supported in your browser
VIEW IN TELEGRAM
К вопросу о виртуальных ведущих и цифровых инфлюенсерах.
Появляется новая прослойка в зоопарке этих тварей: виртуальные ютюберы.
Это когда вы шевелите не своим лицом на камеру, а .. любым лицом, или мордой, или (в будущем) чем угодно.
Звук тоже можно трансформировать/заменить.
И фон.
И вот уже имеем то, что старперы называли performance animation.
Только теперь не за ацкие тыщщи денег (с мокапами, вирт студиями и пр), а просто, из говна, палок и телефона.
Ожидаю тонны сериалов для детей, снятых вот так вот, просто и без вкуса.
На видео не только аниме, но и котики, собачки и прочая нечисть.
Пробуйте сами вот тут, все что нужно, это камера.
https://kalidoface.com/
Ну что, за лицевых аниматоров?
https://twitter.com/hashtag/kalidoface
P.S. Все таки вклад Снапчата в компьютерное зрение невозможно недооценить.
Ночного киберпанка вам на сон грядущий.
Или новая поляна для стартапов.
Думаете на фотке выше персонаж из фильма про апокалипсис из будущего, спасающий мир?
Нет, это скромный геймер из настоящего.
Компания Razer представила «самую умную маску в мире». У нее есть подсветка и встроенная звуковая система. И силиконовые защитные кожухи. Два активных фильтра, которые фильтруют воздух. А также зарядный футляр, чтобы заряжать подсветку и освещать фильтры и корпус ультрафиолетовым светом для стерилизации.
И прозрачный передок, чтобы стримеры могли передавать все свои кибер-эмоции в эфир.
https://www.theverge.com/2021/1/12/22221344/razer-project-hazel-n95-respirator-mask-coronavirus-chroma-rgb-concept
Мне кажется ребята не доработали.
Razer уже неоднократно заигрывала с энергетиками, поэтому тут не хватает сменных капсул типа "вставь, вдохни, и целься точнее, играй дольше, расширь сознание". Тут же напрашивается коллаборация с вейпами "аромат пороха и миазмы твоих убитых врагов".
Накрываем это Виарчиком (легкий Окулус Квест просто просится на верхнюю (оставшуюся) часть лица) - и вот уже сегодняшний геймер - это полный замкнутый цикл потребления киберпространства по всем каналам.

В принципе пользователя уже можно поить и кормить через маску - сменные картриджи на пару суток (вспомнилась еда в тюбиках для космонавтов, какой же киберпанк без них).

Идем дальше. Я уже писал про нейроинтерфейсы. Тут прям целая поляна для датчиков накрыта.
Можно измерять уровень стресса по кожно-гальванической проводимости.
Можно снимать мышечную активность с челюстей и переводить ее в речь с помощью ИИ
(тоже писал про этот проект https://licensetoblog.com/uc-berkeley-researchers-detect-silent-speech-with-electrodes-and-ai/)
И озвучивать все невысказанные мысли геймера. Веселый эфир может получиться.

Ждем также нашествия косметологов. Потом пластических хирургов. Исправление прикуса. Автобритье. Удлинение носа.
Стартаперы, налетай, дедушку несет.

В общем, наша задача - одеть на кожаного мешка маску. А потом мы с ИИ его и накормим, и напоим, и спать уложим. В сладкие цифровые сны.

Начнем с геймеров, а там и офисные ребята подтянутся, им на работе выдадут маски от Эппле и Микрософта.
Привет, Нео.
У меня есть довольно тупой вопрос.
Вот смотрите, есть (как обычно) русский хакер с паяльником. Взял да и запаял на 2070 16 гиг видеопамяти. Откуда память? С али, вестимо.
Мы ведь давно уже забыли времена (кроме пользователей Эппле), когда тебе говорят - у тебя будет 4 гига оперативки. Просто идешь в магазин (или на алишечку), покупаешь, добиваешь сколько надо.
А с видеокартами все не так. Все с придыханием ждут анонсов от красных и зеленых, а сколько там будет памяти на борту.
Я как-то на Сигграфе спрашивал у зеленых спецов - почему так, ответ был такой - память дорогая, отбраковка сложная, мы не сможем обеспечить поддержку и работу решений с внешними модулями.
Но мне все равно не дает покоя одна мысль, если на материанки научились ставить внешние модули, то может быть за столько лет уже можно было придумать решение, позволяющее наращивать видеопамять, а не менять карту целиком?
Вот человек с паяльником смог, может быть люди на конвеере с более точными приборами тоже смогут?
Вопрос к инженерам: тут причины технологические или экономические?
Ну и видео гляньте, его уже на реддитах и техрадарах цитируют
https://youtu.be/ZirKi6P3nlc