В общем-то, если вы помните, у facebook reality labs была разработка по переносу анимации глаз и мимики с датчиков VR шлемов на виртуальных аватаров, дак вот теперь на сигграфе показали прикрученный риалтаймовый релайт на основе датчиков с камер.

Полное видео

А вот это забавно. Дефицит чипов и перебои в поставках заставляют шевелиться взрослых мальчиков.

Apple, Microsoft Corp, Google, и примкнувшие к ним AT&T, Cisco Systems, General Electric, Hewlett Packard Enterprise, Verizon Communications Inc., присоединяются к ведущим производителям микросхем, таким как Intel, чтобы создать новую группу лоббистов и требовать государственных субсидий на производство микросхем.

Недавно созданная Semiconductors in America Coalition, в которую также входит Amazon, заявила во вторник, что обратилась к законодателям США с просьбой предоставить финансирование для закона «CHIPS for America Act,», для которого президент Джо Байден попросил Конгресс предоставить 50 миллиардов долларов.

«Надежное финансирование Закона CHIPS поможет Америке создать дополнительный потенциал, необходимый для создания более устойчивых цепочек поставок, чтобы гарантировать, что критически важные технологии будут там, когда они нам понадобятся», - говорится в письме группы лидерам демократов и республиканцев в обеих палатах Конгресса. Конгресс США.

При этом автомобильное лобби потребовало от администрации Байдена обеспечить поставку чипов для автомобильных заводов. Но на прошлой неделе агентство Reuters сообщило, что официальные лица администрации неохотно использовали закон о национальной безопасности для перенаправления компьютерных чипов автопроизводителям, потому что это могло нанести ущерб другим отраслям.

Всем сестрам по чипам. Которых нет.

https://www.reuters.com/technology/tech-giants-join-call-funding-us-chip-production-2021-05-11/

GoogleAI выкатил обновление своей риалтайм системы распознавания позы человека BlazePose. Быстрее, точнее, сильнее!

Теперь BlazePose превосходит по качеству не только Apple Vision, но и серверный AlphaPose, при этом оставаясь в реальном времени как на телефоне, так и в браузере. Есть легка и тяжелая версия модели — на все случаи жизни.

Потыкать в веб-демо на жабаскрипте можно тут. Как запустить на Python, JS, Android and iOS читать тут.

Пы сы, не многие знают, но проектом BlazePose в GooleAI сейчас занимаются ребята из бывшего белорусского стартапа AIMATTER, который гугл купил в 2017 году.

Новости про Colonial Pipeline читаются как сценарий для кино, где ИИ отключает бензоколонки, требуя выкупа. Только вместо ИИ - хакеры. А на проводе - президент США.

"7 мая крупнейший американский нефтепровод Colonial Pipeline приостановил транспортировку топлива. Спустя два дня компания признала, что стала жертвой кибератаки вируса-вымогателя, который зашифровал компьютеры до оплаты выкупа.

В результате Министерство транспорта США ввело временную чрезвычайную ситуацию, чтобы увеличить количество альтернативных маршрутов транспортировки нефти.

О ситуации с трубопроводом проинформировали президента США Джо Байдена. Он заявил, что лично следит за этим каждый день.

В Американской автомобильной ассоциации (AAA) заявили, что цены на топливо приблизись к самому высокому уровню с 2014 года.

Если это не решится за вторник, мы окажемся в большой беде. Первыми пострадают Атланта и Теннесси, потом эффект «домино» достигнет Нью-Йорка.

Помимо заражения компьютеров, хакеры успели похитить около 100 гигабайт конфиденциальных данных и пообещали опубликовать их в сети в случае отказа платить."

Так что цены на бензин зависят теперь не только от цены на нефть.

Полный фарш тут: https://tjournal.ru/tech/380192-deficit-benzina-iz-za-kiberataki-kak-vzlom-nefteprovoda-ostavil-bez-topliva-polovinu-vostochnogo-poberezhya-ssha

А вот тут пишут что на заправках уже очереди.
https://www.cbsnews.com/amp/news/gas-prices-colonial-pipeline-ransomware-attack/

В прошлом году писал, что VR-шлемы просто просятся в стать хабом для измерительных приборов, которые будут анализировать то, что происходит в и на башке кожаного мешка и либо продавать эти данные ИИ, либо использовать их в разных целях.
Вот один из кейсов.
https://vrsource.com/react-neuro-and-pico-interactive-join-forces-to-measure-brain-health-16312/
REACT Neuro - это компания, которая (как написано на сайте) занимается здоровьем мозга.
"In the near future, we will track our brain health, just like we do our heart health today."
https://reactneuro.com/
Сначала они делали свои кастомные шлемы и датчики слежения за глазами, чтобы натренировать свои алгоритмы находить корелляты между мозговой активностью и движением глаз.
После того, как отладили стали искать "взрослые" решения в области железа.
И пока остановились на шлемах Pico VR и айтрекерах Tobii
Подробностей пока немного: "REACT Neuro предоставляет аналитику здоровья мозга в рамках физиотерапии, спортивной медицины, здоровья пожилых людей и в армии. Эта технология уже тестируется в разных сферах, от жизни пожилых людей до физиотерапии".
Но сам тренд впечатляет - лезем в мозг не через специализированные медицинские устройства, а через гаджеты из совершенно иных сфер применения. Новый продукт с помощью софта и железа из разных сфер.
Ну и понятно, что фейсбучек и остальные VR-производители в стороне не останутся.
И либо будет интеграция со компаниями типа REACT Neuro, которые просто будут имплементить свои алгоритмы на все более широкий спектр устройств.
Либо fb и VR-другие будут ресечить и девелопить свои алгоритмы расшифровки того, что происходит в башке мешка через анализ данных, снимаемых со своих же шлемов.
Ибо тот кто ближе к мозгу, того и тапки.

Я часто пишу про Снапчат, отдавая должное крутому R&D, который они делают в области computer vision и ИИ, оставаясь при этом в рамках мобильных платформ.
При создании мимолетного эффекта в Снапчат перед глазами олдскульного трехмерщика пролетает вся его жизнь весь 3Д-пайплайн: по изображению с камеры строится трехмерная сетка лица, текстурируется, мокапится и анимируется, сдабривается эффектами (волосы и пр), рендерится (в реалтайме). И выплевывается в пользователя.
И все это на телефоне, Карл!
Поэтому я, конечно, психанул, и написал в Снап. Мы отлично пообщались с Vlad Vasylkevych и Katerina Novikova и по итогам на Ивенте будет небольшой эксклюзив. 20 мая Снап готовит мощный апдейт, про который я щас не могу говорить, а вот после двадцатого мы бахнем новость о том, что же можно будет услышать прям из первых уст. На русском. Внутряк, так сказать.
А пока тизер: https://cgevent.ru/archives/33739
Более того, Снап выступит официальным партнером CG EVENT DIGITAL HUMAN. И чтобы можно было задавать вопросы в любое время, можно будет заходить к ним на вирт стенд и там коммуницировать.

Похоже, что сентенция "сейчас в телефонах больше дури, чем раньше было в компьютерах", благодаря Эппле плавно трансформируется в "сейчас в телефонах больше дури, чем в компьютерах. в два раза"

Новый иПад уделывает в тестах MacBook Pro 16" на том же M1.
И действительно, скорость же определяется не только процом, но и шустростью, скажем так, обвязки. Память, шина, ну и конечно, ось.

Вот результаты из Geekbench 5 в многоядерном режиме работы:
MacBook Air (M1): 7378 баллов;
iPad Pro 2021 (M1): 7284 балла;
MacBook Pro 16’’ (Core i9): 6845 баллов;
iPad Pro 2020 (A12Z): 4656 баллов.

В одноядерном режиме iPad Pro 2021 почти вдвое уделал MacBook Pro 16" (Эт как воще? - 1701 балл против 1091 у MacBook Pro 16")

Куда пристраивать такую дурь?
Фермы для Октана на иПадах?
Бесшумно, прохладно, компактно, экологично..
https://www.macrumors.com/2021/05/11/m1-ipad-pro-benchmarks/

Лишь бы майнеры не наловчились сами знаете что...

Microsoft приближает фиджитал ещё быстрее!

Теперь в Hololens2 реалтайм физика взаимодействует с физическим пространством и людьми, а также светом и звуком

Это просто потрясающе! Физическое взаимодействие с голограммами!

Импланты , бионические руки, нейроинтерфейсы - это все прошлый век.

Вот он, трансгуманизьм в чистом, автономном виде. Инкапсулированное сознание 2021.

VR-шлем как мокап. И лайткап.
Вчера писал про трекеры глаз для оценки ментального здоровья.
Сегодня вернемся к графике - фейсбук запостил новую работу, где они с помощью датчиков освещения восстанавливаю 3Д-модель лица присунутого в шлем, делают ему полный релайт в зависимости от окружающего света, да еще и снимают мокап лица.
Еще один шаг к оцифровке наших умных голов.
https://research.fb.com/publications/deep-relightable-appearance-models-for-animatable-faces/

А еще отрезвляет, когда смотришь, каким видит нас ̶И̶И̶ VR...

Ну, за Марвелус и Веллум!
Что творят гешпанцы, взяли и выкатили солвер одежды на нейронках.
http://mslab.es/projects/SelfSupervisedGarmentCollisions/
То есть за коллизии и деформации теперь отвечают не классические mass-springs или другие дифференциальные солверы, а набор бешеных нейронок, которые обеспечивают, на минуточку, реалтаймовые fps. Это вам не кеши считать!
Ну и вообще, нейронки потихонечку откусывают работу у тяжелых солверов. На two minute papers было уже полно работ по замене навье-стокса и флюидной динамики беспринципными и быстрыми нейронками. Нам же не надо чтоб "как в природе", нам надо "чтобкрасиво".
Все это признак того, что этот безумный тренд на цифровую одежду и виртуальные примерочные прям летит и стимулирует развитие в этой области. AR-чик подгоняет с другой стороны, а народ уже продает цифровые кроссовки за бешеные NFT (писал про RTFKT - https://rtfktstudios.medium.com/born-on-the-metaverse-e444e576226c)
Глядишь и постпродакшену достанется немного крошек с барского стола мобильных приложений и модных стартапов.
Вот например: Walmart только что скушал израильскую виртуальную примерочную Zeekit.
https://techcrunch.com/2021/05/13/walmart-acquires-virtual-clothing-try-on-startup-zeekit/
Может быть и Автодеск кого-то скушает?

Готовьте ваши личинки.
ИИ ликуэ. Сколько ж данных привалит.

Face Pay запустят на всех станциях метро Москвы до конца года

Оплата проезда будет происходить при помощи лица после сдачи биометрически данных.

А вот и китайцы без пафоса и истерики приземлили (примарсили?) свой спускаемый аппарат на Марс.

Ждем симметричного ответа от Коляна.

Ну или хотя бы твитов.


https://www.bbc.com/news/science-environment-57122914

Как насчет замокапливания МетаХьюманов?
Вот тут туториал для ретаргета любой анимации на этих тварей.
Там в описании даже есть ссылка на архив с т-позами и упрощенным скелетами для метахюманов.
https://www.youtube.com/watch?v=WwuHKGvk9hg

Пока мы тут разминаемся МетаХуманами, взрослые ребята из соответствующих индустрий давно выпускают их во плоти и пластике.
Внимание, фотки внутри нельзя развидеть!
https://www.dailystar.co.uk/news/world-news/inside-sprawling-sex-doll-factory-24110026
Интересный репортаж с китайской фабрики, изготовляющей секскуклы для британской компании LoveDolls.

Во-первых, они дышат. Цитирую: «Почувствуйте, как воздух входит и выходит из носа».

Во-вторых, они прикрутили к ним ИИ! LoveDolls has already created dolls with artificial intelligence heads capable of limited conservation, with the technology said to be improving "every year".
Теперь они умеют в "а поговорить?".

Ну в третьих, представители LoveDolls утверждают, что "Все согласны с тем, что идеальный робот-секс-кукла, почти неотличимый от человека, появится в наших жизнях."

Ну, что киберпанк уже при жизни?

P.S Ну и все, что вы хотели знать про освоение космоса: "Во время пандемии сотрудники LoveDolls начали проектировать «фантастических кукол пришельцев»

Для тех, кто пропустил.
Экспорт МетаХьюмана в Майку. С рульками и педальками.
https://www.youtube.com/watch?v=z3C9AJVRD6Q

🙈 Киберпанк настал
Парализованный человек и обезьяна с мозговыми имплантами сразятся в «ментальный» пинг-понг.

Как сообщило издание MIT Technology, частично парализованный после автомобильной аварии Натан Коупленд, которому были вживлены мозговые импланты, вызвал на поединок по ментальному пинг-понгу… макаку-резус из проекта Neuralink.

Мозговой имплант был вживлен Коупленду в марте прошлого года. После этого он неоднократно участвовал в экспериментах команды Университета Питтсбурга (США), в ходе которых научился управлять рукой-манипулятором и компьютерами силой мысли. Получив соответствующие навыки, сегодня он уже может серфить в Интернете и даже делать рисунки с помощью специальных приложений.

Поскольку Натан является пользователем популярного сервиса потокового видео Twitch (под ником crossbred900), не исключено, что за ходом необычного поединка смогут наблюдать миллионы болельщиков через Twitch или YouTube.
Источник Twitch

Вот тут Андрей Евдокимов пригнал очень познавательную ссылку на одно очень циничное видео.
Пока я тут выпиваю за очередных жертв ИИ и виртуального продакшена, ребята из Corridor Crew сняли кино про человека, который целый год делал кино в UE.
И наступал на все грабли и багли. Снято очень смешно.
Ну и чуда нет, от заголовков моих постов и тостов до реального продакшена лежит unsunny valley - боль испытателей всего нового на своей шкуре.
А я пожалуй оставлю оригинальный комент от Андрея, он в этом шарит (и готовит секретный спич для Ивента):
"Очень прикольная, хоть и чуток прилизанная-приглаженная и адаптированная для обычных людей история создания предположительно крутого ролика на движке. Все эти «мокапом хоп и готово», «вон есть айклон, им наваляем крутых персонажей», «айфоном сделаем липсинк» итд итп - в наличии. Большинство очевидных проблем, с которыми сталкиваются начинающие виртуальнопродакшн гуру - показана и обговорена. Ребята из Коридор - молодцы. "
https://www.youtube.com/watch?v=2K7a_aMGA7Y