Недавно постил про то, как Цукербер обещает увешать Oculus Quest 3 и 4 датчиками измерения состояния кожаного мешка.
А тут и ответочка от Vive прилетела.

Они выкатили VIVE Face Tracking, специальный девайс с двумя камерами, он крепится на шлем и позволяет считывать мимику лица и переносить ее на любого аватара или персонажа.
Грубо говоря, лицевой мокапчик с довеском из виар-шлема.
Мокап тема лезет во все щели, ибо оцифровывать новый мир и его обитателей - это тренд пост-2020-го мира.

Ждем и других датчиков, не мокапом единым.

А вообще, сколько же данных ИИ получит на завтрак хотя бы из лицевой мимики...

Видео и детали тут: https://www.roadtovr.com/htc-vive-facial-tracker-3-0-announcement-release-date-price/

Вот очень познавательная статься в Эсквайр на русском.
https://esquire.ru/articles/247713-biplomaniya-kak-pohozhiy-na-ofisnogo-klerka-hudozhnik-mayk-vinkelmann-nazhivaet-milliony-prodavaya-pikseli/

"Бипл — папаша из Висконсина, разъезжающий на машине, которую называет «паршивой тойотой короллой» (Fucking Toyota Corolla piece of shit), и выглядящий как помесь Билла Гейтса с телеаналитиком.

Художественного образования он никогда не получал, а Биплом назвался в честь игрушки родом из восьмидесятых, у которой загорался нос, когда включался свет или раздавался шум.

Провода протянуты от его компьютерного монитора в ванную комнату по соседству сквозь примитивную дырку в стене. Во время рендеринга 3D-анимации его компьютеры так нагреваются, что ему пришлось поставить их на деревянную подставку над ванной, а над раковиной он водрузил промышленный кондиционер, отводная трубка которого выведена на чердак.

Сменил ли он «паршивый кусок дерьма, именуемый «тойотой короллой» на что-то поприличнее.
Неужто ему ничего не хочется купить? Новую видеокарту? Новый компьютер?

— Я и старым доволен, — рассмеялся он. — Хотя, пожалуй, скоро новый возьму."

Почитайте, познавательно и про Бипла и про NFT.

Пока неолуддиты пугают всех страшными дипфейками, BBC просто пишет 'Deepfake is the future of content creation'
И приводит в пример Южную Корею.

И тут повод задуматься, мы уже десятки лет фейкаем с помощью CG окружающую действительность.
Симуляция воды.
Реймаршинг облаков.
Груминг волос.
Динамика одежды
Взрывы, дымы и полный апокалипсис в 3д.
Ну и конечно персонажная анимация в виде форка Digital Humans.

Все это довольно глубокий фейк реального мира, которому даже имя давно придумали: Фоториал/Photoreal.

Так что будущее за фотореалом в реалтайме. Фейком этого мира под ваш индивидуальный запрос.

Но интересно наблюдать, что как только в этом уравнении появляется сам кожаный мешок и его лицо, то компьютерная графика превращается из инструмента в (по мнению общественности) национальную (даже глобальную) угрозу.
Подкравшуюся со стороны невинных развлечений и ни в чем не повинных тружеников CG.

Ну хоть работы у них прибавится, по мнению BBC, и то хорошо.


https://www.bbc.com/news/business-56278411

Странно, но все молчат про новый Super Resolution в Adobe Photoshop.
Все взорали про то, что Фотошоп теперь официально, без Б[еты], работает на Apple Silicon, причем шустро, а вот про вторую главную фишку этого релиза как-то тишина.

А между тем народ в сети просто писает кипятком:
https://petapixel.com/2021/03/13/adobe-photoshops-super-resolution-made-my-jaw-hit-the-floor/

Многие пишут, что Топазу впору нервно закуривать овальные сигареты и что Адоб действительно сделал хороший апскейлер.
Впору делать тесты - чей ИИ круче...

Кстати, тут интересно будет увидеть тесты CoreML против Windows ML.
То есть Apple Neural Engine против TensorCores in NVIDIA’s RTX.
Вполне себе практическая задача, никакой синтетики.

Впрочем, на наших просторах обычно принято ругать Адобченко, может быть поэтому так тихо.
Подробнее тут:
https://blog.adobe.com/en/publish/2021/03/10/from-the-acr-team-super-resolution.html

Пока в Camera Raw, но скоро во всех Лайтрумах страны...

В чарты врывается новая ИИ-Игрушка.
Wombo.Ai
И пусть качество просто ужас, оно все равно взлетает.
Ибо здесь и сейчас. Смешно и свежо.
Тот самый случай, когда аудио и видео мемы упаковываются в продукт.
И да, он помрет через пару месяцев, но рекламы открутит сколько надо.
#новыймирИИ

Это к вопросу о том, чем подкреплена крипта.
Хайп - это новое золото.
А внимание - новая нефть.
Кто добудет себе больше внимания - у того и золотые тапки.

Еще раз - треть мамкиных инвесторов следят за твитами одного человека и принимают решения на их основе.

Все, что вы хотели знать про новый фундаментальный анализ.

Который, кстати, ничем не хуже старого. Даже лучше, ибо проще.

Тогда мы идем к вам.

Киберпанк на пороге, ты его в дверь, а он в окно.

Помните, я писал про тварей-дронов, которые собирают яблоки.
В общем, они-таки переквалифицировались в полицейские...

BRINC представила серийный полицейский дрон для осмотра зданий и переговоров. Главная его особенность заключается в том, что он может самостоятельно разбить окно и влететь вовнутрь.

А дальше по ситуации...

Малые дроны сейчас используются вместо кожаных мешков (помните видео, где робот пришел и уговорил преступника сдаться?), чтобы не подвергать их опасности. Для этого дроны уже оснащают лазерами и электрошокерами. Но даже если у дрона есть летальное оружие или хотя бы средства для переговоров с подозреваемыми, войти в урытие они не могли.

Теперь могут. Просто расхерачивают стекло вдребезги. И залетают внутрь.
https://nplus1.ru/news/2021/03/13/brinc

Цифровые тряпки и умная (очень умная) одежда. Мечты сбываются

Скажу по секрету, что самый большой геморрой при проведении Ивентов - это проекторы. Особенно, когда у тебя 10 залов, 10 экранов и все приходят со своими ноутами. Обязательно какой-то гад откажется работать либо с новым маком, либо с новым переходником, либо именно с этим кабелем. Про установку и логистику проекторов я даже вспоминать не хочу... Про экраны тоже.

Я помню, что мечтал о том, чтобы можно было свернуть экран в трубочку, потом достать его на площадке, повесить в нужное место, подключить кабелем к ноуту и вещать как на второй монитор.
Похоже, что дело движется в этом направлении, и там еще масса интереснейших применений, аж дух захватывает.

Помните недавно писал про стартап-идею скрестить одежду и мокап в виде умных ниток?

Китайцы пошли параллельным путем - сделали ткань-экран с яркостью как у телевизора и в отличными прочностными характеристиками (устойчивая работа после 1000 циклов сгибания, растяжения и сжатия и 100 циклов стирки(!) и сушки(!))

https://www.insidescience.org/news/wearable-washable-electronic-displays-may-soon-appear-clothing

Они комбинируют электропроводящие прозрачные волокна и люминесцентные нити вместе с хлопковой пряжей в гибкую, дышащую ткань. Ткань содержит примерно полмиллиона пикселей, по одному на каждую точку, где электропроводящие уточные нити встречаются с люминесцентными волокнами основы, на расстоянии около 800 микрон друг от друга. (Для сравнения, средний человеческий волос составляет около 100 микрон в ширину.)
Им удалось сделать рулон такой ткани 20 футов в длину и 10 дюймов в ширину (~6м х 0.25м).

Применений масса.
Цифровые свитера, содержащие нити для сбора солнечной энергии и волокна для аккумуляторов для интерактивности и источника питания.
Тканевые клавиатуры - чтобы можно было делать наброски на полях и манжетах.
И конечно носимые (теперь буквально) дисплеи - чтение сообщений на рукавах или просмотр видео на бедрах.
Дизайн одежды переосмысливается и превращается в киберпанк на максималках и стоках.

Но самая крутизна описана во второй половине статьи.
Упоминается тканевый дисплей размером примерно 9 на 2,5 дюйма, который мог помочь наблюдать за добровольцами, которые носили гарнитуры, считывающие их мозговые волны. Когда гарнитуры регистрировали низкочастотные мозговые волны медитирующих участников, устройства передавали эти данные на компьютер, связанный с тканью, так что на нем отображалось слово «расслаблен». Когда гарнитуры регистрировали высокочастотные мозговые волны добровольцев, играющих в GTA, на ткани отображалось слово «тревожно». Ученые отметили, что в будущем умная одежда может помочь отображать сообщения от людей с нарушениями голоса, речи и языка

А теперь соединяем все это с нейралинком и получаем новую невербалку на максималках. Все эмоции и невербальные сообщения отображаются не только на кожаном лице, но и на цифровой одежде.

Мы тут недавно в коментах обсуждали с Иван Заморев и Егор Овчаров новый язык аватаров в виаре - мгновенное отображение состояний или эмоций в виде быстрых визуальных реакций без использования текста или звука.
А тут перспективы реализовать это в одежде!
В общем, киберпанк из Китая, про который уже написали в Nature.
https://www.nature.com/articles/s41586-021-03295-8

Дипфейки в городе!

Дивная история о 50-летней мамашке, которая сделала дипфейк-видео с соперницами ее дочери по команде чирлидинга.

На видео соперницы бухали, курили, вейпали и делали все это в .. бикини. Видео было отправлено тренерам команды с целью опорочить соперниц и выгнать мерзавок за аморальное поведение. Также мамашка рассылала сообщения соперницам напрямую с призывом самоубиться (urging the youngsters to commit suicide).
Мамашку вычислили по IP и арестовали 4 марта. Ей грозит реальный срок.
Никто правда не пишет, а как она сделала дипфейки. Выглядит так, что мамашка прям гик.

https://nypost.com/2021/03/13/pa-mom-sent-deepfakes-of-daughters-cheerleading-rivals-to-coaches-da/

Ну и к вопросу о вотермарках, определителях фейков и пр: все это работает постфактум. А префактум обезьяна берет бейсбольную биту и крушит витрину. И хорошо, если витрина застрахована.
Страхование от дипфейков, стартап?

ИИ-Мокап или как наши ребята делают трекинг рук с помощью веб-камеры и нейросеток.

У меня в ленте периодически случаются интереснейшие дискуссии с участием Андрей Евдокимов, Дан Золотаренко, Sergey Lobankov по поводу разных мокапов.

Мне отчаянно нравится эта тема, потому что она стремительно демократизируется. И мокап перестает быть многотысячным решением для избранных студий, а превращается в сервис. Причем по подписке.

Смотрите, что делают ребята из CPTR.tech - включаешь обычную веб камеру, двигаешь руками, видишь движения костей в софте. Есть и недокументированные фичи - можно прогонять на видосах с ютюба. И да все это реалтайм.

Насколько я понимаю, с руками никто в мире такого не делает. Да еще и за такую смешную цену сервиса.
Есть конечно пейперы и ссылки на академические работы, но до сервиса еще никто, похоже не добрался, поправьте меня, если я не прав.

Ну и по инсайдерской информации они:
- привлекли людей в команду из яндекса, самсунга и ббдо
- на днях выиграли поддержку Nvidia Inception и Amazon Web Services на 100к долл

Ребята выступали на Ивенте в декабре и с тех пор успели дать интервью 80lv и познакомиться с разными крутыми челами со всего мира (в том числе ребята, которые работали над Стражами Галактики, звездными войнами, студиями CDPR, Blizzard и много крутых инди команд)

В ближайших планах у них:
1. повышение точности (снижение ошибок)
2. Поддержка пропсов
3. плагины на все остальные софты

На сайте есть кнопка "Попробовать".

https://cptr.tech/hands

Котировки по Либету или бессознательный трейдинг.
Если это не фейк, то это очень интересно.

Психологи из Стэнфордского университета провели серию экспериментов по предсказанию динамики биржевых котировок. Для этого использовали функциональную магнитно-резонансную томографию (фМРТ) добровольцев, которые сыграли роль трейдеров.
Если вкратце: активность мозга трейдеров предсказала изменения котировок лучше, чем их сознательные действия.
Если еще раз но по-другому: вне зависимости от того, верные решения принимали «трейдеры» или нет, их мозговая активность все равно с большой долей достоверности предсказывала изменение цен.
Ну и еще раз: анализ мозговой активности подопытных во время принятия решений перед торгами на бирже оказался более показательным для предсказания динамики цен акций, чем сами торги.

Короче, в башке у кожаного мешка есть черный ящик (моск?), который принимает решения гораздо лучше, но которые, будучи, пропущенными через сито эго и сознательности, часто превращаются в неоптимальные.
Судя по эксперименту, префронтальная кора или «исполнительный мозг» - это такая гадалка, которая знает все на свете и даже отлично предсказывает курсы акций, просто бросив беглый взгляд на графики котировок.

Для эксперимента использовали функциональную магнитно-резонансную томографию (фМРТ) добровольцев, которые сыграли роль трейдеров. Для чистоты условий ученые всякий раз брали различные наборы акций из биржевых архивов 2015 года. Мозговая активность подопытных выступила надежным индикатором будущих изменений стоимости акций. Если точнее, активное прилежащее ядро (nucleus accumbens) показывало грядущее удорожание или удешевление акций (в зависимости от типа активности). А степень возбуждения островковой доли (anterior insula) характеризовала величину изменения стоимости активов.

Звучит как биржевая метафизика!

И как тут не вспомнить эксперименты Бенжамина Либета. В 1970-е годы он провел серию экспериментов, которые показали, что примерно за полсекунды до осознанного желания выполнить движение рукой у испытуемых возникает ЭЭГ-активность, предсказывающая это решение. Позже слегка видоизмененный эксперимент Либета был повторен с помощью функциональной магнитно-резонансной томографии (фМРТ), позволившей предсказывать решение испытуемого за 6–10 секунд до осознания выбора.

В общем у меня, как обычно, стартап.
"Бессознательный трейдинг. Как отключить эго и сознание и позволить мозгу зарабатывать"
Йога-нидра для брокеров. Загружаем котировки в префронтальную кору и слушаем отклик. Без МРТ и регистрации.

Кстати, недавно послушал одно интервью Сергея Карелова и все это уже не кажется мне столь безумным.
https://smerti.net/articles/2021/03/13/aktivnost-mozga-trejderov-predskazala-izmenenija-kotirovok-luchshe-chem-ih-dejstvija/

Дипфейки на максималках или что бывает, когда за дело берутся взрослые мальчики.
Глядите, что Digital Domain запостил!
У них там, оказывается есть deep learning renderer "Charlatan".
Как они ехидно пишут в описании - "Как и в наших предыдущих примерах, в этой части очень мало работы с композом".

https://youtu.be/3dPbARl98xU

Смотрите какое красивое видео для Нвидии запилили англичане.
Реклама RTX Studio, где крутятся разные машинки от разных производителей. На вкус, так сказать, и цвет.

По крайней мене, в отличие от видеокарт, эти машинки есть в продаже.

Про цифровую одежду уже писал. Про ту, которую покупаешь за вполне себе фиатные деньги, но одеваешь только на свои фото и постишь в инсту.

А вот уже взрослые мальчики потянулись в этом направлении.

Gucci выпустил цифровые кроссовки, которые можно купить и примерить в двух приложениях.

И это коллаборация с белорусской компанией Wanna, которая специализируется на создании AR-технологий для цифровой примерки обуви и часов.

Киберпанк? Почти.
Настоящий киберпанк в след посте. И снова про цифровую обувь.
https://tjournal.ru/tech/354226-gucci-vypustil-cifrovye-krossovki-kotorye-mozhno-kupit-i-primerit-v-dvuh-prilozheniyah

Киберпанк, криптоарт, NFT, цифровая одежда и кроссовки.
Вот интересный проект, который (правильно) спекулирует на всех последних трендах.
Это снова цифровые кроссовки, которые нельзя пощупать, а можно только купить (см предыдущий пост про Цифро-Гуччи).
Но тут смышленые ребята из группы RTFKT бьют во все точки современного криптоарта (хех, скоро будет олдскульный криптоарт и ньюскул).
Во-первых, тут зашиты мемы. Арканоид как рисунок, Атари как бренд, ностальгия как товар. Мемо-кроссовки.
Во-вторых, отличная эсплуатация истории, когда кроссовки Найки продаются ограниченным тиражом, а потом перепродаются по конским ценникам. Идеально для крипто-арта. Закос в коллекционность.
В-третьих, авторы заморочились и сделали AR-версию кроссовок. Можно навести телефон и попасть в Снапчат, где можно эти кроссовки "примерять", а не просто рассматривать картинки или гифки.
В-четвертых, ребятки эксплуатируют тренд с цифровой одеждой, которые (пока) взлетает. А Снапчат, кстати, прикупает берлинский стартап Fit Analytics, занимающийся виртуальной примеркой.
С ценами ребята немного горячатся, но время покажет.
А еще они отложили криптокирпичей (буквально, меню Breaks) на OpenSea, которые господин MCuban уже прикупил.

https://rtfkt.com/