А вот это дичайше круто.
Все кто работал с одеждой в 3Д знают, какой это геморрой даже в рамках одевания одного персонажа. Дырки, складки, постоянное вылезание конечностей сквозь одежду.
А в Роблокс написали (за два года, на минуточку) процедурный генератор одежды, который (внимание) подходит ко ВСЕМ их персонажам и работает в анимации (естественно).
Как??!

Дальше я просто процитирую их же анонс и по дороге замечу, что Роблокс это один из немногих проектов, достойных произносить слово "метаверс" не всуе, а по делу. Ибо объем того, что они ресерчат и делают, впечатляет.

Трехмерщики, почитайте, это интересно.

Ну и грех не вспомнить мое нытье про ассетное мышление и вот это вот все.

"После двух лет напряженной работы сегодня утром мы официально запустили нашу новую систему многослойной одежды, которая позволяет подбирать одежду и аксессуары под любой тип тела аватара. Теперь пользователи могут наряжать существующих аватаров Roblox до 6 слоев одежды, поверх любой классической одежды. За последние несколько недель в Магазин Аватаров поступило более 2 000 моделей одежды и аксессуаров, созданных пользователями.

Система многослойной одежды дает нашему сообществу возможность создавать невиданные ранее виды одежды и аксессуаров и выводит комбинаторные возможности аватара на совершенно новый уровень. Теперь игроки могут смешивать и сочетать невероятный диапазон стилей тела и нарядов. Это имитирует то, как одежда сидит и драпируется на людях в реальном мире. Рубашки, платья, свитера, куртки и брюки теперь надеваются слоями, которые влияют друг на друга и взаимодействуют друг с другом. [Как? Как они это сделали?]

Система также создает основу для создания пользовательских тел. Большой проблемой при создании любой 3D одежды для Roblox является разработка системы, которая будет работать не только с огромным количеством тел, уже имеющихся на платформе сегодня, но и с безумными и креативными телами аватаров, которые, как мы ожидаем, будет создавать наше сообщество в будущем.

Магия одежды в этой системе заключается в том, что она может растягиваться, чтобы подойти любому персонажу платформы - от классического Blocky до T-Rex - и прекрасно ложится поверх нескольких слоев, которые уже носит персонаж."

И тут пользователи Maya и Marvelous такие: а мы, а нам, а где?

А Роблокс такой: за первые 5 дней нашего ограниченного первого запуска Layered Clothing 14,4 миллиона уникальных пользователей приобрели 74,4 миллиона бесплатных одежек. По состоянию на эту неделю у нас в каталоге уже более 2 000 ассетов, созданных UGC, и крошечная доля базовых активов, доступных бесплатно из Roblox.
https://blog.roblox.com/2022/04/layers-genius-behind-layered-clothing/

Голограммы, проекции, 3Д-экраны, маппинг, шмаппинг.

Аналоговые (hand-made) аватары рулят.

И следят за вами.

🎧AR-приложение Revolv AR визуализирует звучание винила в режиме реального времени. Выглядит красиво.

Ну, за айтишников. Целиком. Не чокаясь.

Бывшие сотрудники Google создали компанию Adept AI по разработке так называемого сильного искусственного интеллекта (Artificial General Intelligence, AGI), способного использовать каждое доступное в мире программное обеспечение, а также интерфейс программирования (API) в качестве инструментов для выполнения поставленных задач.

https://3dnews.ru/1064830/publikatsiya-1064830

Илон, что ты делаешь, прекрати!

Проснап. Много.
Snap Inc, как обычно, удивил.
Вчера они анонсировали новый девайс.
Напомню, что Снап уже не первый раз выпускает девайсы. Раньше это были очки с возможностью видео-съемки и AR-очки.
А теперь они сделали дрона.
С отличным названием - Pixy, ибо это и про пискели, и про пикчи, и про миниатюрный размер.
И прежде, чем перейти к характеристикам, я агрессивно замечу, что все сравнения с существующими дронами абсолютно неуместны. И уж тем более с DJI или Skydio или Yuneec. Это все тяжелые монстры за ацкия тыщи, с пультом, оператором, настройками и сетапом. Pixy вообще про другое.

Это Супер Мега Селфи Палка На Стероидах.

Вынимаешь из кармана, кладешь на ладонь, вытягиваешь руку, будто выпуская птенца и все. Желтый Пикси полетел по одной из четырех траекторий и ну снимать хозяина.
Дальше хозяин жестом(!) зовет его домой. Птенец летит обратно, по дороге сливая фотки на телефон барина.
Всё.
Никаких sd-карточек, пульта или контроллера. Никаких хищных лопастей. Одна жирная кнопка-колесо в середине.
Всё.
Для меня это образец Продукта.
И прежде чем все начнут стонать о слабой батарее, стабилизации, невозможности снимать в стерео и в 8К при слабом освещении, снова замечу: Пикси - про другое.
Вынул, кинул в воздух, снял, позвал обратно, фотки уже у тебя. Это не для гиков, это масс-маркет.
Всё.
Если все еще думаете, как это использовать в постпродакшене, дальше можно не читать.
Ибо Пикси не для вас и (пока) он работает в эко-системе Снапа.
Он весит 100 грамм(!), влезает в карман, снимает видео в разрешении 2,7K и фотографии с разрешением 12 Мп. Контент можно редактировать, используя Snapchat, и делиться ими с другими с помощью Snapchat Chat, Stories и Spotlight (и при желании наружу). Также можно добавлять снаповские эффекты, такие как Hyperspeed, Bounce, Orbit 3D, Jump Cut.

Дальше вы точно можете не читать, я щас буду нахваливать Снап (и это от души, никаких ништяков мне за это не положено). Но лишь попрошу вот о чем, я не могу найти классное видео, когда сноубордер достает из рюкзака дрон похожий на фрисби, кидает его в воздух и катится с горы, а дрон следует за ним и снимает мерзавца. Это был прототип какого-то стартап-продукта.
Пикси напомнил мне про это видео. Кто помнит, киньте ссылку.

Дальше замечу, что между Снапом и ФБ идет активная конкуренция по всем фронтам от computer vision до hardware. И похоже Снап постоянно на шаг впереди и по алгоритмам и по смысло-упакованным продуктам.
Пока Марк беснуется с метавером и виаром (и пиаром), Снап берет и делает. Очки, дроны, алгоритмы. Которые УЖЕ на рынке. На массовом рынке.
Пикси, кстати, будет доступен только в США и Франции и то "пока есть запасы".

Дальше снова заведу песню про ассетные валенки и соответствующее мышление:
На недавнем мероприятии Snap для разработчиков было представлено нечто под названием Lens Cloud. Это управляемый Snap бэкэнд-сервис, который должен позволить разработчикам приложений создавать новые виды AR-ассетов и запускать их плавно и быстро прямо из Snapchat. Раньше для создания такого приложения, как многопользовательская игра или использование привязки к местоположению, производителю приходилось создавать собственное приложение. С помощью Lens Cloud Snap стремится предоставить услуги хостинга(!) для этого. К-Коммодити.

Кроме того, Snap работает с Live Nation над созданием специальных линз для концертов(!), чтобы выйти за рамки экранов смартфонов, но не ныряя в виар. Они даже назвали свое мероприятие мероприятие "Назад к реальности" (гении, чо).
И это отличное видение метаверса, в отличие от истерики, порожденной Марком в октябре прошлого года.

И Снап спокойно спускается с горы, в очках, с дроном в кармане. И имеет все стадо.
https://www.youtube.com/c/pixy/featured

А вот проект, о котором я упоминал в предыдущем посте про Snap Pixy.
Это Lily Drone.
Выглядит на миллион.
Собрали миллионы в 2015.
Объявились банкротами в 2017.
А жаль.
Выглядит как Pixy на стероидах-максималках.

Андрей Евдокимов, человек-дрон, быстро прислал ссылку в коментах.

Долго Гугль запрягал, пока Эппле, Самсунг и Хуавей размахивали своими часиками на руках у пользователей.
Из утечек - батарейка на 300mAh (мейнстрим, не космос).
Три разных модели.
LTE
Цена 200-300.
Говорят, что Pixel Watch будут оснащены теми же сенсорами, что и Samsung Galaxy Watch 4, что означает, что они могут поставляться с тем же "Биоактивным датчиком", который может измерять частоту сердечных сокращений, ЭКГ и процент жира в организме(body fat percentage).

А вот из интересного - патент на превращение кожаного мешка в тачпад!
Идея заключается в том, что датчики позволят превратить кожу носителя часов в сенсорную поверхность для управления беспроводными наушниками и расширить поверхность управления смарт-часами. Конечно, патентная заявка - это всего лишь протокол о намерениях, а мешки ворочать придется потом. Но такая фишка в Pixel Watch, явно выделит Гуговоч среди других смарт-часов.
Ссылка со всеми ссылками на вчерашние утечки ниже.
https://www.tomsguide.com/news/google-pixel-watch-rumors-release-date

Кого вы встретите в метаверсе?
(или за писателей диалогов)

Про цифровых людей я уже писал примерно сто двадцать один раз, даже конференцию делал в прошлом году. Но разговор обычно шел про дизайн и визуальную разработку этих тварей.
С Метахьюматами все уже наигрались, Real Illusion попробовали, конструкторы аватаров поизучали, а некоторые смышленые ребята даже avatar SDK написали. То есть вопрос с конструированием внешности достаточно хорошо проработан взрослыми мальчиками.

А дальше вопрос - вы что, всерьез намереваетесь анимировать этих тварей руками? Писать им диалоги? О каком интерактиве вы тогда думаете?

Конечно, если речь идет о трушном метаверсе, где каждая цифровая бестия будет двойником реального кожаного мешка, этот вопрос снимается.

Но ведь мамкины метаверсеры всего мира сейчас хайпуют на цифровых инфлюенсерах, умных аватарах и синтетических личностях. Выкатывают примеры довольно симпатичных аватарок, как бы пристегнутых к языковым моделям, которые, вроде как, способны поддерживать разговор.

Все это подводит нас к вопросу - коль скоро конструкторы внешности уже прилично развились и, несомненно, будут прогрессировать и дальше, то вероятно время подумать о КОНСТРУКТОРАХ МОЗГОВ для цифровых рептилоидов.

Ибо пока это все в руках разработчиков.

Вот вы сделали пяток метахьюманов и хотите вдохнуть в них .. мозг. Ну ок, хотя бы характер, темперамент или что там еще бывает у кожаных.

Открываете конструктор аля метахьюман, а там общее описание типа "характер нордический, но умом не блещет", а рядом рульки и педальки типа "грусть", "агрессия", "любознательность", описывающие как текущее состояние, так и общие черты цифроличности.

И ну конструировать.
(тут просится хороший пост про то, как СМИ и телевизор научились конструировать личность кожаного мешка уже в одном поколении, но это потом).

В общем это была подводка к статье про Inworld AI, которые делают конструктор мозгов для цифровых личностей.
Сайт у них та и озаглавлен: Brains for Virtual Characters

И начали они, естественно с игровых персонажей.

Персонажи в играх и других цифровых приложениях, как правило, довольно статичны, работают на основе набора реплик и ответов, написанных в начале. Но будущие игры (и конечно мамкин метаверс) могут быть более отзывчивым, генеративным и, конечно, управляемым ИИ.

Inworld утверждает, что они способны быстро создавать NPC и подобных персонажей с помощью всего нескольких предложений описания и кручения рулек в конструкторе, и что после создания они мгновенно станут более глубокими и интересными для взаимодействия, чем обычные скриптовые персонажи.

А там глядишь и до метаверса дело дойдет.

Поэтому, когда вы встретите там аватар своей мечты, задумайтесь, что у него/неё под капотом?

Хотя... какое это имеет значение в метаверсе? Ибо метамотивации могут быть далекими от кожаных потребностей.
https://techcrunch.com/2022/04/28/inworld-shows-off-impressive-ai-powered-character-generation-and-interaction/

Тут интернет немного приподдостал статьями про эмоциональный интеллект.
Наш ответ интернету - Эмоциональный ИИ!

https://www.protocol.com/enterprise/emotion-ai-sales-virtual-zoom

Недавно писал про то, как ИИ распознает ваши эмоции по видео.
Похоже он добрался и до вас лично.
Ибо Зум нынче использует почти каждый.


Компания Zoom, царь созвонов, сообщила о внедрении новых функций под названием Zoom IQ for Sales, которые предоставляют организаторам совещаний расшифровку разговоров после совещания и анализ настроения. Этот Zoom IQ был создан внутренними силами с использованием собственной системы автоматического распознавания участников и понимания естественного языка. Система интегрирована с Salesforce.

Zoom также ведет активные исследования для включения "эмоционального" ИИ в продукты компании в будущем. Например исследование, включающее методику удаления изображений лица из фоновых изображений, которые могут запутать компьютер, и новый набор данных, включающий данные о выражении лица, физиологические сигналы, такие как частота сердечных сокращений и температура тела, а также данные о self-reported эмоциях.

"Это информационные сигналы, которые могут быть полезны; они не обязательно являются решающими", - прокомментировали в ZOOM, отметив, что метрики, основанные на "эмоциональном" ИИ, могут быть добавлены, чтобы предоставить продавцам более глубокое понимание того, что произошло во время встречи по продажам, например, определив: "Мы думаем, что в этой части разговора настроения пошли на спад".

Судя по статье, эмоциональным ИИ занимается тонна компаний. Про Uniphore и Sybill я уже писал. В статье есть намеки на то, что этим занимаются все крупные корпорации от Микрософта до .. В общем все.

Готовьте ваши кожаные личики. А Зум развесит над ними подписи: "Злится", "Успокоился", "Мы теряем его!!!". ИИ, включай ии-стимуляцию!

Пока Зум распознает ваши эмоции, Цукербер собирается забраться прямо к вам в мозг.
И строить метаверс там (что, кстати, очень правильная идея, ибо движок вот он, уже готов)

Мета недавно объявила о долгосрочном исследовании по изучению человеческого мозга. По его словам, они намерены использовать результаты этого исследования, чтобы "направить разработку ИИ, который будет обрабатывать речь и текст так же эффективно, как люди".

Амбиции Meta в ее стремлении использовать машинное обучение следующие: создать мысль из языка.

(Тут Хомский такой: чо?)

Основная идея: Meta хочет понять, что именно происходит в мозгу людей, когда они расшифровывают(process) язык. Затем, каким-то образом, она собирается использовать эти данные для разработки ИИ, способного понимать язык.

Согласно Meta AI, компания потратила последние два года на разработку системы искусственного интеллекта для обработки данных о мозговых волнах(brainwave information), чтобы получить представление о том, как мозг справляется с коммуникацией.

"Наши коллеги из NeuroSpin создают оригинальный набор данных нейровизуализации для расширения этих исследований. Вся эта работа является частью более широких инвестиций Meta AI в создание human-level AI, который обучается под ограниченным супервайзингом или вообще без него.

План состоит в том, чтобы создать сквозной декодер для человеческого мозга. Это предполагает создание нейронной сети, способной переводить необработанные данные мозговых волн в слова или изображения."

Это звучит довольно радикально, но все быстро переходит на более странную территорию, поскольку сообщение в блоге продолжается под заголовком "На пути к ИИ человеческого уровня"

"В целом, эти исследования подтверждают захватывающую возможность - между мозгом и моделями ИИ действительно существует количественно измеряемое сходство. И эти сходства могут помочь получить новые знания о том, как функционирует мозг. Это открывает новые пути, по которым нейронаука будет направлять развитие более интеллектуального ИИ, а ИИ, в свою очередь, поможет раскрыть чудеса мозга."


Meta, похоже, идет по стопам OpenAI. Обе компании заинтересованы в разработке искусственного интеллекта общего назначения, который в целом способен делать все то же, что и человек.

OpenAI утверждает, что AGI - это ее единственная миссия, в то время как Meta, похоже, больше присматривается к созданию метаверса в мозгу пользователя.

Но они обе идут похожим путем: пытаясь проникнуть в суть с помощью обработки естественного языка (NLP).

Неясно, как предсказание речи по мозговым волнам приведет к распознаванию речи на человеческом уровне. Так же как неясно, как GPT-3 или любые будущие генераторы текста приведут к AGI.

В общем Meta ищет секретный ингредиент в ваших мозговых волнах.

Киберпанк уже здесь. Следующая остановка - Метаверс (в вашей голове).
https://ai.facebook.com/blog/studying-the-brain-to-build-ai-that-processes-language-as-people-do/

https://thenextweb.com/news/metas-new-long-term-ai-study-sounds-like-openais-current-dead-end