Интересно? Читаем ниже...

ИИ видит вас насквозь.
Вы думаете, что он способен только подсовывать вам рекламу в фейсбуке на основе ваших малограмотных комментариев?
Да он видит все ваши комплексы, импринты и психологические проблемы.
Сомневаетесь?
Ну-ну. Читаем дальше.
"Могут ли сообщения в социальных сетях выявить ранние признаки психического заболевания? Новая модель машинного обучения показывает многообещающие результаты. Исследователи из Исследовательского центра IBM Watson разработали модель, которая анализирует сообщения и изображения, размещенные пользователями Facebook, на предмет выявления психологических проблем. В отличие от более ранних попыток классификации психических заболеваний на основе сообщений в социальных сетях, в которых испытуемые сообщали о своем состоянии, в этом использовались фактические диагнозы.
Как это было:
авторы собрали миллионы сообщений и изображений, опубликованных за 18 месяцев 223 волонтерами. Часть из этих волонтеров были когда-то госпитализированы с расстройствами шизофренического спектра, у некоторых были диагностированы разные расстройства, такие как депрессия, а у остальных не было проблем с психическим здоровьем.
Для текста авторы использовали обучающие примеры с использованием LIWC, который представляет эмоциональный тон, уверенность и достоверность. Для изображений они размечали измерения оттенка, насыщенности, плотности пикселей и других факторов. Они обучили нейросеть классифицировать сообщения от каждой группы.
Результаты:
По данным Wired, модель выявила людей с диагнозом шизофрения и расстройства настроения с качеством, сопоставимым(!) стандартным 10-балльным опросникам. Исследователи обнаружили, что люди с диагнозом «шизофрения» чаще других использовали слова «видеть», «слышать» и другие слова, связанные с восприятием. Люди с расстройствами настроения, как правило, публиковали больше фотографий в голубых тонах. Обе группы также использовали больше нецензурных слов и публиковали фотографии меньшего размера.
Итого:
Сообщения в социальных сетях являются популярным материалом для исследователей, стремящихся измерить психическое состояние пользователей. Недавние исследования показывают, что комментарии Reddit могут указывать на такие состояния, как СДВГ, беспокойство и биполярное расстройство, и что пользователи Twitter часто сообщают о своей депрессии, послеродовом расстройстве настроения, суицидальных идеях и многом другом.
Почему это важно:
этот инструмент может помочь врачам рано выявлять психическое заболевание - особенно у молодых людей, которые, как правило, активно пользуются социальными сетями и подвержены более высокому риску развития психических заболеваний, - и может предоставить ценный контекст для лечения. "
И никаких опросников, приемов, собеседований, консультаций.
В общем, скоро вместо сдачи анализов, можно будет приносить свои тексты, комментарии и картинки.
Приносить и скармливать ИИ.
А он будет печатать галоперидол на 3Д-принтере и все будут довольны.
P.S. А можно и не приносить. Вот же они, перед вами. А добрый дядюшка ИИ-Фрейд уже поставил все диагнозы. Вопрос только в том, что он будет с ними делать.
Продолжать подсовывать рекламу, от которой все труднее отказаться?
Или нажимать на нужные кнопочки? (Что уже сейчас вполне возможно - GPT-3 и DALL-E напечатают нужные тексты и сделают нужные картинки).
Дочитали до этого места?
Тогда давайте ваши коментарии.
ИИ ждет. Очень ждет.
https://www.nature.com/articles/s41537-020-00125-0

Детская анимация .. на стероидах.
Датчане запустили анимационное шоу (сериал) для детей, внимание, 4-8 лет (официальный рейтинг).
Главный герой имеет огромный ... да, ожидание вас не подводит .. пенис. Настолько огромный, что может проводить спасательные операции, гравировать фрески, поднимать флаг и даже красть мороженое(блэт!) у детей.
Те, кто дочитал до этого места и думают, что до 1 апреля еще целый квартал, сообщаю - это новость в Гардиан, а не в Иксхамстер:
https://www.theguardian.com/world/2021/jan/06/john-dillermand-denmark-launches-childrens-tv-show-man-giant-penis

Те, кто настолько отважен, что готов на это посмотреть, см ниже. Это в принципе очень смешно, особенно озвучка. Я, честно сказать, еще не определился, взоржать или возрыдать. И не забыли ли единичку в рейтинге (ибо подросткам отлично зайдет, там реально смешно). И пока задумался о вакансиях в датском королевстве: требуется риггер со знанием .. прибора. Или аниматоры на дик-синк.
Ну и представил, как они пишут сценарии и брифуются.

Компьютерное зрение и компьютерный слух.
Отличная идея - скормить нейросетками не только видео, но и всю акустическую "картину", для более точного восстановления модели 3Д-пространства.
Этакая фото-аудио-грамметрия.
Исследователи из Facebook, разработали нейросеть, которая использует визуальные и звуковые эффекты из короткого видеоклипа для восстановления плана целого этажа. Ее можно применять для визуализации пространств, планирования маршрутов и разработки архитектурных проектов. Во время съемки включаются разные неистовые звуки, отражения которых потом фиксируются и учитываются.
https://habr.com/ru/news/t/536534/

Интересную работу сделали ребята из Samsung Ai Center - Moscow.
Проблема правильно лайтинга до сих пор стоит довольно остро. Все эти великолепные дипфейки с уже приличным липсинком и выразительной мимикой до сих пор отчаянно палятся на лайтинге и освещении.
А в этой работе по съемке с телефона восстанавливается трехмерная модель головы (и даже верхняя часть туловища) с возможностью быстро ее релайтить на лету. Находка для AR, где модели обычно плохо попадают в нужное освещение окружения.
Требуется сделать несколько снимков со вспышкой и без с разных ракурсов - и восстановленная модель готова к произвольному освещению.

P.S. Словосочетание 3D Portraits устойчиво входит в обиход. И если у олдскульных гиков это полигональная модель башки, оттекстуренная и порендеренная, то новая школа уже привыкает, что 3Д достается из фоток и видео, сделанных на смартфоны, причем с целым пакованом мета-информации (освещение, текстуры, и пр).
Проект: https://saic-violet.github.io/relightable-portrait/

За последний месяц дипфейки еще немного прокачались.
Вот хороший пример (см пред. видео-пост)
Тут в принципе можно скромно выпить, не чокаясь, за гримеров, однако работа настолько хорошая, что напрашиваются пространные речи.
Наличие маски тут отлично маскирует (пардон за тавтологию) недостатки дипфейков - блики, лайтинг, непопадание в свет, недокомпоз. Плюс сами дипфейки - это по сути "маски", и поэтому этот жирный грим смотрится органично.
Тут, конечно, так и подмывает написать, что вот оно "уместное" (с технологической точки зрения) использование дипфейков.
Но у технологической стороны есть еще и антагонисты: социальная, этическая, ментальная, если угодно.
И тут этот дипфейк демонстрирует всю свою потенциальную мощь (с неопределенным знаком).
Ибо в нескольких секундах замешаны персонажи вымышленные и реальные, безумие вымышленное и реальное, и кино - вымышленное и, увы, реальное.
И пост не про Трампа, блокировки и соц сети.
А про пару секунд визуального контента..
Завтра на таком ролике не будет карикатурного грима и текст может быть иной, в повелительном наклонении.

Впрочем..

Давайте уйдем от политики (хотя пример выше - отличная демонстрация прицельного использования фигур влияния).

Есть некоторое количество инфлюенсеров (липкое слово какое), у которых сотни миллионов подпис... последователей.
Дипфейк может говорить и показывать лицом любого из них.
В условиях нетребовательного качества картинки и отсутствия критического мышления у таких последователей, дипфейк может творить все что угодно с умами этих потребителей экрана.

Ну и вишенкой. Чтобы заблочить такой контент понадобятся примерно сутки в среднем (см историю с Parler). Именно столько живут Сториз... Им больше не надо, чтобы попасть с голову. С первого раза.
Источник
https://redd.it/kulwns
Подсмотрено на @r_Damnthatsinteresting

Ну и вдогонку к предыдущему посту про качество дипфейков (и чтобы скрасить апокалиптический тон предыдущего текста).
Гляньте, как вдипфейкали Тома Круиза в Звездные войны.
Ролику уже месяц, а за это время дипфейки еще немного прокачались.
Jarkan конечно машина... у него на канале много такого добра.
https://youtu.be/YctdgDJgGAU

Тут на днях начался CES 2021 (Консумер Электроникс Экспо)
Там прямо россыпи киберпанка.
Пока больше всех зажигает LG.
Примечательно, кстати, что подразделение, занимающееся смартфонами у них давно убыточно, но они все равно продолжают делать самые киберпанковские гаджеты типа растягивающегося телефона (до размеров планшета).
https://www.indiatoday.in/technology/news/story/lg-shows-off-its-rollable-display-phone-at-ces-2021-1758345-2021-01-12

А мне приглянулся "сгибающийся" монитор. Следите за руками на видео.
Хочешь в игры играть - согни его в бараний рог. Хочешь отодвинуться и кино смотреть - разгладь его в плоскость обратно.
Ждем когда можно будет свернуть в трубочку...
https://www.theverge.com/2021/1/10/22223753/lg-flexible-gaming-tv-bend-oled-flat-curved

И да, мне нравится то, что они безумствуют с дизайном и фичами.

Пока я сидел этой весной на локдауне, наконец-то у меня появилось время разобраться с Ардуино (спасибо вводному курсу Konstantin Novikov на Bang Bang Education). Ну и после того как разобрался конечно захотелось что-нибудь сделать, чего не было в примерах 🙂

Так получился проект Memopod - я собрал коробку с Ардуино, батареей и датчиками внутри, которую оставлял на сутки в разных местах Нью-Йорка. Она каждую минуту записывала температуру, влажность, давление, уровень освещенности и шума на sd-карточку. Потом я затаскивал эти данные в Houdini и там уже превращал в такую генеративную скульптуру, готовую к 3д-печати.

https://myshli.com/project/memopod

"Внешняя оболочка скрывает уникальный для каждого места и времени "кристалл", внешний вид которого определяется собранными в этом месте и времени данными.

Как годовые кольца дерева являются отпечатком окружающей этот объект среды за определенный промежуток времени, так и каждый слой в Memopod это визуализация одной минуты из 24 часов записанных данных, потребовавшихся для создания каждой скульптуры."

Если интересны подробности, то вот (с разрешения Sergey Tsyptsyn) небольшой кусок моего доклада с CG Event 2020 про этот проект

https://vimeo.com/499348654

Ну и раз уж сегодня киберпанк газует на CES 2021, то вот вам еще один мегагаджет.
Умная кровать от LG!
Выглядит прям киношно.
Просыпается главный герой, а прямо перед ним маршрут его невыполнимой миссии, и он такой "Алиса, проложи новый маршрут".
На деле - это полупрозрачные дисплеи, которые встраиваются хоть в холодильник, хоть в барную стойку.
Но ведь именно их вы рендерили в Синьке, гордо именуя их оверлеями. Красиво же!
А теперь Оверлеи пришли к вам спальню из ваших снов-рендеров.

Эра Оверлея. Забирайте название, только что придумал.

Ну и еще немного киберпанка. На сей раз уже прям хардкорного, ниже пояса.
Китайцы сделали умные подушки под задницу(!). Тут выдыхаем и мысленно перебираем в уме возможные варианты применения.
Намерения были самые добрые:
"Китайская технологическая компания Health Boost разработала «умные» подушки для офисных стульев и тестировала их на своих сотрудниках. Они должны были следить за здоровьем, отмечать признаки возможной усталости, например, плохую осанку, измерять сердцебиение"

Но кожаные мешки тупо стали следить за тем, кто и когда отсутствует на рабочем месте.
ИИ такой: "вот вам данные о здоровье сотрудников, заботьтесь на здоровье"
ЕИ в ответ: "иди к буйволу, давай лучше следить за ними!"

Вся история тут:
https://vc.ru/tech/195931-kitayskaya-kompaniya-sozdala-podushki-dlya-monitoringa-zdorovya-rabotnikov-a-ee-menedzher-ispolzoval-ih-dlya-slezhki-za-nimi
и тут:
https://www.nytimes.com/2021/01/12/world/asia/china-office-cushion-surveillance.html

Nvidia на CES 2021.
Немного интересных цифр и анонсов.

Выкатили 3060. Которая в 10 раз быстрее 1060.
12GB GDDR6 memory
13 Shader TFLOPS, 101 Tensor TFLOPS.
В феврале обещают за 329 (!) долларов!

Выкатили мобильную графику на 30ХХ.
Max-Q tech, which the company is calling AI-powered. Теперь с DLSS и на мобильной графике.
Новое энерго-управление - интеллектуальное распределение энергии между ЦПУ, ГПУ и памятью. Shifting power between the CPU, GPU, and GPU memory
Тот самый Resizable BAR, как ответочка на AMD's Smart Access Memory. Впереди тесты того, как это может ускорить работу. Ибо это не про скорости и частотки, а про обмен данными.
И да, 3060 будет и в мобильном исполнении.
И ноутбуки (!) на 3060 будут быстрее, чем PS5 в 1.3 раза!
Хотя реальные пацаны, конечно, смотрят на мобильные 3080, у которых будет аж 16 гиг видеопамяти. И 240-герцовые экраны.
С 26 января в продаже от 70 разных производителей.

Сладко, конечно. Нвидия в это году прям радует.

https://www.anandtech.com/show/16406/the-nvidia-geforce-ces-2021-live-blog-game-on

Название отличное. "Узнать за 60 секунд". Под капотом ИИ.
Но у меня сразу вопрос, а почему только ковид?
Накопленный датасет?

Думаю такой подход подойдет для диагностики всяко-разного.
https://press.sber.ru/publications/uznat-za-60-sekund-sber-razrabotal-algoritm-opredeliaiushchii-po-golosu-kashliu-i-dykhaniiu-veroiatnost-zabolevaniia-covid-19

Снапчат и Тикток как двигатели прогресса в CG
В продолжение дискуссии на закрытии Ивента
Я тогда задвигал мысль, что в создании мимолетного эффекта в Снапчат перед глазами олдскульного трехмерщика пролетает вся его жизнь весь 3Д-пайплайн: по изображению с камеры строится трехмерная сетка лица, текстурируется, анимируется, сдабривается эффектами (волосы и пр), рендерится (в реалтайме). И выплевывается в пользователя. Чтобы умереть через 24 часа.
В этом смысле Снапчат пилит удивительные вещи в области computer vision.
А теперь поглядите, что творит тик-ток. С точки зрения композа.
Представьте, что к вам пришли с брифом на такой ролик. И вы такой: "ну это Х часов съемок, Y дней поста, Z мешков денег".
А тик, мать его, ток делает это автоматом. Кнопкой. На экране телефона. Одной. (ну да, нажать придется несколько раз, пока)
Ну что, за композеров?

Это я к тому, что прогресс подкрадывается не из подвалов Фаундри или Адобченко, а со стороны мобильных приложений для подростков

8 января 2021 года была взята, наверное, лучшая волна в истории серфинга.
"Лучшая" не значит самая огромная, или самая длинная, или самая быстрая.
Самая красивая? Да, возможно.
Волна мечты.
Это случилось на Mavericks. И это не tow in surfing, а old school big wave riding. То есть когда сам, без буксировки.
Волна где-то 12 метров.
Это позволило Питеру Мелу ехать в "трубе" стоя(!). Достаточно долго, чтобы расслабиться и просто ... ехать.
Поглядите полное видео вот из этой статьи:
https://www.adventure-journal.com/2021/01/the-most-incredible-wave-in-surf-history-was-ridden-last-week/
Лучше в 4K, как правильно пишут в статье.

Такое бывает раз в столетия.

Киберпанк на кухне или будущее уже здесь.
На CES 2021 Самсунг показывал Ботов. Настоящих.
Которые (пока) помогают человеку во всем.
Это не компьютерная графика, но выглядит это как компьютерная графика.
Это материальная реальность.
Среднее между минорити репортом на позитивном мышлении и звездными войнами на стероидах моушен-дизайна.
Поглядите видео в шапке, а вот его полный источник, где много про ИИ и будущее.
https://youtu.be/DqXsTtW5VEo?t=634
R2D2 весело мигает в палеонтологическом музее и с умилением смотрит на (реальных) потомков.
Которые вот они, во плоти. Не на съемках и раскадровках, не на рендерах и композах. А на кухнях и спальнях.
Готовы к такому, любители комфорта?

P.S. Тут постпродакшену впору напрячься. С этим реальными ботами и без работы можно остаться - все живьем снимут. Нечего рендерить будет.
Но ничего, кожаный мешок любит пугать себя разными тварями в кино, а нейробиологи и генетики еще не так далеко продвинулись...

Еще больше киберпанка.
Цифровые инфлюенсеры похоже до инфлюенсились.
Читаем на сайте Dress-X:
Мы твердо убеждены в том, что количество одежды, производимой сегодня, намного превышает потребности человечества. Мы разделяем красоту и волнение, которые создает физическая мода, но мы верим, что есть способы производить меньше, производить более устойчиво и не производить вообще. На текущем этапе развития DressX мы стремимся показать, что некоторые вещи могут существовать только в цифровых версиях. Не покупайте меньше, покупайте цифровую одежду.

Короче, вы заходите на сайт и закупаетесь шмотками. По вполне себе реальным ценам. 30-40 долларов за шмотку.
Одна деталь, при покупке вы также загружаете свою фотку.
Доставка в любую точку планеты!
По имейлу!
А дальше вам приходят ваши фотки в купленной одежде.
И вы можете сладострастно постить их в Инсту!
И покупать новые шмотки, точнее новые фотки в шмотках.
Уйма профитов.
Быстро, не выходя из дома, и даже селфи делать не надо.
Киберпанк, рафинированный и изящный.

Заглянул в раздел Возвраты: At the moment, we have a non-refund policy.
А в разделе Хелп содержится информация, какие фото лучше слать в сервис.

Еще раз, вы покупаете виртуальную одежду, чтобы постить фотки в ней.

Экология ликует, а вот экономика нервно курит...

И да, цифровые персоны типа Isodope у них на сайте тоже есть. Члены команды, так сказать...
https://dress-x.com/pages/help-faq

А вот еще один проект пассионарно взывающий отказаться от реальной одежды в пользу виртуальной (по мотивам предыдущего поста)
Покупаете, постите. И все. Профит. Экология, отсутствие мусора, и необходимости покидать уютный мир инстаграмма.
Приличная симуляция и рендеры, однако.
Весь этот киберпанк явно двигает компьютерную графику вперед, как я уже неоднократно писал.
У инстаграмма тупо больше денег, чем у марвелоус дизайнера.
https://www.thefabricant.com/