Forwarded from addmeto (Grigory Bakunov)
#battleroyale продолжается, в рамках дела Эпик против Эппл судья вынес прямое указание - разрешить приложениям ссылки и кнопки на оплату, ведущие на сторонние сервисы. Теперь куча приложений перейдут с оплаты через эппл на оплату через свой сайт, потому что это сходу экономия больше 10%.
Требование начинает действие с 9 декабря и эппл по сути с ним уже согласился.
https://www.theverge.com/2021/11/9/22773082/epic-apple-fortnite-lawsuit-ruling-injunction-stay-app-store-anti-steering-rules
Требование начинает действие с 9 декабря и эппл по сути с ним уже согласился.
https://www.theverge.com/2021/11/9/22773082/epic-apple-fortnite-lawsuit-ruling-injunction-stay-app-store-anti-steering-rules
The Verge
Judge orders Apple to allow external payment options for App Store by December 9th, denying stay
The stay is denied.
А во внутреннем Слаке Unity, конечно, уже началось!
https://twitter.com/aras_p/status/1458334182598483971?t=9p1hYHV9wJIwVnHLU0I4Kw&s=19
https://twitter.com/aras_p/status/1458334182598483971?t=9p1hYHV9wJIwVnHLU0I4Kw&s=19
Twitter
Aras Pranckevičius
@MikeNicolella *of course* internal Slack already has this :)
This media is not supported in your browser
VIEW IN TELEGRAM
Немного утечек про Цифрового Дженсена.
Это к вопросу об аватарах.
Полную версию можно бесплатно смотреть по ссылке ниже.
Там не только и не столько про рендер, а про анимацию всей махины средствами ИИ в том числе.
https://reg.rainfocus.com/flow/nvidia/nvidiagtc/ap2/page/sessioncatalog/session/1630622800683001yiJN
Это к вопросу об аватарах.
Полную версию можно бесплатно смотреть по ссылке ниже.
Там не только и не столько про рендер, а про анимацию всей махины средствами ИИ в том числе.
https://reg.rainfocus.com/flow/nvidia/nvidiagtc/ap2/page/sessioncatalog/session/1630622800683001yiJN
Forwarded from CGIT_Vines (Marvin Heemeyer)
Deepmind выпустил алгоритм, который позволяет генерировать картины разными математическими методами. По дефолту сеть обучена подходу к созданию описанным Рудольфом Арнхеймом теоретиком художественного искусства и кино.
На самом деле даже просто интересно почитать, как алгоритмами пытаются воссоздать техники живописи. А смотреть на процесс просчёта сродни зарождению органики.
Коллаб присутствует, но сам не пробовал, с мобилы не удобно.
https://github.com/deepmind/arnheim/blob/main/arnheim_2.ipynb
На самом деле даже просто интересно почитать, как алгоритмами пытаются воссоздать техники живописи. А смотреть на процесс просчёта сродни зарождению органики.
Коллаб присутствует, но сам не пробовал, с мобилы не удобно.
https://github.com/deepmind/arnheim/blob/main/arnheim_2.ipynb
YouTube
Residual MLP 7 layers
Forwarded from ForkLog AI
🚘 Porsche разработает «цифровых двойников» для автомобилей. Они позволят спрогнозировать необходимость техобслуживания на основе стиля вождения.
Алгоритмы проанализируют информацию с датчиков и «большие данные», чтобы порекомендовать определенный ремонтный сервис. Также они предскажут потенциальные поломки систем до их возникновения.
📆 «Цифровые двойники» появятся после 2022 года. На сегодняшний день компания тестирует технологию среди около 50% владельцев Porsche Taycan. ИИ контролирует пневматическую подвеску электромобиля на предмет ускорения кузова и если водитель преодолевает определенные пороги, система рекомендует посетить техмастерскую.
#Porsche
Алгоритмы проанализируют информацию с датчиков и «большие данные», чтобы порекомендовать определенный ремонтный сервис. Также они предскажут потенциальные поломки систем до их возникновения.
📆 «Цифровые двойники» появятся после 2022 года. На сегодняшний день компания тестирует технологию среди около 50% владельцев Porsche Taycan. ИИ контролирует пневматическую подвеску электромобиля на предмет ускорения кузова и если водитель преодолевает определенные пороги, система рекомендует посетить техмастерскую.
#Porsche
А вот и метаответ красных! Зеленые жгут по этому поводу на GTC. Ждем симметричного (или нет) ответа от синих.
AMD будет поставлять Фейсбуку, пардон, Мете новые серверные процессоры EPYC для дата-центров. Акции красных сразу выросли на 10%. Мета решает.
Процессоры Genoa предназначены для вычислений общего назначения. У них 96 высокопроизводительных ядер Zen 4, основанных на оптимизированном 5-нм техпроцессе компании TSMC. Их выпуск запланирован на 2022 год.
Чипы Bergamo предназначены для облачных приложений. Они имеют до 128 высокопроизводительных ядер на архитектуре Zen 4c.
Лиза Су, проговорилась анонсированные процессоры EPYC нужны Meta для питания своей инфраструктуры и создания экзафлопсного суперкомпьютера Frontier.
На своем онлайновом мероприятии AMD также объявила о запуске ускорителей серии AMD Instinct MI200, самого быстрого в мире ускорителя для высокопроизводительных вычислений
https://techhq.com/2021/11/amd-strikes-chip-deal-to-power-metas-data-centers/
AMD будет поставлять Фейсбуку, пардон, Мете новые серверные процессоры EPYC для дата-центров. Акции красных сразу выросли на 10%. Мета решает.
Процессоры Genoa предназначены для вычислений общего назначения. У них 96 высокопроизводительных ядер Zen 4, основанных на оптимизированном 5-нм техпроцессе компании TSMC. Их выпуск запланирован на 2022 год.
Чипы Bergamo предназначены для облачных приложений. Они имеют до 128 высокопроизводительных ядер на архитектуре Zen 4c.
Лиза Су, проговорилась анонсированные процессоры EPYC нужны Meta для питания своей инфраструктуры и создания экзафлопсного суперкомпьютера Frontier.
На своем онлайновом мероприятии AMD также объявила о запуске ускорителей серии AMD Instinct MI200, самого быстрого в мире ускорителя для высокопроизводительных вычислений
https://techhq.com/2021/11/amd-strikes-chip-deal-to-power-metas-data-centers/
Ого, это уже интересно! Движемся к единому Метаверсищщу!
На днях говорили с Деном о том, что на дворе полный хаос в части форматов, стандартов, инструментария, да и что далеко ходить, логинов в сельские метаверсы. И что щас начнут возникать многочисленные "бриджи" из одного поселения в другое.
Цукерберг не позвонил, точнее позвонил не не туда, а в Микрософт!
И вот теперь Мета и Микрософт объединяются в части соединения своих реальностей.
Если вы помните, Микрософт строит свой Меш, с планктоном и аватарами. А у фейсбучека есть свой Workplace.
И вот теперь Мета хочет интегрировать свой Meta Workplace с Microsoft Teams.
Интеграция дает клиентам доступ к контенту Workplace в приложении Teams. Кроме того, пользователи могут просматривать видеовстречи Teams в приложении Workplace.
Партнерство между Meta и Microsoft, конечно, ставит вопрос о конкуренции. Однако Workplace и Teams немного разные. Если Workplace ориентирован на широкие, общекорпоративные связи, то Teams - на мгновенное общение между сотрудниками и их непосредственными коллегами.
Эта интеграция, оказывается, уже была запрошена клиентами, типа Vodafone и Accenture, которые одеваются в доспехи метаверса.
Партнерство может оказаться наиболее выгодным для Meta. Ее Workplace значительно отстает от своих конкурентов по количеству пользователей.
В мае Workplace объявил о достижении 7 миллионов платных подписчиков. Microsoft в июле объявила, что ее продукт Teams теперь имеет 250(!) миллионов ежемесячных активных пользователей. Slack, принадлежащий Salesforce, больше не публикует данные о пользователях, но компания заявила, что в сентябре 2019 года у нее было 12 миллионов ежедневных активных пользователей, когда она в последний раз сообщала эту статистику. Число платящих клиентов Slack увеличилось почти на 39% в годовом исчислении в июне 2021 года до 169 000.
Удивительно, как Микрософт с такой оравой прогибается под хайп Меты. Все-таки хайп дорого стоит, о чем нам постоянно напоминают метакойны.
Помимо Teams, Microsoft также предлагает Yammer, программное обеспечение для корпоративных социальных сетей, которое напрямую конкурирует с сервисом Workplace. В августе Microsoft заявила, что использование Yammer удвоилось за год, и число ежемесячных активных пользователей достигло "десятков миллионов".
Тем более удивительно, зачем это Микрософту.
Похоже в метаверсе скоро будет свой FAANG.
Или MMM.
По крайней мере два М там уже есть.
https://www.theverge.com/2021/11/10/22774059/microsoft-teams-meta-facebook-workplace-integration
На днях говорили с Деном о том, что на дворе полный хаос в части форматов, стандартов, инструментария, да и что далеко ходить, логинов в сельские метаверсы. И что щас начнут возникать многочисленные "бриджи" из одного поселения в другое.
Цукерберг не позвонил, точнее позвонил не не туда, а в Микрософт!
И вот теперь Мета и Микрософт объединяются в части соединения своих реальностей.
Если вы помните, Микрософт строит свой Меш, с планктоном и аватарами. А у фейсбучека есть свой Workplace.
И вот теперь Мета хочет интегрировать свой Meta Workplace с Microsoft Teams.
Интеграция дает клиентам доступ к контенту Workplace в приложении Teams. Кроме того, пользователи могут просматривать видеовстречи Teams в приложении Workplace.
Партнерство между Meta и Microsoft, конечно, ставит вопрос о конкуренции. Однако Workplace и Teams немного разные. Если Workplace ориентирован на широкие, общекорпоративные связи, то Teams - на мгновенное общение между сотрудниками и их непосредственными коллегами.
Эта интеграция, оказывается, уже была запрошена клиентами, типа Vodafone и Accenture, которые одеваются в доспехи метаверса.
Партнерство может оказаться наиболее выгодным для Meta. Ее Workplace значительно отстает от своих конкурентов по количеству пользователей.
В мае Workplace объявил о достижении 7 миллионов платных подписчиков. Microsoft в июле объявила, что ее продукт Teams теперь имеет 250(!) миллионов ежемесячных активных пользователей. Slack, принадлежащий Salesforce, больше не публикует данные о пользователях, но компания заявила, что в сентябре 2019 года у нее было 12 миллионов ежедневных активных пользователей, когда она в последний раз сообщала эту статистику. Число платящих клиентов Slack увеличилось почти на 39% в годовом исчислении в июне 2021 года до 169 000.
Удивительно, как Микрософт с такой оравой прогибается под хайп Меты. Все-таки хайп дорого стоит, о чем нам постоянно напоминают метакойны.
Помимо Teams, Microsoft также предлагает Yammer, программное обеспечение для корпоративных социальных сетей, которое напрямую конкурирует с сервисом Workplace. В августе Microsoft заявила, что использование Yammer удвоилось за год, и число ежемесячных активных пользователей достигло "десятков миллионов".
Тем более удивительно, зачем это Микрософту.
Похоже в метаверсе скоро будет свой FAANG.
Или MMM.
По крайней мере два М там уже есть.
https://www.theverge.com/2021/11/10/22774059/microsoft-teams-meta-facebook-workplace-integration
The Verge
Microsoft partners with Meta to integrate Teams into its Facebook-like Workplace
Teams video meetings are coming to Workplace.
Forwarded from Denis Sexy IT 🤖
Media is too big
VIEW IN TELEGRAM
Ребята из компании Festo разработали BionicKangaroo, это кенгуру-киборг, который частично восстанавливает энергию при прыжке, накапливает её и использует для следующего прыжка. По сути это такая динамо-машина, которая сама себя подзаряжает.
Еще у робота есть резиновые упругие пружинные элементы, почти как ахиллово сухожилие — крепятся на задней части стопы и на коленном суставе. Такое искусственное сухожилие амортизирует прыжок, поглощает кинетическую энергию и высвобождает для того, чтобы прыгнуть еще раз.
Кстати, ребята уже делали до этого робота-птицу и стрекозу.
Каждый раз когда пишу пост про какого-то очередного робота, задумываюсь а какой в итоге будет охотиться за нами человеками – это вряд ли в общем
Еще у робота есть резиновые упругие пружинные элементы, почти как ахиллово сухожилие — крепятся на задней части стопы и на коленном суставе. Такое искусственное сухожилие амортизирует прыжок, поглощает кинетическую энергию и высвобождает для того, чтобы прыгнуть еще раз.
Кстати, ребята уже делали до этого робота-птицу и стрекозу.
Каждый раз когда пишу пост про какого-то очередного робота, задумываюсь а какой в итоге будет охотиться за нами человеками – это вряд ли в общем
Пока мы тут лепим мемы на мету, взрослые ребята ворочают мешки в виаре. И пока все делают умный вид, корейцы берут и делают.
Правительство Сеула на днях объявило, что именно город целиком "войдет в метавселенную" под названием Metaverse Seoul. В столице Южной Кореи создадут виртуальную коммуникационную экосистему для всех сфер деятельности муниципальной администрации. Согласно планам, в 2022 году экономический, культурный, туристический, образовательный сектора, а также услуги для граждан будут работать в формате AR/VR.
Они уже инвестировали в проект Metaverse Seoul, предложенный мэром О Се Хуном, 3,9 млрд вон (около $2,8 млрд евро). Планируется, что полностью проект будет завершен к 2030 году.
Жители Сеула вскоре смогут пользоваться VR-гарнитурами, чтобы встречаться с городскими властями для виртуальных консультаций, получения услуг. Они также смогут посещать массовые мероприятия. Например, новый 2022 год горожане отметят не только на площади около колокольни Босингак года, но и в виртуальной реальности
Правительство Сеула на днях объявило, что именно город целиком "войдет в метавселенную" под названием Metaverse Seoul. В столице Южной Кореи создадут виртуальную коммуникационную экосистему для всех сфер деятельности муниципальной администрации. Согласно планам, в 2022 году экономический, культурный, туристический, образовательный сектора, а также услуги для граждан будут работать в формате AR/VR.
Они уже инвестировали в проект Metaverse Seoul, предложенный мэром О Се Хуном, 3,9 млрд вон (около $2,8 млрд евро). Планируется, что полностью проект будет завершен к 2030 году.
Жители Сеула вскоре смогут пользоваться VR-гарнитурами, чтобы встречаться с городскими властями для виртуальных консультаций, получения услуг. Они также смогут посещать массовые мероприятия. Например, новый 2022 год горожане отметят не только на площади около колокольни Босингак года, но и в виртуальной реальности
This media is not supported in your browser
VIEW IN TELEGRAM
Пока мы тут отвлеклись на Марка, Beeple взял и продал свой новый NFT-шедевр.
На аукционе Кристи за 28,98 миллиона долларов.
HUMAN ONE это трехмерная видеоскульптура в виде прямоугольника со светодиодными экранами. На них воспроизводится видеоролик с одиноким астронавтом, шагающим по чужой планете. Сам Beeple назвал творение “портретом первого человека, рожденного в метавселенной”. Ни больше, ни меньше!
Предметы, окружающие астронавта, выбираются случайно из пула одноминутных клипов, созданных автором HUMAN ONE и доступных в блокчейне Ethereum. По словам Beeple, он создал неразрывную связь посредством арт-объекта между творцом и настоящим, а также любым из будущих владельцев невзаимозаменяемого токена. Поскольку в дальнейшем художник сможет модифицировать или изменять образы, транслирующиеся на экранах объекта.
Ну и пока мы тут проектируем метаверсы, механики NFT усложняются. В тренд явно входит временнОе измерение и непостоянство(изменяемость) объектов.
P.S. И над этим человеком я издевался на Сигграфе..
На аукционе Кристи за 28,98 миллиона долларов.
HUMAN ONE это трехмерная видеоскульптура в виде прямоугольника со светодиодными экранами. На них воспроизводится видеоролик с одиноким астронавтом, шагающим по чужой планете. Сам Beeple назвал творение “портретом первого человека, рожденного в метавселенной”. Ни больше, ни меньше!
Предметы, окружающие астронавта, выбираются случайно из пула одноминутных клипов, созданных автором HUMAN ONE и доступных в блокчейне Ethereum. По словам Beeple, он создал неразрывную связь посредством арт-объекта между творцом и настоящим, а также любым из будущих владельцев невзаимозаменяемого токена. Поскольку в дальнейшем художник сможет модифицировать или изменять образы, транслирующиеся на экранах объекта.
Ну и пока мы тут проектируем метаверсы, механики NFT усложняются. В тренд явно входит временнОе измерение и непостоянство(изменяемость) объектов.
P.S. И над этим человеком я издевался на Сигграфе..
This media is not supported in your browser
VIEW IN TELEGRAM
Слушайте, это же просто прекрасно.
Переливание силы Метахьюманов!
Смотрится как отличный сериал...
А появление Майка Сеймура - просто находка.
Алекса, Икея - все прекрасно.
Описания тоже доставляют:
Блу хочет использовать силу Метахуманов, чтобы выглядеть реалистично для своих зрителей, но все оказывается не так просто! Это определенно метафорический эпизод, который параллелится с реальностью.
Эпизод 02 - Вливание Метахумана
Этот эпизод - дань уважения команде Metahuman из Epic Games за их безумное цифровое человеческое искусство и технологии для нас, смертных. А боль и борьба Блю за использование этой потрясающей способности были забавным приближением к реальным страданиям, с которыми я (Кори) столкнулся, пытаясь сделать это на самом деле... Метахуманы не так просты.
Го смотреть по ссылке.
https://youtu.be/rSR4bmNX5GE
Переливание силы Метахьюманов!
Смотрится как отличный сериал...
А появление Майка Сеймура - просто находка.
Алекса, Икея - все прекрасно.
Описания тоже доставляют:
Блу хочет использовать силу Метахуманов, чтобы выглядеть реалистично для своих зрителей, но все оказывается не так просто! Это определенно метафорический эпизод, который параллелится с реальностью.
Эпизод 02 - Вливание Метахумана
Этот эпизод - дань уважения команде Metahuman из Epic Games за их безумное цифровое человеческое искусство и технологии для нас, смертных. А боль и борьба Блю за использование этой потрясающей способности были забавным приближением к реальным страданиям, с которыми я (Кори) столкнулся, пытаясь сделать это на самом деле... Метахуманы не так просты.
Го смотреть по ссылке.
https://youtu.be/rSR4bmNX5GE
Для тех, кто в танке.
Какое-то время назад, окончательно утомившись перлами гуглоперевода, поставил яндекс.переводчик. Подивился, что он уделывает гугль, видать близость к источнику помогает.
Но недавно открыл для себя DeepL.
Это космос какой-то. Он явно умеет в контексты. Левел ап после гугла и яндекса.
Жалко нет приложения для андроида.
Какое-то время назад, окончательно утомившись перлами гуглоперевода, поставил яндекс.переводчик. Подивился, что он уделывает гугль, видать близость к источнику помогает.
Но недавно открыл для себя DeepL.
Это космос какой-то. Он явно умеет в контексты. Левел ап после гугла и яндекса.
Жалко нет приложения для андроида.
Ну, за ценности.
В посте про последнюю продажу Бипла опять возник вопрос о той самой художественной ценности.
Я всегда притапливал за то, что единственным объективным и (что важно) измеряемым критерием успеха произведения массового искусства типа кино (литературы, изо) являются кассовые сборы (объемы продаж).
Все остальное либо субъективно, либо неизмеряемо.
Однако в эпоху, когда чукчи массово переквалифицируются из читателей в писателей и прочих яростных творцов, продаж на всех, как вы понимаете, не хватит. А подписочные модели и вовсе изничтожают принцип "понравилось, плачу рублем".
За сим на сцену посткапитализьма выходят другие метрики.
Например, читаем: «Игра в кальмара» обошла по популярности легендарную «Игру престолов» на YouTube.
Суммарное количество просмотров видеоконтента, связанного с «Игрой в кальмара» превысило 17 млрд, а число комментариев и реакций достигло 533 млн. В то время как контент, связанный с «Игрой престолов» за десять лет набрал всего 16,9 млрд просмотров и 233 млн комментариев и реакций.
Лайкономика в действии. Измеряемо? Да. Объективно? На больших числах тоже да.
Но конвертацию лайков в деньги по-прежнему крышуют платформы, собирающие контент. Которые, кстати, открещиваются от звания "владеющие контентом", ибо им стразу прилетит за содержание.
Вот чукчи и алкают лайков и чахнут над количеством подписчиков.
NFT-пассионарии и трейдеры-с-реддита регуляно прорывают оборону платформ (но попадают в заложники других платформ) и довольно удачно монетизируют лайки без посредников. Ибо цена на газ ничто по сравнению с комиссией контент-платформ.
А вот как быть чукчам-писателям?
P.S. Да, просится еще одна метрика типа "длительность лайка". Игру лайкают уже 10 лет, а вот вспомнит ли кто-то Кальмара лет через 5.
Но это уже про волатильность и ликвидность. Кто хочет много и сразу, уже давно ушел крипту. А кто-то еще смотрит на акции голубых фишек. Пост с котиком и мемом набирает со скоростью клика, лонгрид про CG и ИИ пробивает рейтинговое дно ударом TLDR сверху вниз.
В посте про последнюю продажу Бипла опять возник вопрос о той самой художественной ценности.
Я всегда притапливал за то, что единственным объективным и (что важно) измеряемым критерием успеха произведения массового искусства типа кино (литературы, изо) являются кассовые сборы (объемы продаж).
Все остальное либо субъективно, либо неизмеряемо.
Однако в эпоху, когда чукчи массово переквалифицируются из читателей в писателей и прочих яростных творцов, продаж на всех, как вы понимаете, не хватит. А подписочные модели и вовсе изничтожают принцип "понравилось, плачу рублем".
За сим на сцену посткапитализьма выходят другие метрики.
Например, читаем: «Игра в кальмара» обошла по популярности легендарную «Игру престолов» на YouTube.
Суммарное количество просмотров видеоконтента, связанного с «Игрой в кальмара» превысило 17 млрд, а число комментариев и реакций достигло 533 млн. В то время как контент, связанный с «Игрой престолов» за десять лет набрал всего 16,9 млрд просмотров и 233 млн комментариев и реакций.
Лайкономика в действии. Измеряемо? Да. Объективно? На больших числах тоже да.
Но конвертацию лайков в деньги по-прежнему крышуют платформы, собирающие контент. Которые, кстати, открещиваются от звания "владеющие контентом", ибо им стразу прилетит за содержание.
Вот чукчи и алкают лайков и чахнут над количеством подписчиков.
NFT-пассионарии и трейдеры-с-реддита регуляно прорывают оборону платформ (но попадают в заложники других платформ) и довольно удачно монетизируют лайки без посредников. Ибо цена на газ ничто по сравнению с комиссией контент-платформ.
А вот как быть чукчам-писателям?
P.S. Да, просится еще одна метрика типа "длительность лайка". Игру лайкают уже 10 лет, а вот вспомнит ли кто-то Кальмара лет через 5.
Но это уже про волатильность и ликвидность. Кто хочет много и сразу, уже давно ушел крипту. А кто-то еще смотрит на акции голубых фишек. Пост с котиком и мемом набирает со скоростью клика, лонгрид про CG и ИИ пробивает рейтинговое дно ударом TLDR сверху вниз.
Forwarded from AI для Всех
This media is not supported in your browser
VIEW IN TELEGRAM
ProsePainter
Создавайте образы, рисуя словами.
ProsePainter сочетает в себе рисование руками с оптимизацией изображения в реальном времени с помощью машинного обучения. Просто скажите, что вы хотите, и выделите нужную область.
🖥 Код
#CLIP #images #multimodal
Создавайте образы, рисуя словами.
ProsePainter сочетает в себе рисование руками с оптимизацией изображения в реальном времени с помощью машинного обучения. Просто скажите, что вы хотите, и выделите нужную область.
🖥 Код
#CLIP #images #multimodal
Forwarded from эйай ньюз
О Нейронном Рендеринге
Что такое Нейронный Рендеринг? Если немного сумбурно, то нейронный рендеринг — это когда мы берем классические алгоритмы синтеза изображений из компьютерной графики и заменяем часть пайплайна нейронными сетями (тупо, но эффективно). Нейронный рендеринг учится рендерить и представлять сцену из одной или нескольких реальных фотографий, имитируя физический процесс камеры, которая фотографирует сцену. Ключевая особенность нейронного рендеринга — разделение процесса фотографирования (т.е. проекции и формирования изображения) и представления трехмерной сцены во время обучения. То есть мы учим отдельное представление трехмерное сцены в явном виде (воксели, облака точек, параметрически заданные поверхности) либо в неявном виде (signed distance function), из которого рендерятся наблюдаемые изображения. Чтобы всё это обучать, важно чтобы весь процесс рендеринга был дифференцируемым.
Может вы не заметили, но тема нейронного рендеринга, включая всякие нерфы-шмерфы, сейчас хайпует в компьютерном зрении. Вы скажете, что нейронный рендеринг — это очень медленно, и вы будете правы. Обычная тренировка на небольшой сцене с ~50 фотографиями занимает у самого быстрого метода около 5.5 часов на одной GPU, но прогресс не стоит на месте и методы очень активно развиваются. Чтобы охватить все недавние наработки в этом направлении, очень советую прочитать этот SOTA репорт "Advances in Neural Rendering".
Что такое Нейронный Рендеринг? Если немного сумбурно, то нейронный рендеринг — это когда мы берем классические алгоритмы синтеза изображений из компьютерной графики и заменяем часть пайплайна нейронными сетями (тупо, но эффективно). Нейронный рендеринг учится рендерить и представлять сцену из одной или нескольких реальных фотографий, имитируя физический процесс камеры, которая фотографирует сцену. Ключевая особенность нейронного рендеринга — разделение процесса фотографирования (т.е. проекции и формирования изображения) и представления трехмерной сцены во время обучения. То есть мы учим отдельное представление трехмерное сцены в явном виде (воксели, облака точек, параметрически заданные поверхности) либо в неявном виде (signed distance function), из которого рендерятся наблюдаемые изображения. Чтобы всё это обучать, важно чтобы весь процесс рендеринга был дифференцируемым.
Может вы не заметили, но тема нейронного рендеринга, включая всякие нерфы-шмерфы, сейчас хайпует в компьютерном зрении. Вы скажете, что нейронный рендеринг — это очень медленно, и вы будете правы. Обычная тренировка на небольшой сцене с ~50 фотографиями занимает у самого быстрого метода около 5.5 часов на одной GPU, но прогресс не стоит на месте и методы очень активно развиваются. Чтобы охватить все недавние наработки в этом направлении, очень советую прочитать этот SOTA репорт "Advances in Neural Rendering".
Forwarded from Neural Shit
This media is not supported in your browser
VIEW IN TELEGRAM