Media is too big
VIEW IN TELEGRAM
С коллегами на днях обсуждали что технология хромакея устарела, в ней десятилетиями не заметно никакого принципиального прогресса. И вот оказывается Netflix запатентовал улучшенную технологию под названием Magenta Green Screen (MGS)
Фон освещают зелёными светодиодами, а актёров — красными и синими светодиодами. Так зеленый канал превращается в идеальную матирующую маску. Естественный цвет переднего плана восстанавливают ИИ-технологиями. Для этого потребуется дополнительно провести съемки актеров уже без красных и синих светодиодов.
На видео, нам, естественно, показали пример с идеальным задником, чего в реальности не бывает. Хотелось бы посмотреть как MGS справится со складками и стыками хромака, неравномерностью его освещения на больших площадках. А что если доп съемки актеров сделали неграмотно, и нейросетка не может правильно восстановить цвет?
Больше всего, конечно хочется пощупать все это своими руками.
Призываю в пост композеров и операторов
пейпер
Хабр
Видео
#keying #greenscreen
Фон освещают зелёными светодиодами, а актёров — красными и синими светодиодами. Так зеленый канал превращается в идеальную матирующую маску. Естественный цвет переднего плана восстанавливают ИИ-технологиями. Для этого потребуется дополнительно провести съемки актеров уже без красных и синих светодиодов.
На видео, нам, естественно, показали пример с идеальным задником, чего в реальности не бывает. Хотелось бы посмотреть как MGS справится со складками и стыками хромака, неравномерностью его освещения на больших площадках. А что если доп съемки актеров сделали неграмотно, и нейросетка не может правильно восстановить цвет?
Больше всего, конечно хочется пощупать все это своими руками.
Призываю в пост композеров и операторов
пейпер
Хабр
Видео
#keying #greenscreen
This media is not supported in your browser
VIEW IN TELEGRAM
CorridorKey
Нико из Corridor Digital опубликовал модель для извлечения альфы и цвета переднего плана с хромакея на базе VideoMaMA
По зелёному экрану восстанавливает сразу и маску прозрачности, и «чистый» цвет объекта, без зелёного спила.
Как он работает по шагам:
Сначала модель делает concept key: для каждого пикселя решает, относится он к переднему плану или к фону, и строит аккуратную альфу без дыр
Параллельно вторая модель оценивает цвет переднего плана: пытается восстановить «истинный» цвет объекта, вычитая вклад зелёного/синего экрана
Эти два результата комбинируются: берётся альфа с concept key и цвет из второй сети, в итоге получается матт с чистым цветом объекта и ровной прозрачностью по краю, без выеденных областей и зелёной каймы.
До 2048×2048, нужно 22.7 ГБ VRAM
#keying #compositing
Нико из Corridor Digital опубликовал модель для извлечения альфы и цвета переднего плана с хромакея на базе VideoMaMA
По зелёному экрану восстанавливает сразу и маску прозрачности, и «чистый» цвет объекта, без зелёного спила.
Как он работает по шагам:
Сначала модель делает concept key: для каждого пикселя решает, относится он к переднему плану или к фону, и строит аккуратную альфу без дыр
Параллельно вторая модель оценивает цвет переднего плана: пытается восстановить «истинный» цвет объекта, вычитая вклад зелёного/синего экрана
Эти два результата комбинируются: берётся альфа с concept key и цвет из второй сети, в итоге получается матт с чистым цветом объекта и ровной прозрачностью по краю, без выеденных областей и зелёной каймы.
До 2048×2048, нужно 22.7 ГБ VRAM
#keying #compositing
🔥16🤯3👍2👎1
EZ-CorridorKey v1.4.0
Форк отделятора человеков на видео CorridorKey, простая установка и графический интерфейс
В оригинальном CorridorKey только командная строка. Но его последнюю версию уже запускают на 6-8 ГБ VRAM
#keying #compositing #GUI
Нейронавт в MAX
Форк отделятора человеков на видео CorridorKey, простая установка и графический интерфейс
В оригинальном CorridorKey только командная строка. Но его последнюю версию уже запускают на 6-8 ГБ VRAM
#keying #compositing #GUI
Нейронавт в MAX
❤7👍6
This media is not supported in your browser
VIEW IN TELEGRAM
Обновки по кееру CorridorKey
OFX плагин для DaVinci Resolve https://github.com/alexandremendoncaalvaro/CorridorKey-Runtime
Облачный CorridorKey на мощностях добровольцев, посмотрим сколько проживет https://corridorkey.cloud/
На той же платформе - многопользовательсткая студия-ферма для профессиональных пайплайнов https://github.com/JamesNyeVRGuy/CorridorKey-Cloud
Форк с мультиGPU и оптимизациями до ~2-3 GB VRAM https://github.com/99oblivius/CorridorKey-Engine
#davinci #plugin #keying #exr #compositing
OFX плагин для DaVinci Resolve https://github.com/alexandremendoncaalvaro/CorridorKey-Runtime
Облачный CorridorKey на мощностях добровольцев, посмотрим сколько проживет https://corridorkey.cloud/
На той же платформе - многопользовательсткая студия-ферма для профессиональных пайплайнов https://github.com/JamesNyeVRGuy/CorridorKey-Cloud
Форк с мультиGPU и оптимизациями до ~2-3 GB VRAM https://github.com/99oblivius/CorridorKey-Engine
#davinci #plugin #keying #exr #compositing
👍9😁1