Нейрорендер
Тут интернетик все больше проникается идеями нейрорендера.
Основная связка: первый кадр (стиль) в Midjourney или еще где-то.
Потом превиз в Блендоре - хотя смышленые ребята? которые не знают 3Д, просто двигают куколки на столе.
А потом все это на харч Сиденскому.
Но не Сиденсом единым (смотрим след пост).
@cgevent
Тут интернетик все больше проникается идеями нейрорендера.
Основная связка: первый кадр (стиль) в Midjourney или еще где-то.
Потом превиз в Блендоре - хотя смышленые ребята? которые не знают 3Д, просто двигают куколки на столе.
А потом все это на харч Сиденскому.
Но не Сиденсом единым (смотрим след пост).
@cgevent
🔥47❤5👍5
This media is not supported in your browser
VIEW IN TELEGRAM
3DREAL: LTX 2.3 IC-LoRA — 3D render to Photoreal
А вот Нейрорендер-Лора для LTX, причем от Fal.ai, причем опенсорс.
https://huggingface.co/fal/LTX-2.3-3DREAL-LoRA
На входе - 3D / CG / game render - на выходе типафоториал.
Пробовать в облаке тут:
https://fal.ai/models/fal-ai/ltx-2.3-quality/render-to-real
@cgevent
А вот Нейрорендер-Лора для LTX, причем от Fal.ai, причем опенсорс.
https://huggingface.co/fal/LTX-2.3-3DREAL-LoRA
На входе - 3D / CG / game render - на выходе типафоториал.
Пробовать в облаке тут:
https://fal.ai/models/fal-ai/ltx-2.3-quality/render-to-real
@cgevent
1🔥59👍4❤2👎2😱1
Ну, за стримеров, опять.
Алибаба выкатил Wan Streamer v0.1 - это экспериментальная модель Alibaba Wan Team для РЕАЛТАМОВОГО общения с AI-аватаром: она одновременно “видит”, “слышит”, “думает”, говорит и генерирует видео в режиме стрима. Главное отличие от привычных пайплайнов с отдельными ASR, LLM, TTS и анимацией в том, что всё объединено в один Transformer, где текст, аудио и видео обрабатываются как единый поток. По заявлению авторов, модель работает на 25 fps, имеет около 200 мс задержки на стороне модели и примерно 550 мс полной задержки с учётом сети, что позволяет вести почти мгновенный full-duplex диалог - когда агент продолжает воспринимать пользователя даже во время собственного ответа
Кода нет пока, есть сайт проекта:
https://wan-streamer.com/
И статья:
https://huggingface.co/papers/2606.25041
Качество, конечно, пока отстой: демо пока идут в низком разрешении 192p, но показывают важный фичу - переход от “говорящей головы, прикрученной к чат-боту” к настоящей аудио-визуальной интерактивной модели. Авторы делают акцент на том, что задержка и синхронизация здесь решаются не инженерной склейкой модулей, а самой архитектурой: causal encoders/decoders, block-causal attention и thinker–performer deployment на двух GPU позволяют модели стримить восприятие и генерацию как непрерывный процесс.
Какие GPU - не говорят...
Интересно, что у них даже руки есть, не только головы. Но очень нервные руки на первом видео.
@cgevent
Алибаба выкатил Wan Streamer v0.1 - это экспериментальная модель Alibaba Wan Team для РЕАЛТАМОВОГО общения с AI-аватаром: она одновременно “видит”, “слышит”, “думает”, говорит и генерирует видео в режиме стрима. Главное отличие от привычных пайплайнов с отдельными ASR, LLM, TTS и анимацией в том, что всё объединено в один Transformer, где текст, аудио и видео обрабатываются как единый поток. По заявлению авторов, модель работает на 25 fps, имеет около 200 мс задержки на стороне модели и примерно 550 мс полной задержки с учётом сети, что позволяет вести почти мгновенный full-duplex диалог - когда агент продолжает воспринимать пользователя даже во время собственного ответа
Кода нет пока, есть сайт проекта:
https://wan-streamer.com/
И статья:
https://huggingface.co/papers/2606.25041
Качество, конечно, пока отстой: демо пока идут в низком разрешении 192p, но показывают важный фичу - переход от “говорящей головы, прикрученной к чат-боту” к настоящей аудио-визуальной интерактивной модели. Авторы делают акцент на том, что задержка и синхронизация здесь решаются не инженерной склейкой модулей, а самой архитектурой: causal encoders/decoders, block-causal attention и thinker–performer deployment на двух GPU позволяют модели стримить восприятие и генерацию как непрерывный процесс.
Какие GPU - не говорят...
Интересно, что у них даже руки есть, не только головы. Но очень нервные руки на первом видео.
@cgevent
🔥53❤21👍5😱5👎1😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Ну, за эфыксеров!
От смешных эффектов в Pika к нормальным таким крепким VFX в Magnific.
Интересно, как специализированные задачи выделяются в отдельные ИИ-пайплайны у разных провайдеров видео генерации.
Магнитик представил FLOW. Композеры занервничали.
Пробуем тут:
https://www.magnific.com/app/tools/flow/kqM16BU1GT
@cgevent
От смешных эффектов в Pika к нормальным таким крепким VFX в Magnific.
Интересно, как специализированные задачи выделяются в отдельные ИИ-пайплайны у разных провайдеров видео генерации.
Магнитик представил FLOW. Композеры занервничали.
Пробуем тут:
https://www.magnific.com/app/tools/flow/kqM16BU1GT
@cgevent
1👍62🔥26👎9❤7😱1
This media is not supported in your browser
VIEW IN TELEGRAM
Magnific Plugin для Premiere Pro, After Effects, DaVinci Resolve и Final Cut Pro
Еще одна новость от Магнифика. Они вслед за Хиггсами бахнули плагины для монтажек и композа.
Не выходя из софта можно делать generate, upscale, relight, reframe, remove background.
А также добавлять к видео AI music and voice
Упор на том, что все это внутри софта.
Нужен аккаунт Магнифика - именно оттуда будут списываться кредиты.
Магнифик - это агрегатор моделей, у них свой - только апскейлер (с не очень понятной историей с кодом). Поэтому модели могут использоваться разные.
На сайте указана еще поддержка Photoshop and Figma.
Все подробности тут:
https://www.magnific.com/plugins
Пользователи, правда пишут, что пока все сыровато, особенно для Финала и Резолва. И что вроде просто взять кусок на полторы секунды на таймлайне и перегенерить именно эти полторы секунды нельзя.
Надо пробовать.
@cgevent
Еще одна новость от Магнифика. Они вслед за Хиггсами бахнули плагины для монтажек и композа.
Не выходя из софта можно делать generate, upscale, relight, reframe, remove background.
А также добавлять к видео AI music and voice
Упор на том, что все это внутри софта.
Нужен аккаунт Магнифика - именно оттуда будут списываться кредиты.
Магнифик - это агрегатор моделей, у них свой - только апскейлер (с не очень понятной историей с кодом). Поэтому модели могут использоваться разные.
На сайте указана еще поддержка Photoshop and Figma.
Все подробности тут:
https://www.magnific.com/plugins
Пользователи, правда пишут, что пока все сыровато, особенно для Финала и Резолва. И что вроде просто взять кусок на полторы секунды на таймлайне и перегенерить именно эти полторы секунды нельзя.
Надо пробовать.
@cgevent
1👍18❤4
Media is too big
VIEW IN TELEGRAM
#Нейропрожарка
«Треугольник Пенроуза / Triangle of Penrose»
Авторский AI-film project.
Сюжет: Канадский наёмник ЧВК Blackwater/Academi из Торонто отправляется на спецзадание в горы Ирана. Обычная военная операция постепенно превращается в суровое испытание...
Автор: Илья Малахов / Malahov.Tech
Срок: 80+ часов работы
Мой эксперимент в формате кинематографичного Surreal survival action с одним главным героем. Хотел проверить, насколько реально собрать связный AI-ролик продолжительностью более 4х минут с единым персонажем, атмосферой, военным реализмом и сюрреалистической историей. 🎬💀
По инструментам:
Изображения — Nano Banana / ChatGPT / Recraft
Анимация — Seedance 2.0 (тесты в Kling, Runway, Luma и VEO - не пригодилось, ибо так же цензурировано)
Звук — Suno / ElevenLabs
Монтаж — Movavi (к чему привык к сожалению)
Апскейл — Topaz (небольшие куски, база 720р)
Головная боль проекта — консистентность.
Герой, лицо, нож, ножны, кобура, магазины, жилет, шлем, элементы амуниции — всё это приходилось постоянно вшивать от кадра к кадру, учиться и переделывать. В одном из первых референсов изначально была ошибка одного из ракурса рефа лица, поэтому на некоторых крупных планах у героя лицо местами восковое (сразу не заметил, потом было поздно). Многие первые тестовые кадры позже ушли в топку именно из-за отсутствия консистентности. Долгая часть проекта — сценарий, переписывался 6 раз.
Изначально стояла задача добиться максимальной скорости производства, но всё равно вышло долго.
Следующая цель — научиться делать 1 минуту видео примерно за 3 часа: от идеи до финала. Не за счёт упрощения, а за счёт грамотного системного алгоритма действий.
Интересно ваше мнение, на что в следующий раз обратить внимание?🖤🌫
@cgevent
«Треугольник Пенроуза / Triangle of Penrose»
Авторский AI-film project.
Сюжет: Канадский наёмник ЧВК Blackwater/Academi из Торонто отправляется на спецзадание в горы Ирана. Обычная военная операция постепенно превращается в суровое испытание...
Автор: Илья Малахов / Malahov.Tech
Срок: 80+ часов работы
Мой эксперимент в формате кинематографичного Surreal survival action с одним главным героем. Хотел проверить, насколько реально собрать связный AI-ролик продолжительностью более 4х минут с единым персонажем, атмосферой, военным реализмом и сюрреалистической историей. 🎬💀
По инструментам:
Изображения — Nano Banana / ChatGPT / Recraft
Анимация — Seedance 2.0 (тесты в Kling, Runway, Luma и VEO - не пригодилось, ибо так же цензурировано)
Звук — Suno / ElevenLabs
Монтаж — Movavi (к чему привык к сожалению)
Апскейл — Topaz (небольшие куски, база 720р)
Головная боль проекта — консистентность.
Герой, лицо, нож, ножны, кобура, магазины, жилет, шлем, элементы амуниции — всё это приходилось постоянно вшивать от кадра к кадру, учиться и переделывать. В одном из первых референсов изначально была ошибка одного из ракурса рефа лица, поэтому на некоторых крупных планах у героя лицо местами восковое (сразу не заметил, потом было поздно). Многие первые тестовые кадры позже ушли в топку именно из-за отсутствия консистентности. Долгая часть проекта — сценарий, переписывался 6 раз.
Изначально стояла задача добиться максимальной скорости производства, но всё равно вышло долго.
Следующая цель — научиться делать 1 минуту видео примерно за 3 часа: от идеи до финала. Не за счёт упрощения, а за счёт грамотного системного алгоритма действий.
Интересно ваше мнение, на что в следующий раз обратить внимание?🖤🌫
@cgevent
1👎68👍38🔥4❤3😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Rodin 3D флексят новыми фичами
Any guesses what we’re building next?
Интересно наблюдать, что пока взрослые 3Д-софты медленно поднимают веки , шустрые 3Д-генераторы обрастают фичами из 3Д-софтов.
Этакое движение навстречу друг другу.
Но разрыв между стартаперскими веб-интерфейсами и вековыми традициями 3Д-мамонтов с сотнями пунктов меню и фич столь велик, что они никогда не встретятся посередине.
Думаю, что Блендор быстрее всех обрастет интеграцией с генераторами всех цветов и размеров. Хотя освоить интерфейс Блендора дано не каждому.
А вот в толковый риг (с покраской скининга, констрейнами и HumanIK) в веб-интерфейсе я не очень верю.
Хотя..
Покойный Фабле на раз писал симуляторы ткани, частиц, волос для веба. Может и ИИ-Миксамо напишет. Когда воскреснет.
@cgevent
Any guesses what we’re building next?
Интересно наблюдать, что пока взрослые 3Д-софты медленно поднимают веки , шустрые 3Д-генераторы обрастают фичами из 3Д-софтов.
Этакое движение навстречу друг другу.
Но разрыв между стартаперскими веб-интерфейсами и вековыми традициями 3Д-мамонтов с сотнями пунктов меню и фич столь велик, что они никогда не встретятся посередине.
Думаю, что Блендор быстрее всех обрастет интеграцией с генераторами всех цветов и размеров. Хотя освоить интерфейс Блендора дано не каждому.
А вот в толковый риг (с покраской скининга, констрейнами и HumanIK) в веб-интерфейсе я не очень верю.
Хотя..
Покойный Фабле на раз писал симуляторы ткани, частиц, волос для веба. Может и ИИ-Миксамо напишет. Когда воскреснет.
@cgevent
🔥20❤2
Forwarded from Нейронавт | Нейросети в творчестве
This media is not supported in your browser
VIEW IN TELEGRAM
Comfy MCP
Комфиорг запустили бетатест MCP-сервера в комфи
MCP дает ИИ-агенту возможность удобно управлять ComfyUI
• запуск воркфлоу по описанию на естественном языке
• поиск моделей, нод, шаблонов внутри экосистемы
• подхватывание воркфлоу по URL
• повторный прогон сохранённых схем на новых входах
• сотни готовых воркфлоу с автообновлением
Документация
А также запускают бету Comfy CLI и репозиторий Comfy Skill для агентов
#agent #comfyui #mcp #skill #cli
Комфиорг запустили бетатест MCP-сервера в комфи
MCP дает ИИ-агенту возможность удобно управлять ComfyUI
• запуск воркфлоу по описанию на естественном языке
• поиск моделей, нод, шаблонов внутри экосистемы
• подхватывание воркфлоу по URL
• повторный прогон сохранённых схем на новых входах
• сотни готовых воркфлоу с автообновлением
Документация
А также запускают бету Comfy CLI и репозиторий Comfy Skill для агентов
#agent #comfyui #mcp #skill #cli
👍31🔥16❤2
This media is not supported in your browser
VIEW IN TELEGRAM
Аналоговый слоп изобрели задолго до нейрослопа.
Надо же как-то нейтрализовать детей.
А вырастут - сразу будут готовы к нейрослопу.
Похоже, что выросли...
Половина контента в интернетике - уже сгенерирована.
@cgevent
Надо же как-то нейтрализовать детей.
А вырастут - сразу будут готовы к нейрослопу.
Похоже, что выросли...
Половина контента в интернетике - уже сгенерирована.
@cgevent
😁98👍18❤8😱2
Forwarded from CGIT_Vines (Marvin Heemeyer)
This media is not supported in your browser
VIEW IN TELEGRAM
Раз уж мы заговорили про сплаты, то для особо интересующихся рекомендую глянуть вот этот видос от Bogdan Lazar, где он рассказывает вначале немного полезной теории про сплаты, чем они отличаются от привычной полигональной геометрии.
А потом показывает, как можно делать анимацию и вообще редактировать сплат объекты.
Кстати сцену с анимацией мухи которую он показывает в туторе можно бесплатно скачать с гамроада по ссылке под видео.
У него на канале есть еще классный видос по Neural Human Motion from Video in Houdini - как делать анимацию по записанному видео.
@CGIT_Vines
А потом показывает, как можно делать анимацию и вообще редактировать сплат объекты.
Кстати сцену с анимацией мухи которую он показывает в туторе можно бесплатно скачать с гамроада по ссылке под видео.
У него на канале есть еще классный видос по Neural Human Motion from Video in Houdini - как делать анимацию по записанному видео.
@CGIT_Vines
🔥23❤19👍1
Уже завтра (1 июля) ребята из Plurio.ai и Макс Епифанов проведут прямой эфир про то, как построить систему перформанс-маркетинга с AI
Роль перформанс-маркетолога с появлением AI кардинально изменилась
Больше не нужно вручную:
- отсматривать креативы и править ставки в кабинетах
- часами разглядывать дэшборды, чтобы понять, что лучше работает
- принимать решения по Google / Meta / TikTok на интуиции
Сейчас все это можно делегировать AI и ребятам из Plurio. Но прежде чем делегировать, хорошо бы разобраться, как теперь устроен перформанс-маркетинг и что конкретно делать
Ребята разберут по шагам что делать чтобы построить перф-маркетинг с AI
⁃ который не галлюцинирует
⁃ где агент не просто делает аналитику, а сам за вас ходит в рекламные кабинеты и действует там (Plurio уже легко может это и не только)
⁃ чтобы повторить опыт Макса, который сам по себе шикарный — ребята тратят сотни тысяч долларов на рекламу
Еще будет Q&A, поэтому готовьте вопросы!
Ну а теперь к конкретике
На эфире ребята разберут реальные примеры
Вот один спойлер:
Теперь Plurio для каждого анализа считает прогнозный CAC на исторических данных эдсета.
Считается по твоим реальным данным, с учётом продаж, которые дотекают уже после клика, а не по цифрам из кабинета.
Агент с доступом ко всей истории эдсета каждый раз пересчитывает прогноз: не только по сегодняшним цифрам, но и по всей накопленной статистике. По ней же он знает, с какой вероятностью эдсет попадёт в цель.
Дальше прогноз превращается в три автоматических действия:
– эдсет дешевле таргета – повысить бюджет;
– дороже – урезать;
– а креатив, который уже был выключен, после дотёкших продаж задним числом попал в цель – агент видит это в истории и перезапускает.
И это только один из скиллов. Вот всё, что ребята покажут на эфире:
→ Планирование маркетинга на месяц — Максим покажет, как его команда планирует маркетинг на реальных примерах: у каждого канала свои KPI, за которыми команда следит и в которые должна попадать
→ Скиллы и правила под результаты:
- скилл по перераспределению бюджетов, где считается прогнозный CAC
- скилл, который разбивает кампании по группам
- правила, которые бюджетами управляют
→ Скиллы UA-менеджера, которые уже крутятся в работе:
(1) скилл, который показывает аналитику по креативам: что оставить, а что масштабировать
(2) скилл, которой показывает креативы, которые являются кандидатом к перезапуску
(3) скилл по минус словам
→ В конце — зачем это команде и почему схема работает на больших объёмах
На каждый блок одна логика: цель → как делали руками → что работает сейчас → где всё ещё нужен человек
Когда: завтра, в среду, 1 июля, 19:00 МСК
Регистрироваться тут
Роль перформанс-маркетолога с появлением AI кардинально изменилась
Больше не нужно вручную:
- отсматривать креативы и править ставки в кабинетах
- часами разглядывать дэшборды, чтобы понять, что лучше работает
- принимать решения по Google / Meta / TikTok на интуиции
Сейчас все это можно делегировать AI и ребятам из Plurio. Но прежде чем делегировать, хорошо бы разобраться, как теперь устроен перформанс-маркетинг и что конкретно делать
Ребята разберут по шагам что делать чтобы построить перф-маркетинг с AI
⁃ который не галлюцинирует
⁃ где агент не просто делает аналитику, а сам за вас ходит в рекламные кабинеты и действует там (Plurio уже легко может это и не только)
⁃ чтобы повторить опыт Макса, который сам по себе шикарный — ребята тратят сотни тысяч долларов на рекламу
Еще будет Q&A, поэтому готовьте вопросы!
Ну а теперь к конкретике
На эфире ребята разберут реальные примеры
Вот один спойлер:
Теперь Plurio для каждого анализа считает прогнозный CAC на исторических данных эдсета.
Считается по твоим реальным данным, с учётом продаж, которые дотекают уже после клика, а не по цифрам из кабинета.
Агент с доступом ко всей истории эдсета каждый раз пересчитывает прогноз: не только по сегодняшним цифрам, но и по всей накопленной статистике. По ней же он знает, с какой вероятностью эдсет попадёт в цель.
Дальше прогноз превращается в три автоматических действия:
– эдсет дешевле таргета – повысить бюджет;
– дороже – урезать;
– а креатив, который уже был выключен, после дотёкших продаж задним числом попал в цель – агент видит это в истории и перезапускает.
И это только один из скиллов. Вот всё, что ребята покажут на эфире:
→ Планирование маркетинга на месяц — Максим покажет, как его команда планирует маркетинг на реальных примерах: у каждого канала свои KPI, за которыми команда следит и в которые должна попадать
→ Скиллы и правила под результаты:
- скилл по перераспределению бюджетов, где считается прогнозный CAC
- скилл, который разбивает кампании по группам
- правила, которые бюджетами управляют
→ Скиллы UA-менеджера, которые уже крутятся в работе:
(1) скилл, который показывает аналитику по креативам: что оставить, а что масштабировать
(2) скилл, которой показывает креативы, которые являются кандидатом к перезапуску
(3) скилл по минус словам
→ В конце — зачем это команде и почему схема работает на больших объёмах
На каждый блок одна логика: цель → как делали руками → что работает сейчас → где всё ещё нужен человек
Когда: завтра, в среду, 1 июля, 19:00 МСК
Регистрироваться тут
👎36❤7👍2🔥1😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Для гиков. Выложили код FaceAnything
Я в какой-то момент стал сознательно не постить про бесконечные ЧтотоAnything и бесчисленные опенсорсные поделки на базе Wan, например. Канал замусоривается.
Но иногда выхватываю интересное. Вот тут работа Хуавея и университета Мюнхена.
На входе видео, на выходе разные карты и даже облако точек. Конечно для 3д реконструкции это слишком грязно и кипит.
А вот для помощи композу или для модных эффектов "чуть полетаем вокруг" сгодится.
https://kocasariumut.github.io/FaceAnything/
@cgevent
Я в какой-то момент стал сознательно не постить про бесконечные ЧтотоAnything и бесчисленные опенсорсные поделки на базе Wan, например. Канал замусоривается.
Но иногда выхватываю интересное. Вот тут работа Хуавея и университета Мюнхена.
На входе видео, на выходе разные карты и даже облако точек. Конечно для 3д реконструкции это слишком грязно и кипит.
А вот для помощи композу или для модных эффектов "чуть полетаем вокруг" сгодится.
https://kocasariumut.github.io/FaceAnything/
@cgevent
❤13
Молния! Nano Banana 2 Lite
В смысле молниеносная нанабанана: 4 секунды на генерацию.
https://deepmind.google/models/gemini-image/flash-lite/
Nano Banana 2 Lite доступна в Google AI Studio , Gemini API и Gemini Enterprise Agent Platform.
@cgevent
В смысле молниеносная нанабанана: 4 секунды на генерацию.
https://deepmind.google/models/gemini-image/flash-lite/
Nano Banana 2 Lite доступна в Google AI Studio , Gemini API и Gemini Enterprise Agent Platform.
@cgevent
👍29🔥15😁1
Gemini Omni Flash теперь доступна по API
Вот тут подробный релиз про Nana Banana 2 Lite и Omni Flash:
https://blog.google/innovation-and-ai/models-and-research/gemini-models/gemini-omni-flash-nano-banana-2-lite/
Gemini Omni Flash доступна в Google AI Studio, Gemini API и Gemini Enterprise Agent Platform. Omni Flash также доступен в приложении Gemini и Google Flow.
Интересно, что по ценам на лайтовую Банану.
Апдейт: цена $0.034 за 1K image
Апдейт: Для Omni пока по апи до 10 секунд, audio references и scene extension в API ещё не поддерживаются, цена $0.10 за секунду видео, примерно как у Veo 3.1 Fast.
Вот тут подробный релиз про Nana Banana 2 Lite и Omni Flash:
https://blog.google/innovation-and-ai/models-and-research/gemini-models/gemini-omni-flash-nano-banana-2-lite/
Gemini Omni Flash доступна в Google AI Studio, Gemini API и Gemini Enterprise Agent Platform. Omni Flash также доступен в приложении Gemini и Google Flow.
Интересно, что по ценам на лайтовую Банану.
Апдейт: цена $0.034 за 1K image
Апдейт: Для Omni пока по апи до 10 секунд, audio references и scene extension в API ещё не поддерживаются, цена $0.10 за секунду видео, примерно как у Veo 3.1 Fast.
❤19🔥8