Luma AI бахнула инструмент Photo Reframe для генеративного расширения кадра до 2K под любые форматы

Пользователь свободно задает размер и соотношение сторон целевого холста, а также позиционирует исходный кадр в любой точке композиции. После этого генеративная модель достраивает окружающее пространство в разрешении 2K с сохранением перспективы, светотеневого рисунка, текстур и глубины резкости оригинала.

• Свободное позиционирование исходного кадра на холсте произвольного формата и соотношения сторон
• Генеративная достройка окружения (outpainting) с выводом в разрешении 2K и сохранением геометрии сцены
• Доступность в веб-интерфейсе Luma в виде специализированного плагина Photo Reframe

Источники:
Инструмент Photo Reframe в Luma
Анонс Luma AI в X

@cgevent

Meshy превращает фотографию в рельеф для 3D-печати

Meshy добавила инструмент, который строит объёмный рельеф по одной фотографии. Компания описала рабочий процесс в руководстве от 28 октября. В ноябрьской демонстрации Meshy показала путь от загрузки снимка до готового отпечатка и сообщила, что инструмент доступен всем пользователям.

Рельеф сохраняет плоскую заднюю сторону. В режиме Low Relief детали выступают над основанием неглубоко, что подходит для табличек и бирок. High Relief сильнее поднимает детали переднего плана и лучше подходит для декоративных панелей. В предпросмотре можно настроить глубину, прежде чем сохранять результат.

Для 3D-печати Meshy предлагает экспорт STL, а для гравировки можно выгрузить 16-битную карту глубины. По одному ракурсу инструмент восстанавливает форму лицевой стороны, поэтому на результат влияют освещение снимка и то, насколько хорошо отделяется объект от фона.

Источники

https://www.meshy.ai/tutorials/how-to-make-a-3d-relief

https://help.meshy.ai/en/articles/900000043-how-to-use-meshy-to-design-relief-models

@cgevent

Hume Audio Decision API отвечает на вопросы о звуке напрямую

Hume бахнули Audio Decision API. Он принимает звук и вопрос, а возвращает структурированный ответ с оценкой уверенности. Примеры разработчика: определить число говорящих, найти смех или проверить, прерывают ли собеседники друг друга.

Обычная схема сначала превращает речь в текст, а затем отправляет расшифровку языковой модели. При этом часть информации о паузах, интонации и звуках теряется. API Hume анализирует исходное аудио и подходит как слой принятия решений для голосового агента: распознавание и озвучивание реплик могут оставаться отдельными компонентами.

В записи демонстрации Hume показывает пакетный разбор звонков. Для длинных файлов документация предлагает делить запись на части и выполнять запросы по сегментам. Значение уверенности стоит проверять на собственных данных: оно не гарантирует правильную трактовку эмоций. Доступ к API предлагается запросить на странице продукта.

#Hume #AudioAI #ГолосовыеАгенты

Источники
https://www.hume.ai/blog/introducing-hume-audio-decision-api
https://dev.hume.ai/audio-decisions/docs/overview
https://www.hume.ai/products/decision-model-api

@cgevent

Tripo бахнула агентную среду Tripo Agentic Canvas для автоматизации 3D-пайплайнов под Unreal Engine и 3D-печать

В Tripo Studio завезли режим Tripo Agentic Canvas - визуальное рабочее пространство со встроенным ИИ-агентом, который самостоятельно планирует, связывает в цепочки и выполняет многошаговые задачи 3D-продакшена.

На едином холсте агент выстраивает полный граф обработки от концепта до финального экспорта. В демонстрационных сценариях показаны два сквозных пайплайна: создание игровой модели персонажа с автоматическим риггингом скелета под Unreal Engine, а также подготовка, проверка геометрии и лечение сетки (mesh repair, не ретоп) под физическую 3D-печать.

Собранные на холсте цепочки можно сохранять как переиспользуемые шаблоны (workflow templates) и применять к следующим проектам и сериям ассетов.


Источники:

Tripo Agentic Canvas

@cgevent

Раз уж помянули к ночи Эпиков у Трипо - Огненная новость!

Epic Games бахнули всю библиотеку 3D-ассетов Quixel Megascans бесплатной и разрешила обучать на ней ИИ-модели

Команда Quixel (Epic Games) объявила о возвращении полного бесплатного доступа ко всей библиотеке фотограмметрических 3D-сканов и материалов Quixel Megascans на маркетплейсе Fab, одновременно обновив лицензионное соглашение для разработчиков генеративного ИИ.

Согласно новым правилам, все ассеты из каталогов Quixel Megascans и Megaplants теперь официально разрешено использовать в датасетах для обучения моделей искусственного интеллекта. Тысячи эталонных PBR-текстур и высокодетализированных 3D-объектов.

Перевод всех позиций каталога в бесплатный статус на площадке Fab завершится до 12 ноября. Кроме того, Epic Games автоматически вернет средства(чо?) за все покупки Megascans и пакетов Quixel Bundle, совершенные начиная с 1 января 2025 года, на баланс аккаунтов Epic.

Источники:

Официальный анонс Epic Games

@cgevent

Продолжаем жечь за 3Д: Deemos показала нативный запуск Blender с движками Eevee и Cycles на iPhone Duo в связке с Hyper3D WorldGen

Hyper3D (Deemos) зафлексили работу Блендора с рендер-движками Eevee и Cycles на складном смартфоне iPhone Duo для редактирования сцен, сгенерированных из одного кадра моделью Hyper3D WorldGen.

В демонстрации 3D-окружение сначала создается по одной фотографии через генератор пространственных сцен Hyper3D WorldGen, после чего напрямую открывается на мобильном устройстве в Блендоре. Складной форм-фактор позволяет полноценно управлять камерой, настраивать источники света и переключаться между вьюпортом реального времени Eevee и трассировкой лучей Cycles.

Источники:

X / Hyper3D by Deemos
Hyper3D

@cgevent

Вот это дико круто (для гиков): Google Antigravity добавила нативную поддержку Jupyter Notebook (.ipynb) во встроенный просмотрщик файлов

Antigravity бахнула обновление среды агентной разработки с нативной поддержкой интерактивных блокнотов Jupyter Notebook. Файлы формата .ipynb теперь открываются и рендерятся непосредственно во встроенном окне просмотра файлов без переключения на внешние инструменты.

Встроенный просмотрщик отображает полную структуру вычислительного блокнота: ячейки с исходным кодом и подсветкой синтаксиса, блоки документации в формате Markdown, результирующие таблицы данных, графики, изображения и текстовый вывод выполнения ячеек (cell outputs). Это позволяет разработчикам и исследователям данных проверять результаты экспериментов и артефакты работы ИИ-агентов прямо внутри рабочего пространства Antigravity.

Источники:
Google Antigravity в X

@cgevent

Авториг?, ну, за риггеров и сетаперов?!

Hyper3D (Deemos) бахнули систему автоматического риггинга 3D-моделей с редактированием скелета по текстовым промптам(чо?)

На платформе Hyper3D выкатили инструмент HYPER3D Rigging, который автоматически создает скелет для 3D-моделей и позволяет модифицировать скелет обычными текстовыми командами.

Система поддерживает автоматическую разметку скелета как для гуманоидов (вплоть до отдельных фаланг пальцев), так и для животных и нестандартных фэнтезийных существ. Если базового рига недостаточно, пользователь может дописать промпт - например, попросить добавить кости хвоста или крыльев - и ИИ перестроит иерархию костей и веса скиннинга.

После настройки рига персонажа можно сразу анимировать внутри платформы с помощью библиотеки из более чем 250 готовых пресетов движений и инструментов управления анимацией.

Плюс встроенный каталог из 250+ анимационных пресетов для мгновенной проверки персонажа в движении.

Источники:

Анонс HYPER3D Rigging
Платформа Hyper3D

@cgevent

Krea AI раскрыли свой агентский видеопайплайн на базе Krea MCP, Figma и автономного управления Adobe After Effects

Инженерная команда Krea AI бахнула разбор собственной производственной архитектуры как бы монтажа, в которой связка Claude, сервера Krea MCP и специализированных агентов берет на себя весь цикл от раскадровки в Figma до финальной анимации в Adobe After Effects.

На первом этапе конвейера модель Claude через протокол Krea MCP генерирует и раскладывает визуальную раскадровку (storyboard) непосредственно на холсте Figma. После утверждения сцен в работу вступает специализированный Krea Agent внутри Adobe After Effects, который автоматически расставляет ключевые кадры (keyframes), синхронизирует таймлайн и выстраивает композицию слоев.

На финальной стадии команда самообучающихся агентов полностью берет на себя управление проектом в After Effects, генерируя переходы, процедурные эффекты и рендеринг сложных промо-роликов без ручной покадровой доводки.


Вся эта требуха тут:
Технический разбор в блоге Krea AI

@cgevent

MetaWrap подгоняет сгенерированную 3D-модель под топологию MetaHuman

Еще немного 3D на ночь глядя, что-то сегодня богатый день на 3D.

MetaWrap аддон для Блендора, которое переносит форму сгенерированного персонажа, скана или скульпта на сетку MetaHuman. После этого персонажа можно отправить в Unreal Engine и доработать в MetaHuman Creator.

Аддон расставляет ориентиры и подгоняет шаблонную сетку под голову и тело. Ориентиры можно поправить вручную. Затем инструмент переносит цвет исходной модели на UV-развёртку MetaHuman, позволяет проверить мимику и запечь карты деталей. Стандартная топология сохраняет ожидаемую структуру сетки даже у исходников, созданных разными генераторами.

На сайте указаны Blender 5.0–5.2, Unreal Engine 5.6–5.8 и Windows.

https://www.metawrap.ai/

@cgevent

#Нейропрожарка

«Смена»

Автор: Богдан Рахманкулов

Хронометраж: 3 минуты
Работа над генерациями: 3 дня (не считая проработку идеи и сценария)

Пожилой фермер всю жизнь справлялся сам. Когда здоровье начинает подводить, он впервые просит о помощи взрослую дочь — инженера-агронома. Она возвращается в деревню и устанавливает на старый трактор систему автоматического вождения. Отец сопротивляется: принять помощь для него означает признать, что он больше не справляется. Но дочь настраивает систему на те самые линии, которые он десятилетиями наезжал и от руки записывал в старый блокнот.

Как все началось
Первую полутораминутную версию я сделал летом в Seedance 2.0 для нейрохакатона на Слете аниматоров. По заданию нужно было показать современные агротехнологии — отсюда система для трактора. Но все равно в центре сюжета человеческая история: о том, как принять помощь близкого человека и передать ему дело своей жизни.

Ролик получил серебро. Позже я решил доработать его для AAIFF и собрал трехминутную версию. Все генерации, кроме одного кадра, новые — уже в Seedance 2.5.

Расширенная версия получила Best Animation на Los Angeles AI Film Festival, награду «Лучший ИИ-фильм» на «Крылатом Барсе» и официальные отборы на фестивалях «Ласточка» и «Катарсис». На YouTube мультфильм собрал почти полмиллиона просмотров.

Производство
Персонажей создавал в Soul Cinema с последующей доработкой в Seedream/Nano Banana/GPT. А вот локации заранее я отдельно не разрабатывал — описывал их текстом в промптах. И когда в генерациях появлялось подходящее окружение, делал скриншоты и использовал их дальше.

На вход в Seedance 2.5 почти всегда подавал персонажей, цветовую палитру и несколько отдельно сгенерированных изображений деталей. Через них передавались не только сами предметы, но и стиль анимации, текстуры и общий характер картинки.

Отдельной режиссерской задачей было уйти от привычных нейросетевых ракурсов с центральной композицией. Поэтому в промптах я четко прописывал композицию, много детальных или, наоборот, очень дальних планов.

Звук
В мультфильме нет речи. Технически это упрощает работу, но без слов сложнее сделать историю понятной: нет реплик, которые объяснят все происходящее зрителю.

Все диегетические звуки — из Seedance 2.5 с последующей доработкой в Seed Audio 1.0.

Апскейл: Topaz, с 720p до 1080p.
Монтаж: Adobe Premiere Pro.

Как я уже говорил, в мультфильме один кадр сохранился из первой версии — он сгенерирован в Seedance 2.0. Угадаете в комментариях, какой?

@cgevent

#Сеня_и_Даня_Здесь_Были

Сегодня у нас солирует Даня. И это просто демонстрация того, как можно хорошо делать дипфейки. Речь не о точном переносе лица, а о точном переносе стиля съемки с рук и как будто бы утечки.

А новость сегодня скорее про Сеню.

The Information пишет, что сегодня OpenAI может бахнуть много нового: новую Astra, новую Sol и специализированную модель для кибербезопасности. Формулировка as soon as Friday означает «уже в пятницу» внушает. Но там есть оговорки, типа с возможными задержками.

В сети уже много утечек, на которых видны скриншоты, где фигурирует идентификатор gpt-6.2-astra

Осталось подождать вечера. Точнее ночи. OpenAI обычно что-то бахает во второй половине дня. Плюс разница во времени.

@cgevent