Накопилось по #minimaxH3 - часть 35
MiniMax-H3 Prompt Rewriter 0.32.0 от @Aleks_101- поддержка #RefMod : готовый референс персонажа (внешность, голос) из файла. Нода RefMod с двумя выходами и strength, Reference Encode вместо связки слотов, шаблон «RefMods to video». RefMod токены из файлов HF, замедляет генерацию. Формат из пака ComfyUI-MiniMaxH3Mod
github.com/tazmannner/ComfyUI-H3-RelayHires - #upscale аниме 0.5 → 2Mp, ~4x быстрее нативного. Полный первый прогон на 20 шагов, турбо LoRA не нужна, 8 примеров воркфлоу
civitai.com/articles/37544/fix-blurry-faces-in-minimax-h3-videos-with-comfyui-face-refinement-low-vram-workflow - фикс мыльных лиц: Face Refiner изолирует лица, второй прогон с денойзом 0.4, SelfLift + VEDA. На 3060: генерация 0.6Mp/8 шагов ~30 мин, рефайн ~24 мин
github.com/jeet0733/Rapid-H3 - ускорение H3 в 3-5 раз на DGX Spark (GB10)
github.com/bgstratt/seriesmith - seriesmith: длинные видео вокруг сценария, не шота. 280-300 шотов на эпизод. Просмотр + пометки на ре-рендер (M/N), правки через LLM. Касты, места, штуки-шиты и плеи-платы рисует сам, рендерит каждый шот, склеивает. 12 видео- и 16 картинко-моделей на своём ComfyUI (H3, FastH3, LTX 2.5, Wan, FLUX, Krea, Qwen, Z-Image, MOSS, Fibo), 26 хостовых через Router
youtube.com/watch?v=wLSUEQ2l3EE - сохраняем качество картинки и голоса при ускорении генерации
huggingface.co/FusionCow/Sulphur-3 - #NSFW файнтюн от комьюнити
github.com/spacesimeco-hue/Chain-Motion-AI-Video-Editor - FrameForge: десктоп-апп для длинных фильмов на H3. Таймлайн, авто-сценарий через LLM, управление референсами, позостудио, генератор голосовых клипов #OpenSourceHiggsfield
github.com/roycho87/clown_context_suite - режет деградацию вдвое. К обычному motion context тащит не только конец цепи кадров, но и первый «домино»-кадр, чтобы картинка оставалась хорошей. Отключать при смене сцены, менять source latent на начало новой сцены
MiniMax-H3 Prompt Rewriter 0.32.0 от @Aleks_101- поддержка #RefMod : готовый референс персонажа (внешность, голос) из файла. Нода RefMod с двумя выходами и strength, Reference Encode вместо связки слотов, шаблон «RefMods to video». RefMod токены из файлов HF, замедляет генерацию. Формат из пака ComfyUI-MiniMaxH3Mod
github.com/tazmannner/ComfyUI-H3-RelayHires - #upscale аниме 0.5 → 2Mp, ~4x быстрее нативного. Полный первый прогон на 20 шагов, турбо LoRA не нужна, 8 примеров воркфлоу
civitai.com/articles/37544/fix-blurry-faces-in-minimax-h3-videos-with-comfyui-face-refinement-low-vram-workflow - фикс мыльных лиц: Face Refiner изолирует лица, второй прогон с денойзом 0.4, SelfLift + VEDA. На 3060: генерация 0.6Mp/8 шагов ~30 мин, рефайн ~24 мин
github.com/jeet0733/Rapid-H3 - ускорение H3 в 3-5 раз на DGX Spark (GB10)
github.com/bgstratt/seriesmith - seriesmith: длинные видео вокруг сценария, не шота. 280-300 шотов на эпизод. Просмотр + пометки на ре-рендер (M/N), правки через LLM. Касты, места, штуки-шиты и плеи-платы рисует сам, рендерит каждый шот, склеивает. 12 видео- и 16 картинко-моделей на своём ComfyUI (H3, FastH3, LTX 2.5, Wan, FLUX, Krea, Qwen, Z-Image, MOSS, Fibo), 26 хостовых через Router
youtube.com/watch?v=wLSUEQ2l3EE - сохраняем качество картинки и голоса при ускорении генерации
huggingface.co/FusionCow/Sulphur-3 - #NSFW файнтюн от комьюнити
github.com/spacesimeco-hue/Chain-Motion-AI-Video-Editor - FrameForge: десктоп-апп для длинных фильмов на H3. Таймлайн, авто-сценарий через LLM, управление референсами, позостудио, генератор голосовых клипов #OpenSourceHiggsfield
github.com/roycho87/clown_context_suite - режет деградацию вдвое. К обычному motion context тащит не только конец цепи кадров, но и первый «домино»-кадр, чтобы картинка оставалась хорошей. Отключать при смене сцены, менять source latent на начало новой сцены
❤10👍6
Video Diffusion Avatars
Трехмерный аватар по одной фотографии: видео-диффузионная модель дообучена так, чтобы можно было отдельно крутить камеру, мимику и позу верхней части тела
Выученные коды мимики на деле сильно зависят от ракурса, и модель это компенсирует, иначе аватар ехал бы вместе с камерой. Тренировка на тройках камер тоже из этой логики: хочешь согласованности, покажи модели один момент с трех точек
• Камера идет по любой траектории вокруг головы, вплоть до полного облета
• Мимика задается отдельным управляющим сигналом, вплоть до языка и рта
• Поза корпуса управляется независимо
• Одна картинка на входе, работает и на нарисованных персонажах
• Тени, отражения и преломления появляются сами, без явного рендера
Обучено на WAN-Animate-14B
Ускоренная версия держит 3000 кадров без распада и выдает почти 5 fps при 288 на 512
github.com/SimonGiebenhain/video-diffusion-avatars/
Спасибо @m_franz
#avatar #image2avatar
Трехмерный аватар по одной фотографии: видео-диффузионная модель дообучена так, чтобы можно было отдельно крутить камеру, мимику и позу верхней части тела
Выученные коды мимики на деле сильно зависят от ракурса, и модель это компенсирует, иначе аватар ехал бы вместе с камерой. Тренировка на тройках камер тоже из этой логики: хочешь согласованности, покажи модели один момент с трех точек
• Камера идет по любой траектории вокруг головы, вплоть до полного облета
• Мимика задается отдельным управляющим сигналом, вплоть до языка и рта
• Поза корпуса управляется независимо
• Одна картинка на входе, работает и на нарисованных персонажах
• Тени, отражения и преломления появляются сами, без явного рендера
Обучено на WAN-Animate-14B
Ускоренная версия держит 3000 кадров без распада и выдает почти 5 fps при 288 на 512
github.com/SimonGiebenhain/video-diffusion-avatars/
Спасибо @m_franz
#avatar #image2avatar
🔥11❤1
This media is not supported in your browser
VIEW IN TELEGRAM
IllusionFX
Композер в свободное время написал софт для композитинга. Именно написал, а не навайбкодил
• Нодовый граф плюс таймлайн со слоями: сборка нодами, дальше резка, трим и анимация кейфреймами или выражениями
• Ускорение на видеокарте и честный 32-битный float по всему пайплайну
• Поддержка OpenColorIO
• Многоканальные #EXR
• Встроенные ИИ-инструменты вроде рото и трекинга, работают локально, без загрузки материала
• Эффекты на GPU: мердж, кейер, зерно, блюр, глоу, цветокор, дисторшн и прочее
• SDK для своих эффектов
#Windows #MacOS #Linux
В планах редактор графа и 3D-композитинг, список открыт, предложения собирают в Discord
discord.gg/DZv2W6VuN6
#vfx #compositing #desktop
MAX
Композер в свободное время написал софт для композитинга. Именно написал, а не навайбкодил
• Нодовый граф плюс таймлайн со слоями: сборка нодами, дальше резка, трим и анимация кейфреймами или выражениями
• Ускорение на видеокарте и честный 32-битный float по всему пайплайну
• Поддержка OpenColorIO
• Многоканальные #EXR
• Встроенные ИИ-инструменты вроде рото и трекинга, работают локально, без загрузки материала
• Эффекты на GPU: мердж, кейер, зерно, блюр, глоу, цветокор, дисторшн и прочее
• SDK для своих эффектов
#Windows #MacOS #Linux
В планах редактор графа и 3D-композитинг, список открыт, предложения собирают в Discord
discord.gg/DZv2W6VuN6
#vfx #compositing #desktop
MAX
👍17❤3
mcpbytes-image-to-3d
Бесплатная обвязка над Tencent Hunyuan3D 2.1: одна картинка на входе — готовая 3D-модель GLB с #PBR-текстурой на выходе. #CLI + #MCP сервер
- вырезает объект, достраивает форму, красит metallic-roughness карты
- доводит меш до usable вида: сварен, очищен от мусора, стоит на земле в unit size
- на выходе GLB, сжатая web-версия с Draco и preview с шести сторон
- вызывается из Claude, Cursor, VS Code как MCP-инструмент
- нет своего GPU —
- один seed и картинка = один и тот же файл байт в байт
Нужно NVIDIA от 32 ГБ, CUDA 12.8, ~19 ГБ под веса, моделирование 3–6 минут
#3d #imageto3d
MAX
Бесплатная обвязка над Tencent Hunyuan3D 2.1: одна картинка на входе — готовая 3D-модель GLB с #PBR-текстурой на выходе. #CLI + #MCP сервер
- вырезает объект, достраивает форму, красит metallic-roughness карты
- доводит меш до usable вида: сварен, очищен от мусора, стоит на земле в unit size
- на выходе GLB, сжатая web-версия с Draco и preview с шести сторон
- вызывается из Claude, Cursor, VS Code как MCP-инструмент
- нет своего GPU —
--cloud отправит job на серверы MCPBytes за кредиты- один seed и картинка = один и тот же файл байт в байт
Нужно NVIDIA от 32 ГБ, CUDA 12.8, ~19 ГБ под веса, моделирование 3–6 минут
#3d #imageto3d
MAX
👍4😱3🫡1
ffmpeg-skill
Скилл видеомонтажа для ИИ-агентов
Режет видео локальным FFmpeg и проверяет результат.
- 42 структурированных инструмента: нарезка, склейка с переходами, чистка тишины и пауз, субтитры и karaoke, кроп под вертикаль, HDR→SDR, LUT, обработка звука, loudness, мультикам, экспорт под площадки
- сначала probe снимает метрики файла, монтаж идёт по факту, без угадывания; после — проверка и контактный лист
- субтитры в безопасной зоне: под шаблоны TikTok, Reels, Shorts над кнопками интерфейса
- локально, без облака, без API-ключей, кроме ffmpeg и python не нужно ничего
Ставишь
#skill #videoediting
MAX
Скилл видеомонтажа для ИИ-агентов
Режет видео локальным FFmpeg и проверяет результат.
- 42 структурированных инструмента: нарезка, склейка с переходами, чистка тишины и пауз, субтитры и karaoke, кроп под вертикаль, HDR→SDR, LUT, обработка звука, loudness, мультикам, экспорт под площадки
- сначала probe снимает метрики файла, монтаж идёт по факту, без угадывания; после — проверка и контактный лист
- субтитры в безопасной зоне: под шаблоны TikTok, Reels, Shorts над кнопками интерфейса
- локально, без облака, без API-ключей, кроме ffmpeg и python не нужно ничего
Ставишь
npx ffmpeg-skill, пишешь «убери паузы, добавь субтитры, сделай вертикаль» — агент собирает цепочку сам и отчитывается#skill #videoediting
MAX
😱6❤3👍3🔥2
FrameForge
Генерация картинок на базе видеомодели: условие и цель трактуются как кадры виртуального видео, а модель сама решает, как далеко они стоят и как перетекают друг в друга. LoRA поверх HunyuanVideo-1.5
- один чекпойнт на три задачи: генерация по референсу объекта, Canny→изображение, правка по инструкции
- MoTE — роутер выбирает temporal RoPE-эксперта с виртуальным интервалом 17/69/121 кадров, это «как далеко»
- CoTR — reasoning-латент связывает условие с целью через промежуточное состояние, это «как меняется»
- 512×512 на входе и выходе
Лучший overall на DreamBench среди сравниваемых. На COCO первая по SSIM, но FID ниже у ControlNet. На GEdit-Bench сильнейшая из открытых в редактировании, особенно в движении и пространственных правках; закрытые GPT-4o и Gemini 2.5 впереди
github.com/Lyne1/FrameForge
huggingface.co/lyneeeeeeeee/FrameForge
#t2i
MAX
Генерация картинок на базе видеомодели: условие и цель трактуются как кадры виртуального видео, а модель сама решает, как далеко они стоят и как перетекают друг в друга. LoRA поверх HunyuanVideo-1.5
- один чекпойнт на три задачи: генерация по референсу объекта, Canny→изображение, правка по инструкции
- MoTE — роутер выбирает temporal RoPE-эксперта с виртуальным интервалом 17/69/121 кадров, это «как далеко»
- CoTR — reasoning-латент связывает условие с целью через промежуточное состояние, это «как меняется»
- 512×512 на входе и выходе
Лучший overall на DreamBench среди сравниваемых. На COCO первая по SSIM, но FID ниже у ControlNet. На GEdit-Bench сильнейшая из открытых в редактировании, особенно в движении и пространственных правках; закрытые GPT-4o и Gemini 2.5 впереди
github.com/Lyne1/FrameForge
huggingface.co/lyneeeeeeeee/FrameForge
#t2i
MAX
👍4
GLOW-FM
Усиление темных фото за один проход
- замороженный Tiny-VAE сжимает картинку в компактный латент, HDiT переносит его к нормальной экспозиции одной оценкой
- обучен через Terminal Velocity Matching — впервые применён к восстановлению изображений
- три размера: малый — 34 GFLOPs и 9.1M параметров, 53.8 мс на 1024×1024
- лучшее кросс-датасетное обобщение: на MEF, VV, NPE, LIME и DICM NIQE ниже, чем у сравниваемых методов
github.com/arm-research/AAIR-GLOW-FM
#iamgeenhance #enhance
MAX
Усиление темных фото за один проход
- замороженный Tiny-VAE сжимает картинку в компактный латент, HDiT переносит его к нормальной экспозиции одной оценкой
- обучен через Terminal Velocity Matching — впервые применён к восстановлению изображений
- три размера: малый — 34 GFLOPs и 9.1M параметров, 53.8 мс на 1024×1024
- лучшее кросс-датасетное обобщение: на MEF, VV, NPE, LIME и DICM NIQE ниже, чем у сравниваемых методов
github.com/arm-research/AAIR-GLOW-FM
#iamgeenhance #enhance
MAX
❤6🔥5👍4
Musio Studio
Приложение для написания музыки с тысячами живых записанных инструментов — оркестры, хоры, солисты. В целом это не ИИ, но есть прием команд в режиме чата, а также ряд умных фич которых нет во взрослых DAW
- оркестровые библиотеки, записанные на киношных сценах, включая CineStrings на MGM Scoring Stage
- переключение артикуляций кликом: legato, spiccato, pizzicato
- динамика и экспрессия рисуются под нотами, без MIDI-клавиатуры играешь клавишами компьютера
- видео на таймлайне по timecode, hit-маркеры, streamer и punch для синхронизации
- мастеринг под целевую громкость площадок: −14 LUFS для стриминга и дальше
- импорт MIDI или аудио — каждую партию одевают в звуки Musio
- до 512 треков, все ядра компьютера
Есть стэндэлон и плагин AU/VST3/AAX
Бесплатно с аккаунтом, 21 звук на старте
Complete — $15/мес. Mac, Windows, Linux
youtube.com/watch?v=5VJK9X6hTfQ
#musicediting #DAW
MAX
Приложение для написания музыки с тысячами живых записанных инструментов — оркестры, хоры, солисты. В целом это не ИИ, но есть прием команд в режиме чата, а также ряд умных фич которых нет во взрослых DAW
- оркестровые библиотеки, записанные на киношных сценах, включая CineStrings на MGM Scoring Stage
- переключение артикуляций кликом: legato, spiccato, pizzicato
- динамика и экспрессия рисуются под нотами, без MIDI-клавиатуры играешь клавишами компьютера
- видео на таймлайне по timecode, hit-маркеры, streamer и punch для синхронизации
- мастеринг под целевую громкость площадок: −14 LUFS для стриминга и дальше
- импорт MIDI или аудио — каждую партию одевают в звуки Musio
- до 512 треков, все ядра компьютера
Есть стэндэлон и плагин AU/VST3/AAX
Бесплатно с аккаунтом, 21 звук на старте
Complete — $15/мес. Mac, Windows, Linux
youtube.com/watch?v=5VJK9X6hTfQ
#musicediting #DAW
MAX
👍12❤1
Отдельно порекомендую канал, который сам читаю — Мысли Рвачева, @rvnikita_blog
Никита работает с ИИ в лаборатории компании из Fortune 100, сам пишет код и собирает агентов. Пишет не про то, что вышло, а про то, что это меняет в работе: разбирает релизы с реальными цифрами и ценами, показывает, как вайбкодить что-то сложнее скрипта, и честно говорит, когда модель не стоит поднятого вокруг неё шума.
Нам в графике это полезно с другой стороны: когда понимаешь, как эти штуки устроены изнутри, проще решать, какой инструмент тащить в пайплайн, а какой окажется очередным хайпом.
https://t.me/rvnikita_blog
Никита работает с ИИ в лаборатории компании из Fortune 100, сам пишет код и собирает агентов. Пишет не про то, что вышло, а про то, что это меняет в работе: разбирает релизы с реальными цифрами и ценами, показывает, как вайбкодить что-то сложнее скрипта, и честно говорит, когда модель не стоит поднятого вокруг неё шума.
Нам в графике это полезно с другой стороны: когда понимаешь, как эти штуки устроены изнутри, проще решать, какой инструмент тащить в пайплайн, а какой окажется очередным хайпом.
https://t.me/rvnikita_blog
Telegram
Мысли Рвачева
Авторский контент Рвачева Никиты (@rvnikita): о чем думаю, мечтаю, что читаю.
👍2👎2😁1🤔1
ComfyUI-LATO2
Нода #ComfyUI для LATO.2: dense-меши TRELLIS.2 и Hunyuan3D превращает в низкополигональные
- LATO.2 не decimator: сам расставляет вершины и предсказывает связность, рёбра идут по форме
- нода пересобирает грани в замкнутую поверхность — сырой вывод складывает их слоями и оставляет дыры
- voxel flood fill вычищает невидимую внутреннюю оболочку TRELLIS.2
- позиция и масштаб совпадают со входом, меш встает на его место
#3d #textto3d #imageto3d #lowpoly
MAX
Нода #ComfyUI для LATO.2: dense-меши TRELLIS.2 и Hunyuan3D превращает в низкополигональные
- LATO.2 не decimator: сам расставляет вершины и предсказывает связность, рёбра идут по форме
- нода пересобирает грани в замкнутую поверхность — сырой вывод складывает их слоями и оставляет дыры
- voxel flood fill вычищает невидимую внутреннюю оболочку TRELLIS.2
- позиция и масштаб совпадают со входом, меш встает на его место
#3d #textto3d #imageto3d #lowpoly
MAX
🔥5🤷♂1👍1
This media is not supported in your browser
VIEW IN TELEGRAM
L3G-World
Генератор интерактивных 3D-миров в рилтайме из одной картинки.
Латентная 3D-гауссова память L3G-Mem растет по размеру исследованной сцены, а не по длине сгенерированного потока
- генерит минутные видео с сохранением консистентности сцены при повторных визитах
- гауссовы примитивы хранят VAE-латенты, память рендерится прямо в latent-пространство DiT — без RGB-рендеринга и обратного кодирования
- новые области плодят гауссины, старые уточняются при возвращении камеры
- старт: одно изображение, несколько ракурсов, якорные кадры в нужных позах, плюс онлайновая реконструкция видео потока
- обновление памяти 47 FPS на A100, генерация мира 9 FPS
До 38.6х меньше примитивов и 359х быстрее чтение памяти против самого экономичного 3D-memory бейзлайна. Относительно Gaussian-базы NeoVerse — в сотни раз легче. #SOTA по качеству и долгосрочной консистентности
github.com/cvlab-kaist/L3G-World - код/веса ждем
#world #image2world #gaussian
Генератор интерактивных 3D-миров в рилтайме из одной картинки.
Латентная 3D-гауссова память L3G-Mem растет по размеру исследованной сцены, а не по длине сгенерированного потока
- генерит минутные видео с сохранением консистентности сцены при повторных визитах
- гауссовы примитивы хранят VAE-латенты, память рендерится прямо в latent-пространство DiT — без RGB-рендеринга и обратного кодирования
- новые области плодят гауссины, старые уточняются при возвращении камеры
- старт: одно изображение, несколько ракурсов, якорные кадры в нужных позах, плюс онлайновая реконструкция видео потока
- обновление памяти 47 FPS на A100, генерация мира 9 FPS
До 38.6х меньше примитивов и 359х быстрее чтение памяти против самого экономичного 3D-memory бейзлайна. Относительно Gaussian-базы NeoVerse — в сотни раз легче. #SOTA по качеству и долгосрочной консистентности
github.com/cvlab-kaist/L3G-World - код/веса ждем
#world #image2world #gaussian
👍7