Нейронавт | Нейросети в творчестве

0:19

0:10

0:09

Muse Image и Muse Video

Генераторы изображений и видео "с учетом социального контекста" от Meta (запрещено в РФ)

№2 на Арене по картинкам

Muse Image работает как агент: ищет данные, пишет код, дорабатывает генерации и улучшает результат через вычисления при инференсе. Интегрирован с Muse Spark для совместного планирования.

Возможности:
• Пишет и исполняет код (графики, QR-коды) через RL.
• Использует отрендеренные фигуры для точности.
• Комбинирует код и медиа с Muse Spark для создания GIF, сайтов и игр.

Muse Video на той же базе - высокая визуальная детализация, встроенная аудиодорожка

Muse Image доступен в Meta AI, Instagram Stories, WhatsApp (в отдельных странах). Muse Video - в превью.

Спасибо @BrianMItro @QuantumFast

#t2i #t2v #referencing #i2v #agent #av #t2av

🔥4🫡3👍1

2.15K views06:11

1:04

На ModelScope Civision открыли агентную генерацию изображений с умной маршрутизацией задач (ну и там много чего еще есть)

Агент
• улучшает и стилизует промпты
• подбирает подходящие модели
• ремиксует результаты
• выстраивает путь от идеи к картинке

#agent #online #t2i #referencing #imageediting

👍2

1.52K views10:14

0:18

HOMIE

Фреймворк для персонализации видео с фокусом на взаимодействии человека и объектов. Решает проблему неестественных движений и потери идентичности при генерации сцен.

• генерация сложных взаимодействий с сохранением естественности движений
• точное размещение и удержание логотипов в динамике
• стабильная читаемость текста от кадра к кадру
• согласованность образа при смене ракурса

В основе - MLLM плюс WAN 2.1

Гитхаб
HF

#wan21 #hoi #personalization #i2v #referencing

👍10

1.8K views09:13

ComfyUI StreetView-Loader

Загружает панорамы Google Street View в ComfyUI. Тянет кадры с карт, сразу в пайплайн

• берет панораму по координатам
• выдает отдельные кадры из сферического вида

• работает через API карт
• нужty валидный API‑ключ
• совместим с ComfyUI нодами

#map #location #referencing #comfyui

🔥9👍4😁3

2.15K views11:14

MagicMakeup Transfer

перенос макияжа с референса на лицо без потери идентичности на базе FLUX.1-Kontext-dev

Работает с разными ракурсами и освещением, поддерживает вариативность стилей

Гитхаб
HF

#makeup #i2i #referencing

👍14😁5🔥2

2.45K views13:16

Vidu One-click MV

Vidu релизнул однокликовое создание музыкальных видео из загруженного юзером трека с референсом персонажа

Поют все: люди, мультяшные персонажи, плюшевые игрушки, обычные предметы
Заявлен идеальный липсинк для соло и дуэтов

• готовые шаблоны под разные жанры
• разрешение до 1080p
• скорость генерации пара минут

Попробовать
———
Vidu S1 теперь создает рилтайм видеоперсонажей. Им можно давать команды, шерить экран. Предлагают попробовать в качестве комментатора вашего геймплея

Разрешение 540P, частота кадров 25 FPS в реальном времени (до 42 FPS)

Попробовать

#musicvideo #music2video #lipsync #referencing #realtime #avatar #companion

👍7👎2

2.05K views07:11

ID-V2V

переделывает сцену и свет в видео, личность и действия не трогает, На вход нужно собственно исходное видео и измененный первый кадр

Есть версия с контролем глубины сцены

на базе Wan2.1 (T5, VAE, CLIP), SAM3, DiT + VACE
Для глубины - DAViD и DepthAnything-V2

Гитхаб
HF

#relighting #wan21 #videoediting #referencing #sylize

🔥16👍4

2.07K views06:10

Bernini-Diffusers-v2

Обновился видеогенератор-редактор Bernini на базе wan

Переучили грамотнее, модель стала внимательнее к референсу.

• Правка видео по референсу. v2 точнее следует образцу. Там где раньше плыло, теперь держится крепче

• Генерация по референсу. v2 лучше удерживает внешность

#t2v #videoediting #referencing

1👍11❤1

1.99K views10:14

Автор Inline Studio предложил способ получать консистентного персонажа FLUX без обучения лор

Кэшировать референсы в портативный .char-файл - несколько МБ, в нем референсные картинки персонажа плюс текстовое описание. Сходство дает сам FLUX.2: картинки из файла подаются в нативный multi-ref канал, модель смотрит их напрямую и переносит внешность на новый кадр. Без обучения, внешность рождается из референсов, а не из эмбеддингов

Эмбеддинги не генерируют человека,только скорят результат: SFace дает компактную сигнатуру лица, DINOv2 - общий облик (768 чисел: комплекция, волосы, вид), YuNet - детект и кроп лица. Все это оценивает сходство

Итого: крошечный файл на персонажа в духе textual inversion

Гитхаб

Inline Studio - локальный движок для ИИ-кинопроизводства на нодовом канвасе. Собирает весь пайплайн от мудборда до финального монтажа

#flux2 #personalization #referencing

👍18🔥3💯1

2.58K views09:13

7:59

Media is too big

OrbitSheets

Кастом пак для создания референс-листов персонажей и локаций. Вместо генерации по углам из текста - один камерный пролёт MiniMax H3, из которого вырезаются согласованные ракурсы.

• Character Sheet - турнтейбл из текстового описания: фуллбоди, лицо, профили, спина, крупные планы
• Location Sheet - интерьер и экстерьер с нескольких углов, режимы cut views и continuous move
• Генерация голоса персонажа из того же латента, что и картинка
• Smart frame selector - vision-модель отбирает лучшие кадры и раскладывает в аккуратный лист
• Настройка числа кадров, колонок, отступов и размера

• База MiniMax H3, якорный кадр от Krea2 Turbo

#referencing #comfyui #minimaxh3 #krea2

❤10👍7

2.1K views07:10

smhfacct/Minimax-H3-fl2va-ref2va-hybrid-models · Hugging Face

MiniMax H3 Hybrid (fl2va base + ref2va reference pathway)

Мердж fl2va and ref2va с попыткой сохранить лучшее от обеих

Спрасибо @muxastarikov

#referencing #minimaxH3

huggingface.co

We’re on a journey to advance and democratize artificial intelligence through open source and open science.

👍11❤1

2.13K views08:11

ComfyUI Image Conveyor

Кастом пак - конвейер картинок

Суть: когда генеришь серию изображений - например, референсы персонажа - руками перетаскивать их между нодами и следить, что куда пошло, муторно. Эта нода держит очередь картинок и отдельную полку постоянных референсов.

• Очередь Conveyor - картинки прокручиваются через генерации одна за другой
• Полка Persistent Reference Shelf - до 8 референсов, которые не тратятся и держат персонажа стабильным между кадрами
• Библиотеки персонажей - свой набор картинок на каждого героя, грузишь нужные в один клик
• Папка как библиотека - подпапки, перенос, удаление файлов, драг-н-дроп между папками и полкой

• До 8 постоянных референсов
• Галереи виртуализированы - почти без нагрузки на карту

• В v1.4 допилено под MiniMax H3, где мульти-референс стал важен для консистентности

#referencing #minimaxH3 #comfyui

VK | MAX

👍10❤2

2.07K viewsedited 16:23

4:01

Media is too big

HyCreator

Агентский харнесс от Tencent Hunyuan для генерации длинных фильмов. В авторежиме делает клипы на 10 минут без участия человека, а в любой момент можно переключиться в интерактивное редактирование в реальном времени

- Сквозной авторежим: от задумки до готового фильма без единого вмешательства
- Переключение на живое редактирование в любой момент, можно править прямо по ходу генерации

Ранний доступ по заявке через сайт

#directiong #t2v #i2v #referencing #text2script #text2movie

VK | MAX

👍13🥴2

2.26K views18:22

WithEveryone

Фреймворк от Tencent Hunyuan и Fudan для генерации групповых портретов

До 10 человек в одном кадре, каждый со своим референсом лица

- Планирование до синтеза: модель решает, кто участвует, где стоит каждый и как построена группа, потом рендерит layout как условие
- Layout CoT привязывает личности к лицам, телам и ключевым точкам позы

Модель в процессе обучения, может потом поделятся, а может и нет

#referencing #research

VK | MAX

👍7😁6🥴3

1.8K views08:11

0:37

0:22

Gemini Omni 1.1 Flash

Обновление видео-модели Gemini

Продакшен-релиз с "профессиональными инструментами монтажа"

360p для быстрых черновиков, 4K для финала, растяжка сцен до 40 секунд и плавные переходы между ключевыми кадрами

- Продление сцены до 40 секунд: модель анализирует до 10 секунд контекста (раньше 1 секунду) и достраивает видео без разрыва
- First/Last Frame
- 360p для черновиков: до 60% быстрее и втрое дешевле 720p
- Апскейл до 1080p и 4K для финального рендера
- Видео-референсы: до 3 секунд видео на входе

- #1 на Video Arena

AI Studio
Enterprise Agent Platform

#t2v #i2v #videoediting #referencing #upscale #4k

👍12

1.89K views17:21

Fibo 1.5 (Bria AI)

Дистиллированная версия картинкогенератора FIBO
4-6 шагов вместо 50, без CFG, с улучшенным реализмом и текстурами. Дистилляция DMD + DMD-R поверх оригинального FIBO. При этом сохраняет JSON-native структурированный промптинг

Fibo-Edit-1.5-base - редактирующая с мультиреференсом
Есть турбоверсия

HF - полный зоопарк
ИИ-скилл

#imageediting #json2image #skill #referencing

VK | MAX

👍8🔥4🤔2

1.87K views08:11

Накопилось по #minimaxH3 - часть 26

huggingface.co/Comfy-Org/MiniMax-H3/tree/main/vae - Kijai обновил быстрый видео VAE для H3: 2.8Gb

huggingface.co/WarmBloodAban/Minimax_H3_LoRAs - #LoRA : CGs, HUD, динамическая камера от 3-го/1-го лица как в играх

github.com/xmarre/ComfyUI-Spectrum-MiniMax-H3 - Spectrum v0.2.28: фикс CRLF для Windows. Проверяйте цепочку воркфлоу — у многих неправильно подключена

huggingface.co/silveroxides/MiniMax-H3_tests/tree/main/viggle_lora - экспериментальная Viggle #LoRA : замена персонажа по одному перерисованному кадру + перенос движения #characterswap

huggingface.co/berryber09/MiniMax-H3-Fun-Controlnet-Union-w4a8 - #W4A8 квантизация Fun #ControlNet-Union: 2.13Gb → 1.45Gb

github.com/ShamanicArts/h3-spherical-vae - круговой #VAE для панорамного видео #panorama

huggingface.co/circlestone-labs/MiniMax-H3-Image-Training-Adapter - адаптер для тренировки H3 по картинкам вместо видео без порчи видео-знаний

github.com/cicalooo/ComfyUI-MM-1Frame - извлечение лучшего кадра из генерации: не тупо первый, а авто-выбор из пяти

github.com/caiusy/traffic-motion-studio - симулятор трафика для H3: рисование траекторий, подрезы, ДТП, обгоны, экспорт 2D-референса для погонь

github.com/NyckM/3d-Camera-control-H3-Minimax - depth-контроль камеры для H3 + Viggle Meridian #cameracontrol

github.com/Comfy-Org/ComfyUI/pull/16422 - фикс тайловых швов VAE H3, на подходе к мержу

huggingface.co/neph1/1980s_horror_movies_minimax_h3 - #LoRA хоррор 80-х

huggingface.co/neph1/1950sScifiMinimaxH3 - #LoRA sci-fi 50-х

huggingface.co/Cseti/MiniMax-H3_Ref2VA-LoRA-CrossView-Warp_v1 - #LoRA для смены движения/угла камеры уже готового клипа #V2V

github.com/NyckM/3d-Camera-control-H3-Minimax - v3: depth-контроль камеры + Viggle Meridian

plox-1.github.io/h3-speedups - сравнение методов ускорения H3 с базой. Качество оценено ИИ (Fable 5.1) по 5 кадрам

civitai.com/models/2947601/simply-advanced-minimax-h3 - продвинутый #workflow : 6 картинок, 2 видео, 3 аудио — что угодно как референс/гайд/оба. LLM-пайплайн в 4 стадии (расширение→анализ референсов→креативный план→компиляция), безшовное продолжение, Force Audio. Требует frontend < v1.50.5

huggingface.co/LBH-123-AI/Minimax_h3_latent_Upscaler/tree/main/minimax_h3_latent_upscaler_3d_conv_v1 - новая версия латентного апскейлера с 3D-конволюцией

youtu.be/qyWbsUkxSFs - воркфлоу фейс-свопа #faceswap

reddit.com/r/StableDiffusion/comments/1whbdje/minimax_h3_latents_as_reference/ - латенты как референс: картинка→латент+шум дает вариативность без тяжёлого промптинга. 0.35 — рабочий порог, ниже 0.25 — почти интерпретация модели #ref2va #referencing

👍15❤2

1.75K views10:13

0:48

Media is too big