Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.65K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
ComfyUI-PuLID-Flux2
Вышла версия персонализатора под Flux.2[klein]

Вам понадобятся
InsightFace AntelopeV2
и
pulid_flux_v0.9.1.safetensors

Полную инструкцию читайте на гитхабе

воркфлоу

Спасибо @m_franz

#personalization #referencing #comfyui #workflow

Нейронавт в MAX
👍7
LumosX: Relate Any Identities with Their Attributes for Personalized Video Generation

Персонализатор видео на базе Wan2.1-T2V от авторов релайтера UniLumos

Применяет мультимодальные языковые модели, чтобы понять связи между персонажами и их характеристиками

Гитхаб
HF

#personalization #reasoning #wan21
👍4🌚2
ComfyUI-Flux2Klein-Enhancer

Кастом ноды для работы с референсами в Flux2Klein

Автор заявляет сохранение идентичности без лоры

Метод балансирует влияние текста и референса

В паке две ноды: FLUX.2 Klein Ref Latent Controller и FLUX.2 Klein Text/Ref Balance

Воркфлоу

#comfyui #klein #personalization #referencing #workflow
👍11🔥3
PersonaVLM

Персонализация общей VLM под индивидуального юзера

— запоминает, как меняются предпочтения пользователя

— подстраивает ответы под личность пользователя

— умеет вспоминать информацию и учитывать контекст

— совмещает рассуждение и поиск информации при генерации ответов

— обновляет «память» и адаптируется к изменениям в личности пользователя

Гитхаб
HF - прикручено к Qwen2.5-VL-7B-Instruct
GGUF

#vlm #personalization #memory
👍3
StyleID

Энкодер стиля для генерации / стилизации изображений с лицами +датасет

не подходит для фото с несколькими лицами, лучше работает с центрированными портретами

Гитхаб
HF

#stylize #styletransfer #personalization
👍2🤔2🥴2
HiDream‑O1‑Image

Открытая модель для работы с изображениями, 8 млрд параметров.

разрешение до 2048 × 2048, рейтинг #8 в Artificial Analysis Text to Image Arena. До сих пор скрывался под псевдонимом Peanut

• генерирует изображения по тексту (text‑to‑image)
• редактирует картинки по инструкции
• персонализирует объекты — сохраняет «личность» в новых сценах
• работает с длинными текстами и сложной раскладкой
• создаёт раскадровки
• обрабатывает мультилингвальный текст на изображениях

Гитхаб: https://github.com/HiDream-ai/HiDream-O1-Image

Веса: huggingface.co/HiDream-ai/HiDream-O1-Image

Полчаса потратил на попытку скачать картинку на мобилке так что извините, скоиншот

#imageediting #personalization #t2i
👍13❤1
DomainShuttle


Реалистичная и стилизованная персонализация видео.
Видеогенерация с заданным объектом в заданном домене. Баланс точности и редактируемости на базе Wan2.2-T2V-A14B (к WAN2.1 тоже прикрутили)

Для работы нужны веса и WAN и самого DS, у последнего highnoise + lownoise весят по 35ГБ. Но опыт оптимизации WAN у нас же есть уже, да?

Гитхаб
HF

#personalization #t2v #referencing #wan22
👍5🔥2👎1
Krea 2 Identity Edit LoRA

лора #krea2 для персонализации и редактирования

Работает в комфи через ComfyUI-Krea2Edit

#personalization #lora #comfyui #imageediting
👍8🔥4
Media is too big
VIEW IN TELEGRAM
Vidu S1

генерация видео с голосовым управлением в реальном времени от Vidu

- Управление голосом: можно генерировать и менять видео через голосовые команды.
- Бесконечный стрим: видео генерируется непрерывно
- Разрешение 540p, 25 FPS на стандартных GPU

Попробовать
API

#realtime #avatar #personalization #streaming #lipsync
👍6❤1
This media is not supported in your browser
VIEW IN TELEGRAM
HOMIE

Фреймворк для персонализации видео с фокусом на взаимодействии человека и объектов. Решает проблему неестественных движений и потери идентичности при генерации сцен.

• генерация сложных взаимодействий с сохранением естественности движений
• точное размещение и удержание логотипов в динамике
• стабильная читаемость текста от кадра к кадру
• согласованность образа при смене ракурса

В основе - MLLM плюс WAN 2.1

Гитхаб
HF

#wan21 #hoi #personalization #i2v #referencing
👍10
FedorAiToolkit

Форк AI Toolkit

Автор добавил в него SAM 3D Body Scanning, чтобы обучать лоры не только на лицо но и на форму тела

Процесс обучения состоит из двух этапов:
1. Обычное обучение LoRA/LoKr на фотографиях пользователя (около 200 шагов)
2. Второй этап: модель генерирует изображения, SAM 3D сканирует их, и обучение подгоняет LoRA под отсканированное тело и лицо

Это позволяет добиться большего сходства с реальным человеком в полных портретах. Время обучения на RTX 5090 около 30 минут для лица и около 60 минут с учетом тела

Реализовано для Krea 2

Есть еще похожий проект BodyRec - помогает лоре запомнить пропорции тела

#finetuning #personalization #krea2
🔥12
Автор Inline Studio предложил способ получать консистентного персонажа FLUX без обучения лор

Кэшировать референсы в портативный .char-файл - несколько МБ, в нем референсные картинки персонажа плюс текстовое описание. Сходство дает сам FLUX.2: картинки из файла подаются в нативный multi-ref канал, модель смотрит их напрямую и переносит внешность на новый кадр. Без обучения, внешность рождается из референсов, а не из эмбеддингов

Эмбеддинги не генерируют человека,только скорят результат: SFace дает компактную сигнатуру лица, DINOv2 - общий облик (768 чисел: комплекция, волосы, вид), YuNet - детект и кроп лица. Все это оценивает сходство

Итого: крошечный файл на персонажа в духе textual inversion

Гитхаб

Inline Studio - локальный движок для ИИ-кинопроизводства на нодовом канвасе. Собирает весь пайплайн от мудборда до финального монтажа

#flux2 #personalization #referencing
👍18🔥3💯1
Photoshoot

Набор нод для фотосета в #ComfyUI: описываешь персонажа раз и навсегда (44 поля - тело, лицо, волосы, макияж, одежда), а потом заряжаешь серию до 40 кадров с разным кадрированием, позами, выражением и соотношением сторон. Персонаж не дрейфует

Шесть осей: камера (7 кадрирований), поза (18 поз + положение в комнате), выражение (90 настроений в 9 группах), фокус, соотношение сторон и шум. Каждую ось можно выключить или ограничить семьёй — «только стоячие позы», «только спокойные настроения», «только крупные планы». Серия считается по комбинациям, а не по случайным сидам — 7-й кадр всегда одинаковый, серию можно продлить позже, ничего не повторится

Важный нюанс: с расстоянием промпт ужимается. Для общего плана модель не получает описание помады и подводки — токены, неразрешимые с такого расстояния, все равно стягивают композицию на голову

Установка через ComfyUI Manager, искать Photoshoot

#personalization
👍13❤3
Fizgig v6.0.1

Инструмент для обучения лор теперь поддерживает создание рефмодов

#refmods #finetuning #personalization #klein #krea2 #minimaxh3

VK | MAX
👍8🔥1
OmniChar

Файл персонализации наподобие #Refmods для видео и картинкогенераторов

Формат .char - пакет лица, тела и одежды персонажа записываются в файл

• Лицо, тело и одежда держатся от генерации к генерации
• Управление по имени — «Вася на пляже» вместо списка референсов
• До 9 референсов лицо-одежда-тело (2:2:1)
• Картинки на Flux #Klein, видео на #MinimaxH3
• Персонаж кочует между проектами коротким промптом
• Голос в работе — клонируется в .char вместе с внешностью

Для чего
• Один герой в разных сценах, позах и стилях
• Фотосессия
• Сториборд и анимация
• Виртуальная примерка

Сравнение с RefMods
OmniChar шире: работа с картинками и видео, до 9 референсов, плюс голос. RefMods проще: файл ~1.5 МБ и чисто видео Minimax H3.

• 24 ГБ+ VRAM и 64 ГБ RAM
• есть комьюнити-библиотека .char

omnichar.org/workflows

Уже поставили на коммерческие рельсы

#personalization
🔥6🤯3👍2
VNCCS (Visual Novel Character Creation Suite)

Полный пайплайн для создания спрайтов персонажей в #ComfyUI. Главная фишка — консистентная внешность персонажа во всех изображениях. Весь цикл работы с персонажем: создание, организация, эмоции, одежда, позы.

- Шаг 1: Character Creator — создание персонажа по описанию или через CHARACTER WIZARD (описал — система сама заполняет настройки). Модели: Illustrious, Anima, #QI21
- Шаг 1.1: Character Cloner — клонирование готового персонажа из любой картинки (скриншот, скачанный арт, своя отрисовка)
- Шаг 2: Character Clothes — наборы одежды
- Шаг 3: Character Emotions — эмоции на спрайты

Что нового в VNCCS 3.0
• Полностью новый 3.0 workflow
• Мастер миграции
• Control Center — загрузка моделей из интерфейса (QI21, #Klein за 4 шага, #MiniMaxH3 для поз и одежды)
• GENERATE PREVIEW
• Style library
• Pose Studio — контроль поз
• SAM3 Details Recovery
• Пресеты рас

#personalization
❤15👍4
Накопилось по #minimaxH3 - часть 33

#LoRA #upscale

github.com/xmarre/Comfyui_Minimax_h3_latent_Upscaler-Plus - латентный апскейлер от автора Spectrum

huggingface.co/Imagineer13/H3-Anti-Burn-LoRA - фикс пережженного переусложнённого лица при склейке турбо-клипов. Вешаешь только на продолжения (не на первый клип)

huggingface.co/yama-kiyo/MiniMax-H3-ORB360-Vertical-LoRA - вертикальный облет

civitai.com/models/964312/redcraft-and-dark-beast-loras - «взрыв-схема» объекта. Триггер Exploded View Diagram

civitai.com/collections/18270307 - сборник слайдеров движения: инерция/импульс, амплитуда, прогрессивное ускорение, резкие смены, скорость

#workflow

civitai.com/articles/36538/comfyui-tutorial-consistent-ai-characters-in-minimax-h3-no-lora-training-with-6gb-vram - консистентные персонажи без LoRA на 6GB: одна картинка → Qwen 2.1 делает 8 ракурсов → RefMod ~100MB → сохранtнный персонаж #personalization

github.com/jiangge0804-crypto/collage-broll-minimax - коллаж-B-roll: строка озвучки → премиальный бумажный коллаж-клип

huggingface.co/no3us/minimax-h3-refmod-pilot - воркфлоу создания и тестирования #RefMods

civitai.red/models/2027766/bfs-best-face-swap - BFS #CharacterSwap LoRA: замена главного персонажа в гайд-видео с сохранением движения, мимики, камеры

github.com/sepiablue-ai/ComfyUI-H3-AudioFirst-X2-Stream - голос сначала: 8-шаговый аудио-проход на крошечном 32×32, затем голос «залочен» для генерации видео

github.com/chanon/comfyui-obvpm-timeline - обновление таймлайна obvpm: новый воркфлоу, превью через taeh3

#COMFYUI

github.com/noembryo/ComfyUI-noEmbryo#h3-clip-refiner - рефайнер: генеративный ресемпл дорисовывает мелкие детали, оставляя низкие частоты — фон не плывет.
🔥8👍4❤1
PerfectLab Studio

Кастом нода собирает консистентные фотосессии. Выбираешь человека, одежду, место, свет и камеру из библиотек с фото-превью — одна кнопка составляет промпты, размеры и сиды и отправляет всю сессию в граф.

• Профили моделей под Z-Image, Flux, Krea 2, Qwen-Image и SDXL — SDXL сам переключается на теги через запятую
• Карточки персонажей, пресеты, свои вайлдкарды и арки

Для H3-анимации из готовой серии кадров выбираются старт, середина и финал

#personalization #comfyui

MAX
👍7🤔3