WorldCompass
Hunyuan выложил фреймворк для дообучения интерактивных моделей мира
Улучшает длинные взаимодействия в HY-World 1.5
Предлагают потыкать в демо. Оно очень тормозное зато потом красивое нетормозное видео дают скачать и сцену .ply. Но я не смог потому что все на китайском и кривое
Странно что дообученную модель не выпустили как новую версию генератора миров
HF - дообученная модель на на 8B
Демо - я вошел через WeChat
#world #text2world #finetuning
Нейронавт в MAX
Hunyuan выложил фреймворк для дообучения интерактивных моделей мира
Улучшает длинные взаимодействия в HY-World 1.5
Предлагают потыкать в демо. Оно очень тормозное зато потом красивое нетормозное видео дают скачать и сцену .ply. Но я не смог потому что все на китайском и кривое
Странно что дообученную модель не выпустили как новую версию генератора миров
HF - дообученная модель на на 8B
Демо - я вошел через WeChat
#world #text2world #finetuning
Нейронавт в MAX
👍4
Qwen3.5 Fine-tuning Guide
Можете дообучить Qwen3.5 (и другие модели) онлайн (Google Colab) или локально на своих данных
Для обучения Qwen3.5 2B нужно всего 5GB VRAM
Колаб
Гитхаб - больше ноутбуков от Unsloth на дообучение разных моделей
#finetuning #vlm #guide #tts
Нейронавт в MAX
Можете дообучить Qwen3.5 (и другие модели) онлайн (Google Colab) или локально на своих данных
Для обучения Qwen3.5 2B нужно всего 5GB VRAM
Колаб
Гитхаб - больше ноутбуков от Unsloth на дообучение разных моделей
#finetuning #vlm #guide #tts
Нейронавт в MAX
🔥14❤7
GlyphPrinter
Метод улучшения рендера текста для генераторов изображений
Прикручено к FLUX.1-dev
Гитхаб
HF
#flux #finetuning
Метод улучшения рендера текста для генераторов изображений
Прикручено к FLUX.1-dev
Гитхаб
HF
#flux #finetuning
👍3
This media is not supported in your browser
VIEW IN TELEGRAM
Кстати Unsloth добавил в колаб дообучение Gemma 4, можно дообучить бесплатно в облаке
Колаб
#finetuning #vlm
Колаб
#finetuning #vlm
🔥7😱1
YoreSpot
Какая-то "альтернатива Civitai"
Генерация, обучение моделей, социальные функции и геймификация
Выбор моделей пока скудный
— генерация изображений и видео в разных стилях (аниме, реализм, высокое разрешение)
— обучение и обмен собственными LoRA-моделями
— хаб моделей (поиск, фильтры, скачивание, оценки, отзывы)
— ежедневные конкурсы и аукционы для заработка внутриигровых кредитов
— социальные взаимодействия: галерея, лайки, комментарии, подписки, чаевые
— создание и общение с AI-персонажами, генерация их образов, отслеживание отношений
— система достижений, бинго и лидербордов с наградам;
— работа в браузере без установки ПО и локального GPU
#gallery #training #finetuning #online #hub
Какая-то "альтернатива Civitai"
Генерация, обучение моделей, социальные функции и геймификация
Выбор моделей пока скудный
— генерация изображений и видео в разных стилях (аниме, реализм, высокое разрешение)
— обучение и обмен собственными LoRA-моделями
— хаб моделей (поиск, фильтры, скачивание, оценки, отзывы)
— ежедневные конкурсы и аукционы для заработка внутриигровых кредитов
— социальные взаимодействия: галерея, лайки, комментарии, подписки, чаевые
— создание и общение с AI-персонажами, генерация их образов, отслеживание отношений
— система достижений, бинго и лидербордов с наградам;
— работа в браузере без установки ПО и локального GPU
#gallery #training #finetuning #online #hub
👀6👍2🤔1🍌1
MegaStyle
Пайплайн и датасет от Tencent для обучения моделей стилизации изображений
MegaStyle-FLUX - обучили FLUX.1-dev
Захватывает нюансы вроде цвета, света, текстуры и манеры рисования
Гитхаб
HF - MegaStyle-FLUX
#styletransfer #stylize #finetuning #dataset
Пайплайн и датасет от Tencent для обучения моделей стилизации изображений
MegaStyle-FLUX - обучили FLUX.1-dev
Захватывает нюансы вроде цвета, света, текстуры и манеры рисования
Гитхаб
HF - MegaStyle-FLUX
#styletransfer #stylize #finetuning #dataset
❤6👍1
D‑OPSD
Метод для непрерывного обучения дистиллированных моделей от Alibaba для предотвращения деградации качества
• обучает «ученика» на данных от текущей версии самой себя (on‑policy)
• дообучает уже дистиллированные модели шаг за шагом
• стабилизирует обучение через самосогласованность предсказаний
Гитхаб
#optimization #finetuning #training
Метод для непрерывного обучения дистиллированных моделей от Alibaba для предотвращения деградации качества
• обучает «ученика» на данных от текущей версии самой себя (on‑policy)
• дообучает уже дистиллированные модели шаг за шагом
• стабилизирует обучение через самосогласованность предсказаний
Гитхаб
#optimization #finetuning #training
👍8❤1
This media is not supported in your browser
VIEW IN TELEGRAM
Modality Forcing
Метод дообучения генераторов картинок для предсказания глубины. Работает на моделях DiT, обученных на редких (sparse) данных о глубине без сложных схем и массивов данных
#SOTA на 4 из 5 бенчмарков по предсказанию глубины
Зачем компании с названием WorldLabs учить картинкогенераторы качественно предсказывать глубину? Ага
Гитхаб
Демо
HF - на базе Flux.2
#i2d #image2depth #finetuning
Метод дообучения генераторов картинок для предсказания глубины. Работает на моделях DiT, обученных на редких (sparse) данных о глубине без сложных схем и массивов данных
#SOTA на 4 из 5 бенчмарков по предсказанию глубины
Зачем компании с названием WorldLabs учить картинкогенераторы качественно предсказывать глубину? Ага
Гитхаб
Демо
HF - на базе Flux.2
#i2d #image2depth #finetuning
👍4
Image-to-LoRA (i2L) V2
Создание лоры по одной картинке от ModelScope. Закрывает разрыв между референсом и стилем в диффузионных моделях.
Версия V2 - улучшенные веса, стабильнее перенос стиля
Cовместима с SD1.5 и SDXL
Klein 4b / Zimage / Hidream01
#klein #zimage #hidream #lora #i2l #image2ora #finetuning
Создание лоры по одной картинке от ModelScope. Закрывает разрыв между референсом и стилем в диффузионных моделях.
Версия V2 - улучшенные веса, стабильнее перенос стиля
Cовместима с SD1.5 и SDXL
Klein 4b / Zimage / Hidream01
#klein #zimage #hidream #lora #i2l #image2ora #finetuning
🔥12❤2
Есть ли что покруче LoRA?
HF пытаются замотивировать сообщество использовать и другие методы файнтюнинга помимо LoRa
Например OFT обошёл лору по всем фронтам.
* качество генерации выше
* памяти жрёт поменьше
OFT работает не только с генерацией картинок, подойдёт для LLM и говорилок
также упомянуты:
* LoRA-FA - заморозка части весов
* VeRA - метод с общими случайными матрицами и векторами масштабирования, радикально уменьшающий обучаемые параметры
* DoRA - раскладывание весов на «величину» и «направление», превосходит LoRA
* Lily, BEFT, GraLoRA, Cartridges - экзотические методы с разным балансом точности и расхода памяти
PEFT
#finetuning
HF пытаются замотивировать сообщество использовать и другие методы файнтюнинга помимо LoRa
Например OFT обошёл лору по всем фронтам.
* качество генерации выше
* памяти жрёт поменьше
OFT работает не только с генерацией картинок, подойдёт для LLM и говорилок
также упомянуты:
* LoRA-FA - заморозка части весов
* VeRA - метод с общими случайными матрицами и векторами масштабирования, радикально уменьшающий обучаемые параметры
* DoRA - раскладывание весов на «величину» и «направление», превосходит LoRA
* Lily, BEFT, GraLoRA, Cartridges - экзотические методы с разным балансом точности и расхода памяти
PEFT
#finetuning
👨💻12❤3👍3
FedorAiToolkit
Форк AI Toolkit
Автор добавил в него SAM 3D Body Scanning, чтобы обучать лоры не только на лицо но и на форму тела
Процесс обучения состоит из двух этапов:
1. Обычное обучение LoRA/LoKr на фотографиях пользователя (около 200 шагов)
2. Второй этап: модель генерирует изображения, SAM 3D сканирует их, и обучение подгоняет LoRA под отсканированное тело и лицо
Это позволяет добиться большего сходства с реальным человеком в полных портретах. Время обучения на RTX 5090 около 30 минут для лица и около 60 минут с учетом тела
Реализовано для Krea 2
Есть еще похожий проект BodyRec - помогает лоре запомнить пропорции тела
#finetuning #personalization #krea2
Форк AI Toolkit
Автор добавил в него SAM 3D Body Scanning, чтобы обучать лоры не только на лицо но и на форму тела
Процесс обучения состоит из двух этапов:
1. Обычное обучение LoRA/LoKr на фотографиях пользователя (около 200 шагов)
2. Второй этап: модель генерирует изображения, SAM 3D сканирует их, и обучение подгоняет LoRA под отсканированное тело и лицо
Это позволяет добиться большего сходства с реальным человеком в полных портретах. Время обучения на RTX 5090 около 30 минут для лица и около 60 минут с учетом тела
Реализовано для Krea 2
Есть еще похожий проект BodyRec - помогает лоре запомнить пропорции тела
#finetuning #personalization #krea2
🔥12
Kura
Агентная рабочая среда для обучения лор
Фокус на безопасности, воспроизводимости результатов и доступности для ИИ-агентов
Гайд по обучению лоры для #Krea2
#agent #finetuning #lora #tools
Агентная рабочая среда для обучения лор
Фокус на безопасности, воспроизводимости результатов и доступности для ИИ-агентов
Гайд по обучению лоры для #Krea2
#agent #finetuning #lora #tools
❤9👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Unsloth Desktop
Десктоп приложение от Unsloth для запуска и дообучения моделей на локальном железе, без облака. Windows, macOS, Linux
• Движок оптимизирован под CPU и мульти-GPU связки NVIDIA, AMD, Intel, Apple
• Форматы: MLX, GGUF, NVFP4
• Запуск LLM в форматах MLX и GGUF + диффузионных моделей для генерации картинок, аудио и видео
• Подключение агентов Claude Code, OpenAI Codex, Hermes Agent, OpenClaw, OpenCode к локальным LLM
• Дообучение с ускорением x2 и снижением VRAM на 70%
• Приватный веб-поиск и RAG из коробки
• Поддержка стандарта MCP
• Экспорт весов в NVFP4 и GGUF
Гитхаб
#finetuning #tools
Десктоп приложение от Unsloth для запуска и дообучения моделей на локальном железе, без облака. Windows, macOS, Linux
• Движок оптимизирован под CPU и мульти-GPU связки NVIDIA, AMD, Intel, Apple
• Форматы: MLX, GGUF, NVFP4
• Запуск LLM в форматах MLX и GGUF + диффузионных моделей для генерации картинок, аудио и видео
• Подключение агентов Claude Code, OpenAI Codex, Hermes Agent, OpenClaw, OpenCode к локальным LLM
• Дообучение с ускорением x2 и снижением VRAM на 70%
• Приватный веб-поиск и RAG из коробки
• Поддержка стандарта MCP
• Экспорт весов в NVFP4 и GGUF
Гитхаб
#finetuning #tools
👍14
Накопилось свистоперделок для #minimaxH3
Улучшайзер лиц
github.com/Carasibana/ComfyUI-H3-FaceRefine
Создает единое длинное видео из последовательных по времени кусков без видимых склеек
huggingface.co/joeygambino/MiniMax-H3-Multishot-Workflow
Многоплановый воркфлоу в одной ноде
github.com/shootthesound/ComfyUI-H3Studio
Лора от Lightx2v поверх Qwen3.6-27B для переписывая промпта
huggingface.co/lightx2v/MiniMax-H3-Prompt-Rewriter-LoRA
Турбо лора 4 шага от них же, версия Киджая
huggingface.co/Kijai/MiniMax-H3_comfy/tree/main/loras
Там же уровнем выше лежит int8 video vae
Лора реализм
huggingface.co/fal/MiniMax-H3-Realism-People-LoRA
Лора на 8 шагов
huggingface.co/tutututututu/Tutu-MiniMax-H3-AudioVideo-20to8-NFE-LoRA
Кстати тренить лоры на 16+ ГБ VRAM можно вот этим
github.com/inlineresearch/Inline-Studio
Латентный апскейлер
huggingface.co/Mamad8/H3-Latent-Upscaler-2x
#lora #vae #directing #realism #finetuning #longvideo
Улучшайзер лиц
github.com/Carasibana/ComfyUI-H3-FaceRefine
Создает единое длинное видео из последовательных по времени кусков без видимых склеек
huggingface.co/joeygambino/MiniMax-H3-Multishot-Workflow
Многоплановый воркфлоу в одной ноде
github.com/shootthesound/ComfyUI-H3Studio
Лора от Lightx2v поверх Qwen3.6-27B для переписывая промпта
huggingface.co/lightx2v/MiniMax-H3-Prompt-Rewriter-LoRA
Турбо лора 4 шага от них же, версия Киджая
huggingface.co/Kijai/MiniMax-H3_comfy/tree/main/loras
Там же уровнем выше лежит int8 video vae
Лора реализм
huggingface.co/fal/MiniMax-H3-Realism-People-LoRA
Лора на 8 шагов
huggingface.co/tutututututu/Tutu-MiniMax-H3-AudioVideo-20to8-NFE-LoRA
Кстати тренить лоры на 16+ ГБ VRAM можно вот этим
github.com/inlineresearch/Inline-Studio
Латентный апскейлер
huggingface.co/Mamad8/H3-Latent-Upscaler-2x
#lora #vae #directing #realism #finetuning #longvideo
🔥19👍8
#Yue2
github.com/o-l-l-i/ComfyUI-Olm-YuE2 - #ComfyUI для YuE2: генерация музыки по этапам Plan→Semantic→Synthesize→Decode. Редактор нот ABC в боковой панели, оффлоад под меньшие карты. Проверено на 5090
github.com/filliptm/ComfyUI-FL-YuE2 - пианолла для YuE2 в ComfyUI: импорт ABC-нот, редактирование, генерация. Плюс ноды для обучения #LoRA
huggingface.co/m-a-p/SheetSage2 - конвертер MP3→ABC-ноты. Нужен для импорта треков в пианоллу. Обычные MIDI→ABC не работают. Ставится через Hermes-Agent
Можно выстроить такой пайплайн: MP3 → AI ноты → ABC → пианолла. Вокал и аранжировка ремиксятся под любой стиль
huggingface.co/Mothersuperior/yue2-mothersuperior-realaudio-tokenizer-v4 - энкодер для YuE2, которого не хватало: любой трек → токены YuE2. Обучен без разметки — модель сама научилась на своих сгенерированных примерах
github.com/Starnodes2024/ComfyUI-YuE2-Trainer - еще один трейнер лор спасибо @StanShumsky
#musicediting #music2midi #finetuning
VK | MAX
github.com/o-l-l-i/ComfyUI-Olm-YuE2 - #ComfyUI для YuE2: генерация музыки по этапам Plan→Semantic→Synthesize→Decode. Редактор нот ABC в боковой панели, оффлоад под меньшие карты. Проверено на 5090
github.com/filliptm/ComfyUI-FL-YuE2 - пианолла для YuE2 в ComfyUI: импорт ABC-нот, редактирование, генерация. Плюс ноды для обучения #LoRA
huggingface.co/m-a-p/SheetSage2 - конвертер MP3→ABC-ноты. Нужен для импорта треков в пианоллу. Обычные MIDI→ABC не работают. Ставится через Hermes-Agent
Можно выстроить такой пайплайн: MP3 → AI ноты → ABC → пианолла. Вокал и аранжировка ремиксятся под любой стиль
huggingface.co/Mothersuperior/yue2-mothersuperior-realaudio-tokenizer-v4 - энкодер для YuE2, которого не хватало: любой трек → токены YuE2. Обучен без разметки — модель сама научилась на своих сгенерированных примерах
github.com/Starnodes2024/ComfyUI-YuE2-Trainer - еще один трейнер лор спасибо @StanShumsky
#musicediting #music2midi #finetuning
VK | MAX
🔥9👍1
Fizgig v6.0.1
Инструмент для обучения лор теперь поддерживает создание рефмодов
#refmods #finetuning #personalization #klein #krea2 #minimaxh3
VK | MAX
Инструмент для обучения лор теперь поддерживает создание рефмодов
#refmods #finetuning #personalization #klein #krea2 #minimaxh3
VK | MAX
👍8🔥1
#YuE2
github.com/Comfy-Org/ComfyUI/pull/16250 - YuE2 в #ComfyUI v0.36.0: генерация музыки по стилю и тексту. Еще PR/16293: фиксы AMD и больше контролов в generate ABC
huggingface.co/guey-khala-mari/yue2_lora_sandbox/tree/main/samjac - #LoRA голос Сэмюэла Л. Джексона
huggingface.co/monsterovich/yue2-steps-from-hell -2 Steps From Hell #LoRa - эпичная оркестровая трейлер-музыка
civitai.com/models/2950939/yue2-music-and-cover-easy-ui-supernova-workflow - #workflow Supernova с оптимизациями. KSampler ускорен в 16 раз без слышимой разницы. песни и каверы, простой UI
github.com/dynamohum/YuE2gen-studio - YuE2-Studio: веб-обертка над ComfyUI + тренер LoRA #finetuning
github.com/pytraveler/YuE2-ComfyUI - v0.9.0 от @Aleks_101 : нода Edit Track правит кусок готовой песни без перепевки остального. Перепеть такты, вырезать, смена слов, сдвиг секции, инструментальный проигрыш. Пока только свои песни. Окно Saved songs, редактор партитуры
MAX
github.com/Comfy-Org/ComfyUI/pull/16250 - YuE2 в #ComfyUI v0.36.0: генерация музыки по стилю и тексту. Еще PR/16293: фиксы AMD и больше контролов в generate ABC
huggingface.co/guey-khala-mari/yue2_lora_sandbox/tree/main/samjac - #LoRA голос Сэмюэла Л. Джексона
huggingface.co/monsterovich/yue2-steps-from-hell -2 Steps From Hell #LoRa - эпичная оркестровая трейлер-музыка
civitai.com/models/2950939/yue2-music-and-cover-easy-ui-supernova-workflow - #workflow Supernova с оптимизациями. KSampler ускорен в 16 раз без слышимой разницы. песни и каверы, простой UI
github.com/dynamohum/YuE2gen-studio - YuE2-Studio: веб-обертка над ComfyUI + тренер LoRA #finetuning
github.com/pytraveler/YuE2-ComfyUI - v0.9.0 от @Aleks_101 : нода Edit Track правит кусок готовой песни без перепевки остального. Перепеть такты, вырезать, смена слов, сдвиг секции, инструментальный проигрыш. Пока только свои песни. Окно Saved songs, редактор партитуры
MAX
❤8👍2
Накопилось по #minimaxH3 - часть 28
github.com/fukkun2705-commits/ComfyUI-H3-FaceAutoBypass - сам решает, нужен ли клипу фейсфикс
huggingface.co/vpakarinen/natural-face-speech-h3-lora - #lora мимика + четкая английская речь, добавлены мужской/женский голоса с синхронизацией
huggingface.co/Alissonerdx/Minimax-H3-ComfyUI - экспериментальные #LoRA на перенос стиля и VFX-эдит (тот же шот с одной правкой) #styletransfer
Лора на замену головы #headswap #LoRA
huggingface.co/LiseTY/Minimax-H3-ref2v_Anime_2_Realism - #LoRA для аниме→фотореализм #realism
huggingface.co/JOKER141/MiniMaxH3-GunFu-Gunfight-LORA - #LoRA перестрелок
github.com/RK-BoilingPoint/H3-Visual-Marker-Control - управление кадрами-маркерами: синяя рамка вокруг персонажа и вокруг цели — персонаж сам подходит. Двух персонажей: синий/красный, жtлтый — «дальняя цель»
github.com/dntpi/ComfyUI-H3-Refine - H3 Chain Tone v0.3: компенсация накопленного сдвига яркости при склейке клипов #longvideo
huggingface.co/akatz-ai/MiniMax-H3-Character-Swap-LoRA - LoRA замены персонажа: фон сохраняется лучше базы, но тайминг движений и мимика ненадежны #characterswap
huggingface.co/neph1/minimax_h3_headmounted_fpv_cam - #LoRA «камера на голове» в стиле шутеров от первого лица #pov
huggingface.co/ostris/minimax_h3_training_adapter/tree/main - Ostris H3 Training Adapter v3 #finetuning
huggingface.co/pablodawson/MiniMax-H3-360-Orbit-LoRA - 360-орбита: одни и те же первый/последний кадр, камера облетает застывшую сцену, петля. Для #FL2VA, нужен спец-промпт #cameracontrol
github.com/aaruyou/ComfyUI-RemoteMiniMaxH3 - энкодер H3 на другом ПК, VRAM основной машины свободнее
github.com/aroslanov/ComfyUI-VideoAnalyzer - видео → H3-промпт через VLM. Несколько Qwen VL на выбор под VRAM #prompting #video2prompt
slopus.ai - Slopus: десктоп-приложение для AI-видео локально. Сцены (first/last, animate, pose, replace, extend, bridge), таймлайн с эффектами и экспортом, встроенный агент с отменой #desktop #agent
github.com/lisitskyaa/ComfyUI_UltimateSDUpscaleGuider_H3 - USDU гайдер-апскейл для H3 #upscale
github.com/bbaudio-2025/Comfyui-MMH3-UltimateUpscale - ультимативный #upscale
huggingface.co/Efficient-Large-Model/H3-to-LTX-Latent-Adapter - адаптер латентов H3 → LTX
github.com/fukkun2705-commits/ComfyUI-H3-FaceAutoBypass - сам решает, нужен ли клипу фейсфикс
huggingface.co/vpakarinen/natural-face-speech-h3-lora - #lora мимика + четкая английская речь, добавлены мужской/женский голоса с синхронизацией
huggingface.co/Alissonerdx/Minimax-H3-ComfyUI - экспериментальные #LoRA на перенос стиля и VFX-эдит (тот же шот с одной правкой) #styletransfer
Лора на замену головы #headswap #LoRA
huggingface.co/LiseTY/Minimax-H3-ref2v_Anime_2_Realism - #LoRA для аниме→фотореализм #realism
huggingface.co/JOKER141/MiniMaxH3-GunFu-Gunfight-LORA - #LoRA перестрелок
github.com/RK-BoilingPoint/H3-Visual-Marker-Control - управление кадрами-маркерами: синяя рамка вокруг персонажа и вокруг цели — персонаж сам подходит. Двух персонажей: синий/красный, жtлтый — «дальняя цель»
github.com/dntpi/ComfyUI-H3-Refine - H3 Chain Tone v0.3: компенсация накопленного сдвига яркости при склейке клипов #longvideo
huggingface.co/akatz-ai/MiniMax-H3-Character-Swap-LoRA - LoRA замены персонажа: фон сохраняется лучше базы, но тайминг движений и мимика ненадежны #characterswap
huggingface.co/neph1/minimax_h3_headmounted_fpv_cam - #LoRA «камера на голове» в стиле шутеров от первого лица #pov
huggingface.co/ostris/minimax_h3_training_adapter/tree/main - Ostris H3 Training Adapter v3 #finetuning
huggingface.co/pablodawson/MiniMax-H3-360-Orbit-LoRA - 360-орбита: одни и те же первый/последний кадр, камера облетает застывшую сцену, петля. Для #FL2VA, нужен спец-промпт #cameracontrol
github.com/aaruyou/ComfyUI-RemoteMiniMaxH3 - энкодер H3 на другом ПК, VRAM основной машины свободнее
github.com/aroslanov/ComfyUI-VideoAnalyzer - видео → H3-промпт через VLM. Несколько Qwen VL на выбор под VRAM #prompting #video2prompt
slopus.ai - Slopus: десктоп-приложение для AI-видео локально. Сцены (first/last, animate, pose, replace, extend, bridge), таймлайн с эффектами и экспортом, встроенный агент с отменой #desktop #agent
github.com/lisitskyaa/ComfyUI_UltimateSDUpscaleGuider_H3 - USDU гайдер-апскейл для H3 #upscale
github.com/bbaudio-2025/Comfyui-MMH3-UltimateUpscale - ультимативный #upscale
huggingface.co/Efficient-Large-Model/H3-to-LTX-Latent-Adapter - адаптер латентов H3 → LTX
👍10❤4🔥3
DiffusionART
Алгоритм дообучения диффузионных моделей от Kling AI. Обучает модели генерации видео и изображений сильно дешевле - в 12 раз меньше GPU-часов при более высоком вознаграждении.
• RL-дообучение видео- и image-моделей: качество, следование промпту, feedback
• Стабильное обучение без крахов, без настройки EMA-расписания
• Работает на #HunyuanVideo-13B, #Wan21-I2V-14B, #SD35-M
Соль — порядок операций: сначала агрегировать вознаграждения и endpoints, потом регрессия, переиспользуя замороженную цель. Убирает скрытую силу согласованности из классического NFT, из-за которой обучение нестабильно
Гитхаб
HF
#finetuning
MAX
Алгоритм дообучения диффузионных моделей от Kling AI. Обучает модели генерации видео и изображений сильно дешевле - в 12 раз меньше GPU-часов при более высоком вознаграждении.
• RL-дообучение видео- и image-моделей: качество, следование промпту, feedback
• Стабильное обучение без крахов, без настройки EMA-расписания
• Работает на #HunyuanVideo-13B, #Wan21-I2V-14B, #SD35-M
Соль — порядок операций: сначала агрегировать вознаграждения и endpoints, потом регрессия, переиспользуя замороженную цель. Убирает скрытую силу согласованности из классического NFT, из-за которой обучение нестабильно
Гитхаб
HF
#finetuning
MAX
👍5