Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
LTX-2_Image2Video_Adapter_LoRa

Лора-улучшайзер LTX-2

Повышает качество: лучше сохраняет детали исходного изображения, движения в видео получаются более естественными и согласованными, расширяет генерализацию.

#ltx2 #lora
🔥16👍5
BFS-Best-Face-Swap-Video

Лора - заменятор лиц #LTX2
На самом деле не лиц, а головы целиком, что круче

Позиционируется как инструмент для филммейкеров, VFX-художников и исследователей. А с таким замахом будь любезен предоставить высшее качество

Ну потестим

воркфлоу - автор криворукий, поэтому недостающие лоры тут и в коменты кидаю воркфлоу где я (тоже криворукий) заменил неправильные модели которых у него нет на те которые есть

Спасибо @m_franz @StanShumsky

#faceswap #characterswap #videoediting #lora
🔥16👍3
End-of-January LTX-2 Drop: Better Control for Real Workflows

Оказывается в конце января обновили LTX-2
И контролнет LTX-2 19B IC-LoRA Union Control был только частью этого обновления

А я и не знал

— Упрощена работа с Gemma: новые ноды LTXVSaveConditioning / LTXVLoadConditioning позволяют сохранять и загружать кодировки промптов без перезагрузки Gemma. Неужели эмбеддинги из SD вернулись?

— Multimodal Guider. Можно отдельно настраивать следование подсказке, стабильность изображения и синхронизацию модальностей

Улучшения трейна:

— Улучшена работа тренера для IC-LoRA: ускорены циклы итераций и поведение памяти, обучение более предсказуемо на локальных или ограниченных GPU

— Ускорен инференс (примерно в 2 раза, в зависимости от длины и разрешения видео)

В следующем обновлении ждем

→ Новый VAE для лучшего сохранения мелких деталей
→ Улучшеную согласованность и точность обработки входных данных
→ Более чистый и надежный звук
→ Значительно улучшенный режим преобразования изображения в видео
→ Улучшенное понимание промпта

#ltx2 #news
👍16🌚1
LTX2EasyPrompt-LD

Кастом нода превращает простые текстовые идеи в подробные промпты для генерации видео в LTX-2

— умеет грамотно распределять детали промпта по длине видео, чтобы всё уместилось как надо

— работает локально, без подключения к облаку и подписок

— не накладывает ограничений на контент

Две версии LLM:

— NeuralDaredevil 8B — для высокого качества и детализации

— Llama 3.2 3B — для устройств с меньшим объёмом VRAM

воркфлоу

В воркфлоу есть нода которую не находит менеджер устанавливаем отсюда https://github.com/seanhan19911990-source/LTX2-Master-Loader

#comfyui #prompting #ltx2 #workflow
🔥9👍4❤1
This media is not supported in your browser
VIEW IN TELEGRAM
Using LTX-2 as an upscaler (temporal and spatial) for WAN 2.2

Гайд по использованию #LTX2 для апскейла видео из #WAN22 - убирает артефакты, желе и делает временной апскейл.

Берут видео от WAN (720p→1440p или 440p→1080p), прогоняют через LTX-2 с denoising не выше 0.15, чтобы избежать blur и distortions.

Два воркфлоу для ComfyUI: первый генерит WAN-видео за 3 шага, второй апскейлит LTX-2 (OOM если вместе).

Сравнение с SeedVR показывает, что LTX лучше держит детали и smoothness, особенно на motion-heavy сценах.

воркфлоу

#upscale #workflow
👍14🔥10🤔1🤝1
ByteCut Director

Среда для ораганизации управления процессом создания ИИ-видео на LTX-2 - от организации материала до экспорта для генерации

— разбивает видео на секции и кадры с указанием времени, текста и описания

— связывает с кадрами референсные изображения, аудио и промты

— настраивает параметры генерации LTX-2 — общие для проекта и индивидуальные для каждого кадра

— автоматически импортирует сгенерированные видео, сопоставляя их с кадрами по именам файлов

— показывает превью видео при наведении на раскадровке

— собирает выбранные кадры в ZIP-архив для загрузки в Wan2GP

#videoediting #tools #ltx2
❤2🔥2😁1
OmniNFT

фреймворк для совместной генерации аудио и видео с помощью RL

Улучшает качество генерации аудио и видео, их синхронизацию и согласованность между собой. Построен на базе LTX-2 и использует продвинутые методы RL.

- выравнивает модальность (согласовывает аудио и видео между собой);
- оптимизирует синхронизацию звука и изображения
- работает с учётом особенностей каждой модальности (аудио/видео).

- Modality-wise advantage routing — распределяет вознаграждения по ветвям генерации для аудио и видео отдельно.
- Layer-wise gradient surgery — отделяет градиенты видеоотдела от слоёв аудио, сохраняя взаимодействие между модальностями.
- Region-wise loss reweighting — фокусируется на ключевых зонах для синхронизации аудио и видео.

Сделали лору для #LTX2 а для 2.3 не сделали

https://github.com/zghhui/OmniNFT

https://huggingface.co/zghhui/OmniNFT

#av #t2v #t2av
👍4❤1🔥1🤔1🤝1