Нейронавт | Нейросети в творчестве
13.3K subscribers
7.21K photos
5.68K videos
51 files
7.3K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Photoshoot

Набор нод для фотосета в #ComfyUI: описываешь персонажа раз и навсегда (44 поля - тело, лицо, волосы, макияж, одежда), а потом заряжаешь серию до 40 кадров с разным кадрированием, позами, выражением и соотношением сторон. Персонаж не дрейфует

Шесть осей: камера (7 кадрирований), поза (18 поз + положение в комнате), выражение (90 настроений в 9 группах), фокус, соотношение сторон и шум. Каждую ось можно выключить или ограничить семьёй — «только стоячие позы», «только спокойные настроения», «только крупные планы». Серия считается по комбинациям, а не по случайным сидам — 7-й кадр всегда одинаковый, серию можно продлить позже, ничего не повторится

Важный нюанс: с расстоянием промпт ужимается. Для общего плана модель не получает описание помады и подводки — токены, неразрешимые с такого расстояния, все равно стягивают композицию на голову

Установка через ComfyUI Manager, искать Photoshoot

#personalization
👍13❤3
This media is not supported in your browser
VIEW IN TELEGRAM
Oyama AI Video Studio

Desktop-рабочая станция для ИИ-видеопроизводства поверх #ComfyUI. Все локально: #MiniMaxH3 #LTX25 #ZImage #ACEStep — один интерфейс, без копирования моделей

- MiniMax H3: T2V/I2V/Ref2VA с FL2VA и Ref2VA, Turbo LoRA (4/8 шагов), Quality/Preview пресеты, A/B сравнение
- LTX 2.5 отдельное рабочее пространство с Quality (двухстадийный апскейл) и Turbo пресетами, синхронное аудио
- ACE-Step 1.5 музыка: лирика/инструментал, темп/тональность/язык, FLAC
- Character Studio: референсы через Z-Image → I2V turntable → Movie Creator
- Mobile companion: QR-доступ с телефона для быстрых генераций
- Local Ollama: промпт-улучшение, тайминг, переписывание аудио
- Модели индексируются на месте, не копируются и не перекладываются
- LAN по опции, с токеном

#studio #t2v

VK | MAX
👍17🤔1
SmartSave

Кастом нода, сортирует генерации по папкам автоматически. Не надо разгребать один гигантский output — SmartSave читает промпт через локальный Ollama, определяет субъект и раскладывает файлы

civitai

#comfyui #tools

VK | MAX
👍8
Gemini 3.8 Live и 3.8 Live Extended Thinking (Google DeepMind)

Две рилтайм голосовые модели. Быстрая и умная. Обе видят экран, слышат голос, понимают паузы и перебивания.

3.8 Live — диалог, 97 языков с переключением на лету, зрение в реальном времени. Инструменты и API-вызовы выполняются в фоне пока разговор продолжается.

3.8 Live Extended Thinking — рассуждает и говорит одновременно. На сложных задачах произносит «дай-ка подумаю...» и постепенно озвучивает ход мыслей не замолкая.

#1 на Artificial Analysis Speech to Speech Quality Index (82.6)

SynthID водяной знак на все аудио.

Gemini API
AI Studio
Enterprise Platform

#dialog #voicemode #interactive #alm #vlm
👍13
Viggle Mine

Демоспейс с продвинутой оберткой над Viggle Animate для замен персонажа в сложных сценах. Когда герой отворачивается уходит в толпу или возвращается мелким планом идентичность не теряется.

Два режима. Standard — прямая длинная генерация. Smart — полный пайплайн: трекинг точек (TAPNext++), контроль камеры (SAM), динамический зум, Pass A и опциональный Pass B для восстановления личности.

Pass B работает так: после потери персонажа из кадра берется кадр где он снова виден, перерисовывается внешность, генерируется обратно-вперед вокруг точки сбоя и встраивается до обратного преобразования зума. Все окна около 5 секунд чтобы уложиться в один GPU allocation на ZeroGPU.

#characterswap

VK | MAX
👍5❤1
#gaussian

offlinetools.io/colmap - COLMAP в браузере. Камера, облако точек, маски. #photogrammetry

github.com/ooolabdev/ooosplat - OOOSplat: десктоп-приложение, видео/фото → гауссианы в один клик. COLMAP, тренировка, превью, редактирование, экспорт

github.com/mlslabs/MLSLabsGaussianSplattingRenderer-UE - обновился плагин для #UE : Vulkan вместо LibTorch, AMD

github.com/WilliamLiu-1997/Gaussian-Splat-Lite - облегченная реализация 3DGS

gphyx.com - gSplatting 2.0 плагин для Final Cut Pro: эдитор пути камеры, 3D-объекты с окклюзией #FCP youtu.be/pvmV_JA9LCs

github.com/PozzettiAndrea/ComfyUI-LiTo
github.com/Ltamann/Comfyui-TBG-LiTo - ноды Apple LiTo для #ComfyUI

liquiduslabs.com/lulusplat - LuLuSplat v1.1.0 для #Mac

github.com/quixbrics/gausseous - еще один инструмент сплатов попробовать

VK | MAX
👍9🔥3❤2
ComposeCL

Давно ничего не постил про память LLM

Исследование о том как языковые модели могут запоминать информацию поступающую последовательно и не забывать ее после десятков обновлений. Обычное дообучение на новых задачах стирает старые знания — ComposeCL проверяет какие комбинации механизмов продолжающегося обучения работают лучше всего

- Систематический тест 16 комбинаций 4 механизмов: якорь данных (генеративный реплей), якорь функции (самодистилляция), якорь весов (Synaptic Intelligence) и merged LoRA
- Лучшая комбинация всех 3 якорей + merged LoRA дает 34.9%
- Якорь данных и merged LoRA дают наибольший прирост

- 34.9% среднее финальное удержание против 1.2% у наивного обучения
- Топ-3 на 3 датасетах у одной фиксированной композиции всех механизмов

Вывод: для долгоживущих агентов нужно не выбирать один механизм а комбинировать несколько комплементарных

Гитхаб

#memory
👍9
This media is not supported in your browser
VIEW IN TELEGRAM
CocktailASR-1 (Xiaomi)

Распознавание речи, #sota на мультиспикер, заявлены английский и китайский

В демо распознавание одного целевого говорящего в шумной обстановке. Сначала извлекает голос конкретного человека по короткому референсу потом расшифровывает его. Остальные голоса и шум игнорируются

- Двухстадийная обработка: извлечение голоса цели по референсу + ASR на чистом сигнале
- Работает в шуме с несколькими говорящими — фон и посторонние голоса не попадают в распознавание
- Короткий референс голоса (до 3 секунд) достаточно чтобы выделить цель

Гитхаб
HF
Демо

Спасибо @m_franz

#asr

VK | MAX
👍7🤷‍♂1
Накопилось по #minimaxH3 - часть 24

github.com/MiniMax-AI/MiniMax-H3/tree/main/skills - #Skill папка в официальном репозитории H3. 8 стилевых скиллов

huggingface.co/Asirus/TaoMate_H3_3_Step_LoRA - ещe 2 ComfyUI-версии TaoMate

github.com/Code2Collapse/ComfyUI-CustomNodePacks - нода для стабилизации видео #stabilize

huggingface.co/Comfy-Org/MiniMax-H3/tree/main/vae - #VAE INT8 перезалили, обновленная версия

Замена #ControlNet-pose — расширение кадра через аутпейнт дает стабильное движение даже при несовместимых пропорциях тела pastebin.com/BUBUJpwK #workflow #pose2video

huggingface.co/spaces/multimodalart/h3-acceleration-arena - лидерборд пополнился VDN-H3, TaoMate H3, LightX2V 1.2

huggingface.co/FastVideo/FastVideo-FastH3-8-Step-V2 - обновился ускоритель. Воркфлоу:

t2v
github.com/Comfy-Org/workflow_templates/blob/main/templates/video_fastvideo_fasth3_t2v.json

i2v
github.com/Comfy-Org/workflow_templates/blob/main/templates/video_fastvideo_fasth3_i2v.json

github.com/spacesimeco-hue/Chain-Motion-AI-Video-Editor - видеоредактор поверх #ComfyUI в браузере: таймлайн, библиотека ассетов, регенерирование сегментов

github.com/aa335615543-ux/BUNNY_H3_Conditioning_Bridge и huggingface.co/JOKER141/BUNNY_H3_Conditioning_Bridge - адаптер кондиционирования для H3, который чинит кто что делает в видео

github.com/vizart-vj/ComfyUI-MiniMax-H3-LongMedia - обновился кастом пак для генерации длинных видео от @vj_vizart
👍17