Нейронавт | Нейросети в творчестве
13.3K subscribers
7.21K photos
5.68K videos
51 files
7.3K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
This media is not supported in your browser
VIEW IN TELEGRAM
Solaris

Генеративный интерфейс от Runway: приложение рендерится на лету. Каждый кадр генерируется при взаимодействии. Интерфейс реагирует на действия без заранее прописанных страниц и кнопок

- Интерфейс = картинка: клики и перетаскивания влияют на следующий кадр, никакого промежуточного кода между задумкой и экраном
- Живая сцена: отражения меняются со светом, объекты реагируют на манипуляции
- Открытые поведения: клик по коту красит в его текстуру, клик по картине включает еt стиль — что можно сделать, решает модель, а не разработчик
- Дешевле и быстрее обычных видео-моделей: кадры идут по одному, денойз дистиллирован до нескольких шагов

- 720p, рилтайм
- Построена на Gen-4.5 видео-модели Runway
- LLM + world model

Runway окрестили свое детище Interface World Model — модель мира интерфейсов

Можно поклянчить ранний доступ для компании

Спасибо @Endorpheen

#interface #world #realtime
😁3❤2👍1
This media is not supported in your browser
VIEW IN TELEGRAM
VRGDG SeedVR2 TensorRT Studio

Локальный инструмент для реставрации и апскейла видео на GPU. Берет пайплайн SeedVR2 и превращает в удобный воркфлоу под Windows

• загрузка видео и превью короткого отрезка перед полным рендером
• сравнение результата: Original, Restored, Compare, Side by side
• восстановление рендера после обрыва - сохраненные чанки продолжают с места остановки
• настройка разрешения, aspect policy, точности модели, temporal batch, seed, цветокоррекции
• финальная обработка без повторного рендера - шарпенинг, зерно, сглаживание швов, skin finishing
• история проектов - медиа, манифесты и логи хранятся вместе в outputs

• TensorRT ускоряет VAE decoding на NVIDIA RTX, работает быстрее обычного SeedVR2
• 8 секундный клип с 360p до 2K на RTX 5090 моделью 7B Sharp FP16 - около 8 минут, время зависит от разрешения источника, fps и VRAM

#videorestoration #upscale #windows
👍11❤1
Накопилось по #minimaxH3 - часть 12

github.com/hradec/ComfyUI-HR-Endless-Sampler - чанковый сэмплер для видео любой длины, превью в процессе. Нужен Gemma 4 Q4 GGUF для рерайта промптов. Может не работать с быстрым VAE от Kijai

github.com/tritant/ComfyUI_MiniMax_H3_Extender - Extender v2.0: склейка клипов, FL2VA, скорость и память, per-clip LoRAs. Старые воркфлоу требуют замены ноды

github.com/dntpi/ComfyUI-Hand-Tie-Clips - клип-чейнер, бывший H3-Ref-Chain. Есть воркфлоу

github.com/nicekriss/toobus/blob/main/docs/workflows/2BZ_H3_character_sheet_2stage_v1_EN.json - character sheet: одно лицо + одежда → фас/профиль/спина

nvlabs.github.io/Sana/Sol-Engine/H3-Super-Acceleration - NVIDIA Sol-Engine: H3 + LoRA 4-шаговый черновик 896×512, затем LTX-рефайн с Sol-Attn

github.com/lisitskyaa/ComfyUI_UltimateSDUpscaleGuider_H3 - #upscale для H3: генерация 1504×832 → ап 2560×1440. 4080s 16GB: 18 мин ген + 38 мин upscale на 10-сек клип

haoailab.com/blogs/fasth3-preview - ускорение до 14 раз. 4 прохода вместо 49
🔥10👍4❤1🤔1
This media is not supported in your browser
VIEW IN TELEGRAM
skin-tokens.cpp

Скиннинг годами оставался ручной рутиной: меш готов, скелет готов, а веса костей на тысячи вершин всt равно раскидываешь вручную. Этот порт SkinTokens/TokenRig автоматизирует именно этот шаг и работает локально

• генерирует скелет и веса из статичного меша
• либо привязывает меш к уже существующему скелету
• сам подгоняет внешний скелет под персонажа перед скиннингом
• сохраняет иерархию анимации в экспортированном GLB
• экспериментальная подгонка рук под несовпадающие позы
• связка с Kimodo дает цепочку меш + генерация движения → готовый анимированный персонаж

• работает на CPU или Vulkan, без PyTorch
• веса в GGUF F16/F32
• есть C API, CLI и веб-демо на WebGL

Оригинальный SkinTokens требовал видеокарту NVIDIA с 14 ГБ видеопамяти. Этот порт убирает это требование и переносит все на GGML, так что встроить пайплайн в локальные тулы стало сильно проще

#skinning #rigging #3d
🔥6🤯5🫡2❤1👍1
DeepSeek-V4-Flash-Vision-Exp

Спустя 10 дней после релиза DeepSeek открыл веса модели под лицензией MIT. Взяли архитектуру V4-Flash, добавили визуальные модули - получился агент, который читает скриншоты и графики.

В репозитории лежат токенизатор, PyTorch-инференс с визуальным энкодером и MoE

Кванты

#vlm

VK | MAX
👍14❤4
ComfyUI-DLSS5-NR

Неофициальная экспериментальная интеграция NVIDIA DLSS 5 в #ComfyUI. Нода поднимает Neural Rendering внутри процесса ComfyUI через собственный native D3D12-мост, без отдельного исполняемого файла и без временных файлов на диске

• прогоняет IMAGE из ComfyUI через Python/ctypes и dlss5nr_bridge.dll напрямую в D3D12 и NGX
• работает без сторонних процессов и без записи на диск
• доступна как нода DLSS 5 Neural Rendering (Unofficial) в категории experimental

Нужны Windows 10/11 x64, RTX-видеокарта, свежий драйвер NVIDIA и свой легально полученный nvngx_dlssnr.dll - проект его не раздаtт. Целится в недокументированный pre-release интерфейс NVIDIA, не связан с NVIDIA или Comfy Org

#dlss5 #upscale

VK | MAX
🔥15🤷‍♂7🤔4👍3
DreamX-Creator

Исследовательский фреймворк для нативной генерации видео со звуком в 2K. Первый кадр + текстовый промпт - модель генерирует видео и аудио совместно. Развитие идей Wan и OpenMOSS

- Gated Cross-Modal Attention: видео и аудиопотоки обмениваются информацией в обе стороны
- Финальный апскейл до 2K в один шаг сохраняет движение и тайминг звука

- Развитие идей Wan Team и OpenMOSS (MOVA)
- Ещё не для продакшена: веса, код инференса и инструменты оценки обещают позже

Код / веса ждем

#va #t2va #2k #i2va

VK | MAX
👍6👀3🔥1
ICE-012 Audio (DarkPs)

Многоязычная говорилка с клонированием голоса. 590 языков и диалектов, есть русский.

- Клонирование голоса по 2 секундам
- Управление голосом: пол, возраст, высота, акцент, стиль (шепот), скорость
- Стриминг-генерация без ожидания полного файла
- Активный акустический адаптер: обрабатывает кодек-эмбеддинги до и после основного блока

Подходит для озвучки на редких языках, где коммерческие TTS отсутствуют

#tts #russian #voicecloning

VK | MAX
👍14👎2
VibeCoded AI-Slop License v1.0

Кто-то наконец написал честную лицензию для кода, который написала нейросеть по смутному промпту. Гист на GitHub разрешает делать с софтом что угодно - без спроса, без указания авторства, без объяснений.

Автор прямо признает: он мог не писать код, не читать код, не тестировать код и не заметить, что половины зависимостей не существует.

Пункт про качество отдельного упоминания достоин: софт может "выглядеть рабочим, тихо делая что-то совсем другое", содержать функции с именами вроде processData2FinalNew и архитектурные решения, принятые потому что "нейросеть сказала - надежнее сделать так"

Гарантий и поддержки нет. Если задеплоил в прод не читая - это было твое решение

#news #coding

VK | MAX
😁20👍2🫡2🤝1