Нейронавт | Нейросети в творчестве
13.2K subscribers
7.17K photos
5.66K videos
51 files
7.25K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Две программы для реконструкции сцен, разные по позиционированию

MipMap

Профессиональный комплекс для реальной 2D/3D реконструкции. Строит 3D-модели и сплаты с дронов, LiDAR, 360-камер, фото и видео

• Фотограмметрия, ортофото, точки, меши, сплаты
• MipMap Desktop — десктоп для съёмки, инспекции, архитектуры (бесплатно попробовать)
• MipMap Engine — SDK для интеграции и приватного деплоя
• MipMap Cloud — облако для просмотра и совместной работы
• MipMap Link — планирование полетов дро7нов
• 2D-результаты: DOM, DSM | 3D: точки, меши, сплаты

Бесплатная учетка для старта
———

3DF Zephyr Free

Бесплатная для личного использования версия полноценной фотограмметрии. Простая точка входа в тему

• Собирает 3D-модель из фото
• Открывает .ZEP-файлы из любых версий Zephyr
• Не ограничено по времени

• До 50 фото на проект
• Одна NVIDIA-карта на ускорение
• Ограничен экспорт (текстуры только JPG)

#photogrammetry #gaussian
👍8
DiarizationLM-Gemma-4-E4B

Модель пост-обработки диаризации говорящих от Google. Тонкий дотюн 4B Gemma, который исправляет метки спикеров и снижает ошибки диаризации.

Учит модель чинить короткие вставки (1-5 слов), сохраняя акустические якоря в длинных репликах. Статистически значимые улучшения WDER и cpWER на четырех бенчмарках.

• Исправляет метки говорящих в расшифровке
• Правит границы реплик и «backchannels» (короткие вставки)
• Держит личность спикера в длинных монологах без дрейфа
• Работает из коробки: подаёшь гипотезу с тегами, получаешь исправленную

• 4B параметров (против 8B у старшей версии), Gemma 4 E4B
• #GGUF Q4_K_M ~5.3 ГБ, статус — 2-4 битных квантизации
• #SOTA на Fisher, Callhome, ICSI, AMI (p<0.0001)

Гитхаб
HF
Демо

#diarization #asr
👍7
This media is not supported in your browser
VIEW IN TELEGRAM
FlowHMR

Физически правдоподобный мокап из обычного видео. Из монокулярного ролика восстанавливает глобальное 3D-движение человека, которое физический контроллер реально может повторить в симуляции.

• 0.46B
• Глобальный 3D-motion из одиночного видео
• Движение физически корректно — симулируемый персонаж может его отследить
• Flow matching + physics-based GRPO
• Демо в 3D-вьювере прямо на сайте

Как применяют
• Робототехника: ретаргет на Unitree G1, трекинг в симуляции через SONIC
• Анимация: реконструкция сцены и ретаргет через GPT-6 Astra
• Text-to-motion: генерация видео через MiniMax H3, затем захват движения FlowHMR

Гитхаб
HF

#mocap #animation

MAX
👍7🔥4❤2
FrameMorrow

Плагиновый селектор кадров для длинной генерации видео. Вместо «что похоже на текущий кадр» подбирает, что понадобится дальше — предсказывает будущие нужды и сохраняет нужные кадры из прошлого.

Работает поверх существующих генераторов — от LongLive и Self-Forcing до мировых моделей вроде Matrix-Game и WorldMem. Логика: релевантное сейчас не всегда полезно следующим

• Prospective tokens предугадывают, что пригодится в следующих кадрах
• Выбирает релевантные исторические кадры для будущей генерации
• Работает с разными генераторами — селектор снаружи, подключается через их кондиционинг
• Держит консистентность субъекта и сцены на длинных роликах
• Не требует полного просмотра будущего — компактный прокси вместо

• До 60 секунд видео

Гитхаб ждем

#longvideo #plugin

MAX
👍10😁4🤔2
Vathography

Хохма. Один фотограф изобрел композитинг с картой глубины в 2026. И даже слово новое придумали - ватография

Оказывается, благодаря карте глубины можно выбрать зону фокуса. А мужики-то и не знали

#depth #news

MAX
😁26🤔2🥴1🌚1🍌1
This media is not supported in your browser
VIEW IN TELEGRAM
REA

Инструмент для реверс-инжиниринга приложений. Подключает агента к декомпиляторам, чтобы он разобрался, как работает фича без исходников, показал доказательства и собрал свою версию.

«Пойми поиск в Notes и собери такой же у себя». Не претендует на восстановление исходного кода и не копирует приложение целиком

• Декомпиляция бинарников: нативные, JS/Electron, .NET, сайты
• Разбор работы конкретных функций
• Воссоздание похожей фичи в твоём проекте под твой стек
• Модель «Decompile → Understand → Recreate»
• Результат с доказательствами и ограничениями каждого вывода

Как работает
• Через #MCP или #CLI (npx rea-agents)
• Анализ локально — не загружает приложение в облачный сервис
• Настраивает Claude Code, Claude Desktop, Codex, Cursor, Gemini CLI, Windsurf
• Своя «investigation model» и кэш контекста между вопросами

npmjs.com/package/rea-agents

#coding

MAX
👍11🤔4❤1
Накопилось по #minimaxH3 - часть 30

github.com/Speach1sdef178/ComfyUI-VDN-H3-24GB - VDN-H3-24GB v1.1.0: чинит проблемы памяти и улучшает следование промпту

github.com/DJBFilmz/ComfyUI-DJBFilmz-H3 - DJBFilmz: склейка клипов H3 одной нодой

github.com/einhorn13/mmh3_media - MMH3_Media: упаковывает видео и аудио H3 в ComfyUI

github.com/StanLukuvka/ComfyUI-MiniMax-H3-SPEED - SPEED: разбивает сэмплирование на части для ускорения

github.com/Dantemss/ComfyUI-H3-Modality-Lora-Loader - раздельное применение LoRA к аудио и видео дорожкам H3

github.com/NikoDemon80/ComfyUI-FastH3-Lora-Converter - FastH3 превращается в простую LoRA

github.com/nazgut/ComfyUI-MiniMaxH3-CLSS - CLSS: 16GB ПК в AI-медиа-студию

github.com/TootsThielemans/ComfyUI-MMH3-Preset-Controller - переключение групп нод в один клик

github.com/Zironic/H3-Optimizations - оптимизации: меньше памяти, быстрее генерация

huggingface.co/xmarre/MiniMax-H3-Pruned-Ref-Delta-Fused-r1024-ComfyUI - прунинг-мерж: резко снижает требования к памяти

github.com/halnovemil/H3TiledLoopSpaceTime - бесшовные зацикленные видео для H3

MAX
👍8❤2🔥1
Looped-DiT

Генератор картинок, трансформер от SenseNova.
Заявлен как первый looped-transformer-подход.
Одна группа общих блоков прогоняется несколько раз внутри каждого шага денойзинга — модель становится глубже без роста размера.

• Генерация изображений из текста
• Loop-механизм: общие блоки повторяются, глубина растёт без увеличения параметров
• Глубина регулируется на инференсе — другие числа петель работают без дообучения
• Deep supervision обучает предсказание после каждой петли

• B/32: 512×512, петля из 5 блоков × 4 повтора
• Веса ~1 ГБ
• Модель меньше и легче за счет общего блока
• База — pixel-space MMDiT MiniT2I + FLAN-T5-Large

github.com/OpenSenseNova/Looped-DiT
huggingface.co/sensenova/Looped-DiT-B32
huggingface.co/sensenova/Looped-DiT-B16

#compact #t2i

MAX
👍8👀3🔥1🤔1
This media is not supported in your browser
VIEW IN TELEGRAM
PDMD

Метод дистилляции видео-диффузии в 4 шага от ByteDance. Убирает артефакты учителя одной строкой проекции — фильтрует ошибку студента без доп. сетей и проходов.

Улучшает классический DMD: проектируешь вектор обновления перпендикулярно остатку студент-критик, отсекая ошибку критика.

• Генерация видео за 4 и даже 2 шага инференса
• Дистилляция MiniMax-H3-33B до 4 NFE
• Одна строка проекции подавляет ошибку критика
• Ничего лишнего: без вспомогательного loss, сетей и доп. проходов

• MiniMax-H3-33B: 1344×768, 345 кадров, 4 сети-вызовов
• Также вариант на 2 NFE
• Лучший результат среди 4-шаговых методов на метриках качества и динамики

Готовые ComfyUI-версии для #MiniMaxH3 на HF

github.com/ZeamoxWang/pdmd
huggingface.co/Iwannapose/minimax_h3_pdmd_4nfe_comfyui
huggingface.co/Iwannapose/minimax_h3_pdmd_2nfe_comfyui

#optimization

MAX
👍9🔥7
Kandinsky 6.0 Video

Видеогенератор от Kandinsky Lab

• Видео с синхронным аудио 44 кГц, липсинк
• Из текста или изображения (#T2AV / #TI2AV )
• Full-HD супер-резолушн отдельным пайплайном
• Дистиллированные версии для ускорения

• Две модели: Lite 3B и Pro 29B
• 5-секундные клипы, 24 fps

Требования к железу
• Lite 3B — сила на одной карте: ~12-15 ГБ весов, с оффлоадом влезает в 16-24 ГБ VRAM
• Pro 29B — тяжtлая: трансформер один тянет ~60 ГБ, нужен H100/A100 80 ГБ или пара карт
• Full-HD апскейл добавляет нагрузки

Стек: трансформер + Qwen2.5-VL + CLIP + видео/аудио-VAE + вокодер. Для широкого применения реалистичен Lite, Pro — удел больших карт.

Уже на Fal. апскейлер - отдельная модель

HF
ComfyUI
Fal

#upscale

MAX
🔥12❤5🍌2⚡1
Prism

Превью от Tencent Hunyuan + Fudan: генерация видео и звука в одном проходе, нативно в 720p, 1080p и 2K. MIT-лицензия.

• Видео + аудио одним проходом: речь, музыка, звуки, липсинк
• Нативные разрешения 720p, 1080p и #2K
• Рядом с Kling 3, MiniMax H3, Wan 3.0 и Seedance 2.5 держится достойно
• Мультиязычная речь, звуковой дизайн

• База — MOVA
• MIT, открыты тренировочный и финтюн-коды

Требования к железу
• 720p — одна карта 80 ГБ
• 1080p/2K — от 4 карт по 80 ГБ

Два превью-чека: alpha (стабильный) и beta (движение). Prism-pro в планах

huggingface.co/FrancisRing/Prism
github.com/Tencent-Hunyuan/Prism

[UPDATE] говорят, автора поймали на том что выдавал ролики из интернета за генерацию Prism

#t2va #av

MAX
👍10😭3
This media is not supported in your browser
VIEW IN TELEGRAM
Genex Desktop

Десктопная студия для геймдева с ИИ от Genex. Координирует агентов и игровые инструменты вокруг играбельного проекта. Стартует с браузерных игр на Three.js.

• Сборка игры через чат: агент пишет игру, ассеты рядом
• Мультиагентный режим: Opus и GPT вместе через главного агента, воркеров и ревьюеров
• Локальные модели или Claude Code / ChatGPT по подписке
• 3D-ассеты локально через плагин Blender
• Meshy, Tripo, ElevenLabs и другие через роутер инструментов
• Экспорт или публикация в веб

• #macOS (Apple Silicon), #Linux . Windows скоро
• Плагины Unity и Unreal в работе, нативные C++-игры скоро

github.com/genex-games/genex-desktop

Спасибо @m_franz

#agent #gamedev

MAX
👍12