Нейронавт | Нейросети в творчестве
13.3K subscribers
7.22K photos
5.7K videos
51 files
7.32K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
dots3-note preview

Первая открытая модель от dots studio

Для долгоживущих агентов: решает задачи где одной попытки мало и надо исследовать, запоминать и адаптироваться

• Мультимодальное понимание - текст, изображения, видео и аудио
• Исследование незнакомых сред и обновление памяти по ходу работы
• Код, инструменты и многошаговые агентные воркфлоу

• 280B всего, 16B активных, #MoE
• Контекст 512K
• Vision-энкодер MoE ViT 7B, аудио-энкодер 800M

Гитхаб
HF

#agent #multimodal #vlm

VK | MAX
🤷‍♂5🔥3
ComfyUI Image Conveyor

Кастом пак - конвейер картинок

Суть: когда генеришь серию изображений - например, референсы персонажа - руками перетаскивать их между нодами и следить, что куда пошло, муторно. Эта нода держит очередь картинок и отдельную полку постоянных референсов.

• Очередь Conveyor - картинки прокручиваются через генерации одна за другой
• Полка Persistent Reference Shelf - до 8 референсов, которые не тратятся и держат персонажа стабильным между кадрами
• Библиотеки персонажей - свой набор картинок на каждого героя, грузишь нужные в один клик
• Папка как библиотека - подпапки, перенос, удаление файлов, драг-н-дроп между папками и полкой

• До 8 постоянных референсов
• Галереи виртуализированы - почти без нагрузки на карту

• В v1.4 допилено под MiniMax H3, где мульти-референс стал важен для консистентности

#referencing #minimaxH3 #comfyui

VK | MAX
👍10❤2
EVIE-Preview-4.5B

Модель Tencent для визуального поиска по документам на базе Qwen3.5-4B

ищет релевантные страницы по запросу, глядя на картинки, а не на извлечённый текст. Эмбеддинги ультракомпактные, 128 измерений на токен, отсюда низкие требования к памяти и быстрый поиск.

• Поиск по сканам, PDF, таблицам, диаграммам и отчётам без OCR
• Мультиязычность - EN, FR, DE, IT, ES, PT, ZH и другие
• Zero-shot на новых языках и форматах

#SOTA на ViDoRe
• Обходит 8B модели, будучи вдвое меньше

Гитхаб
HF

#vlm #search #ocr

VK | MAX
🔥4👍1
This media is not supported in your browser
VIEW IN TELEGRAM
Marionette

Игровая модель мира от Alaya Lab. Учится предсказывать что будет дальше в сцене но не рисует все подряд нейросетью - геометрию считает формулой, а ИИ доверяет только внешний вид. Поэтому персонажи не рассыпаются на долгих роликах.

• Основа внешности - Wan2.2-Fun-5B-Control, VideoX-Fun
• Генерация игрового мира по одному референс-кадру и паре стартовых поз
• Управление действиями персонажа
• Прямое задание траектории - развороты, направление и скорость ходьбы

• Качество кадра на уровне пиксельных моделей, но с реальной управляемостью
• Пока косячит на долгих прогонах - персонажи уходят за край карты, внешность плывёт

Гитхаб
HF
Демо

#world #interactive

VK | MAX
👍8
MiniMax Music 3.0 Studio

Локальный воркспейс для генерации музыки MiniMax Music 3.0 в ComfyUI. Оборачивает нодовый рендер в веб-интерфейс - собираешь бриф, а он сам ставит задачу в очередь ComfyUI и отдаёт MP3.

• Генерация по структурированному брифу - жанр, темп, тональность, эмоциональная арка
• Секционные тексты с тегами [Intro], [Verse], [Chorus], [Bridge], [Outro]
• Редактор текстов, настройка длительности, шагов, CFG, сида, вариаций
• Библиотека с превью и скачиванием MP3 прямо из браузера

• UI и галерея - React, гейтвей - лёгкий Python-мост к ComfyUI

#text2music #comfyui

VK | MAX
👍11😱3❤1
This media is not supported in your browser
VIEW IN TELEGRAM
UI-Mate-27B

GUI-агент от Tencent на базе Qwen3.6-27B. Управляет рабочим столом: смотрит на скриншоты и отдаёт команды мыши и клавиатуры. Главное - учится с одной демонстрации, показал раз, как делать, и он адаптирует это под похожую задачу.

• Выполнение задач по естественной инструкции и живым скриншотам
• Обучение по одной демонстрации - без превращения в слепой реплей скрипта
• Долгий горизонт через несколько приложений
• Live-screen grounding вместо повторения координат
• Структурированные действия: мышь, клавиатура, скролл, ожидание, завершение

• Есть версии 9B и демонстрационная democua-27B

Гитхаб
HF
Демо

#computeruse #agent

VK | MAX
👍8
VibeWorlding

Фреймворк от HKUST и Tencent для агентов, которые строят интерактивные 3D-миры по текстовому запросу. Единый стек: бенчмарк, песочница для RL и модели. Агент сам понимает интент, планирует сцену, вызывает 3D-инструменты и рефлексирует по фидбеку.

• Сборка 3D-мира от запроса до готовой сцены без ручной работы
• многошаговое взаимодействие с окружением - планирование, вызов инструментов, рефлексия
• Поиск и редактирование ассетов, рендер сцены через MCP-инструменты

• Флагман VibeWorlder-30B-A3B, есть версии 8B и embedding 4B

Гитхаб
HF

#textto3d #3d #agent

VK | MAX
👍5
This media is not supported in your browser
VIEW IN TELEGRAM
Qwen-Video-Edit

Картинки видеогенераторами уже делали, теперь наоборот

Видеоредактор по текстовой инструкции, собранный без видео-трансформера. Qwen-Image-Edit научили править видеолатенты напрямую - кадры раскладываются в виртуальную сетку как одна огромная картинка

• Редактирование видео по инструкции
• Длинные ролики кусками по 45 кадров, каждому свой промпт
• Портретные видео нативно, пропорции сохраняются
• Финальный прогон через Wan 2.2 для временной стабильности

• VAE от Wan 2.1
• Чекпоинт обучен под 360p и 45 кадров
• DiT ~40 ГБ, text encoder ~15 ГБ, Wan 2.2 A14B ~80 ГБ

Гитхаб
HF

#videoediting #QIE

VK | MAX
👍9❤3🤷‍♂2🤔1
Путешественники из будущего в прошлое существуют
Но у них проблемы с попаданием в нужный момент и локацию

#humor

VK | MAX
😁20😱8
Media is too big
VIEW IN TELEGRAM
HappyShrimp 1.0

Пополнение в счастливом зоопарке

Генератор песен по промптру

- Полный цикл одной моделью: тексты, композиция, аранжировка и вокал
- Перед генерацией аудио строит структуру песни, гармонию, ритм, динамику энергии
- Жанры: поп, R&B, хип-хоп, рок, фанк, электроника, классика, джаз, китайский стиль

- Продолжительность треков и скорость генерации не раскрыты
- Партнёрство с Taihe Music Group

Попробовать

#text2music

VK | MAX
👍8❤2😁2
ComfyOrg не выдержал конкуренции с Алексом

Выпустили свой MCP сервер в опенсорс, можно использовать на локальном комфи, раньше был только облачный

Ассистент видит твою локальную установку ComfyUI, кастомные ноды в том числе, все модели на диске

- пишет и редактирует граф ComfyUI естественным языком
- Управление моделями
- Отладка воркфлоу
- Пакетная генерация с перебором параметров (cfg, steps, sampler, seed)
- Работает с Claude, ChatGPT, Gemini, Ollama (офлайн), OpenRouter - любая LLM

- 178 MCP-инструментов, 36 скиллов, 55 установочных пакетов
- Самоопределение ComfyUI: авто-детект порта и пути
- macOS, Linux, Windows

github.com/Comfy-Org/Comfy-mcp

docs.comfy.org/agent-tools/mcp

github.com/Comfy-Org/comfy-skills

#comfyui #mcp

VK | MAX
😁18👍7😱1
MOSS-VL

Семейство открытых визуально-языковых моделей от OpenMOSS. Флагманская фишка - реалтайм-стриминг: модель смотрит на входящие кадры и отвечает параллельно, не дожидаясь конца видео

модель живёт в настоящем времени, а не смотрит запись постфактум. Вместо внешних планировщиков и опроса раз в секунду - три встроенных поведения: ответ в любой момент, проактивное молчание, своевременная коррекция.

• 11B параметров, контекст 256K
• Кванты FP8 и NF4

Гитхаб
HF
Демо

#vlm #realtime #fp8 #nf4 #dialog #interactive

VK | MAX
🔥5👍4
LocalMesh

Реконструкция 3D-гауссиан + текстурированный PBR-меш по одному входному фото. Локально на своём GPU

- Объект вырезается из фона автоматом
- Квад-топология — не треугольный суп, готово к скульптингу, сабдиву, анимации
- Сплат остаётся отдельным файлом (.ply) — открывается в Postshot, SuperSplat, Blender
- 4K текстурный атлас по запросу
- Теневая прокси-сетка для real-time сцен

- Модели: TripoSplat, MoGe-2, LaMa, IDArb, SD 2.1 + SuperMat — скачиваются один раз при первом запуске
- Windows 10/11, NVIDIA 8+ GB VRAM

- 7 дней бесплатно, потом $39 навсегда (lifetime licence, коммерческое использование включено). На реддите автор выдал комуто открыто промокод на пожизненное бесплатное использование, но это похоже на шутку:
IMPOOR

#gaussian #imageto3d #pbr
👍12😁3👀1