Нейронавт | Нейросети в творчестве
13.3K subscribers
7.21K photos
5.68K videos
51 files
7.3K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Muse Voice Transcribe

Meta (запрещено в РФ) Superintelligence Labs выкатила первую модель распознавания речи в реальном времени. Разбирает голос, диаризацию и определение конца фразы на лету без задержек

Возможности:
• потоковое распознавание речи
• диаризация 20+ говорящих одновременно
• определение конца реплики в потоке
• переключение между языками внутри одной фразы
• настройка на конкретные имена и термины

Поддержка 25+ языков. Русский не указан. В демонстрации модель разбирает восемь человек, говорящих одновременно, и правильно понимает кто что сказал.

Отдельно точность подтягивается контекстом: если упомянуть конкретное имя или место, модель его узнает и не путает с похожими словами

#stt #diarize #realtime

VK | MAX
👍4🤷‍♂1
Media is too big
VIEW IN TELEGRAM
Atlas

Новая модель мира от World Labs для пространственного интеллекта. Предобучена с нуля работать сразу с текстом, изображениями, видео и 3D в общем пространственном контексте: по всему увиденному генерирует что будет дальше и держит сцену согласованной в 3D.

• генерация с управлением камерой - видео из одного или нескольких снимков с точным заданием ракурса
• реконструкция сцен - из нескольких фото восстанавливает новые ракурсы и явную 3D-геометрию, обходя специализированные модели реконструкции
• симуляция пространства и времени - перекадрирует видео и готовит данные для робототехники по принципу реального в симуляцию
• генерация изображений - текст в картинку и в 360-панораму, сложные промпты, рендер текста, разные стили

• видео до 1 минуты при 1440p
• реконструкция по 1-100+ входным изображениям

Поклянчить ранний доступ

#world #image2world #gaussian
🔥9👍1
Prompting Claude Fable 5.1

Официальный промпт-гайд
Как изменилось поведение модели между Claude Fable 5.1 и Claude Mythos 5.1 и что с этим делать в промптах для агентов

• effort уровни low medium high xhigh max дают другой объём размышлений чем раньше - тестировать заново
• модель реже шлет промежуточные апдейты между вызовами инструментов, может молчать минутами - статус проси явно
• в agent loops лучше батчить независимые tool calls за один ход
• история диалога должна быть append-only, иначе запрос падает с ошибкой bound to a different conversation
• на low effort модель реже лезет в search и retrieval, чаще отвечает по памяти
• безобидные запросы на код иногда получают stop_reason refusal из-за safety классификаторов
• на xhigh и max для длинных ответов нужен запас по max_tokens

#prompting #guide

VK | MAX
👍2
Orbis

непрерывная интерактивная генерация видео из текста или картинки. Сюжет меняется командами на ходу без остановки потока. Многоуровневая память держит персонажей, окружение и стиль в длинных сессиях. Продолжение видео, синхронный звук. 18fps в 832×480, апскейл до 4K

Демо
———

H3-World

#MiniMaxH3 научили реагировать на клавиши движения и камеры. Команды переводятся в текстовые инструкции к моментам видео, отдельный модуль действий не нужен, только #LoRA

Пока генерация по последовательности клавиш, не real-time.

Код
HF

Спасибо @Endorpheen

#interactive #world

VK | MAX
👍6❤4🔥1
Nemotron 3 Diarization preview

NVIDIA выложила превью модели для диаризации речи - определения, кто и когда говорит в аудиозаписи. Работает на архитектуре streaming-sortformer, то есть умеет размечать спикеров в потоке, а не только по готовой записи.

Диаризация — это процесс определения, КТО говорит в аудиозаписи. Система анализирует звук и разбирает его по голосам: выделяет разные говорящих, отмечает моменты, где они начинают и заканчивают говорить

Доступ по запросу, лицензия nvidia-software-and-model-evaluation-license: использовать можно только для внутреннего тестирования, не в продакшене

Доступны блокноты для Google Colab и Kaggle, интеграция с библиотекой NeMo.

#diarize

VK | MAX
👍4❤1🔥1🤔1
VibeVoice-Streaming ASR

Потоковая модель от Microsoft транскрибирует речь по мере поступления аудио. Плюс сразу помечает, кто из спикеров что сказал.

Из полезного - поддержка кастомных hotwords, то есть можно заранее задать слова и имена, которые модель должна распознавать точно (имена собственные, термины, названия компаний). Работает с 10 языками включая русский

Гитхаб
Попробовать

#stt #asr #russian #streaming

VK | MAX
👍13
AetherScale

Кастом пак #ComfyUI от подписчика @vj_vizart

Апскейл и восстановление видео, HDR-тонирование, анализ движения, экспериментальный #DLSS5

• апскейл через NVIDIA VFX с подавлением шума, артефактов и размытия
• CUDA HDR-тонирование и цветокоррекция
• анализ движения кадр за кадром со сценами-разрезами и компактным хранением в FP16
• экспериментальный DLSS 5 Neural Rendering с режимами вывода от 1x до 3x

#upscale #videorestoration

VK | MAX
👍11🔥5
Накопилось по #minimaxH3 - часть 14

gist.github.com/alisson-anjos/b300f2b90e65cf85846519d78b660cd3 - патч для AI Toolkit: align_video_refs делает контрольное видео V2V-гидом вместо свободного референса

huggingface.co/KennethFal/vh5tape-vhs-lora-minimax-h3 - #LoRA на VHS 80-х

huggingface.co/prithivMLmods/MiniMax-H3-Facial-Realism-CloseUp - LoRA на микромимику и детали лица крупным планом #realism

jurn.link/dazposer/wp-content/uploads/2026/08/H3-Minimax-LongVideos-OLD_VERSIONinc-demo-workflow-for-ComfyUI.zip - воркфлоу для H3-LongVideos, старая версия ноды в комплекте

github.com/blendi-remade/interdimensional-game - фильм- игра на real-time версии Max. Каждый кадр генерируется на ходу

huggingface.co/OpenVDN/vdn-minimax-h3 - VDN-Minimax-H3: гибрид linear + softmax attention для скорости и качества на 8 шагах | Comfyui Спасибо @m_franz

github.com/lihaoyun6/ComfyUI-H3VAE_TRT - TensorRT VAE для H3: ускорение декодирования до ×1.7, небольшое снижение качества

#optimization
👍14
Spline V2

3D Редактор с гауссианами переписали с нуля на WebGPU и открыли для ИИ-агентов

• Агент строит сцену - объекты, материалы, свет, камеры, частицы, состояния и события
• Пишет код там где так проще - генерирует HTML и JS и подключает к сцене
• Раскладка через constraint solver - говоришь "рядом", "сверху", "напротив" - он решает координаты
• Подключение через MCP

Материалы получили полный PBR-проход, HDR-освещение, скай-рефлексы и планарные зеркала. Добавили Physical Sky, HDRi Sky, туман по высоте, слои Dust и Vertex Color, систему волос с ветром и слипанием прядей

Попробовать

#3dediting #gfaussian #hdr #pbr
🔥7👍3