Нейронавт | Нейросети в творчестве
13.2K subscribers
7.15K photos
5.66K videos
51 files
7.24K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
GLM 5.3

Новая модель Z.ai

• Terminal Bench 3.0: 4.6 → 28.3
• DeepSWE v1.1: 46.2 → 66.9
• Три уровня thinking: low / high / max, отключение мышления убрали

• Кодинг: +50% на внутреннем Z.ai Code Bench, #SOTA в опенсорсе на Terminal Bench 3.0 и Agents' Last Exam
• Внезапный буст кибербезопасности
• SOTA на CyberGym для поиска уязвимостей (84.5% против 77.2% у 5.2)
• На эксплуатации удваивает 5.2: ExploitBench 24.4 → 54.4, ExploitGym 29 → 105 задач
• Синтез окружений для RL, пайплайны сами генерят тренировочные среды и верификаторы

ZCode теперь официальный харнесс для 5.3
Чат - еще не завезли

Веса ждем через две недели

#agent #flagship #coding
🔥7👍2
EVIE-Preview-4.5B

Модель Tencent для визуального поиска по документам на базе Qwen3.5-4B

ищет релевантные страницы по запросу, глядя на картинки, а не на извлечённый текст. Эмбеддинги ультракомпактные, 128 измерений на токен, отсюда низкие требования к памяти и быстрый поиск.

• Поиск по сканам, PDF, таблицам, диаграммам и отчётам без OCR
• Мультиязычность - EN, FR, DE, IT, ES, PT, ZH и другие
• Zero-shot на новых языках и форматах

#SOTA на ViDoRe
• Обходит 8B модели, будучи вдвое меньше

Гитхаб
HF

#vlm #search #ocr

VK | MAX
🔥4👍1
CMD (Context-Matched Distillation)

Метод дистилляции для авторегрессивной генерации видео от NVIDIA. #SOTA среди авторегрессивных методов

Учитель и ученик получают одинаковый контекст: кадр оценивается по тому же префиксу и контролю, что был у студента при генерации. Раньше учитель видел весь клип целиком включая будущие кадры которых студент не видел, и супервизия разъезжалась с реальными условиями генерации

В итоге меньше шагов на генерацию, можно интерактивно вмешиваться в процесс генерации, задавать движение камеры и получать длинные сцены без поплывшего хвоста

- База: Cosmos-Predict2.5 2B
- Шесть чекпоинтов: chunk-1 и chunk-4 (короткие/длинные + камера-контроль)

Гитхаб
HF
Демо

#optimization #cameracontrol #interactive #t2v #i2v
👍7❤1
UPAL

Новый экстрактор локальных фич от ETH Zürich + Microsoft Spatial AI Lab

Одна легкая сеть одновременно находит ключевые точки, линии и дескрипторы

Применимо в SLAM, structure-from-motion, сопоставление изображений, 3D-реконструкция

#detection #sota

VK | MAX
1😁7👍5🔥1
Keenable

Месяц бесплатного поиска для ИИ-агентов

Релиз российсксих разработчиков из соседнего канала. Не очередная обертка над Google, свой индекс с нуля

Поисковый API для ИИ-агентов. Свой краулер, свой индекс на 100 млрд документов, своя инфраструктура заточенная под то как агенты читают, а не под синие ссылки для людей

- Качество поиска на уровне лучших, но дешевле соседей
- Задержка менее 250 мс
- Time Machine: поиск по срезу веба на произвольную дату в прошлом
- API, MCP и CLI на одном ключе
- Fetch Page Content: агент не просто получает ссылки, а читает страницы

- От $1 за 1K запросов @ 100 RPS+ (Frontier Tier)
- 100K бесплатных запросов каждому на месяц с запуска

#search #agent #api #giveaway #sota

VK | MAX
👍6
LLaDA-Image

Открытая модель 6B единая для генерации и редактирования изображений.

Текст → картинка, редактирование по инструкции, генерация по VQ-кодам, рендер текста. 50 шагов для качества, 4 шага для скорости (Turbo-версия)

- Текст на китайском и английском: постеры, надписи, заголовки — без иероглифической каши
- #SOTA на Qwen-Image-Bench

Гитхаб
HF
ComfyUI

#t2i #imageediting

VK | MAX
❤11👍3🤔1
WCDA (Weather-Conditioned Depth Anything)

Новый #SOTA в оценке глубины в плохую погоду. Depth Anything проваливается в туман, дождь, снег и темноте. DA-W чинит это через стилевой фильтр, который выделяет погодные условия и адаптирует модель под них, не ломая то, что она умеет в хорошую погоду

Гитхаб
HF

#image2depth #video2depth

VK | MAX
👍8🔥1
MiniCPM5-2B

Пока все гонятся за гигантами, OpenBMB выпустила компактную dense-модель на 2B, #SOTA в своем классе и обходит модели вдвое больше. Для мобилок, локального запуска и агентов на слабом железе

- 2B dense — влезает на ноутбук, телефон и edge
- SOTA в классе 2B: средний балл 53.9 — выше, чем у Qwen3.5-4B и granite-4.2-3B
- Кодинг, математика, длинный контекст, инструменты и агентские задачи - сильнейшие стороны
- Контекст 131K нативно
- Apache 2.0

Гитхаб
Демо

#mobile #compact #agent

VK | MAX
👍6🤔3😁2
Marigold V2

Оценка глубины по одному изображению, переработанная версия Marigold

Превращает DiT в инструмент оценки глубины. Выглядит многообещающе

- Глубина в один шаг: дистилляция из многошаговой flow-matching модели, с квантованием опционально
- Решает проблему размытия: шерсть, листья, тонкие края — то, что раньше размазывалось, теперь резкое
- Обобщается на непохожие данные
- Не только глубина: те же приемы дают #SOTA на оценке нормалей и разложении изображения на компоненты

- Два ключевых приtма: выравнивание внутренних представлений с семантикой + двухстадийный финтюн с Sinkhorn-лоссом

Гитхаб
HF
Демо

#image2depth #image2normals #image2pbr
👍8❤3🔥2
This media is not supported in your browser
VIEW IN TELEGRAM
CocktailASR-1 (Xiaomi)

Распознавание речи, #sota на мультиспикер, заявлены английский и китайский

В демо распознавание одного целевого говорящего в шумной обстановке. Сначала извлекает голос конкретного человека по короткому референсу потом расшифровывает его. Остальные голоса и шум игнорируются

- Двухстадийная обработка: извлечение голоса цели по референсу + ASR на чистом сигнале
- Работает в шуме с несколькими говорящими — фон и посторонние голоса не попадают в распознавание
- Короткий референс голоса (до 3 секунд) достаточно чтобы выделить цель

Гитхаб
HF
Демо

Спасибо @m_franz

#asr

VK | MAX
👍7🤷‍♂1
SplashSplat

реконструкция брызгающих жидкостей из реальных видео

Метод от EPFL, ETH Zurich, Google и Microsoft. Восстанавливает динамику жидкости из многокамерной съемки: семь калиброванных 4K-камер, 20 сцен с разными жидкостями и контейнерами.

Главный принцип - накладывать физическую структуру только там, где наблюдения могут ее ограничить. Маски кадров сливаются в уровень жидкости, перенос между кадрами дает поле скоростей, а по нему движутся лагранжевы носители, которые корректируются по новым наблюдениям и перезасеваются там, где теряется покрытие.

Обходит #SOTA в динамическом гауссовом сплэттинге на реальных и синтетических сценах. Движение физически правдоподобнее, тренировка дешевле.

Поддерживает новые ракурсы, временную интерполяцию и перенос стиля без повторной оптимизации.

Гитхаб ждем

#gaussian #reconstruction #styletransfer
🔥4👍2
PanoSeg3R

#SOTA Сегментация 3D-сцен из панорамных снимков без оптимизации под каждую сцену. Панорамы на вход, размеченное 3D-облако точек на выходе

• feed-forward: несколько панорам -> семантическая 3D-сегментация за проход
• стабильная геометрия и метки - байзлайны теряют сцены, модель держит близко к GT
• автосборка данных - размечает неаннотированные панорамы через SAM3, PanSt3R и VLM-фильтр
• zero-shot перенос улучшается на свежих данных

Разметка без датасетов с руками: панорама режется на кадры, SAM3 дает маски, PanSt3R - грубые классы, VLM отсеивает мусор

Код ждем

#segmentation3d

MAX
🔥6👍3❤1
DiarizationLM-Gemma-4-E4B

Модель пост-обработки диаризации говорящих от Google. Тонкий дотюн 4B Gemma, который исправляет метки спикеров и снижает ошибки диаризации.

Учит модель чинить короткие вставки (1-5 слов), сохраняя акустические якоря в длинных репликах. Статистически значимые улучшения WDER и cpWER на четырех бенчмарках.

• Исправляет метки говорящих в расшифровке
• Правит границы реплик и «backchannels» (короткие вставки)
• Держит личность спикера в длинных монологах без дрейфа
• Работает из коробки: подаёшь гипотезу с тегами, получаешь исправленную

• 4B параметров (против 8B у старшей версии), Gemma 4 E4B
• #GGUF Q4_K_M ~5.3 ГБ, статус — 2-4 битных квантизации
• #SOTA на Fisher, Callhome, ICSI, AMI (p<0.0001)

Гитхаб
HF
Демо

#diarization #asr
👍7
This media is not supported in your browser
VIEW IN TELEGRAM
Mistral Large 4 (Le Chonk)

Ах да, у Mistral же новый флгман. Крупный MoE: ~1 трлн параметров, 52B активных. Неофициально зовут Le Chonk — отсылка к мему про фейковую гигантскую модель Le Chaton Fat

• Мультимодальность: текст, картинки, документы, схемы
• Кодинг и агенты — Coding Agent Index 49.8%, выше DeepSeek V4 Pro и Qwen3.8 Max
• Кибербезопасность — топ-5 в мире по Cyber Index, 82% на тесте «воспроизведи и заплатчи уязвимость»
• Финансы и право — обходит GPT-6 Astra по тестам vals.ai
• Visual grounding — Dense 200: 42% против 41% у GPT-6-Astra
• Контекст до 1 млн токенов

• ~1 трлн параметров, 52B активных
• Public preview через API в Mistral Studio
• Веса — в конце октября

Новая открытая #SOTA среди open-weight моделей США и Европы. Интересно заметит ли ктонибудь эту "соту"

#multimodal #flagship

MAX
❤4👍4😁3
Youtu-Parsing-Omni

Компактная омнимодальная парсинг-модель от Tencent: один 5B трансформер превращает в структурированный JSON почти что угодно — документ, картинку, график, чертеж, аудио и видео.

• Парсинг документов: лейаут, текст, таблицы, формулы, порядок чтения
• Картинки, графики, блок-схемы, геометрические фигуры
• Аудио: ASR, спикеры, сцены, акустические события
• Видео: кадры, OCR+ASR, отчёт о клипе
• Один унифицированный JSON-конверт для семи семейств задач
• Распознавание химструктур (ChemOCR) и нот (PDMX)

• 5B параметров, один энкодер на все модальности
• #SOTA на OmniDocBench v1.6 (96.96)
• Лучшая опенсорс на OmniParsingBench (75.08), после Gemini-3-Pro
• vLLM-плагин для быстрого сервинга

github.com/TencentCloudADP/youtu-parsing
learn2play.fun

#omnimodal #multimodal #any2json #vlm #alm

MAX
❤6👍5
Media is too big
VIEW IN TELEGRAM
GroundingPI

4B фундаментальная модель на визуальных примитивах для локализации объектов — детекция, позиция, OCR и другие.

• Локализация точками и боксами как квантованные координаты в общем словаре
• Несколько grounding-задач: детекция, pointing, OCR, layout, GUI
• Как визуальный бэкбон улучшает робоманипуляцию и автопилот
• #SOTA на 34 бенчмарках, 11 возможностей восприятия: средний 73.68% против 71.54% у GPT-6 Astra

GroundAnything
Быстрая локализация через параллельное декодирование на диффузии

GroundAnything VLM
Высокая точность локализации авторегрессивной VLM

github.com/groundingpi/GroundAnything
huggingface.co/GroundingPI
huggingface.co/spaces/GroundingPI/groundanything-vlm

#vlm #ocr #detection

MAX
👍9
This media is not supported in your browser
VIEW IN TELEGRAM
SchemaPose

Модель для оценки категориальной 9D-позы объектов по одному RGB-изображению. NeurIPS 2026, #SOTA среди RGB-методов.

Код ждем

#image2pose

MAX
🔥6
This media is not supported in your browser
VIEW IN TELEGRAM
UniForge3D

Метод, который одновременно реконструирует и генерирует 3D-объект из разреженных снимков без поз камеры. Наблюдаемую геометрию сохраняет, невидимые области достраивает по выученным приорам.

• Реконструкция работает в системе координат камеры, генерация — в каноническом пространстве, из-за этого прямое взаимодействие геометрии ломается
• Если учитывать все виды сразу без оценки их полезности, к геометрии подмешивается лишнее и страдают мелкие детали

• #SOTA по внешнему виду и геометрии на Toys4K и GSO
• Работает по разреженным снимкам без известных поз

huggingface.co/xibushu/UniForge3D
github.com/xibushu/UniForge3D

#scenereconstruction #imageto3d

MAX
🔥9❤2👍2
Timestral от Mistral

Семейство открытых базовых моделей для прогноза временных рядов. Версии на 5M, 28M, 123M и 209M параметров. Работают в режиме zero-shot — без дообучения под конкретный ряд

• Прогноз одномерных и многомерных рядов
• Ковариаты: только прошлые и известные на будущее
• До 32 768 шагов истории на входе и до 1024 шагов прогноза за один проход

• #SOTA zero-shot на GIFT-Eval, TIME и fev-bench
• Инференс на PyTorch, CPU или GPU

Зачем нужны такие модели
• Прогноз спроса и продаж, планирование закупок и склада
• Нагрузка на серверы и сети, планирование мощностей
• Финансовые и страховые ряды, оценка рисков
• Промышленность: датчики, вибрации, обслуживание по состоянию
• Энергетика: выработка, потребление, цены на рынке
• Медицина: мониторинг показателей, раннее предупреждение

huggingface.co/mistralai/Timestral-209M
github.com/mistralai/timestral

#timeseries

MAX
🔥7👍4