Нейронавт | Нейросети в творчестве
13.2K subscribers
7.17K photos
5.67K videos
51 files
7.26K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Hy Translation

Мобильное приложение от Tencent с оффлайн-переводом на Hy-MT2

• 33 языка
• 5 китайских миноритарных языков и диалектов
• перевод голосом и по фото
• полный оффлайн - без соединения с сетью
• уже в 12 странах, в российском нет

#ios #mobile #translation

MAX
👨‍💻3
Samsone от Samsung Labs

Три небольших аудиоязыковых модели для смартфонов: Samsone-99M, 134M и 356M. Принимают один или несколько аудиофрагментов с текстовым запросом, отвечают текстом. Презентация на Interspeech 2026 в Сиднее

• описывают звук, отвечают на вопросы о записи, сравнивают клипы
• понимают речь, музыку и звуки окружения
• несколько аудиофрагментов в любом месте запроса
• ответ только на английском строчными буквами - экономия на параметрах

• аудиоэнкодер Whisper-Tiny 9M + SmolLM2 на 135 или 360 млн
• клип усредняется до 50 аудиотокенов, разделитель SEP
• на Galaxy S25 Ultra: 125 токенов/сек у 99M, 87 у 134M, 39 у 356M
• обработка аудио 0.7-1.1 секунды

Авторы честно предупреждают: после дообучения модели теряют общие языковые навыки - это точечный инструмент, а не собеседник. Веса, код обучения и Android-приложение под Android 12+ открыты

Гитхаб
веса там же в релизах

#alm #mobile

MAX
👍3❤1
Nemotron 3 Diarization от NVIDIA

Финальная версия диаризации на 100 млн параметров - размечает речевые отрезки каждого участника на записи и в потоке

• до восьми собеседников - вдвое больше предыдущей Sortformer
• одновременная речь не мешает - модель выдает вероятности для каждого участника
• длина записи не ограничена - звук режется фрагментами
• метки анонимные: speaker_X с такой-то по такую-то секунду, без определения личности
• имена и роли привязываются логикой сценария в приложении

• моно-вход 16 кГц
• кадры по 80 мс, предсказание каждые 10 мс
• кэш голосов в потоковом режиме - собеседники запоминаются между фрагментами

HF
Демо

Спасибо @m_franz

#diarize

MAX
🔥10❤1👍1
Media is too big
VIEW IN TELEGRAM
Dramagic

ByteDance запустила платформу для производства коротких сериалов

Платформа ведет проект от разбора сценария и настройки персонажей и локаций до раскадровки и превью видео

• облик героев и окружения сохраняется между сценами
• командная работа над проектом
• полный пайплайн в одном месте: сценарий, персонажи, локации, раскадровка, превью

Тариф Basic - 600 долларов в год за 60 тысяч баллов, это примерно 44 минуты видео в 720p, то есть ни о чем

Доступ открыт по запросу

#directing #text2movie

MAX
🤔5🫡3
This media is not supported in your browser
VIEW IN TELEGRAM
Compose

Вайб-видеоредактор от Morphic Studio, монтаж сводится к разговору

От идеи и раскадровки до готового ролика

• агент выполняет правки по текстовым командам
• работает вместе с Canvas и Copilot в одном проекте
• веб-воркспейс без установки софта

#videoediting #agent #assistant

MAX
👍6👎2
This media is not supported in your browser
VIEW IN TELEGRAM
Skild AI учит гуманоидов футболу
Модель S1 дообучается в симуляторе без человеческих демонстраций. Соперники - предыдущие версии самого агента

#robot

MAX
👍4
This media is not supported in your browser
VIEW IN TELEGRAM
Recraft V4.1 Flash

Самая быстрая модель генерации изображений на рынке


1.3 секунды от промпта до картинки через API. Быстрый ответ меняет работу - не теряешь фокус между генерациями

• фото, портреты, сложные сцены и ранние концепты в стиле Recraft
• кнопка Refine - добивает картинку моделью V4.1 Pro в 2048x2048
• держит точные промпты - семь морковок так семь
• читает нюансы - intimate значит два человека, а не двенадцать

Refine в двух уровнях - subtle и moderate, держит композицию и свет

Если вдруг кому надо - уже подключили в партнерские ноды комфи

#t2i #i2i

MAX
👍4
This media is not supported in your browser
VIEW IN TELEGRAM
Agora-2 от Odyssey

Мультиагентная мировая модель. Генерирует общий интерактивный мир в реальном времени для до 20 участников - людей и ИИ-агентов одновременно. В пять раз больше, чем Agora-1, и уже не одна среда, а несколько
Odyssey-3 симулирует опыт одного участника, Agora-2 - общий мир с взаимодействием

• каждый участник видит симуляцию со своей точки зрения
• действия всех влияют на общее состояние мира
• сущность сохраняет свойства даже вне кадра - не пересобирается при возврате
• агенты обучаются RL - преследовать, обходить препятствия, подниматься

• тренировали на записях Diablo II от Blizzard - как игровой движок наоборот
• реальное время через потоковые пиксели
• рендер через flow matching со сбросом визуальной истории

Попробовать - на кнопку атаки реагирует очень вяло. посреди игры у меня перестала обновляться картинка. Карта работала, побегал немного следя за происходящим по точкам персонажей на карте. Умер

Как proof-of-concept - вполне уже убедительно. А так-то мы и в 90-x играли в диабло, и там гораздо интереснее все было, и игра летала на i386 не требуя B200 и 200 ГБ VRAM

Спасибо @Endorpheen

#world #interactive #gaming

MAX
👍7
#QI21

civitai.com/models/2957332/qwen-image-21-fix-v10 - #LoRA-фикс генерации Qwen Image 2.1 + сильно лучше эдит. Руки пока ненадежны

huggingface.co/Viggle/Qwen-Image-2.1-viggle-turbo - турбо лора #optimization

huggingface.co/NidAll/pruna-image-2.1-comfyui-loras
huggingface.co/spaces/akhaliq/Pruna-Qwen-Image-2.1 - набор турбо #LoRA от Pruna: 5 или 8 шагов вместо 40, до 6.3x быстрее генерация и эдит

huggingface.co/pottokao/Qwen-Image-2.1-PE-I2I-Heretic-GGUF
huggingface.co/pottokao/Qwen-Image-2.1-PE-T2I-Heretic-GGUF
абляции промпт-энхансеров #GGUF #uncensored #prompting

github.com/mozophe/ComfyUI-Qwen-Image-2.1-PromptEnhancer-MTP - энхансер промптов, 1.4–1.7x быстрее, есть heretic-версии. ~14–16GB VRAM

github.com/tngklp/ComfyUI-Prompt-Studio - универсальный промптер #minimaxH3, Qwen 2.1, #Krea2 #minimaxMusic3 №зкщьзештп

huggingface.co/alibaba-pai/Qwen-Image-2.1-Fun-Controlnet-Union
huggingface.co/alibaba-pai/Qwen-Image-2.1-Fun-Acc-LoRAs - подвезли #ControlNet-Union и 4-шаговые Acc #LoRA

civitai.red/models/2960750/qwen-image-21-character-design-sheet-maker-workflow - #workflow #charactersheet
👍13❤4
Zen Image Edit

Qwen-Image-2.1 есть у нас дома


на легком текстовом энкодере. Вместо родного Qwen3-VL-8B (17.5 ГБ) - Qwen3.5-0.8B и 158M адаптер внутри DiT. Целая папка diffusers без тяжелого энкодера, экономия почти 16 ГБ

• text-to-image, редактирование сцен и персонажей, прозрачный RGBA в одном пайплайне
• до нескольких референсов - первая картинка цель правки, остальные доноры
• подмена персонажа с сохранением позы и одежды цели
• работает в ComfyUI без 17.5 ГБ энкодера

• 1024 по умолчанию, 30 шагов
• ~17.5 ГБ пиковый VRAM, меньше с cpu offload

Ограничения: только английский, цифры на вывесках пишет с ошибками, не-фото референсы переносятся хуже. Демо и workflow для ComfyUI прилагаются

HF
Текстовый энкодер 0.6B
ComfyUI

#t2i #i2i #compact

MAX
👍9🤔4🫡2