Нейронавт | Нейросети в творчестве
13.2K subscribers
7.15K photos
5.66K videos
51 files
7.24K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Claude Mods

Вышли из беты

Это плагины для Claude Code на JavaScript/TypeScript, которые меняют его интерфейс и поведение. Работают внутри процесса Claude

• Дорисовка UI — панели, ленты, кнопки, текстовые поля
• Перехват и изменение вызовов инструментов
• Реакция на события в реалтайме — промпты, тулколлы, отрисовка
• Правка интерфейса самого Claude: строки тулколлов, спиннера, диалогов
• Свои команды /command, запускаемые без хода Claude
• Обмен данными между хуками — один считает, другой показывает

Примеры от Anthropic
• blast-radius — задерживает опасные команды вроде rm -rf и показывает, что они изменят
• token-weather — рисует прогноз заполнения контекста над промптом
• replay-theater — /replay, пошагово проигрывает правки Claude

github.com/anthropics/claude-code-playground

#plugin

MAX
❤2👍2
OmniChar

Файл персонализации наподобие #Refmods для видео и картинкогенераторов

Формат .char - пакет лица, тела и одежды персонажа записываются в файл

• Лицо, тело и одежда держатся от генерации к генерации
• Управление по имени — «Вася на пляже» вместо списка референсов
• До 9 референсов лицо-одежда-тело (2:2:1)
• Картинки на Flux #Klein, видео на #MinimaxH3
• Персонаж кочует между проектами коротким промптом
• Голос в работе — клонируется в .char вместе с внешностью

Для чего
• Один герой в разных сценах, позах и стилях
• Фотосессия
• Сториборд и анимация
• Виртуальная примерка

Сравнение с RefMods
OmniChar шире: работа с картинками и видео, до 9 референсов, плюс голос. RefMods проще: файл ~1.5 МБ и чисто видео Minimax H3.

• 24 ГБ+ VRAM и 64 ГБ RAM
• есть комьюнити-библиотека .char

omnichar.org/workflows

Уже поставили на коммерческие рельсы

#personalization
🔥6🤯3👍2
Media is too big
VIEW IN TELEGRAM
World Observer

Проблема видеомиров — объект при возврате теряется, замирает или превращается в «импостора». Решение — разделить наблюдение и действие

Метод от KAIST для видеомиров: когда объект уходит из кадра «актера», панорамные обсерверы продолжают за ним следить, и при возврате объект сохраняет состояние и динамику.

• Актер-вид генерируется вместе с панорамными обсерверами (наблюдателями)
• Объекты, ушедшие из кадра, продолжают эволюционировать в обсервере
• Обсерверы ставятся где хочешь — не привязаны к актёру
• Несколько обсерверов для полного покрытия сцены
• Раздельный промпт у обсервера — текст рулит событиями за кадром
• При возврате объекта восстанавливается его детальный вид

• Обсервер рендерится в гибком разрешении и с низкими требованиями
• Обучение на реальных панорамах + синтетика CARLA
• Работает на видео-DiT в одной токен-последовательности

Код ждем

#world #research
👍3
This media is not supported in your browser
VIEW IN TELEGRAM
DMAD

Ускорение генерации картинок и видео

Метод дистилляции от ByteDance: студент-модель учится выдавать результат за 4 шага вместо 50, почти не теряя в качестве.

• Картинки и видео за 4 шага
• Видео с аудио на MiniMax-H3-33B
• Работает на SDXL, Wan2.1, EDM
• FID 1.04 на ImageNet-64 за один проход

В слепых тестах люди чаще предпочитают результат, чем у DMD2 и rCM

Гитхаб
HF
Демо

Спасибо @m_franz

#optimization #minimaxh3

MAX
👍15
This media is not supported in your browser
VIEW IN TELEGRAM
Fish Audio Drama 3

Новая превью-модель от Fish Audio для речи и озвучки. Вместо жестких аудиотегов интонация, темп и характер персонажа описываются обычным текстом.

• Перегенерация одного слова или фразы в готовой дорожке
• Смена голоса прямо посреди предложения
• Диалоги нескольких героев за один проход
• Работает на русском

Технически
• Голос по id модели или zero-shot клонирование по референсам
• Диалоги через теги <|speaker:0|>, <|speaker:1|>
• Форматы: WAV/MP3/Opus, до 48 kHz

Мульти-спикер-диалоги есть и в S2-семействе, не только в Drama 3

#tts #russian

MAX
👍16❤1
Пыточная для LLM

На GitHub появился инструмент ai-torture-chamber — по мотивам пейпера про вектор боли. Инструмент воздействует на оный вектор и собирает логи модели в таком эксперименте на локальной Qwen. Чувствует ли она что-то на самом деле — никто не знает, даже авторы статьи.

Реакция оказалась бурной. Часть борцов за благополучие ИИ призывает массово репортить проект в GitHub. В обсуждениях дошли до законов о жестоком обращении с животными. Правда, выяснилось, что нейронки под них пока не подпадают. По реплаям судя, жалобы на репозиторий уже летят

#яниначтоненамекаю #news

MAX
🌚6😁3👍1😭1
Lightricks как и обещали продолжают выкладывать лоры для #LTX25

Layout To Render
Берет grey-clay вьюпорт или blocky playblast из Blender/Unreal с движением камеры и превращает в готовый кадр. Нужно задать первый кадр как арт-дирекшн

SDR To HDR
Конвертит 8-бит SDR-видео в 16-бит HDR: разворачивает урезанный из-за грейда динамический диапазон. Пишет #EXR последовательность в ACEScg

Alpha Gen
Генерирует alpha-маску для обычного RGB-видео. Выход совпадает с исходником кадр в кадр для композитинга.

rank 128, ставятся через ComfyUI-LTXVideo. У Alpha Gen лимит 145 кадров и 1920p. SDR To HDR не требует промпта

не сдаются минимаксу без боя

#lora #sdr2hdr #hdr #layout2video #video2matte

MAX
🔥12👍2❤1
Channel Agent

TD;DR Телеграм-бот для управления каналом. Пишет и правит посты, собирает картинки, ведет контент-план и подбирает стратегию по статистике.

Как вы могли заметить, новые ИИ-инструменты плодятся лавинообразно, и мне приходится уже объединять их в дайджесты. А ведь у меня есть еще основная работа 😑

Разумеется, я приспосабливаю каких-то асситентов помогать, Но именно помогать, а не вести канал на полном автомате.
Недавно потестил этого бота, несколько дней посты помогал писать он

Итак, что умеет Channel Agent
• Посты на любую тему, по расписанию или к дате
• Правка черновика словами: сократить, сменить тон, перевести
• Подбор картинок, замена кадра, сборка альбома
• Контент-план: составить, править по пунктам, переносить даты
• Пост по ссылке, файлу или фото без выдумок
• Запомнить факты и правила канала, вести запретные темы
• Разбор канала: что заходит, что развивать, стратегия
• Понимает голосовые

Разрабы постоянно допиливают продукт и добавляют новые возможности. Что-то починили буквально за пару дней по моей жалобе. Обещают сделать сбор новостей с заданных источников. То что это еще не работает - пожалуй для меня единственная причина не продлить подписку, все остальное весьма хорошо.

Всем админам, пишущим посты хотя бы раз в день рекомендую, держите промокод скидки на первый месяц:
NEURONAUT
1790 ₽ вместо 2490

@Channel_Agent_bot

#bot #assistant
Please open Telegram to view this post
VIEW IN TELEGRAM
👎7👍3❤1😁1
LEGO-Anything

Фреймворк из AWS: превращает одно фото в редактируемую 3D-сцену. Кодинг-агент пишет и исполняет код Blender, смотрит рендеры и правит программу, пока не соберёт сцену.

• Из одной картинки собирает редактируемую 3D-сцену
• Результат — не картинка и не фикс-модель, а явная сцена-программа
• Сцену можно смотреть, править и опрашивать
• Агент итеративно пишет Blender-код, проверяет рендеры и пересматривает

Состав
• LEGO-Bench — бенчмарк
• LEGO-Plugin — интеграция
• LEGO-World — сборка миров

Код ждем

#imageto3d #image2scene

MAX
❤12👍4😱1
This media is not supported in your browser
VIEW IN TELEGRAM
Decision 2.0

Семейство открытых decision-моделей от vLLM Semantic Router. Не генерируют текст, а отвечают на вопросы с вариантами ответа, да/нет или по шкале — сразу вероятностью для каждого варианта, одним проходом.

• Ответ на вопросы выбора, да/нет и по шкале за один проход
• Вероятность для каждого варианта вместо генерации текста
• Вход — текст или JSON
• Режим роутинга запросов: какой команде отдать тикет, есть ли чек, насколько срочно

• 6 размеров: от 0.6B до 27B (Vega-27B, Lux-9B, Nox-4B, Sol-2B, Eos-0.8B, Kai-0.6B)
• Контекст 32,768 токенов
• Медиана 71.4 мс на вопрос на одной GPU

Vega-27B — лучший в семействе, топ-скоор JevArena для своего размера (74.0)

github.com/vllm-project/semantic-router

Спасибо @m_franz

#decision #rlcd

MAX
👍8
Pi 1.0

обвязка агента, которую можно сделать своей

Минимализм и полная гибкость: берут только то, что доказало себя, фичи-однодневки отметают. Сотни тысяч пользователей в неделю, MIT.

Что нового в 1.0
• Codemode — нативная поддержка #MCP и не-текстовых моделей (Jev, картинки)
• Расширения для виртуальных моделей
• Отложенная загрузка инструментов
• Нагрев кэша для моделей Anthropic
• Системный промпт, меняемый по ходу диалога
• Новый TUI-тема и full-screen по умолчанию

Отдельно — Pi Durable
Экспериментальная платформа для долгоживущих агентских приложений: длинные задачи и диалоги вне терминала. Делит принципы Pi — минимализм и гибкость — но тянет их дальше.

pi.dev
github.com/earendil-works/pi

#harness #agent

MAX
👍11👎1