Зерно с песком

Раз уж сегодня музыкальный марафон вкину такой наброс.

Тут вот вечно ругают Суно за песок.
А мне норм, я слушаю прежде всего "музыкальную мысль", новизну, фишки, аранжировку, драйв.
Если качает, но песок норм.

А вон в кино, например, меня всегда бесило пленочное зерно. Тот же песок, вид из глаза, а не из уха.

А все такие эстеты: "ооо, зерно, круто, стильно, сеанс". И ну носиться с этим зерном как с фетишем.

А мне оно мешает. И не нравится.

Это я к чему. Ну песок и песок. Кому-то фу, кому-то ок. Вкусовщина.

Отстаньте от Suno уже. Слушайте музыку, а не блох.

Цоя на кассетах слушали и не ворчали за частотки...

@cgevent

Grok 4.6 вышел

Главный фокус – долгоживущие агенты и интерактивная/визуальная работа: модель должна держать задачу на много шагов, а не выдавать один хороший ответ.

– AA Intelligence Index: 61 против 56 у Grok 4.5. Это ровно уровень GPT-5.6 Sol Max (61) и почти Fable 5 Max (62). Скачок за месяц серьёзный. Прикольно, что в табличке в скриншоте не боятся показывать бенчмарки, на которых не занимают 1 места. Сейчас все в тройке, но при этом цена вообще мизерная - $2 / $6 за 1M токенов, есть fast-вариант вдвое дороже. Первую неделю – 2x включённого лимита в Grok Build и Cursor.
– Доступ сразу везде: Cursor, Grok Build, API, OpenRouter, Vercel, Cloudflare.
– Тренировали интересно: Grok 4.5 использовали, чтобы перегенерировать SFT-траектории для 4.6, а мусорные трейсы отфильтровали модельными проверками. Модель учит модель.

В кодинге пока чуть отстает, а вот в работе белых воротничков - лидер: GDPval-AA v2 — 1753 (у Fable 1741, у GPT 1728), AA-Briefcase – 1577, и особенно Harvey LAB на юридических задачах: 15.8% против 11.3% у Fable и 2.5% у GPT-5.6. Разрыв в шесть раз.

Кажется это сейчас лучший вариант для длинных агентов над документами и офисной работой: разбор договоров, заявок, отчётности.

x.ai/news/grok-4-6

Для Минимакс и ComfyUI гиков.

Kijai оптимизировал MiniMax H3 VAE прямо в core ComfyUI, PR уже смержен. До этого VAE при encode/decode держал в памяти слишком много полных копий видео, из-за чего пик VRAM и RAM рос почти линейно с длительностью ролика. Теперь encode/decode идут чанками, а готовые куски сразу стримятся в выходной буфер. Для длинных видео это особенно важно.

На тесте 175 кадров, 1344×768 цифры такие:

VAE encode: VRAM peak 5.71 → 2.40 ГБ

VAE decode: VRAM peak 3.49 → 0.61 ГБ

reserved VRAM на decode: 4.15 → 0.94 ГБ

RAM peak на decode: +7.09 → +2.32 ГБ

скорость почти не изменилась: encode 40.5 → 40.9 с, decode 14.6 → 13.9 с

выход заявлен bitwise identical исходной реализации.

Ключевой момент: после этого патча decode VRAM становится практически независимым от длины ролика, потому что ComfyUI больше не собирает целиком весь decoded video в GPU memory. Для нищебродских 12-16 ГБ карт это может быть выходом.

На r/StableDiffusion уже появился отдельный свежий тред с теми же измерениями. Реддитские подтверждают, что это обычное обновление ComfyUI, отдельный VAE или новый workflow не требуется. При этом в комментариях есть предупреждения, что предыдущие обновления H3 ломали некоторые custom nodes, так что Spectrum/прочие патчи лучше тоже держать свежими.

https://www.reddit.com/r/StableDiffusion/s/5X5CKZMrii

@cgevent

Flux.3 Video - бесплатно!

Гугл немного покусал Чорный Лес - до конца воскресенья генерации Flux.3 у них на playground бесплатны.

https://dashboard.bfl.ai/playground

Но.

1. Надо залогиниться как нибудь.

2. На фоне этого акта чудовищной щедрости playground надёжно прилёг.

У меня вот так: Generation times may be longer than expected due to high demand for FLUX 3.

Пробуем, может повезёт.

Хорошая новость в том, что нам вот-вот обещают:
4K, video editing, and multiple images & videos as reference input

Мне нравится август!

@cgevent

Wan 3.0 начинают раскатывают по API

Сейчас подтверждённо доступен:

WaveSpeedAI - LIVE, Playground + API.
480p - $0.06/сек
720p - $0.12/сек
1080p - $0.24/сек.

Pixazo:
480p - $0.043/сек
720p - $0.085/сек
1080p - $0.17/сек.

wan.video - официальный Public Beta. Цена в публичном интерфейсе зависит от кредитной системы/аккаунта.

VivaReel - Wan 3.0 доступен через пользовательский интерфейс.

Фал и репликейт - coming soon

Ссылки:

https://wavespeed.ai/collections/wan-3.0
https://www.pixazo.ai/models/wan
https://help.aliyun.com/zh/model-studio/wan3-0-video
https://wan.video/
https://vivareel.ai/

@cgevent

Мемные миры

Зацепило. Не просто обычный оживляж мемов и I2V, а разметка и монтаж.

Подробнее про воркфлоу и промпт тут:
https://x.com/Flovaai/status/2087541198529683866

Там как бы:
reference image → Flova задаёт режиссуру/движение камеры → Seedance 2.5 генерирует продолжение сцены → модель удерживает персонажей и перестраивает композицию → псина

@cgevent

Ну, за Фотошоп

В последнее время слои в генераторах появляются все чаще: ideogram, Qwen Layered, Stability AI (Лора для Квена, писал вчера).
И вот уже долгожданный апдейт для Seedream 5.0 Pro.

Там появился Layer Separation - модель берет готовую картинку и автоматически разбирает ее на независимые слои: персонажей, предметы, фон и другие элементы. На выходе получаем отдельные PNG с прозрачностью, которые можно двигать, удалять и редактировать независимо друг от друга. Через fal можно получить от 2 до 17 слоев, а промптом указать, что именно нужно отделить.

На fal функция уже доступна в Playground и API. Цена считается за полученные слои: $0.03375 за слой для изображений до 1536×1536 по площади и $0.0675 за слой выше этого размера. То есть разбор картинки, например, на 10 слоев обойдется примерно в $0.34 или $0.68.

Попробовать: https://fal.ai/models/bytedance/seedream/v5/pro/layerize

API: https://fal.ai/models/bytedance/seedream/v5/pro/layerize/api

Официальный анонс Seedream 5.0 Pro: https://www.byteplus.com/en/activity/seedream5-0

@cgevent

DeepSeek Harness

DeepSeek официально выложили DeepSeek Harness (dsh) - свой open-source харнесс для AI-агентов.
Главная идея у них буквально «everything is a plugin»: модель, инструменты, skills, сессии, sandbox, политика разрешений, хранение данных и даже интерфейс собираются как плагины. По сути это собственный аналог инфраструктурного слоя вокруг Claude Code / OpenCode / Codex-подобных агентов.
Причем Harness напрямую связан с новыми DeepSeek V4. В официальной документации DeepSeek указано, что V4-Flash на coding/agent-бенчмарках тестировали именно через DeepSeek Harness в minimal mode, с max reasoning effort, top_p=0.95, temperature=1.0. Результаты у V4-Flash заявлены приличные: Terminal Bench 2.1 - 82.7, DeepSWE - 54.4, Toolathlon Verified - 70.3, DSBench-FullStack - 68.7.

Уже можно запускать локально:
npx @deepseek-ai/dsh web
После этого поднимается Web UI на 127.0.0.1:3080. Есть и headless-режим, sandbox, shell/terminal tools, persistence, credentials, approval policy и возможность подключать другие модели через плагины. Пока статус Developer Preview.

Одновременно выкатили V4 Pro из превью под лицензией MIT

https://github.com/deepseek-ai/deepseek-harness

https://github.com/cordiverse/paper

Тут DeepSeek V4 Pro 0813

А почему такая странная фотка из отпуска в заголовке?
А просто эта странная шняга на поясе тоже называется harness (трапеция)...

@cgevent

Для Минимаксеров: ComfyUI Minimax-H3 FaceRefine

Улучшатор маленьких лиц, которые обычно портятся.

- tracks, crops, regenerates faces at native resolution to fix distance-blurring
- YOLOv8 + InsightFace for identity-locked tracking
- img2img latent injection + temporal denoise scaling
- влезает в 12GB VRAM via GGUF.

https://github.com/Carasibana/ComfyUI-H3-FaceRefine

@cgevent

#Нейропрожарка

Тизер к (существующему) короткому метру "MOTHER". (12 минут)

Автор: Ник Костомаров

В данный момент фильме поправляются мелочи и после хотим отправить на несколько ИИ фестивалей, поэтому пока не показываем публично.
Цель: попробовать свои силы в качестве сценариста и режиссера + для студии проработать пайплайн создания подобных фильмов.
Изначально была идея делать это на Клинге, Гугле, но сразу поняли, что генераций будет много, поэтому полностью отказались от платных и построили весь пайплайн на ЛТХ 2.3
Да, возможно он далеко не топовый, но зато бесплатный, поэтому генерить могли столько сколько было нужно.
Были написаны инструменты автоматизации запускающие генерацию прямо из Нюка в комфи и обратно
Картинки все генерились ГПТ. Все звуки, голоса и музыка ЭлевенЛаб. Липсинг везде родной.
Признаюсь много было ошибок в начале, пока выстраивали, настраивали и т.д.
Мое личное заключение - далеко от идеала. Но учитывая, что это мой первый проект + бесплатные модели + опыт полученный в процессе производства, доволен.

@cgevent

Рыбаков что-то знал...

Там Suno Studio обновилсо.

Завтра бахну.

P.S. для названия нового музыкального стиля просто отлично, ящетаю...

@cgevent

За Суно. Много.

Бахнули Suno Studio 2.0 - большое обновление браузерной студии, которая теперь уже всерьёз пытается изображать полноценную DAW, а не просто место, где можно немного поковырять сгенерированный трек.

Главная новость - нормальная работа с MIDI: его можно импортировать, записывать и редактировать прямо на таймлайне, подключать MIDI-клавиатуры и контроллеры, а сами MIDI-клипы использовать как промпт(!) для новой генерации аудио. То есть сыграл аккорды или мелодию - и Suno может на их основе продолжить партию или сгенерировать новый кусок. Есть musical typing с обычной клавиатуры, арпеджиатор и chord mode.

Заодно Studio обросла вполне взрослыми инструментами: встроенный wavetable-синт, автоматизация параметров, EQ, компрессия, delay, distortion, reverb, включая sidechain compression и convolution reverb.

Но главный аттракцион - Chat Bar в бете. Ему можно человеческим языком заказать новый звук, пресет синта, обработку вокала или вообще собственный эффект-плагин, который потом сохраняется в аккаунте. Чат понимает контекст текущего проекта и способен сам собрать цепочку обработки.
Плюс обновили stem separation, можно импортировать свои аудиофайлы и стемы, экспортировать песню целиком, отдельные дорожки или выбранные участки.

До Ableton или Logic, конечно, пока как до Исландии - например, сторонние VST-плагины Studio 2.0 пока не понимает.
Но направление любопытное: Suno постепенно метит в AI-first музыкальную рабочую станцию.

А теперь жиза. Доступ к Studio остаётся только у подписчиков Premier.

Причём именно в Premier Сунченко запирает всю новую игрушку: Studio 2.0, MIDI, плагины, автоматизацию, Chat Bar, новые эффекты и DAW-интерфейс. В комплекте 10 000 кредитов в месяц, примерно до 2000 генераций песен, коммерческие права, приоритетная очередь и прочие возможности. При этом экспорт из Studio заявлен без лимитов по количеству и весьма приличный - multitrack/stems в 32-bit / 48 kHz.
Кстати, за создание собственных плагинов через Chat Bar ПОКА не расходются кредиты.

https://suno.com/blog/studio-2

https://suno.com/studio-welcome

@cgevent

Minimax Music 3. Open Source!!

Музыкальная тема не отпускает, будем жечь дальше, хотя там вышла Gemini 3.7 Flash и GLM 5.3
Их позже обсудим.

Для ботов: ACE < Minimax < Suno.

Для тех, кто физическим не может в длинные тексты: MiniMax Music 3 - новая локальная open-weight модель, которая уже завелась в ComfyUI и умеет генерировать длинные полноценные песни с вокалом. Под капотом гибрид: 8B LLM на базе Qwen3-8B держит структуру трека, 0.6B LLM занимается локальными деталями, а Flow Matching + Flow-VAE превращают это в аудио.

Теперь для гиков.

Технически MiniMax Music 3 устроен заметно интереснее обычных audio-token моделей. Под капотом гибридная схема: 8B LLM на базе Qwen3-8B отвечает за длинную структуру трека, развитие куплетов, припевов и общую музыкальную логику; отдельный 0.6B LLM дорисовывает более локальные, покадровые акустические детали. После этого звук не декодируется напрямую из токенов: объединенные hidden states идут в 2.4B Flow Matching-модуль + Flow-VAE, которые уже синтезируют финальное аудио.

Уже есть поддержка ComfyUI

Официальный workflow MiniMax Music 3 сейчас выводит такие основные параметры:

- Caption - стиль, BPM, тональность, вокал, инструменты, аранжировка
- Lyrics - текст + структурные теги [Intro], [Verse], [Chorus], [Bridge], [Solo], [Outro] и т.д.
- max_duration - длительность, до примерно 300 секунд
- `seed` - есть.
- tiled_decode - экономия VRAM при декодировании длинных треков.

Самое главное: железо

Не так все плохо, однако.

MiniMax официально пишет:

- full precision помещается менее чем в 24 GB VRAM
- с automatic CPU offload расход GPU около 22 GB
- с layer-by-layer streaming можно запустить даже на 8 GB VRAM, но заметно медленнее.

Для ComfyUI уже есть три чекпойнта(на момент написания):

- minimax_music3_dit_fp16.safetensors
- minimax_music3_dit_int8_convrot.safetensors
- minimax_music3_text_encoder_pruned_int8_convrot.safetensors

Плюс отдельный VAE. Comfy прямо рекомендует INT8 + tiled decode для длинных песен на картах с нищебродской VRAM.

Скорость

140 секунд музыки за примерно 125 секунд генерации в r/comfyui. То есть примерно около realtime(!!!!).

Очень круто: длительность не абсолютно жесткая. У MiniMax авторегрессионная часть умеет выдать end-of-audio раньше лимита. В API max_new_tokens ограничивает максимум аудиофреймов, причем модель может закончить песню раньше. В ComfyUI max_duration работает аналогично как целевая/максимальная длительность.

Плюсы:

- вокал заметно лучше большинства предыдущих локальных/open моделей
- композиции действительно похожи на законченные песни, а не на двухминутные бесконечные лупы
- длинная структура держится прилично

Минусы:

Пока это в основном Text-to-Music.

Нет нормального:

- audio reference
- song-to-song
- cover/remix существующего трека
- extend собственного аудио
- replace section/inpaint
- reference style через загруженный трек.

И непонятки с обучением.

А вот с промптами все нарядно - Structured Caption из трех частей:

1. Global Metadata - жанр, subgenre, BPM, key, scale, эмоциональная дуга, production profile.
2. Vocal Details - пол, тембр, манера, backing vocals, harmonies, эффекты.
3. Arrangement - инструменты, развитие по секциям, groove, bass, percussion, spatial FX.

И отдельно lyrics с секционными тегами.

Ссылки:

https://docs.comfy.org/tutorials/audio/minimax/minimax-music-3

https://huggingface.co/MiniMaxAI/MiniMax-Music3

https://huggingface.co/Comfy-Org/MiniMax-Music-3

https://github.com/Comfy-Org/workflow_templates/blob/main/templates/audio_minimax_music_3.json

https://github.com/Comfy-Org/ComfyUI/pull/15570

https://www.reddit.com/r/comfyui/comments/1vni9fq/minimax_music_3_is_live_in_comfyui_enjoy_state_of/

@cgevent

Для конченых гиков

MiniMax Music 3 в ComfyUI сейчас фактически дает два уровня генерации:

AR: seed + CFG + top_k + duration
↓
hidden representation песни
↓
Flow/DiT: seed + steps + CFG + sampler + scheduler
↓
DAV/Flow-VAE
↓
audio

Temperature/top_p пока отсутствуют, но это именно недостающие 10-30 строк sampling-кода, а не ограничение весов.

Главное: официальный workflow связывает AR seed и DiT seed одним SeedNode.

И в принципе seed и CFG можно развязать.

Типа
AR seed: 12345
DiT seed: 67890

Также:
AR CFG 2.5 + DiT CFG 1.0
и
AR CFG 1.0 + DiT CFG 2.5
Могут звучать сильно по разному.

Но это уже дебри...

@cgevent

Замузыку. Заумные мысли

Я вот гляжу на новый Suno Studio 2, и странное чудится мне.

Сейчас приведу аналогию с видеогенераторами, ибо некоторые из которых пыжатся изо всех сил, чтобы стать новым Премьером или Резолвом. Монтажка, таймлайн (в браузере это адъ), эффекты, переходы.

В веб-монтаже нет никакого смысла, потому что на итоге юзеры понесут свой результат в Премьер, Афтер, ДаВинчи. Точно также как уносят картинки в Фотошоп для доводки.

И в этом смысле горазд важнее, что можно подавать на вход в генератор, а не что получать на выходе. Максимальное разнообразие на входе, и унифицированный выход, идущий в монтажку\фотошоп.

Чего хочется от генераторов: разборка на слои\стемы, редактирующие возможности (не в смысле монтажа, а в плане регенерации\инпайнта\екстенда\заполнения), послойная регенерация. И в этом смысле процесс идет. И таймлайн тут нужен для контроля генераций, а не для монтажа.

А вот замашки на DAW\монтаж\эффекты можно пропустить.

Ну и конечно, управляемость. И в этом смысле показателен следующий пост из коментов.

@cgevent