Нейронавт | Нейросети в творчестве
13.2K subscribers
7.15K photos
5.66K videos
51 files
7.24K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Media is too big
VIEW IN TELEGRAM
MiniMax Music 2.0

Заявлено:

- Реалистичный вокал в разных стилях с разными эмоциями
- Поп, джаз, блюз, рок, фолк, дуэты и а капелла
- Качество звука профессионального уровня
- Полные 5-минутные композиции с мультиинструментальным управлением
- Точный контроль музыкальной выразительности

API

Также есть на fal.ai - 0,03 доллара за генерацию

#text2music #music
👍8🥴4❤2😁2
Media is too big
VIEW IN TELEGRAM
Space DJ

Кто-то навайбкодил.
Летаешь в космосе где каждая звездочка это музыкальный стиль.
Управление неудобное но вверху можно включить автопилот.
Лупы генерятся в реальном времени.
Можно перейти в Google AI Studio и продолжить эксперименты там.

#music #realtime
🔥13👍3❤2🤯1
This media is not supported in your browser
VIEW IN TELEGRAM
Music Videos by Mozart AI

Короче вот в чем суть обновки у генератора музыки Mozart AI

Они теперь делают видеоклипы до минуты хронометража

Vibe Sessions — путь от идеи к готовой песне и музыкальному видео в формате чата

Studio Session — среда мультитрек, генерирует стемы и лупы, работает с MIDI-инструментами, эффектами, делает аутпейнтинг и расширения, использует микшер

Ну что ж, суно и удио ушли, на поляне стало просторнее

#music #vusicediting #music2video #musicvideo #midi
👍7🔥3👎1
Генератор музыки LeVo обзавелся с августа несколькими обновками

Выпустили улучшенную англоязычную модель, большую модель

Поддерживает генерацию чистой музыки, чистого вокала и двухдорожечных выходных данных (вокал + аккомпанемент отдельно)

Демоспейс генерирует длинные треки - 4мин 30 сек

Для работы достаточно 10 ГБ VRAM

#music #text2music
1👍15🔥8❤2
This media is not supported in your browser
VIEW IN TELEGRAM
HeartMuLa: A Family of Open Sourced Music Foundation Models

Набор открытых моделей для создания и понимания музыки

Создаёт песни по запросу, учитывая разные условия: можно описать стиль, дать текст или показать образец музыки

Позволяет детально управлять музыкальными атрибутами — например, задавать стиль разных частей песни (вступления, куплета, припева) с помощью текстовых подсказок

Гитхаб
HF

#alm #music #text2music
🔥11❤2👍1😁1
ACE-Step 1.5: Pushing the Boundaries of Open-Source Music Generation

Новая версия генератора музыки в опенсорсе!

Целая песня на 10 сек на RTX 3090
Достаточно 4ГБ VRAM
50+ языков
Разрешено коммерческое использование

— дообучается на стиль на нескольких песнях

— сама придумывает план для песни по простому запросу — от коротких лупов до композиций на 10 минут

И уже поддерживается в Комфи

Гитхаб
HF
Веса на ComfyOrg
MS
Демо
воркфлоу

Спасибо @MaxKhtv

#music #text2music #musicediting
🔥17👍4❤2
ACE-Step UI

инструмент для локального запуска ACE-Step 1.5

Спасибо @m_franz


#music #text2music #musicediting
👍17🔥2
MiniMax Music 2.5

Недавно обновился генератор музыки от Hailuo

— контроль эмоций и музыкальной экспрессии

— поддерживает 14 вариантов структуры для создания песен — от вступления до хука

— не знаю кому из нас это нужно, но хорошо работает с китайским поп-жанром

— помимо китайского хорошо работает с английской речью

— делает естественные голоса: умеет передавать эмоции и разные оттенки голоса, создаёт эффект живого выступления;

— подстраивает микс под стиль музыки: автоматически меняет настройки в зависимости от жанра, например, может передать дух 80-х или стиль джаза

— работает со множеством инструментов: использует более 100 видов инструментов и хорошо смешивает их с вокалом, так что каждый инструмент слышно чётко

Странно что этого анонса нет в официальном твиттере MiniMax. Зато там объявлена скидка 50% для всех пользователей на Wavespeed AI до 14 февраля

#text2music #music
👍9
ForgeAI HeartMuLa

Еще вариант кастом ноды генератора музыки HeartMuLa, для запуска на 16 ГБ VRAM

Работает с квантизованной моделью 4-bit NF4 / 8-bit. Для неквантизованной требуется около 16.5 ГБ

#alm #music #text2music #comfyui
🔥8❤2👍2
LeVo 2 (SongGeneration 2)

Генератор музыки LeVo выпустил новую модель на 4B параметров. Делает музыку, которая не уступает закрытым коммерческим системам

— точно передаёт текст песен, ошибаясь всего в 8,55 % случаев — это лучше, чем у многих коммерческих моделей

— можно давать текстовые описания или проигрывать аудиофрагменты, и модель будет создавать музыку в заданном стиле

— генерирует песни длиной до 4 минут 30 секунд

— создаёт отдельно вокал и инструментальное сопровождение или вместе

— работает на GPU с 10 ГБ VRAM

Кто потестит скажите звук лeчше чем у AceStep1.5?

Гитхаб
HF
Демо - быстрая версия модели, генерация за 1 минуту
ComfyUI_SongGeneration - тоже обновился

#music #text2music #musicediting #comfyui

Нейронавт в MAX
🔥10👍5❤2
Ace Step Node Suite

Кастом ноды Ace-Step с поддержкой входного аудио, wildcard-файлами, LLM для для генерации текстов песен

#comfyui #music

Нейронавт в MAX
👍8
This media is not supported in your browser
VIEW IN TELEGRAM
Lyria 3 Pro

Гугл разрешил генерить музыку в Lyria 3 полноценными треками а не огрызками по 30 сек

Доступно по подписке в Gemini, Google AI Studio и по API - $0.08 за трек

#music #text2music
❤5👎1
Media is too big
VIEW IN TELEGRAM
NumPy as Synth Engine

Генерация музыки через математические вычисления в NumPy без использования предварительно записанных звуков.

для имитации щипковых использует алгоритм Karplus-Strong

моделирует звуки табла, джембе и органа Хаммонда

позволяет работать с историческими настройками строя (пифагорейский, meantone и др.

#music
🔥11
This media is not supported in your browser
VIEW IN TELEGRAM
Lava Genie

Какой ужас. Я понял что почувствовали художники когда пришли ИИ-художники

Там можно настраивать на грифе аккорды, на деке контроль страма, какие-то пресеты и даже вы не поверите - режим творчества.

Первое впечатление - тупо самоиграйка в форме гитары которая умеет выдавать несколько вариантов арпеджио. Но нет, не тупо, там есть иишка для сочинения музыки. Но выглядит как выкидыш диджея

Полный видеоролик сюда не влез, ищите на сайте

А вообще у них есть и настоящая умная гитара со струнами

#music #guitar
😁7👎3❤1👍1🍌1
ACE-Step LoRA Collection

Небольшая коллекция лор для Ace-Step 1.5
Описания в папке каждой лоры в README

#music #text2music #musicediting #lora #acestep
👍9❤1
VocalRender

Генератор вокала по тексту и MIDI-партии
Никаких явных длительностей фонем и F0-кривых: модель сама решает, когда и как петь. Построен на VoxCPM2.
Заявлен только китайский язык, предположу что можно дообучить на другие.

• Score-native ввод — ноты+слова+BPM, один токен на слог с поддержкой мелизмов (слог на несколько нот)
• Контроль тембра через промпт-аудио — кидаешь 2–8 секунд чистого вокала, модель поет в этом голосе
• Два чекпоинта: VocalRender и VocalRender-Pro (дольше тренирован на бОльшем корпусе реального пения)
• 48 kHz WAV

Гитхаб
HF
Демо - принимает только китайский текст

#vocal #midi2vocal #text2vocal #music
👍9
MERT-v2-FullSong

Музыкальный энкодер на 632M параметров, который понимает целую песню от 30 до 360 секунд. Продолжение MERT-v2-30s, bidirectional, дообучен на полных композициях

• репрезентации на уровне кадров и всей записи
• 24 кГц моно, 1024 измерения, 25 Гц
• жанр, бит, тональность, эмоции, инструменты, аккорды
• интерфейс как у классического MERT - работает через Transformers

Место в экосистеме #YuE2: causal-ветка MERT2 токенизирует аудио для генератора песен, а FullSong закрывает эмбеддинги целых треков

На бенчмарке MARBLE (15 задач понимания музыки) лучше всех байзлайнов в 13 из 15 метрик

#encoder #music

MAX
👍8