Нейронавт | Нейросети в творчестве
13.2K subscribers
7.14K photos
5.66K videos
51 files
7.23K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Media is too big
VIEW IN TELEGRAM
Vidu Q3

Эта видеогенерилка тоже обновилась недавно

— генерирует аудиовизуал длительностью до 16 секунд

— 1080p

— контроль камеры, плавное переключение между кадрами

— отображает текст на нескольких языках, включая китайский, английский и японский

Есть какой-то промокод для новых пользователей
YESVIDU


Vidu Prompt User Guide
Попробовать

#text2video #image2video #imageediting #referencing #av #text2av #image2av
👍4🔥2❤1
Kijai выложил рассуждающую лору VBVR-Wan2.2

Коротко, VBVR делает модель умнее

Вносит тонкие изменения в движение и лучше следует промпту

Есть мнение, что помогает решать проблему «туннелирования» (tunneling problem), которая приводит к десинхронизации движения, например, когда человек поворачивается, а его голова остаётся на месте

HF

#reasoning #text2video #image2video #optimization #wan22 #lora
👍18🤔5❤1😱1
P-Video

Быстрый видеогенератор от Pruna AI, на вход можно подать картинку и аудио.
Пишут что-то про итеративное создание видео.
720p и 1080p

— 10 секунд на генерацию 5 секунд 720p

— $0.02 за секунду 720p

— Есть режим черновика - 2.5 секунды для превью

— До 15 секунд видео с аудио

До 23:00 пятницы генерация бесплатна (на Replicate? по API?)

P-Video Playground - попробовать
офсайт Pruna
- тут нет видеогенерации
API
Replicate

#text2video #image2video #av #lipsync #online
🔥2👍1
This media is not supported in your browser
VIEW IN TELEGRAM
OmniLottie: Generating Vector Animations via Parameterized Lottie Tokens

Генератор векторных анимаций по мультимодальным инструкциям на базе Qwen2.5-VL-3B-Instruct

Фишка в том, что он умеет работать с Lottie-файлами на новом уровне

Переорганизует структуру Lottie JSON, уделяя особое внимание слоям и их атрибутам

Превращает иерархический JSON-формат Lottie в последовательность вызовов функций

Рекрафту подвинуться

Гитхаб
HF
Демо

#vector #animation #text2vector #text2video
❤9👍3🔥1
Helios

Генератор длинных видео в реальном времени на базе Wan2.1-T2V-14B. Как же многие авторы стыдятся сообщать об этом на сайте проекта

— работает на одном GPU NVIDIA H100 со скоростью 19,5 кадров в секунду

— создаёт длинные видео без потери качества

— не использует распространённые приёмы для ускорения работы, например KV-кэш или квантизацию

— T2V, I2V и V2V

— справляется с проблемой «дрифта» в длинных видео без дополнительных ухищрений

есть три версии: Helios-Base, Helios-Mid и Helios-Distilled

Гитхаб
HF
MS
Демо

Спасибо @m_franz

#longvideo #text2video #image2video #video2video #realtime
🔥10
This media is not supported in your browser
VIEW IN TELEGRAM
ShotVerse

Генератор монтажных кинематографических многоплановых видео.

Решает проблему с управлением камерой в таких видео: раньше либо подсказки были слишком расплывчатыми, либо приходилось вручную прописывать траектории — это долго и часто приводило к ошибкам

Разделяет процесс на два этапа: сначала планирует траектории с помощью VLM-модели (Vision-Language Model), а потом превращает их в видео

Использует специальную систему калибровки, чтобы объединить разные сцены в единую систему координат

Гитхаб ждем

#text2movie #text2video #multishot

Нейронавт в MAX
👍8🔥3
This media is not supported in your browser
VIEW IN TELEGRAM
PixVerse CLI

Возвращаемся к истокам. PixVerse выкатили инструмент для генерации видео и изображений через командную строку

Зачем? А чтобы ваш OpenClaw мог генерить видео

Инструмент интегрируется с существующими аккаунтами и кредитами без необходимости новой регистрации

Доступны PixVerse v5.6, Sora2 and Veo 3.1, Nano Banana

инструкция как поженить с OpenClaw

#cli #agent #text2video

Нейронавт в MAX
👍2
daVinci-MagiHuman

Новый генератор синхронизированных аудиовидеороликов на 15B параметров от GAIR / Sand.ai

Single-stream Transformer обрабатывает текст, видео и аудио одновременно

Поддерживает несколько языков: китайский, английский, японский, корейский, немецкий, французский

5-секундное видео в разрешении 1080p создает за 38 секунд на одной H100. 540p за 8 секунд

По сравнениям бьет Ovi 1.1 в 80% случаев, LTX 2.3 — в 60,9%

Гитхаб
HF - трансформеры, в том числе и дистилл весят по 65ГБ
Демо

Спасибо @m_franz

#av #text2av #text2video #lipsync
🔥5❤2👍2
ComfyUI-DaVinci-MagiHuman

Кастом ноды аудиовидеогенератора DaVinci-MagiHuman
С блоксвопом должно влезать в 16 ГБ VRAM

Спасибо @m_franz

#comfyui #av #text2av #text2video #lipsync
🔥11
Pulse of Motion (Visual Chronometer)

Внутренний хронометр для исправления проблемы с неправильной скоростью движения при генерации видео.

POM определяет реальную физическую частоту кадров (PhyFPS) по визуальному движению для последующей коррекции видео

Выложили какой-то нефинальный превью чекпойнт который определяет истинную частоту кадров

И сделали лидерборд. В опенсорасе лучшие LTX-2 и InfinityStar. Среди проприентарных - Kling-3.0-standard и Pika-v2.2. Veo-3.1-fast плетется в хвосте. Сиденс 2 не участвовал еще

Гитхаб
HF
Лидерборд

#leaderboard #text2video
👍5❤3
SAGE-GRPO

Улучшайзер видеогенераторов, точнее исследует пространство данных и сохраняет качество видео

Не добавляет лишний шум в видео при генерации.

На микроуровне корректирует кривизну и выравнивает градиенты, чтобы генерация была равномерной.

На макроуровне следит за тем, чтобы модель не отклонялась от «правильного пути» при долгой генерации.

Прикручено к HunyuanVideo-1.5

Первое видео - бейзлайн, второе - с SAGE-GRPO

Гитхаб

Веса готовые не выложили, а для обучения нужно 64 GPU x 80 ГБ каждый

#optimization #text2video
👍7🔥1🌚1
ShotStream

Интерактивный рилтайм генератор многосценных видео от Kling Team на базе #WAN21 1.3B

создает последовательности из 5–6 сцен

скорость генерации: 16 FPS на одном NVIDIA GPU

поддерживает визуальную согласованность при переходах между сценами.

Гитхаб
HF

#longvideo #multishot #realtime #interactive #text2video
🔥6👍1
Media is too big
VIEW IN TELEGRAM
Veo 3.1 Lite

Google выпустил наиболее экономичную модель для генерации видео из всей линейки Veo 3.1

Генерит Text-to-Video и Image-to-Video

Соотношение сторон (16:9 или 9:16), разрешение (720p или 1080p)

Длительность видео 4, 6 или 8 секунд

Вполовину дешевле Veo 3.1 Fast при той же скорости работы

Gemini API
Google AI Studio

#text2image #text2video #videoediting
🔥6😁1
This media is not supported in your browser
VIEW IN TELEGRAM
Google, похоже, раздает Veo 3.1 всем даром в Google Vids, и пусть никто не уйдет обиженным (10 генераций в месяц бесплатно)

Наверняка дешевую версию.

Неужели готовят VEO 4?

#news #text2video #image2video
❤9👍2
This media is not supported in your browser
VIEW IN TELEGRAM
Hybrid Memory

Решает проблему потери отслеживания видеогенраторами движущихся объектов, когда они выходят из поля зрения камеры

Гибридная память для одновременного архивирования статического фона и отслеживания динамических объектов

Архитектуру HyDRA сжимает контекст в токены памяти и вводит поиск, основанный на пространственно-временной релевантности

Прикручено к #Wan2.1

Гитхаб
HF

#text2video #optimization
🔥8❤1
Adaptive Spectral Feature Forecasting for Diffusion Sampling Acceleration (Spectrum)

Ускорение диффузных картинко- и видеогенераторов от ByteDance
без потери качества


Достигает ускорения в 3,5 раза при работе с HunyuanVideo и FLUX.1, до 4,79 раза — с FLUX.1 и до 4,67 раза — с Wan2.1-14B

Гитхаб
ComfyUI Spectrum WAN Proper
ComfyUI-Spectrum-Proper - FLUX
ComfyUI-Spectrum-SDXL-Proper
Реддит

#text2video #text2image #optimization
👍17🔥6
У SANA-Video какие-то обновки

В марте 2026 года выпущена модель SANA-Video 720p с LTX-VAE, которую можно использовать с LTX2 Refiner для апскейла видео до 2K

Гитхаб
веса

#upscale #text2video #image2video #longvideo
👍4🤔1
Uni-ViGU

Мультимодальная модель для генерации и понимания видео. В отличие от других моделей, здесь в основе лежит видеогенератор, а не модели, ориентированные на понимание

Генерирует сразу видео и текстовое описание

Гитхаб
HF - 14ГБ

#text2video
👍9