Нейронавт | Нейросети в творчестве
13.3K subscribers
7.27K photos
5.74K videos
51 files
7.38K links
Канал про нейросети в компьютерной графике, в кино и вообще

В папках и запусках не участвую

для связи @Neuronauticus

РКН: https://hf.ru/link8e56d
Download Telegram
Media is too big
VIEW IN TELEGRAM
InfiniSplat

Спасаю вас от минимакс-хайпа, пощу на другие темы

Реконструкция сцены на гауссианах по одному изображению или по данным с датчика глубины (RGB + Depth), работает при больших смещениях камеры

• опирается на монокулярную геометрию, а не на пиксельные сетки
• выдает стабильные поверхности при резких сменах вида

Гитхаб
Демо

#gaussian #image2scene #rgbd2scene #depth2scene
👍15❤2
По слухам, NVIDIA разрабатывает технологию использования SSD в качестве расширения видеопамяти. Это позволит запускать крупные нейросети на босяцких GPU

Данные, не помещающиеся в основную GDDR7-память, будут храниться на SSD и подгружаться по требованию. Технология будет работать в связке с DirectStorage и RTX IO

Энтузиасты уже создали подобный проект GreenBoost (на гитлабе адская процедура регистрации, я не осилил), который позволяет расширить память GPU за счёт SSD и RAM. Система автоматически распределяет данные: горячие слои остаются в VRAM, менее важные — в RAM, а самые редко используемые — на накопителе.

#lowvram #gpu #news
🔥25👍5🤔3❤1😁1
This media is not supported in your browser
VIEW IN TELEGRAM
SplatEdit.app уже предлагает полный пайплайн создания сплатов, работает локально в браузере на WebGPU

Инструмент поддерживает и изображения, и видео. Для видео автоматически выбираются лучшие кадры

Полноформатное извлечение признаков, обнаружение объектов на базе Depth Anything, выравнивание ArUco, умное управление памятью и экспорт в COLMAP в формате zip.

Проект пока на ранней стадии. Скоро выйдет SplatEdit 0.3.X

https://www.splatedit.app/

#gaussian #webpgu #video2scene #image2scene
👍15❤2
ComfyUI-Latent-Tiled-PiD

плаг энд плей декодер для диффузных картинкогенераторов прикрутили в комфи

Воркфлоу на гитхабе

Спасибо @m_franz

#t2i #optimization #qwenimage #flux2 #flux #qi2512 #comfyui #4K
👍12❤2
MAGI-2 Preview

Опенсорс модель для генерации видео со звуком

Но... 114B параметров. Веса - я даже считать не буду сколько, >300ГБ
Требуется 8 GPU NVIDIA Hopper, Python 3.2 и CUDA, ffmpeg

• генерация видео из текста (T2V)
• генерация видео из промта и изображения (I2V)
• создание звука и его микширование с видео

• два этапа генерации: денойз и рефайн
• разрешение 1080p после рефайна
• длительность клипов 10 секунд

Гитхаб
HF - выложили базовую. Ждем дистиллированную/ Ну как ждем. Бояре ждут
API

#av #t2v #t2av #i2v #i2av #api
🤷‍♂9👍7🤯3😱3🔥1
This media is not supported in your browser
VIEW IN TELEGRAM
Kijai/MiniMax-H3_comfy lightx2v

4-шаговая турбо лора сконвертированная Киджаем в формат Comfy из оригинальной

8-шаговую ждем

Спасибо @stefanfalkok

#minimaxH3 #lora #optimization
❤15👍5
Я вам картинку показал а дальше вы сами

#humor
😁355👍3🤷‍♂1👎1
И правда, давно я не видел блевотного дизайна corporate Memphis. Зато теперь 🟨 вместо 🟫

#humor
😁22👎2💯1
This media is not supported in your browser
VIEW IN TELEGRAM
Wan-Animate-2

Новая версия персонажного оживлятора без привычных костылей вроде отдельных экстракторов движения - видео-драйвер идет прямо в трансформер, и это дрейф идентичности персонажа при сложных движениях.

Ракурс камеры можно задать текстом, независимо от исходного видео. Раньше камера была жёстко привязана к драйверу, тут её отвязали.

Есть облегчённая версия для рилтайма: обучена трёхэтапно, включая дистилляцию с поблочным обратным распространением, и держит задержку на уровне живого стрима - то есть цифровые аватары и ведущие трансляций уже не про офлайн-рендер

Гитхаб
HF
А также

https://huggingface.co/Comfy-Org/Wan-Animate-2/tree/main
https://github.com/Comfy-Org/workflow_templates/blob/main/templates/video_wan2_2_14B_animate.json

#wananimate2 #characteranimation #pose2video
👍13❤1
Agent Plugins

OpenAI, AWS, Cursor, Microsoft, GitHub и Vercel выпустили общую спецификацию для портируемых плагинов - навыки, MCP-серверы и клиентские расширения собираются один раз и загружаются куда угодно. VS Code, Cursor, GitHub Copilot и ChatGPT & Codex уже в списке совместимых, каждый поддерживает Agent Skills плюс MCP через stdio, Streamable HTTP и устаревший SSE.

Идея skills/MCP, стоящая за всем этим, принадлежит Anthropic, а самой Anthropic в списке клиентов пока даже нет.

Если формат приживётся, плагин пишется один раз вместо пересборки под каждого агента - именно такая скучная стандартизация в итоге экономит всем время.

#skill #mcp #news
❤8👍3