Метаверсище и ИИще
53.5K subscribers
6.78K photos
5.8K videos
50 files
7.97K links
Это не новости, это персональный экспертный взгляд на то, как развивается индустрия ИИ, графики, метаверса, крипты, нейротехнологий и в каком направлении катится все это безобразие.
Для связи: @SergTsyp
Download Telegram
Media is too big
VIEW IN TELEGRAM
#Нейропрожарка

KISS THE COOK

Автор: Pavel Gnilomedov

Сюжет был придуман за завтраком, когда моя жена предложила сделать добрую историю о роботе. Но я люблю триллеры и неожиданные повороты, поэтому история получилась именно такой.
С помощью Gemini я структурировал сюжет, а черновую раскадровку сделал в Nano Banana.

Во избежание рандомных генераций была выстроена четкая цепочка производства для максимального контроля над картинкой и персонажами.

Для начала я собрал референсы локаций и персонажей в Pinterest. Сформировал образы в Nano Banana, где я подготовил референсы персонажей с разных ракурсов. После этого я на основе изображений создал модельки в Hunyuan3D.
Моделям накинул риг и отправил в заранее собранную локацию в Unreal Engine, чтобы точно выставить позы и композицию кадров. На основе черновой раскадровки я сделал скриншоты в UE в режиме Lit - это позже дало нейронке готовую карту света и теней, которую не нужно в последствии описывать нейросети, а лишь немного направить в нужном направлении.

Черновики из движка я прогнал через Nano Banana, после активно использовал Flux.Klein для точечного редактирования картинки. Затем сборка в Photoshop: склеивал лучшие куски генераций, чтобы получить качественные ключевые кадры.

Видео генерировал полностью в LTX 2.3 через ComfyUI. Использовал как генерации через первый кадр, так и через первый/последний кадры. Так же пользовался генерацией через depth карту, переложив свои движения (снятые на видео) на движения персонажа.

На финальном монтаже для лучшей читаемости повествования было принято решение убрать некоторые кадры, а кое-какие, наоборот, добавить
Монтаж и композ был сделан в After Effects.

Звуки из фонотеки Youtube и Adobe.
Музыка сгенерирована в Suno.
Nano banana использовал через gemini.google.com
Для апскейла видео в некоторых случаях использовался Topaz.
Деньги были потрачены только на покупку аккаунта с Gemini - 400р.

@cgevent
1👍86👎19🔥14❤13😁5
This media is not supported in your browser
VIEW IN TELEGRAM
Большие языковые видеомодели.

Принес очередное залипалово. Я смотрю уже 10 минут и не пойму на что это похоже: на фильм ужасов, эротику или рекламу. Хороший коктейль для мозга.

Короче, это новый тест (физики) для видеомоделей. Раyьше мы считали пальцы, потом смотрели коню с зубы, теперь вращаем язык!

Seedance 2.0, Kling 3.0 Pro, Gemini Omni Flash и Grok Imagine 1.5 получили очень простой промпт:

"Вращать язык по кругу в течение 10 секунд."

Каждая модель получила ровно четыре попытки.

Спойлер: Seedance 2.0 приподоблажался.

- Kling 3.0 Pro:

Kling провалил основную инструкцию каждый раз: язык так и не повернулся по кругу.

Он двигался вбок, скручивался, растягивался и выполнял всевозможные странные анатомические эксперименты, но так и не завершил требуемое движение.

Само изображение выглядело достаточно реалистично, но визуальное качество здесь было практически неважно. Движение было неестественным, непоследовательным и полностью не справлялось с задачей.

Всё, что могло пойти не так, пошло не так.

- Grok Imagine 1.5:

Это был неожиданно хороший результат.

Изображение по-прежнему имеет обычный слегка мультяшный вид Грока, но его следование промпту было на удивление точным.

Язык действительно вращался.

Не идеально, не с полностью реалистичной анатомией и не всегда по полному кругу, но Грок понял, что должен делать, и предпринял искреннюю попытку выполнить это.

- Gemini Omni Flash:

Единственная модель, которая убедительно справилась с задачей.

Omni поняла промпт, создала реалистичное изображение и сгенерировала реальное круговое движение языка.

По сравнению с другими моделями, это, безусловно, самый чистый, контролируемый и правдоподобный результат.

- Seedance 2.0:

Это было самым большим разочарованием.

Результат был лучше, чем у Kling, но Seedance всё ещё не смог выполнить требуемое круговое движение.

Движения выглядели более отточенными, чем у Kling, но основная инструкция всё ещё не была выполнена.

Итого: 1 - Omni, 2 - Grok, 3 - Seedance, 4 - Kling

@cgevent
🔥51😁41❤11👍10👎3😱2
Недоопенсорс: Ideogram 4 зажал BF16-веса

Похоже, Ideogram не собираются выпускать BF16-веса Ideogram 4 — или, по крайней мере, не выпустят их до тех пор, пока модель уже настолько не устареет, что это перестанет иметь значение.

Это стало известно на YouTube-стриме с CEO Ideogram и командой Comfy, где CEO Ideogram сказал, примерно на 37:45 в видео, что они приняли это решение, потому что хотят предоставлять высокоточные BF16-веса только “избранным партнёрам”.

Это контрастирует со всеми предыдущими релизами open-weights моделей, где BF16-веса всегда предоставлялись. Даже Black Forest Labs предоставили BF16-веса своей огромной модели Flux.2 Dev, которую большинство людей всё равно не могут запускать или обучать локально из-за её огромного размера — больше 60 ГБ.

Это означает, что мы застрянем с LoRA и файнтюнами худшего качества из-за низкой точности предоставленных FP8-весов.

https://www.reddit.com/r/StableDiffusion/comments/1ubj0s5/ideogram_4_they_are_gatekeeping_the_highprecision/

@cgevent
😱20👎8❤4😁2
Media is too big
VIEW IN TELEGRAM
Вышел Happy Horse 1.1

1080p, 9 референсов на входе, i2v, улучшенный липсинк.

Но похоже, что .1 не делает прорыва.

И мы по прежнему топим за Сиданский.


https://fal.ai/models/alibaba/happy-horse/v1.1/text-to-video

Если кто-то юзает лашатку, поделитесь в коментах.

@cgevent
👍32❤7👎4😁2
я вернулся
новый ник в шапке канала

дайте мне сутки, чтобы прийти в себя

И да, Креа 2 опенсорснулась (чтобы вы поняли, что я это я).

@cgevent
107🔥189❤63👎17😁17🙏17😱5👍3
This media is not supported in your browser
VIEW IN TELEGRAM
1.38K😁242🔥127❤88👍14😱5🙏5👎4
Forwarded from Psy Eyes
Adobe пожрал Topaz.

Теперь их фото и видео апскейлеры пойдут в продукты Firefly помимо Creative Cloud как сейчас. Пишут и про другой софт для редактирования, но так-то интеграция, например с Premiere Pro или After Effects, уже есть. И весь движ, помимо борьбы за юзеров, скорее всего ради доступа к моделям топаза Astra, Starlight, итд, а также к их тренировочным данным.

Также Adobe говорят продукты Topaz будут предоставляться на их сайте как отдельный сервис.

Сайт
👎59😱33👍8😁6❤4
GPT-5.6: солнце, земля и луна.

"Мы верим в широкий доступ и планируем сделать GPT-5.6 Sol, Terra и Luna общедоступными в ближайшие недели.

GPT-5.6 Sol — наша самая мощная модель для кибербезопасности на сегодняшний день. Она расширяет границы производительности и эффективности для долгосрочных задач безопасности, включая исследование и эксплуатацию уязвимостей.

GPT-5.6 обучен отказывать в запрещенной кибер-помощи, в том числе, когда пользователи пытаются замаскировать свои намерения или взломать модель. Эти меры защиты на уровне модели устанавливают первую границу того, в чем модель должна и не должна помогать."

https://openai.com/index/previewing-gpt-5-6-sol

@cgevent
❤29👍8😁6
Forwarded from Сиолошная
TLDR новости с анонсом GPT-5.6:
— как понятно по картинке, будет 3 модели. Средняя, Terra, плюс-минус на уровне GPT-5.5, но стоит в 2 раза меньше.

— OpenAI подтвердили то, о чем писали в новостях: по просьбе Администрации модель запускают постепенно, начиная с выбранных партнёров, чтобы те могли потестировать + применить модель для исправления критических уязвимостей. «Мы считаем, что подобный процесс доступа к информации со стороны правительства не должен стать долгосрочным стандартом».

— у самой большой модели Sol появится новый самый длинный режим рассуждений max (+15), а также режим работы ultra, выходящий за рамки возможностей одного агента, так как позволяет использовать субагентов для сложных задач. Интересно, заменит ли это GPT Pro, и если нет, то как они будут сочетаться.

— «GPT-5.6 Sol лучше помогает людям находить и устранять уязвимости, чем проводить атаки. По мере развития этих возможностей наш приоритет — обеспечить их доступность и пользу для специалистов по защите, которые смогут использовать эти инструменты для поиска слабых мест и разработки патчей»

— много пишут про работу над обеспечением безопасности и несколькими слоями фильтров, чтобы противодействовать недоброжелателям.

— GPT‑5.6 поднимает цену на создание кэша ваших промптов и ответов: теперь за них придётся платить на 25% больше (как у Anthropic), а чтение всё ещё со скидкой 90%.

— и самое главное 😎: GPT-5.6 Sol будет доступна на чипах Cerebras с целевой скоростью генерации... 750 токенов в секунду 🤯 вот это жоска. Но сначала доступ будет только у ограниченного круга клиентов, а затем, с добавлением мощностей, станет доступно всем.

Картинки бенчмаков прилагаю, но там ничего интересного — в кибербез задачах на уровне раннего Mythos и похуже финальной версии. Интересны мб последнеи 3-4 скриншота из системной карточки — можно посмотреть на то, как выглядит новый режим ultra и сколько $ он будет стоить 🌚

В новости ничего не сказали про то, новый это претрейн или нет. Аккуратно можно предположить, что нет (плюс цены те же, но это не гарантия) — и если это так, то эффективность неплохо так выросла. Главное чтобы не было как с 4o, где теперь этот претрейн будут доить полтора года 😳 и улучшать всеми способами. НАМ. НУЖНА. БОЛЬШАЯ. МОДЕЛЬ.
Please open Telegram to view this post
VIEW IN TELEGRAM
Please open Telegram to view this post
VIEW IN TELEGRAM
👍31❤17🔥3👎1😁1
Нейрорендер

Тут интернетик все больше проникается идеями нейрорендера.

Основная связка: первый кадр (стиль) в Midjourney или еще где-то.
Потом превиз в Блендоре - хотя смышленые ребята? которые не знают 3Д, просто двигают куколки на столе.
А потом все это на харч Сиденскому.

Но не Сиденсом единым (смотрим след пост).

@cgevent
🔥47❤5👍5