Еще из полезного контента: Андрей Карпатый записал новую лекцию на тему больших языковых моделей (LLMs). В лекции разбирается процесс обучения моделей, как они «мыслят» и как правильно с ними взаимодействовать, чтобы получать наилучшие результаты.

🔗 Link: https://www.youtube.com/watch?v=7xTGNNLPyMI

@ppprompt

Все же 5 часов около-технической беседы на английском с двумя гиками у Лекса — это too much to ask в современном мире. А эпизод очень интересный, полный инсайтов.

Поэтому приведу несколько неочевидных штук, про которые узнал.

А если полайкаете 🫶 то приведу промпт для таких сокращений подкастов.

1. Контрабанда GPU через третьи страны. Китайские компании, включая DeepSeek, активно обходят экспортные ограничения США, закупая NVIDIA H100 через посредников в Сингапуре, ОАЭ и Индии, что создаёт «серый рынок» чипов для ИИ.

2. DeepSeek обучался на данных OpenAI. В эпизоде раскрывается, что китайская компания использовала синтетические данные, сгенерированные GPT-4, для тренировки своих моделей, что ставит вопросы о нарушении лицензий OpenAI.

3. TSMC — ахиллесова пята Запада. 90% передовых GPU NVIDIA производятся на Тайване, и захват острова Китаем парализует глобальную ИИ-индустрию, что делает Тайвань главной геополитической точкой напряжения.

4. «YOLO-запуски» как новая норма. OpenAI и DeepSeek тратят миллиарды на единичные эксперименты (например, «Stargate»), где провал означает банкротство, а успех — доминирование в ИИ, напоминая азартную игру.

5. Санкции США против Китая наоборот его ускоряют. Ограничения на экспорт чипов заставили DeepSeek разработать MLA — технологию, снижающую потребление памяти на 80%, что сделало их модели дешевле OpenAI, несмотря на менее мощное железо.

6. Open-source AI — это сейчас как троянский конь. Открытые веса DeepSeek-R1 могут содержать скрытые уязвимости для сбора данных, что вызывает опасения у западных спецслужб.

7. Идет тихая война между Meta и OpenAI. Стратегия Meta по открытому распространению Llama косвенно помогает Китаю, тогда как OpenAI скрывает детали моделей, чтобы замедлить копирование DeepSeek.

8. CEO DeepSeek — «китайский Маск». Лиан Чанфенг, основатель DeepSeek, лично руководит «безумными» экспериментами, включая 50-часовые рабочие сессии, что сравнивают с культурой SpaceX.

Полный эпизод туть: https://youtu.be/_1f-o0nqpEI

@ppprompt