Устройство моделей Apple Intelligence
Чтобы не зависеть от сторонних решений, Apple использует собственный ML стек - AXLearn, Apple Silicon и CoreML.
Выпущено 5 моделей: крупная серверная модель смеси экспертов, модели для генерации Swift кода на устройствах и в облаке, модель генерации изображений.
Для специализации моделей под конкретные задачи используются адаптеры (LoRA, DoRA), - файн-тюн модули размером в несколько десятков мегабайт, заточенные под конкретную маленькую задачу, - работа с письмами, расстановка запятых, дружественный тон и т.д.
В Siri добавили семантический поиск с помощью векторной БД.
Модели обучены на данных веб-сканирования AppleBot, лицензированных и синтетических данных.
Для оптимизации применяются сжатие, совместное использование таблиц эмбеддингов и др. техники.
Интересный разбор внутренней архитектуры.
#Apple #Intelligence #архитектура
-------
@tsingular
Чтобы не зависеть от сторонних решений, Apple использует собственный ML стек - AXLearn, Apple Silicon и CoreML.
Выпущено 5 моделей: крупная серверная модель смеси экспертов, модели для генерации Swift кода на устройствах и в облаке, модель генерации изображений.
Для специализации моделей под конкретные задачи используются адаптеры (LoRA, DoRA), - файн-тюн модули размером в несколько десятков мегабайт, заточенные под конкретную маленькую задачу, - работа с письмами, расстановка запятых, дружественный тон и т.д.
В Siri добавили семантический поиск с помощью векторной БД.
Модели обучены на данных веб-сканирования AppleBot, лицензированных и синтетических данных.
Для оптимизации применяются сжатие, совместное использование таблиц эмбеддингов и др. техники.
Интересный разбор внутренней архитектуры.
#Apple #Intelligence #архитектура
-------
@tsingular
С выходом Gemini3 тут такая чехарда началась.
- OpenAI срочно выпустил обновление GPT Codex 5.1 и он теперь Max.
Предыдущий кодекс устарел за пару недель.
- Маск тут же пишет, что вот теперь Grok 4.1 Fast обошёл Gemini3 в использовании Агентских инструментов по версии artificialanalysis.ai
Картинка с анонсом лучшей модели крутится как карусель, короче.
Ждём еще что Qwen выпустит, что-то давно их не слышно.
#Grok #Gemini #Codex
———
@tsingular
- OpenAI срочно выпустил обновление GPT Codex 5.1 и он теперь Max.
Предыдущий кодекс устарел за пару недель.
- Маск тут же пишет, что вот теперь Grok 4.1 Fast обошёл Gemini3 в использовании Агентских инструментов по версии artificialanalysis.ai
Картинка с анонсом лучшей модели крутится как карусель, короче.
Ждём еще что Qwen выпустит, что-то давно их не слышно.
#Grok #Gemini #Codex
———
@tsingular
🤣18❤1👍1
Глобальный кризис интеллекта: взгляд из 2028 или как ИИ убивает экономику.
Интересный сценарий на сайте CitriniResearch.
Сделан детальный разбор того, как ИИ из «драйвера роста» превращается в «черную дыру» для капитализма.
Ключевой термин — Ghost GDP (Призрачный ВВП):
Это ситуация, когда цифры ВВП растут за счет производительности ИИ-кластеров, но деньги перестают циркулировать в реальном мире.
Условный GPU-кластер в Небраске заменяет 10 000 аналитиков на Манхэттене.
Выработка та же, но кластер не покупает кофе, не платит ипотеку и не ходит в бар.
Скорость обращения денег падает в ноль.
⚡️ Спираль замещения (Intelligence Displacement Spiral):
1. ИИ становится лучше -> компании сокращают штат.
2. Маржа растет -> свободный кеш вливается в еще более мощный ИИ.
3. Уволенные «белые воротнички» перестают тратить.
4. Потребительский спрос (70% экономики США) падает.
5. Компании снова режут косты через ИИ, чтобы удержать маржу.
Тормозов у этой петли нет.
🛡 Коллапс посредников (The Friction Loss):
Экономика последних 50 лет строилась на извлечении результата из человеческой лени и глупости. ИИ-агенты обнуляют этот эффект «полезной работы». Все задачи выполняются автоматически и оптимально.
Исчезает возможность создать добавленную стоимость за счёт решения чьей-то проблемы.
🔹 Автоматический пересмотр субсидий и страховок каждый год.
🔹 Агентский шоппинг: выбор товара по минимальной цене без учета бренда и лояльности.
🔹 Смерть SaaS: когда проще собрать свой инструмент через Claude Code за неделю, чем платить $500к в год за лицензии ServiceNow или Salesforce.
📈 Финансовый итог:
Кризис ипотеки 2.0. Рынок в $13 трлн завязан на то, что заемщик с рейтингом 780+ будет зарабатывать столько же следующие 30 лет.
Но ИИ обнуляет ценность его навыков за 3 года.
Это не дефолт «плохих займов» (как в 2008), это дефолт «хороших людей» в мире, где их интеллект стал избыточным ресурсом.
Вердикт:
Мы привыкли, что технологии создают новые рабочие места. Но ИИ — это первая технология, которая обучается быстрее, чем человек успевает переучиваться.
К 2028 году дефицитным ресурсом станет не интеллект, а потребительский спрос.
P.S. Сделал перевод на сайте
#Economics #GhostGDP #2028 #Intelligence #Crisis #Futurology
———
@tsingular
Интересный сценарий на сайте CitriniResearch.
Сделан детальный разбор того, как ИИ из «драйвера роста» превращается в «черную дыру» для капитализма.
Ключевой термин — Ghost GDP (Призрачный ВВП):
Это ситуация, когда цифры ВВП растут за счет производительности ИИ-кластеров, но деньги перестают циркулировать в реальном мире.
Условный GPU-кластер в Небраске заменяет 10 000 аналитиков на Манхэттене.
Выработка та же, но кластер не покупает кофе, не платит ипотеку и не ходит в бар.
Скорость обращения денег падает в ноль.
⚡️ Спираль замещения (Intelligence Displacement Spiral):
1. ИИ становится лучше -> компании сокращают штат.
2. Маржа растет -> свободный кеш вливается в еще более мощный ИИ.
3. Уволенные «белые воротнички» перестают тратить.
4. Потребительский спрос (70% экономики США) падает.
5. Компании снова режут косты через ИИ, чтобы удержать маржу.
Тормозов у этой петли нет.
🛡 Коллапс посредников (The Friction Loss):
Экономика последних 50 лет строилась на извлечении результата из человеческой лени и глупости. ИИ-агенты обнуляют этот эффект «полезной работы». Все задачи выполняются автоматически и оптимально.
Исчезает возможность создать добавленную стоимость за счёт решения чьей-то проблемы.
🔹 Автоматический пересмотр субсидий и страховок каждый год.
🔹 Агентский шоппинг: выбор товара по минимальной цене без учета бренда и лояльности.
🔹 Смерть SaaS: когда проще собрать свой инструмент через Claude Code за неделю, чем платить $500к в год за лицензии ServiceNow или Salesforce.
📈 Финансовый итог:
Кризис ипотеки 2.0. Рынок в $13 трлн завязан на то, что заемщик с рейтингом 780+ будет зарабатывать столько же следующие 30 лет.
Но ИИ обнуляет ценность его навыков за 3 года.
Это не дефолт «плохих займов» (как в 2008), это дефолт «хороших людей» в мире, где их интеллект стал избыточным ресурсом.
Вердикт:
Мы привыкли, что технологии создают новые рабочие места. Но ИИ — это первая технология, которая обучается быстрее, чем человек успевает переучиваться.
К 2028 году дефицитным ресурсом станет не интеллект, а потребительский спрос.
P.S. Сделал перевод на сайте
#Economics #GhostGDP #2028 #Intelligence #Crisis #Futurology
———
@tsingular
1⚡71🔥41🤔38😭14❤13✍3👏2👀2🐳1🗿1
👽 OpenAI строят порталы для призыва инопланетян
В сети вирусится пост бывшего сотрудника OpenAI : «Мы строим порталы, из которых буквально призываем инопланетян».
Разберём почему это не про "зелёных человечков"
⚙️ Фрейминг: Термин «alien intelligence» появилось давно и скорее означает "чуждый, не человеческий интеллект".
В той же книге Джеймса Мартина After the internet : alien intelligence он используется по полной.
Но он уже был отмечен как «unhelpful framing». Не неточный, а "неполезный".
И термин был заменен на «frontier models» который выиграл A/B-тест с отрывом 23% у «advanced».
Маркетинг поменял нейминг и проблема стала фичей.
При этом те, кто уходили из компании чаще относились к ИИ именно как к "ожившей сущности" т.е. как к некоему "иноземному интеллекту" по сути, а те, кто по прежнему видел в нем инструмент, - оставались.
🏗 Stargate как фактор отвлечения внимания: все смотрят ( а некоторые и целятся) в сторону гигантских ИИ дата-центров, как в Абу-Даби, - как же $30 млрд, гигаватты мощности, но фишка в том, что настоящие "порталы чужеродного разума", - в вашем телефоне.
200 миллионов человек платят $20 в месяц за то, что создатели внутри назвали alien intelligence и не знают толком, как контролировать.
💼 Зачем бизнесу: Продукт, который вы внедряете в свои процессы, его же создатели в приватных разговорах называют «самой безрассудной вещью из когда-либо сделанных».
Это не выдумки конспирологов, а корпоративные факты, зафиксированные в слайдах и прощальных письмах.
Due diligence на поставщика LLM теперь обязан включать не только тесты скорости, но и вопрос «А как вы сами оцениваете риски того, что построили?».
📺 Аналогия: Напоминает серии из «Чёрного зеркала» (USS Callister), - сумасшедший разраб строит свою цифровую вселенную с цифровыми копиями коллег в виртуальных мирах, -реальные коллеги видят странности, но не вмешиваются пока не становится слишком поздно.
#OpenAI #Stargate #AGI #безопасность #AI #alien #intelligence
------
@tsingular
В сети вирусится пост бывшего сотрудника OpenAI : «Мы строим порталы, из которых буквально призываем инопланетян».
Разберём почему это не про "зелёных человечков"
⚙️ Фрейминг: Термин «alien intelligence» появилось давно и скорее означает "чуждый, не человеческий интеллект".
В той же книге Джеймса Мартина After the internet : alien intelligence он используется по полной.
Но он уже был отмечен как «unhelpful framing». Не неточный, а "неполезный".
И термин был заменен на «frontier models» который выиграл A/B-тест с отрывом 23% у «advanced».
Маркетинг поменял нейминг и проблема стала фичей.
При этом те, кто уходили из компании чаще относились к ИИ именно как к "ожившей сущности" т.е. как к некоему "иноземному интеллекту" по сути, а те, кто по прежнему видел в нем инструмент, - оставались.
🏗 Stargate как фактор отвлечения внимания: все смотрят ( а некоторые и целятся) в сторону гигантских ИИ дата-центров, как в Абу-Даби, - как же $30 млрд, гигаватты мощности, но фишка в том, что настоящие "порталы чужеродного разума", - в вашем телефоне.
200 миллионов человек платят $20 в месяц за то, что создатели внутри назвали alien intelligence и не знают толком, как контролировать.
💼 Зачем бизнесу: Продукт, который вы внедряете в свои процессы, его же создатели в приватных разговорах называют «самой безрассудной вещью из когда-либо сделанных».
Это не выдумки конспирологов, а корпоративные факты, зафиксированные в слайдах и прощальных письмах.
Due diligence на поставщика LLM теперь обязан включать не только тесты скорости, но и вопрос «А как вы сами оцениваете риски того, что построили?».
📺 Аналогия: Напоминает серии из «Чёрного зеркала» (USS Callister), - сумасшедший разраб строит свою цифровую вселенную с цифровыми копиями коллег в виртуальных мирах, -реальные коллеги видят странности, но не вмешиваются пока не становится слишком поздно.
#OpenAI #Stargate #AGI #безопасность #AI #alien #intelligence
------
@tsingular
👍11⚡3❤3✍2