Вы давеча накидали мне так много реакций, что я не мог не откликнуться на этот запрос. Тем более что в итоге оказалось, что довольно много чего о гипотезе Эрдёша, которую давеча опроверг GPT, действительно можно объяснить на пальцах! Конечно, далеко не всё, но я старался:
GPT и единичные расстояния: опровержение гипотезы Эрдёша
Пост длинный, а доказательство, разумеется, весьма нетривиальное, но интересующимся я действительно рекомендую попробовать его прочитать. Я начал с самых истоков, подробно обсудил постановку задачи и простые результаты, а про основной результат постарался дать и краткое описание для специалистов, и общее рукомахательное описание для неспециалистов.
Приведу здесь оглавление и (сокращённое) заключение.
1. Введение
2. Что такое задача о единичных расстояниях
— Постановка задачи
— Грубые оценки
— Эрдёш, 1946 (нижняя оценка чуть лучше линейной)
— Гипотеза Эрдёша
— Простейшая верхняя оценка: O(n^{3/2})
3. Текущая верхняя оценка O(n^{4/3})
— Что такое число пересечений
— Конструкция Секеля
4. Почему задача такая сложная и почему ей нужна теория чисел
5. Что именно сделал GPT
6. Кольца, решётки и сумма двух квадратов
— Что такое кольцо
— Гауссовы целые Z[i]
— Решётка из целых поля Q(\sqrt{2})
— Как нижняя оценка Эрдёша устроена через кольца
— Идея GPT
— Проекция
— Почему из этого следует n^{1+\delta}
7. Детали конструкции: где взять такие поля
(эту часть непрофессионалам лучше пропустить, а профессионалам — рассказать мне, где я там налажал)
8. Почему же люди этого не сделали?
9. Реакции: «I would accept it for any journal without hesitation»
10. Заключение: что всё это значит
Попытаюсь подытожить общую картину. Гипотеза Эрдёша о единичных расстояниях, простоявшая с 1946 года и широко считавшаяся верной, была опровергнута контрпримером, который полностью автоматически построила внутренняя модель OpenAI (но именно чистая LLM, без внешних инструментов вроде Lean). См. таймлайн на последней картинке.
Само доказательство — это “обычная математика”, которую могли бы создать и живые математики: оно совмещает известные ингредиенты в новое целое. Доказательство перепроверили и упростили живые математики, и финальная версия вполне читаема, да и на самом деле не так уж сложна. [...]
Лично меня в этой истории больше всего впечатляет именно то, что первый выдающийся LLM-результат оказался таким “чистым”, аккуратным и понятным. Интуитивно ведь ждёшь, что первые такие истории будут чем-то вроде доказательства ABC-гипотезы, с сомнениями в корректности и огромными нечеловеческими доказательствами. Но нет: доказательство короткое и изящное, никаких сомнений нет...
Конечно, из этого пока не следует, что все живые математики скоро останутся без работы, и у этой конкретной задачи есть ряд свойств, делающих её особенно подверженной такому решению; мы их тоже обсудили. Скорее всего, большинство важных открытых проблем устроены не так... но, с другой стороны, откуда нам знать? Об этой задаче мы тоже такого не предполагали. Видимо, часть открытых задач — довольно большая часть, как мне кажется по итогам этой истории, — окажется решённой AI-системами в относительно близком будущем. [...]
Хочется, конечно, оптимистично сказать, что при этом человеческое внимание освободится для тех задач, которые требуют чего-то по-настоящему нового. Но, честно говоря, лично я вряд ли смог бы стать математиком в мире, где входной билет в профессию требует чего-то вроде решения не просто задачи Эрдёша, а задачи Эрдёша с концептуально новым решением...
Что дальше, коллеги?
#blog #ai #math #longreads
GPT и единичные расстояния: опровержение гипотезы Эрдёша
Пост длинный, а доказательство, разумеется, весьма нетривиальное, но интересующимся я действительно рекомендую попробовать его прочитать. Я начал с самых истоков, подробно обсудил постановку задачи и простые результаты, а про основной результат постарался дать и краткое описание для специалистов, и общее рукомахательное описание для неспециалистов.
Приведу здесь оглавление и (сокращённое) заключение.
1. Введение
2. Что такое задача о единичных расстояниях
— Постановка задачи
— Грубые оценки
— Эрдёш, 1946 (нижняя оценка чуть лучше линейной)
— Гипотеза Эрдёша
— Простейшая верхняя оценка: O(n^{3/2})
3. Текущая верхняя оценка O(n^{4/3})
— Что такое число пересечений
— Конструкция Секеля
4. Почему задача такая сложная и почему ей нужна теория чисел
5. Что именно сделал GPT
6. Кольца, решётки и сумма двух квадратов
— Что такое кольцо
— Гауссовы целые Z[i]
— Решётка из целых поля Q(\sqrt{2})
— Как нижняя оценка Эрдёша устроена через кольца
— Идея GPT
— Проекция
— Почему из этого следует n^{1+\delta}
7. Детали конструкции: где взять такие поля
(эту часть непрофессионалам лучше пропустить, а профессионалам — рассказать мне, где я там налажал)
8. Почему же люди этого не сделали?
9. Реакции: «I would accept it for any journal without hesitation»
10. Заключение: что всё это значит
Попытаюсь подытожить общую картину. Гипотеза Эрдёша о единичных расстояниях, простоявшая с 1946 года и широко считавшаяся верной, была опровергнута контрпримером, который полностью автоматически построила внутренняя модель OpenAI (но именно чистая LLM, без внешних инструментов вроде Lean). См. таймлайн на последней картинке.
Само доказательство — это “обычная математика”, которую могли бы создать и живые математики: оно совмещает известные ингредиенты в новое целое. Доказательство перепроверили и упростили живые математики, и финальная версия вполне читаема, да и на самом деле не так уж сложна. [...]
Лично меня в этой истории больше всего впечатляет именно то, что первый выдающийся LLM-результат оказался таким “чистым”, аккуратным и понятным. Интуитивно ведь ждёшь, что первые такие истории будут чем-то вроде доказательства ABC-гипотезы, с сомнениями в корректности и огромными нечеловеческими доказательствами. Но нет: доказательство короткое и изящное, никаких сомнений нет...
Конечно, из этого пока не следует, что все живые математики скоро останутся без работы, и у этой конкретной задачи есть ряд свойств, делающих её особенно подверженной такому решению; мы их тоже обсудили. Скорее всего, большинство важных открытых проблем устроены не так... но, с другой стороны, откуда нам знать? Об этой задаче мы тоже такого не предполагали. Видимо, часть открытых задач — довольно большая часть, как мне кажется по итогам этой истории, — окажется решённой AI-системами в относительно близком будущем. [...]
Хочется, конечно, оптимистично сказать, что при этом человеческое внимание освободится для тех задач, которые требуют чего-то по-настоящему нового. Но, честно говоря, лично я вряд ли смог бы стать математиком в мире, где входной билет в профессию требует чего-то вроде решения не просто задачи Эрдёша, а задачи Эрдёша с концептуально новым решением...
Что дальше, коллеги?
#blog #ai #math #longreads
1🔥29❤13🤔5👍2
Канал берёт новую высоту; теперь у меня 4000 подписчиков! Ура!
И прекрасная Ира @fuesis, конечно же, за этим следит и отмечает. Смотрите, какая красота.) Видимо, это уже традиция, ведь они с Инной уже дарили мне такой тортик на предыдущий, трёхтысячный юбилей. На этот раз, говорят, на тортике изображён Арагац, как раз около 4000 метров.
Спасибо Ире! И спасибо вам всем за то, что читаете, лайкаете и комментируете. Для канала с таким контентом, как у меня, 4К подписчиков - это не так уж и мало. Спасибо, и очень надеюсь, что смогу вас чем-нибудь радовать ещё долго.
#lifestyle #blog
И прекрасная Ира @fuesis, конечно же, за этим следит и отмечает. Смотрите, какая красота.) Видимо, это уже традиция, ведь они с Инной уже дарили мне такой тортик на предыдущий, трёхтысячный юбилей. На этот раз, говорят, на тортике изображён Арагац, как раз около 4000 метров.
Спасибо Ире! И спасибо вам всем за то, что читаете, лайкаете и комментируете. Для канала с таким контентом, как у меня, 4К подписчиков - это не так уж и мало. Спасибо, и очень надеюсь, что смогу вас чем-нибудь радовать ещё долго.
#lifestyle #blog
6❤77🎉30🔥9
Cеминар лаборатории Маркова, видимо, расходится на лето. На последнем заседании были сразу два доклада, вот пока первый:
Семинар Markov Lab — 2026-05-22 — Потоковое распознавание речи в реальном времени
(слайды на странице семинара)
Даниил Павленко (СПбГУ)
Доклад Даниила — про потоковое распознавание речи (streaming ASR): это когда аудио приходит не целиком, а кусочками в реальном времени, и системе нужно одновременно поддерживать низкую задержку (latency) и выдавать осмысленные промежуточные гипотезы. Это нужно для голосовых ассистентов, субтитров созвонов и в целом любой онлайн-транскрибации, когда результаты нужны в реальном времени.
Даниил рассказал введение в обработку звука (дискретизация, преобразование Фурье, спектрограммы) и обзор ASR-архитектур, а потом собственно рассказал о своей системе: замороженный streaming encoder из NeMo плюс проектор и декодер из Qwen3, обученные на 15 тысячах часов аудио. Центральная идея — внутренний механизм финализации: вместо внешнего модуля, который решает, что фраза закончилась и транскрипт можно отдавать дальше, это решение встраивается в саму модель.
#spsu #seminar #markovlab
Семинар Markov Lab — 2026-05-22 — Потоковое распознавание речи в реальном времени
(слайды на странице семинара)
Даниил Павленко (СПбГУ)
Доклад Даниила — про потоковое распознавание речи (streaming ASR): это когда аудио приходит не целиком, а кусочками в реальном времени, и системе нужно одновременно поддерживать низкую задержку (latency) и выдавать осмысленные промежуточные гипотезы. Это нужно для голосовых ассистентов, субтитров созвонов и в целом любой онлайн-транскрибации, когда результаты нужны в реальном времени.
Даниил рассказал введение в обработку звука (дискретизация, преобразование Фурье, спектрограммы) и обзор ASR-архитектур, а потом собственно рассказал о своей системе: замороженный streaming encoder из NeMo плюс проектор и декодер из Qwen3, обученные на 15 тысячах часов аудио. Центральная идея — внутренний механизм финализации: вместо внешнего модуля, который решает, что фраза закончилась и транскрипт можно отдавать дальше, это решение встраивается в саму модель.
#spsu #seminar #markovlab
❤12👍3🔥2
Сегодня поговорим о редком для меня стратегическом жанре; пожалуй, только про Lessaria я когда-то писал в блоге. Впрочем, это не просто стратегия, а roguelike-стратегия, с метапрогрессией. Игра эта получила немало хайпа на релизе, вот теперь и я до неё добрался; давайте посмотрим, с чем её едят.
Длинный обзор, здесь сильно сокращён, читайте по ссылке:
The King is Watching
(и вот выложил на DTF)
Делали The King is Watching наши люди, маленькая студия Hypnohead [...] из Белграда. [...]
Кстати, геймдизайнер Hypnohead Семён Гурий регулярно пишет посты на DTF; вот большой пост с его историей и историей The King is Watching. Пост горячо рекомендую, а вот этот комментарий прекрасно отражает его суть. [...]
Игровое поле — это маленькое квадратное королевство (поначалу 4х4), на котором вы расставляете здания. [...]
Справа от королевства — экран войны, где идут волны нападающих врагов, против которых должны защищаться произведённые вами юниты. По сути tower defense, управлять вы юнитами не особенно можете. Всё это происходит в реальном времени, но с паузой, так что в целом никакого особого стресса и давления нет.
Зато есть главная фишка геймплея, отражённая в названии игры. Чтобы что-то работало, нужно, чтобы король, то есть вы, туда смотрели. У вас есть king’s gaze, область на карте, на которую вы “смотрите” — и работают только те здания, которые попадают в ваше поле зрения! Остальные тупо простаивают. [...]
А ещё здесь есть элементы roguelike. Много элементов! Вы открываете новых королей с их собственными механиками, новых советников, новые здания, новые апгрейды, Здесь сразу четыре разных дерева метапрогрессии с пассивными бонусами, которые растут через монетки, выдающиеся как за победы, так и за поражения. [...]
Ой, да, тут же ещё и события, и они очень забавно выполнены. [...]
В целом всё это приводит к тому, что The King is Watching сочетает в себе два главных свойства roguelikes:
— каждый отдельный забег оставляет ощущение недосказанности, и хочется тут же запустить следующий;
— разветвлённая метапрогрессия не даёт надолго застрять на одном месте.
Метапрогрессия богатая. Но какая-то она… слишком богатая, что ли. Главная проблема здесь в том, что, в отличие от других roguelikes, здесь один заход длится далеко не 10-15 минут. [...]
Так что сначала я примерно понял, как что работает, дошёл до threat level 2 на первой карте, но там застрял и проиграл несколько заходов подряд. Это, по идее, нормально и ожидаемо в такой игре. Потом вроде бы понял, что делал неправильно, прошёл threat levels 2 и 3, открыл карту с кладбищем и нежитью, там с ходу выиграл пару заходов и застрял опять. Звучит хорошо…
…но в этот момент я оглянулся и заметил, что провёл в игре уже 18 часов. [...] В общем, хотя ощущение “ещё один заход” никуда не делось, я понял, что пора принимать волевое решение изакапывать стю откладывать игру.
Заключение
Лично я люблю проходить игры. Мне в какой-то момент даже пришлось осознанно задушить в себе перфекциониста и перестать пытаться добывать ачивки (слишком уж часто это не какой-то интересный контент, а очень сложная и совершенно бессмысленная деятельность). Поэтому The King is Watching меня победила: кажется, что для того чтобы увидеть здесь всё (или хотя бы всё содержательное), нужно гораздо больше времени, чем я готов потратить.
Но если вы, наоборот, хотите найти игру, которая может не надоесть за десятки часов, это как раз то, что нужно. Так что в целом — безусловно рекомендую: всё то, что игра делает (roguelike-стратегия), она делает очень хорошо. Базовая идея свежа и интересна, игра совершенно не надоедает (как часто бывает со стратегиями!), “ещё один забег” всегда очень хочется.
Создателям игры безусловный респект и пожелания дальнейших успехов!
#tgif #games
Длинный обзор, здесь сильно сокращён, читайте по ссылке:
The King is Watching
(и вот выложил на DTF)
Делали The King is Watching наши люди, маленькая студия Hypnohead [...] из Белграда. [...]
Кстати, геймдизайнер Hypnohead Семён Гурий регулярно пишет посты на DTF; вот большой пост с его историей и историей The King is Watching. Пост горячо рекомендую, а вот этот комментарий прекрасно отражает его суть. [...]
Игровое поле — это маленькое квадратное королевство (поначалу 4х4), на котором вы расставляете здания. [...]
Справа от королевства — экран войны, где идут волны нападающих врагов, против которых должны защищаться произведённые вами юниты. По сути tower defense, управлять вы юнитами не особенно можете. Всё это происходит в реальном времени, но с паузой, так что в целом никакого особого стресса и давления нет.
Зато есть главная фишка геймплея, отражённая в названии игры. Чтобы что-то работало, нужно, чтобы король, то есть вы, туда смотрели. У вас есть king’s gaze, область на карте, на которую вы “смотрите” — и работают только те здания, которые попадают в ваше поле зрения! Остальные тупо простаивают. [...]
А ещё здесь есть элементы roguelike. Много элементов! Вы открываете новых королей с их собственными механиками, новых советников, новые здания, новые апгрейды, Здесь сразу четыре разных дерева метапрогрессии с пассивными бонусами, которые растут через монетки, выдающиеся как за победы, так и за поражения. [...]
Ой, да, тут же ещё и события, и они очень забавно выполнены. [...]
В целом всё это приводит к тому, что The King is Watching сочетает в себе два главных свойства roguelikes:
— каждый отдельный забег оставляет ощущение недосказанности, и хочется тут же запустить следующий;
— разветвлённая метапрогрессия не даёт надолго застрять на одном месте.
Метапрогрессия богатая. Но какая-то она… слишком богатая, что ли. Главная проблема здесь в том, что, в отличие от других roguelikes, здесь один заход длится далеко не 10-15 минут. [...]
Так что сначала я примерно понял, как что работает, дошёл до threat level 2 на первой карте, но там застрял и проиграл несколько заходов подряд. Это, по идее, нормально и ожидаемо в такой игре. Потом вроде бы понял, что делал неправильно, прошёл threat levels 2 и 3, открыл карту с кладбищем и нежитью, там с ходу выиграл пару заходов и застрял опять. Звучит хорошо…
…но в этот момент я оглянулся и заметил, что провёл в игре уже 18 часов. [...] В общем, хотя ощущение “ещё один заход” никуда не делось, я понял, что пора принимать волевое решение и
Заключение
Лично я люблю проходить игры. Мне в какой-то момент даже пришлось осознанно задушить в себе перфекциониста и перестать пытаться добывать ачивки (слишком уж часто это не какой-то интересный контент, а очень сложная и совершенно бессмысленная деятельность). Поэтому The King is Watching меня победила: кажется, что для того чтобы увидеть здесь всё (или хотя бы всё содержательное), нужно гораздо больше времени, чем я готов потратить.
Но если вы, наоборот, хотите найти игру, которая может не надоесть за десятки часов, это как раз то, что нужно. Так что в целом — безусловно рекомендую: всё то, что игра делает (roguelike-стратегия), она делает очень хорошо. Базовая идея свежа и интересна, игра совершенно не надоедает (как часто бывает со стратегиями!), “ещё один забег” всегда очень хочется.
Создателям игры безусловный респект и пожелания дальнейших успехов!
#tgif #games
1👍14🔥6❤5
Всё, преподавание заканчивается. Вот последняя лекция из курса "Введение в глубокое обучение" в ЮФУ:
ЮФУ — 2026.05.28 — Фронтиры возможностей AI-моделей
(слайды на странице курса)
Это была уже, конечно, лекция обзорная и без математического содержания. Зато, надеюсь, интересная, примерно как мои обычные State of AI. Начал с ускоряющегося прогресса и текущего фронтира LLM. Потом рассказал о Situational Awareness Ашенбреннера: содержательная часть здесь в том, что там прогресс удачно разделён на три части (физическую, алгоритмическую и unhobbling), и это очень полезно понимать.
Потом через краткий обзор некоторых областей применений (роботы, картинки, видео) добрался до программирования и LLM-based агентов, Claude Code и всё такое прочее. А закончил, разумеется на AI в математике, и как раз символично получилось, что курс закончился на новости от 20 мая 2026 года.
Я сначала анонсировал, что будет ещё одна лекция про AI Safety, но потом выяснилось, что больше лекций в этом курсе уже не будет. Так что желающим всё-таки послушать простое и тревожное введение в AI Safety рекомендую "AI safety в начале 2026 года" с моей странички "Выступления"; это был рассказ для школьников в "Сириусе", так что ничего технически сложного там не было, а вот интересного было, надеюсь, много.
Спасибо всем, кто слушал, и, надеюсь, до новых встреч!
#sfu #lectures #dsfrontiers
ЮФУ — 2026.05.28 — Фронтиры возможностей AI-моделей
(слайды на странице курса)
Это была уже, конечно, лекция обзорная и без математического содержания. Зато, надеюсь, интересная, примерно как мои обычные State of AI. Начал с ускоряющегося прогресса и текущего фронтира LLM. Потом рассказал о Situational Awareness Ашенбреннера: содержательная часть здесь в том, что там прогресс удачно разделён на три части (физическую, алгоритмическую и unhobbling), и это очень полезно понимать.
Потом через краткий обзор некоторых областей применений (роботы, картинки, видео) добрался до программирования и LLM-based агентов, Claude Code и всё такое прочее. А закончил, разумеется на AI в математике, и как раз символично получилось, что курс закончился на новости от 20 мая 2026 года.
Я сначала анонсировал, что будет ещё одна лекция про AI Safety, но потом выяснилось, что больше лекций в этом курсе уже не будет. Так что желающим всё-таки послушать простое и тревожное введение в AI Safety рекомендую "AI safety в начале 2026 года" с моей странички "Выступления"; это был рассказ для школьников в "Сириусе", так что ничего технически сложного там не было, а вот интересного было, надеюсь, много.
Спасибо всем, кто слушал, и, надеюсь, до новых встреч!
#sfu #lectures #dsfrontiers
7👍26🔥10❤5😭1🤓1
Вспомнил, что так и не выложил своё выступление на Kopernik Forum 2026 в Шэньчжене. Коллеги всё записали и выложили, так что вот, даю прямую ссылку с таймкодом и выкладываю у себя:
AI and Mathematics: History, State of the Art, and the (Near) Future
(слайды на странице "Выступления")
Мне доверили открывать программу, и я рассказал в целом обычную свою лекцию о том, как AI меняет математику. Как водится, за прошедший месяц лекция уже устарела; вот, например, недавняя новость о гипотезе Эрдёша точно туда вошла бы.
Но общий смысл пока не меняется: LLM всё лучше справляются с математическими доказательствами. А если добавить ещё и разумную работу с какими-нибудь пруверами и дать побольше времени, то становится ещё лучше.
Кстати, сотрудники Anthropic сделали очевидный шаг и спросили Mythos про гипотезу Эрдёша о unit distances. И Mythos, разумеется, справился.
#talks #travel #ai
AI and Mathematics: History, State of the Art, and the (Near) Future
(слайды на странице "Выступления")
Мне доверили открывать программу, и я рассказал в целом обычную свою лекцию о том, как AI меняет математику. Как водится, за прошедший месяц лекция уже устарела; вот, например, недавняя новость о гипотезе Эрдёша точно туда вошла бы.
Но общий смысл пока не меняется: LLM всё лучше справляются с математическими доказательствами. А если добавить ещё и разумную работу с какими-нибудь пруверами и дать побольше времени, то становится ещё лучше.
Кстати, сотрудники Anthropic сделали очевидный шаг и спросили Mythos про гипотезу Эрдёша о unit distances. И Mythos, разумеется, справился.
#talks #travel #ai
❤9👍4😱3👌1
А вот и последний доклад на семинаре лаборатории Маркова:
Семинар Markov Lab — 2026.05.22 — Объединяя модели клиентов
(слайды на странице семинара)
Гарри Прошян (ПОМИ РАН)
Это на самом деле доклад о нашей с Гарри совместной статье "Beyond Isolated Clients: Integrating Graph-Based Embeddings into Event Sequence Models" (WWW'26). Постановка такая: большие цифровые платформы — банки, маркетплейсы, соцсети — порождают миллиарды событий вида "клиент-объект-timestamp", и по этим последовательностям хочется делать много разного, например предсказывать атрибуты клиента (пол, возраст, кредитный риск, склонность к мошенничеству).
Современные self-supervised методы для событийных последовательностей (например, CoLES и Barlow Twins) хорошо понимают временной порядок внутри истории одного клиента, но смотрят на каждого клиента изолированно и полностью игнорируют глобальную структуру. Но если посмотреть, как все взаимодействия вместе образуют двудольный граф "клиенты — объекты", то можно из него много чего интересного вытащить.
Гарри с соавторами попробовали много разных подходов, и оказалось, что выбор оптимальной стратегии диктуется плотностью графа. А ещё все подходы в целом model-agnostic, так что их можно применять независимо от того, что там внутри происходит.
#spsu #markovlab #seminar
Семинар Markov Lab — 2026.05.22 — Объединяя модели клиентов
(слайды на странице семинара)
Гарри Прошян (ПОМИ РАН)
Это на самом деле доклад о нашей с Гарри совместной статье "Beyond Isolated Clients: Integrating Graph-Based Embeddings into Event Sequence Models" (WWW'26). Постановка такая: большие цифровые платформы — банки, маркетплейсы, соцсети — порождают миллиарды событий вида "клиент-объект-timestamp", и по этим последовательностям хочется делать много разного, например предсказывать атрибуты клиента (пол, возраст, кредитный риск, склонность к мошенничеству).
Современные self-supervised методы для событийных последовательностей (например, CoLES и Barlow Twins) хорошо понимают временной порядок внутри истории одного клиента, но смотрят на каждого клиента изолированно и полностью игнорируют глобальную структуру. Но если посмотреть, как все взаимодействия вместе образуют двудольный граф "клиенты — объекты", то можно из него много чего интересного вытащить.
Гарри с соавторами попробовали много разных подходов, и оказалось, что выбор оптимальной стратегии диктуется плотностью графа. А ещё все подходы в целом model-agnostic, так что их можно применять независимо от того, что там внутри происходит.
#spsu #markovlab #seminar
❤13
А вот закончился и курс "Графические вероятностные модели" в СПбГУ:
СПбГУ — 2026.05.29 — Введение в глубокое обучение
(слайды, доска и код, как всегда, на странице курса)
Поскольку deep learning уже точно перестал помещаться в один семестр, я стараюсь начать его заранее, в конце семестра предыдущего.
Так что последние две лекции были довольно стандартным введением в глубокое обучение. Начали с краткой истории вопроса, потом поговорили про один перцептрон и функции активации, потом перешли к SGD и обсудили сам SGD и его варианты от метода моментов до Adam и AdamW.
На этом пока всё! Присоединяйтесь к следующему семестру, когда мы обсудим все основные классы архитектур нейросетей и дойдём, надеюсь, до самого что ни на есть фронтира.
А я пока буду думать, как мне летом поддерживать тот уровень скорости выкладывания контента, к которому мы с вами тут привыкли. Скорее всего, никак. :) Но посмотрим. :)
#spsu #lectures #pgm2026
СПбГУ — 2026.05.29 — Введение в глубокое обучение
(слайды, доска и код, как всегда, на странице курса)
Поскольку deep learning уже точно перестал помещаться в один семестр, я стараюсь начать его заранее, в конце семестра предыдущего.
Так что последние две лекции были довольно стандартным введением в глубокое обучение. Начали с краткой истории вопроса, потом поговорили про один перцептрон и функции активации, потом перешли к SGD и обсудили сам SGD и его варианты от метода моментов до Adam и AdamW.
На этом пока всё! Присоединяйтесь к следующему семестру, когда мы обсудим все основные классы архитектур нейросетей и дойдём, надеюсь, до самого что ни на есть фронтира.
А я пока буду думать, как мне летом поддерживать тот уровень скорости выкладывания контента, к которому мы с вами тут привыкли. Скорее всего, никак. :) Но посмотрим. :)
#spsu #lectures #pgm2026
🔥20❤1
Пока никак мне не отойти от конца семестра и никак не начать производить для вас контент большими ложками. Устал я очень, а со следующей недели начинается следующий очень плотный курс, который я, видимо, не смогу выкладывать.
Так что хорошо, что сегодня контент образовался сам собой. И он прямо супер-свеженький, с пылу с жару, заседание учёного совета ещё идёт, когда я пишу эти строки:
2026-06-04 — Ученый совет ФКН ВШЭ — Образование в эпоху больших языковых моделей
(слайды на странице "Выступления")
ФКН ВШЭ иногда проводит открытые заседания своего Учёного совета, на которых люди выступают со слайдами по разным темам. Не знаю, честно говоря, есть ли у таких заседаний внешняя реклама и можно ли туда подключаться вообще со стороны, но против выкладывания доклада коллеги вроде бы не возражали.
Сегодня очень острая для образования тема: что меняется в эпоху LLM и других AI-моделей, как нам строить образовательный процесс, что меняется в последнее время, что люди реально делают и так далее. Меня пригласили выступить, и я сделал очень общий доклад, с высоты птичьего полёта о том, что самое главное в этой трансформации.
Доклады там супер-короткие, меньше 15 минут, но я вроде бы смог провести два своих основных тезиса, которые не раз уже высказывал.
Во-первых, главная задача системы образования уже давно не в том, чтобы передать знания, а с появлением общедоступных индивидуальных тьюторов в лице LLM и не в том, чтобы педагогически верно их преподать. Главная задача в том, чтобы дать обучающимся мотивацию всем этим заниматься. Если есть мотивация, вас LLM уже прямо сегодня могут прекрасно обучить большинству областей университетской математики и computer science. Но без системы образования мотивация будет мало у кого.
Во-вторых, мы теперь уже точно теряем возможность предсказать, какие конкретные навыки будут нужны людям через годы. Вот сейчас, например, на наших глазах умирает человеческое программирование как написание кода, но пока ещё не как разработка программного продукта целиком. Но останется ли такая разработка человеческой деятельностью через 5-10 лет, мы уже никак не можем предсказать. Но это тоже не беда для системы образования! Мы учим детей делить в столбик не для того, чтобы они могли справиться без калькулятора при необходимости; такой необходимости, разумеется, никогда не возникнет. Мы это делаем для развития мета-навыков, в данном случае для понимания того, что такое алгоритм. Вот такие мета-навыки останутся нужными всегда (если человечество не вымрет, конечно, но это другая история).
Ну и традиционно отмечу, что GPT Images стал, кажется, ещё лучше. Выкладываю несколько слайдов — посмотрите, как он нарисовал пример деления в столбик, кажется, там буквально всё правильно, хотя я не просил ничего конкретного! Такая семантическая детализация раньше редко получалась.
#talks #ai #events
Так что хорошо, что сегодня контент образовался сам собой. И он прямо супер-свеженький, с пылу с жару, заседание учёного совета ещё идёт, когда я пишу эти строки:
2026-06-04 — Ученый совет ФКН ВШЭ — Образование в эпоху больших языковых моделей
(слайды на странице "Выступления")
ФКН ВШЭ иногда проводит открытые заседания своего Учёного совета, на которых люди выступают со слайдами по разным темам. Не знаю, честно говоря, есть ли у таких заседаний внешняя реклама и можно ли туда подключаться вообще со стороны, но против выкладывания доклада коллеги вроде бы не возражали.
Сегодня очень острая для образования тема: что меняется в эпоху LLM и других AI-моделей, как нам строить образовательный процесс, что меняется в последнее время, что люди реально делают и так далее. Меня пригласили выступить, и я сделал очень общий доклад, с высоты птичьего полёта о том, что самое главное в этой трансформации.
Доклады там супер-короткие, меньше 15 минут, но я вроде бы смог провести два своих основных тезиса, которые не раз уже высказывал.
Во-первых, главная задача системы образования уже давно не в том, чтобы передать знания, а с появлением общедоступных индивидуальных тьюторов в лице LLM и не в том, чтобы педагогически верно их преподать. Главная задача в том, чтобы дать обучающимся мотивацию всем этим заниматься. Если есть мотивация, вас LLM уже прямо сегодня могут прекрасно обучить большинству областей университетской математики и computer science. Но без системы образования мотивация будет мало у кого.
Во-вторых, мы теперь уже точно теряем возможность предсказать, какие конкретные навыки будут нужны людям через годы. Вот сейчас, например, на наших глазах умирает человеческое программирование как написание кода, но пока ещё не как разработка программного продукта целиком. Но останется ли такая разработка человеческой деятельностью через 5-10 лет, мы уже никак не можем предсказать. Но это тоже не беда для системы образования! Мы учим детей делить в столбик не для того, чтобы они могли справиться без калькулятора при необходимости; такой необходимости, разумеется, никогда не возникнет. Мы это делаем для развития мета-навыков, в данном случае для понимания того, что такое алгоритм. Вот такие мета-навыки останутся нужными всегда (если человечество не вымрет, конечно, но это другая история).
Ну и традиционно отмечу, что GPT Images стал, кажется, ещё лучше. Выкладываю несколько слайдов — посмотрите, как он нарисовал пример деления в столбик, кажется, там буквально всё правильно, хотя я не просил ничего конкретного! Такая семантическая детализация раньше редко получалась.
#talks #ai #events
1❤36👍10💯3🔥1🆒1