Forwarded from SANDman
Я не хотел писать пост, но придется. Точнее как, это будет не обсасывание послания, а просто описание конъюнктуры в сфере NLP (естественная обработка языка) на казахском.
Чтобы носиться с этим "ИИ", который стал для многих людей сейчас священной коровой, желательно проходить этапы разработок последовательно. Это логично: вы не можете запустить обезьяну в космос, если ваши инженеры не могут прочесть чертеж колеса/коленвала. Нет, разрабатывать они и не должны, но понимать принцип все же стоит.
В сфере NLP тоже есть такие "пороги", которые новичок хочет-не хочет, а пройти должен. Классика жанра: работа со строками, затем - токенизация, после - лемматизация и т.д. В общем, все мы сначала изучаем числа, потом их складываем, а потом уже на ЕНТ решаем всякие синусы-косинусы где вообще одни буквы. Но вот как раз "чисел" для казахского NLP нету. Нету нормального парсера сущностей, нету синтаксического парсера, нету лемматайзера, нету нормальных размеченных данных, и уж тем более нету BERT-моделей заточенных хоть на что (даже на тот же sentiment-analysis).
Мы как то резко из "ничего" перепрыгнули на KazLLM (всякие там Irbis и прочие), но в некоторых задачах применение LLM - пушка по воробьям. А бизнес и госуха не захотят закупать карточки только ради внедрения "ИИ".
В мире, в целом, практика такова: нету денег - BERT (инферится чуть ли не на 1060, файнтюнится быстро на 3060), есть - LLM. Как можно оперировать какими-то сложными вещами, даже файнтюном BERT, если у нас своих данных то нету (ну да, спарсили википедию, окей), и более того - все решили в погоне за хайпом обучать западные архитектуры. С одной стороны, это интересно, а с другой - можно взглянуть на опыт РФ. Именно там энтузиасты начинали с rule-based approach, потом потихоньку осваивали BERT, а сейчас там целый пласт крупных "игроков" (и да, автоматизированный переводчик с казахского на русский на HF сделали россияне из вэкашки, ага). У нас, видимо, попробуют сразу запрыгнуть в первый вагон с наскоку. Но это как лемматизировать текста через LLM - бессмысленно и ресурсозатратно.
P.S. Речь идет не о всяких там Гигачатах, а о андерграундных тюнах типа того же Вихря/Ru-adapt Квене/Сайги и т.д.
P.P.S. А если говорить о мировом уровне, то там просто жесть. Посмотрите сколько на HF моделей в день заливается. И причем, грузят же не только LLM, но и BERT`ы, наборы данных и т.д.
Чтобы носиться с этим "ИИ", который стал для многих людей сейчас священной коровой, желательно проходить этапы разработок последовательно. Это логично: вы не можете запустить обезьяну в космос, если ваши инженеры не могут прочесть чертеж колеса/коленвала. Нет, разрабатывать они и не должны, но понимать принцип все же стоит.
В сфере NLP тоже есть такие "пороги", которые новичок хочет-не хочет, а пройти должен. Классика жанра: работа со строками, затем - токенизация, после - лемматизация и т.д. В общем, все мы сначала изучаем числа, потом их складываем, а потом уже на ЕНТ решаем всякие синусы-косинусы где вообще одни буквы. Но вот как раз "чисел" для казахского NLP нету. Нету нормального парсера сущностей, нету синтаксического парсера, нету лемматайзера, нету нормальных размеченных данных, и уж тем более нету BERT-моделей заточенных хоть на что (даже на тот же sentiment-analysis).
Мы как то резко из "ничего" перепрыгнули на KazLLM (всякие там Irbis и прочие), но в некоторых задачах применение LLM - пушка по воробьям. А бизнес и госуха не захотят закупать карточки только ради внедрения "ИИ".
В мире, в целом, практика такова: нету денег - BERT (инферится чуть ли не на 1060, файнтюнится быстро на 3060), есть - LLM. Как можно оперировать какими-то сложными вещами, даже файнтюном BERT, если у нас своих данных то нету (ну да, спарсили википедию, окей), и более того - все решили в погоне за хайпом обучать западные архитектуры. С одной стороны, это интересно, а с другой - можно взглянуть на опыт РФ. Именно там энтузиасты начинали с rule-based approach, потом потихоньку осваивали BERT, а сейчас там целый пласт крупных "игроков" (и да, автоматизированный переводчик с казахского на русский на HF сделали россияне из вэкашки, ага). У нас, видимо, попробуют сразу запрыгнуть в первый вагон с наскоку. Но это как лемматизировать текста через LLM - бессмысленно и ресурсозатратно.
P.S. Речь идет не о всяких там Гигачатах, а о андерграундных тюнах типа того же Вихря/Ru-adapt Квене/Сайги и т.д.
P.P.S. А если говорить о мировом уровне, то там просто жесть. Посмотрите сколько на HF моделей в день заливается. И причем, грузят же не только LLM, но и BERT`ы, наборы данных и т.д.
🔥16
Феномен Тредс
Первый раз зайдя в Тредс, у вас может сложиться впечатление, что вы окружены умалишенными кретинами. Они могут ущемиться от шоколада на нижней полке, страшно любят культуру отмены, одержимы этническим происхождением Чингисхана и внутренней политики России и её несостоятельности. Плохое качество образования или же… Сама структура соцсети?
В научной статье “Beyond fack-checking and moderation : how recommender systems toxifies social networking sites” рассматривается влияние рекомендательных систем социальных сетей на общественные процессы.
Проанализировав почти 500 миллионов твитов французских политических активистов с 2016 по 2022 годы, авторы пришли к выводу, что алгоритмы, ориентированные на максимизацию вовлечённости, неизбежно ведут к “алгоритмическому негативному уклону”. когда пользователи начинают видеть на 26%, а иногда и на 300% больше негативного контента, чем реально присутствует в их окружении. Это усиливает поляризацию мнений и приводит к фрагментации публичного пространства. Более того, социальное влияние концентрируется в руках наиболее токсичных пользователей: в топ-1% самых влиятельных аккаунтов вдвое больше авторов, систематически публикующих негатив, чем в среднем по сети. И подобное видно даже из опыта скроллинга Тредс – помимо ноунейм аккаунтов, с завидной периодичностью на желчь исходят одни и те же знакомые лица.
Важно понимать, что для сервисов главным ресурсом остаётся человеческое внимание – чем дольше юзер сидит в сервисе, тем больше рекламы ему можно показать. Особенно это важно для Меты.
Тредс ловко конвертирует аудиторию Инстаграм, самой популярной соцсети в Казахстане. Именно здесь кроется главный вызов для нас. Алгоритмы Threads используют классический приём байтов: раздражить, вызвать негодование и запустить реакцию. Это работает лучше всего.
Причём, судя по всему, аполитичная Мета, которая всегда банит или скрывает с фида политические посты, не гнушается забить на модерацию ради вовлеченности их нового продукта.
Показателен кейс Тайваня, где Тредс также популярен как в Казахстане. Президентские выборы 2024 года превратили соцсеть в площадку для мобилизации сторонников демократической прогрессивной партии. Люди заметили:, что критика власти в Тредсе расходится гораздо шире, чем в Фейсбуке и Инстаграме. Там, где другие платформы включают жёсткую модерацию и “теневые баны”, Тредс оставался почти нетронутым и этим быстро завоевал популярность.
И в этом феномен Threads. Придя как альтернатива токсичному твиттеру, он вобрал в себе худшие стороны социальных сетей (как и любой продукт Меты) . И если Инстаграм в Казахстане уже стал частью повседневности, то приход Тредс сулит нам новую эру эпоху управляемого негатива, где внимание общества будет распределяться не вокруг смысла, а вокруг вспышек ярости. Мы уже это видим на примере БАЙКОТОВ. Но завтра та же механика может обернуться ростом радикализма, токсичности и поляризации общества.
Первый раз зайдя в Тредс, у вас может сложиться впечатление, что вы окружены умалишенными кретинами. Они могут ущемиться от шоколада на нижней полке, страшно любят культуру отмены, одержимы этническим происхождением Чингисхана и внутренней политики России и её несостоятельности. Плохое качество образования или же… Сама структура соцсети?
В научной статье “Beyond fack-checking and moderation : how recommender systems toxifies social networking sites” рассматривается влияние рекомендательных систем социальных сетей на общественные процессы.
Проанализировав почти 500 миллионов твитов французских политических активистов с 2016 по 2022 годы, авторы пришли к выводу, что алгоритмы, ориентированные на максимизацию вовлечённости, неизбежно ведут к “алгоритмическому негативному уклону”. когда пользователи начинают видеть на 26%, а иногда и на 300% больше негативного контента, чем реально присутствует в их окружении. Это усиливает поляризацию мнений и приводит к фрагментации публичного пространства. Более того, социальное влияние концентрируется в руках наиболее токсичных пользователей: в топ-1% самых влиятельных аккаунтов вдвое больше авторов, систематически публикующих негатив, чем в среднем по сети. И подобное видно даже из опыта скроллинга Тредс – помимо ноунейм аккаунтов, с завидной периодичностью на желчь исходят одни и те же знакомые лица.
Важно понимать, что для сервисов главным ресурсом остаётся человеческое внимание – чем дольше юзер сидит в сервисе, тем больше рекламы ему можно показать. Особенно это важно для Меты.
Тредс ловко конвертирует аудиторию Инстаграм, самой популярной соцсети в Казахстане. Именно здесь кроется главный вызов для нас. Алгоритмы Threads используют классический приём байтов: раздражить, вызвать негодование и запустить реакцию. Это работает лучше всего.
Причём, судя по всему, аполитичная Мета, которая всегда банит или скрывает с фида политические посты, не гнушается забить на модерацию ради вовлеченности их нового продукта.
Показателен кейс Тайваня, где Тредс также популярен как в Казахстане. Президентские выборы 2024 года превратили соцсеть в площадку для мобилизации сторонников демократической прогрессивной партии. Люди заметили:, что критика власти в Тредсе расходится гораздо шире, чем в Фейсбуке и Инстаграме. Там, где другие платформы включают жёсткую модерацию и “теневые баны”, Тредс оставался почти нетронутым и этим быстро завоевал популярность.
И в этом феномен Threads. Придя как альтернатива токсичному твиттеру, он вобрал в себе худшие стороны социальных сетей (как и любой продукт Меты) . И если Инстаграм в Казахстане уже стал частью повседневности, то приход Тредс сулит нам новую эру эпоху управляемого негатива, где внимание общества будет распределяться не вокруг смысла, а вокруг вспышек ярости. Мы уже это видим на примере БАЙКОТОВ. Но завтра та же механика может обернуться ростом радикализма, токсичности и поляризации общества.
🔥34
Со вчерашнего дня в Тредсе происходит тряска фемок по поводу вырванного из контекста обращения Токаева.
Возмущения вызвала эта фраза, которую в силу низкой читательной грамотности поняли не так:
Возмущения вызвала эта фраза, которую в силу низкой читательной грамотности поняли не так:
"Следует признать, сейчас стали обычными явлениями грубость, ругань, драки, которые зачастую можно наблюдать даже в общественных местах, на дорогах. К сожалению, среди них есть и женщины, которые устраивают скандалы, употребляют нецензурные выражения, нарушают общественный порядок. Подобные действия неприемлемы в культурном, цивилизованном обществе, они наносят ущерб авторитету нашей страны на международной арене"
🔥25
В своем обращении пару дней назад Токаев сказал такую вещь:
Про плодящихся ветеранов данных у меня нет, но есть любопытные статьи прошлых лет.
А вот уже выводы из моей прошлогодней статьи, где я анализировал адресную социальную помощь:
Основной вывод можно сделать такой, что проблема неэффективности адресной социальной помощи кроется не столько в объёмах финансирования, сколько в качестве сбора и обработки данных, а также в сильном лоббизме соцсферы со стороны регионов. Государство ежегодно увеличивает расходы, но при этом не имеет объективных инструментов измерения бедности и адресности выплат. Несоответствия между официальной статистикой и реальной ситуацией, дублирование и противоречивость данных в цифровых системах, а также случаи получения пособий людьми с высоким доходом и множественной недвижимостью подрывают доверие к программе. В результате бюджетные средства распределяются неправильно, а реальные бедные остаются без поддержки, тогда как ведомства и регионы заинтересованы прежде всего в сохранении и расширении потоков финансирования.
“Близорукая, примиренческая социальная политика государства привела к появлению более ста разного рода льгот, выбиванием которых занимается отдельная категория граждан, так называемые помогайки. До сих пор платим и оказываем медицинские услуги участникам конфликтов на территории бывшего СССР и за его пределами. СССР уже как 35 лет не существует, а ветераны молодеют и множатся”
Про плодящихся ветеранов данных у меня нет, но есть любопытные статьи прошлых лет.
"Самое большое количество удалений глаза происходит в южном регионе", - сообщила представитель шымкентского филиала "Казахского ордена "Знак Почета" научно-исследовательского института глазных болезней" Ольга ЛИ на открытии офтальмологического центра в Шымкенте.
Много случаев, когда людям говорят, что им присвоят инвалидность II группы (размер пособия 45 438 тенге, согласно Законодательству РК – К.П.). При этом людям ведь не говорят обо всех неудобствах, о том, что протез надо менять каждые полгода, а он стоит около пятидесяти тысяч тенге. Люди не задумываются о том, что теряют орган, надеясь на какие-то бонусы от государства", - добавила представитель КазНИИ”,
статья от Ratel.kz за 2019 год.
А вот уже выводы из моей прошлогодней статьи, где я анализировал адресную социальную помощь:
“Эксперты школы аналитики при Сенате проанализировали 67 тысяч семей, получающих АСП, и пришли к выводу, что у подавляющего большинства получателей доход выше порога. А средний подушевой доход получателей АСП — 90–130 тысяч на человека или 350–500 тысяч тенге на среднюю семью из 4 человек.
В свое время было введено много механизмов социальной помощи. При этом их процесс сопровождался мошенничеством и сознательным ухудшением благосостояния по документам. Были случаи, что ездили комиссии по регионам, которые начисляли выплаты, а следом ехала вторая комиссия и вскрывала случаи мошенничества
В ходе исследования аналитики при Сенате выявили 352 семьи, имеющие доход ниже прожиточного минимума и при этом владеющие 11 объектами недвижимости.
Отдельной проблемой является наличие ненаблюдаемой экономической активности, теневых доходов. Согласно оценке, доля ненаблюдаемой экономики составляет около 18% ВВП страны.
Зарплаты в Туркестанской области самые низкие в стране. Но у всего остального есть стереотип о «богатых шымкентцах» и, по факту, юг имеет аномальное количество миниолигархов и теневиков
Основной вывод можно сделать такой, что проблема неэффективности адресной социальной помощи кроется не столько в объёмах финансирования, сколько в качестве сбора и обработки данных, а также в сильном лоббизме соцсферы со стороны регионов. Государство ежегодно увеличивает расходы, но при этом не имеет объективных инструментов измерения бедности и адресности выплат. Несоответствия между официальной статистикой и реальной ситуацией, дублирование и противоречивость данных в цифровых системах, а также случаи получения пособий людьми с высоким доходом и множественной недвижимостью подрывают доверие к программе. В результате бюджетные средства распределяются неправильно, а реальные бедные остаются без поддержки, тогда как ведомства и регионы заинтересованы прежде всего в сохранении и расширении потоков финансирования.
🔥19👍7
Готовы ли мы к реальной цифровизации?
Логика цифровизации предельно проста – цифровые сервисы значительно уменьшают издержки и оптимизируют рабочие процессы в компаниях, что позволяет при меньшем количестве работников получать большую производительность. Иными словами, при современных трансформациях - чем более компетентен твой работник, тем выше его производительность.
И на этом фоне непонятны грандиозные планы по цифровизации и оптимизации всего и вся от нашего правительства. Ибо это сильно противоречит кейнсианским методам работы в сфере создания рабочих мест.
В Жезказгане, например, на истощенных месторождениях не сокращают шахтеров. Потому что социальная ответственность бизнеса. На обрабатывающих предприятиях, как мне рассказывали, автоматизируют процессы, но никого не сокращают – тоже соцответственность. Аналогичная ситуация и в Мангистау, где часть месторождений уже являются зрелыми (читай, истощаются), а сальдо миграции у региона все еще одно из самых высоких в стране.
В новом налоговом кодексе планируется ввести упрощенный режим для некоторых сфер креативной индустрии. Знаете каких? Ремесленники и творческие мастерские. Буквально сферы со средневековым уровнем производительности - а все потому что дают больше всего рабочих мест. Не видать нам казахской лабубы.
И эта логика идёт уже очень давно. Из отчета Высшей аудиторской палаты с анализом бюджета 23 года следует, что было запланировано создание 93 965 рабочих мест, из них фактически создано всего 8 900 мест, или 9,5%. А в сфере сельского хозяйства из созданных 67 601 рабочих мест 81% являются сезонными. Прирост рабочих мест обеспечивается низкопродуктивными отраслями и государственным сектором.
С другой стороны, там, где рынок действительно сам приводит к цифровизации мы видим совсем иную картину. В ИТ и банковской сфере зарплаты одни из самых высоких в стране, туда уходят лучшие кадры и именно эти отрасли формируют реальный спрос на специалистов. Здесь цифровизация работает так, как и должна – создаёт добавленную стоимость, тянет за собой смежные сферы и формирует новую экономику.
И если у нас когда-нибудь действительно начнётся настоящая цифровизация, то Казахстан получит спрос на наукоёмкие, высокооплачиваемые должности. Но за это придётся платить высокую цену. Потому что параллельно огромная масса людей окажется безработной, с устаревшими профессиями и навыками. А в условиях взрывной демографии это грозит не только экономическими, но и социальными потрясениями.
Логика цифровизации предельно проста – цифровые сервисы значительно уменьшают издержки и оптимизируют рабочие процессы в компаниях, что позволяет при меньшем количестве работников получать большую производительность. Иными словами, при современных трансформациях - чем более компетентен твой работник, тем выше его производительность.
И на этом фоне непонятны грандиозные планы по цифровизации и оптимизации всего и вся от нашего правительства. Ибо это сильно противоречит кейнсианским методам работы в сфере создания рабочих мест.
В Жезказгане, например, на истощенных месторождениях не сокращают шахтеров. Потому что социальная ответственность бизнеса. На обрабатывающих предприятиях, как мне рассказывали, автоматизируют процессы, но никого не сокращают – тоже соцответственность. Аналогичная ситуация и в Мангистау, где часть месторождений уже являются зрелыми (читай, истощаются), а сальдо миграции у региона все еще одно из самых высоких в стране.
В новом налоговом кодексе планируется ввести упрощенный режим для некоторых сфер креативной индустрии. Знаете каких? Ремесленники и творческие мастерские. Буквально сферы со средневековым уровнем производительности - а все потому что дают больше всего рабочих мест. Не видать нам казахской лабубы.
И эта логика идёт уже очень давно. Из отчета Высшей аудиторской палаты с анализом бюджета 23 года следует, что было запланировано создание 93 965 рабочих мест, из них фактически создано всего 8 900 мест, или 9,5%. А в сфере сельского хозяйства из созданных 67 601 рабочих мест 81% являются сезонными. Прирост рабочих мест обеспечивается низкопродуктивными отраслями и государственным сектором.
С другой стороны, там, где рынок действительно сам приводит к цифровизации мы видим совсем иную картину. В ИТ и банковской сфере зарплаты одни из самых высоких в стране, туда уходят лучшие кадры и именно эти отрасли формируют реальный спрос на специалистов. Здесь цифровизация работает так, как и должна – создаёт добавленную стоимость, тянет за собой смежные сферы и формирует новую экономику.
И если у нас когда-нибудь действительно начнётся настоящая цифровизация, то Казахстан получит спрос на наукоёмкие, высокооплачиваемые должности. Но за это придётся платить высокую цену. Потому что параллельно огромная масса людей окажется безработной, с устаревшими профессиями и навыками. А в условиях взрывной демографии это грозит не только экономическими, но и социальными потрясениями.
Массовое возмущение в соцсетях вызвало поздравление мамы на заседании Мажилиса депутатом гигачадом Ардаком Назаровым.
Уже говорят и о низкой политической культуре слуг народа, и о том, что такого якобы некомпетентного депутата надо отзывать. Возмущения городских соевичков можно увидеть и в Тредсе, и в телеге, и всех популярных казахстанских соцсетях. А так же ему припоминают другие перлы:
Стоит напомнить, что Ардак Назаров – депутат самовыдвиженец от Алматинской области (Иргелинский и Райымбекский сельские округа). Во время выборов 23 года он смог набрать 122к голосов.
Так что можно сделать простой вывод – он действительно представляет интересы своего электората и, судя по количеству людей оправдывающих его, так выглядит казахский консерватизм. С особенной политической культурой, но такой какой он есть.
Пока городские соевые либерашки бойкотируют выборы, сельские гигачады отдают свой голос за консервативного ММА-шника, отстаивающего семейные ценности.
Уже говорят и о низкой политической культуре слуг народа, и о том, что такого якобы некомпетентного депутата надо отзывать. Возмущения городских соевичков можно увидеть и в Тредсе, и в телеге, и всех популярных казахстанских соцсетях. А так же ему припоминают другие перлы:
“Это была ночь покаяния для многих. Что бы мы делали, если эта ночь была нашей последней? Это маленькое предупреждение от Аллаха. Подумайте о том, что стало бы с нами, если землетрясение было бы сильнее. Слава Богу! Необходимо понять, что это милосердие Аллаха. Потому что, перед великим бедствием приходит малое бедствие. Перед такой бедой мы бессильны, ничего не можем сделать, но мы этого не хотим признать. Задумайтесь. Покайтесь” – про землетрясение в Алматы в 2024 году.
“В последнее время в информационном пространстве страны свободно пропагандируются такие вопросы, как однополые браки, смена пола. Все мы знаем, что это противоречит нашему мировоззрению. И мы все хорошо знаем, что за этим стоят международные организации Запада. И что ещё хуже, гей-пропаганда сейчас очень активно идёт в частных школах, в крупных городах. Эпидемия уже наступила, нам необходимо пресекать её на корню, чтобы потом не кусать себе локти” – про пропаганду ЛГБТ.
Стоит напомнить, что Ардак Назаров – депутат самовыдвиженец от Алматинской области (Иргелинский и Райымбекский сельские округа). Во время выборов 23 года он смог набрать 122к голосов.
Так что можно сделать простой вывод – он действительно представляет интересы своего электората и, судя по количеству людей оправдывающих его, так выглядит казахский консерватизм. С особенной политической культурой, но такой какой он есть.
Пока городские соевые либерашки бойкотируют выборы, сельские гигачады отдают свой голос за консервативного ММА-шника, отстаивающего семейные ценности.
🔥28
Великий казахский файрволл
Wired недавно написал об утечке документов показала компании Geedge Networks (также известная как Zhongdian Jizhi), причастной к работе "Великого китайского файрволла". Как выяснилось, компания поставляет программное обеспечение для интернет-блокировок в другие страны — в том числе в Казахстан, Мьянму, Эфиопию и Пакистан.
За рубеж фирма вывела систему Tiangou Secure Gateway (TSG). По документам, этот инструмент встраивается прямо в дата-центры и может масштабироваться до уровня контроля всего интернет-трафика целой страны. Каждый пакет данных проходит через TSG, где он может быть просканирован, отфильтрован или полностью заблокирован.
Для незашифрованного трафика система способна перехватывать содержимое сайтов, пароли, вложения в письмах и другие данные.
Для зашифрованного трафика используется глубокая проверка пакетов и машинное обучение, чтобы извлекать метаданные и определять использование обходных инструментов вроде VPN.
Если система не может понять зашифрованный поток, она помечает его как подозрительный и блокирует на время.
Дополнительно предусмотрена возможность вводить индивидуальные правила против конкретных пользователей, собирать их сетевую активность и усиливать слежку.
Чебурнет с Aitu все ближе.
Wired недавно написал об утечке документов показала компании Geedge Networks (также известная как Zhongdian Jizhi), причастной к работе "Великого китайского файрволла". Как выяснилось, компания поставляет программное обеспечение для интернет-блокировок в другие страны — в том числе в Казахстан, Мьянму, Эфиопию и Пакистан.
За рубеж фирма вывела систему Tiangou Secure Gateway (TSG). По документам, этот инструмент встраивается прямо в дата-центры и может масштабироваться до уровня контроля всего интернет-трафика целой страны. Каждый пакет данных проходит через TSG, где он может быть просканирован, отфильтрован или полностью заблокирован.
Для незашифрованного трафика система способна перехватывать содержимое сайтов, пароли, вложения в письмах и другие данные.
Для зашифрованного трафика используется глубокая проверка пакетов и машинное обучение, чтобы извлекать метаданные и определять использование обходных инструментов вроде VPN.
Если система не может понять зашифрованный поток, она помечает его как подозрительный и блокирует на время.
Дополнительно предусмотрена возможность вводить индивидуальные правила против конкретных пользователей, собирать их сетевую активность и усиливать слежку.
Чебурнет с Aitu все ближе.
WIRED
Massive Leak Shows How a Chinese Company Is Exporting the Great Firewall to the World
Geedge Networks, a company with ties to the founder of China’s mass censorship infrastructure, is selling its censorship and surveillance systems to at least four other countries in Asia and Africa.
kzlg
Великий казахский файрволл Wired недавно написал об утечке документов показала компании Geedge Networks (также известная как Zhongdian Jizhi), причастной к работе "Великого китайского файрволла". Как выяснилось, компания поставляет программное обеспечение…
Импортировать технологии китайского файрволла начали еще в 2019 году. Компания Geedge зашла одновременно со скандальным сертификатом безопасности со стороны операторов.
Ключевым продуктом стал Tiangou Secure Gateway (TSG). Это программно-аппаратный комплекс, встраиваемый прямо в дата-центры и способный масштабироваться до уровня контроля всего интернет-трафика целой страны. Каждый пакет данных проходит через TSG, где он может быть просканирован, отфильтрован или заблокирован. В случае незашифрованного трафика система может перехватывать содержимое сайтов, пароли и даже вложения писем. Если трафик зашифрован с помощью протокола TLS, комплекс применяет глубокую проверку пакетов и алгоритмы машинного обучения для извлечения метаданных и выявления попыток обхода блокировок через VPN или другие инструменты. Если определить содержание трафика невозможно, система может пометить поток как подозрительный и временно заблокировать его. Кроме того, TSG позволяет создавать индивидуальные правила против конкретных пользователей и собирать их сетевую активность.
Документы показывают, что кластеры TSG были развернуты в 17 городах Казахстана, а также в национальном центре мониторинга интернета. При этом Geedge использовала не только TSG. В Казахстане работали и другие её продукты: Bifang – система централизованного управления всей инфраструктурой; Galaxy – первая версия продукта и Nezha, использовавшийся для сетевого анализа и контроля.
Слитые документы фиксируют все события казахстанского филиала с сентября 2020 по октябрь 2022 года, включая список изменений в системе с датами, версиями и ответственными сотрудниками.
В слитых документах у казахстанского филиала кодовые имена K18 и K24.
Ключевым продуктом стал Tiangou Secure Gateway (TSG). Это программно-аппаратный комплекс, встраиваемый прямо в дата-центры и способный масштабироваться до уровня контроля всего интернет-трафика целой страны. Каждый пакет данных проходит через TSG, где он может быть просканирован, отфильтрован или заблокирован. В случае незашифрованного трафика система может перехватывать содержимое сайтов, пароли и даже вложения писем. Если трафик зашифрован с помощью протокола TLS, комплекс применяет глубокую проверку пакетов и алгоритмы машинного обучения для извлечения метаданных и выявления попыток обхода блокировок через VPN или другие инструменты. Если определить содержание трафика невозможно, система может пометить поток как подозрительный и временно заблокировать его. Кроме того, TSG позволяет создавать индивидуальные правила против конкретных пользователей и собирать их сетевую активность.
Документы показывают, что кластеры TSG были развернуты в 17 городах Казахстана, а также в национальном центре мониторинга интернета. При этом Geedge использовала не только TSG. В Казахстане работали и другие её продукты: Bifang – система централизованного управления всей инфраструктурой; Galaxy – первая версия продукта и Nezha, использовавшийся для сетевого анализа и контроля.
Слитые документы фиксируют все события казахстанского филиала с сентября 2020 по октябрь 2022 года, включая список изменений в системе с датами, версиями и ответственными сотрудниками.
В слитых документах у казахстанского филиала кодовые имена K18 и K24.
Главные новости Казахстана - Tengrinews.kz
Специальный сертификат попросили установить на смартфоны казахстанцев: 18 июля 2019 18:25 - новости на Tengrinews.kz
Tengrinews.kz ▶ Специальный сертификат попросили установить на смартфоны казахстанцев: 18 июля 2019 18:25 ▶ Читать подробнее актуальные новости и события н...
🔥10
Не по масти тебе такая реклама, давай убирай
По данным K-Research, за почти 10 лет количество рекламодателей в СМИ уменьшилось в 4 раза – с 3 372 в 2015 до 1087 в 2024 году. За эти полгода количество рекламодателей уменьшилось до 772. Цифры говорят сами за себя – рынок скукожился вчетверо и этот тренд в целом ежегодный.
И в то же самое время растёт госинформзаказ. Если в середине 2010-х он измерялся десятками миллиардов тенге, то сегодня переваливает за шестьдесят и двигается к семидесяти. СМИ выживают уже не за счёт рынка, а за счёт государства.
Конечно не стоит отрицать глобальные треды уменьшения рекламы в СМИ и их постепенный переход в соцсети, где реклама дешевле и эффективнее. Это общемировой тренд, только в Казахстане он оказался куда болезненнее. Если в США или Европе традиционные медиа ещё держатся на плаву за счёт крупных контрактов, у нас рекламодатели уходят быстрее.
Тем временем в июне стало известно, что Минздрав прорабатывает вопрос об ограничении рекламы фастфуда и вредных продуктов. Это при том, что продукты питания и напитки составляют почти половину рынка рекламы в стране и, при вероятном ограничении, рынок рекламы уменьшится еще сильнее.
А это приведет к тому, что все крупные рекламные контракты могут остаться только у информгигантов просто за счёт огромного трафика. А это уже другая проблема о которой я писал – отсутствие сегментации аудитории в СМИ.
В результате журналистика перестаёт быть качественной – у Курсива закрылся раздел Research, классические аналитические статьи ты едва встретишь. Мы дожили до эпохи, когда сайты стали приложением к телеграм-каналу, где все стремятся пораньше дать одну и ту же новость о назначении/увольнении/аресте.
Журналистика как институт, с редакционной политикой, с рынком, с конкуренцией за читателя постепенно исчезает. Её место занимает либо госпропаганда (которую никто не читает), либо соцсети, которые в силу особенностей обезличены и могут транслировать любые безумные идеи.
Конечно, и со временем читательский рынок скукожился – спрос на большие лонгриды явно сократился на фоне простых и понятных ИИ-слопов в Тредсе.
Другой вопрос есть ли у нас достаточная аудитория, готовая читать и платить за качественные и независимые новости? Есть ли у нас средний класс, готовый платить за то что читает?
По данным K-Research, за почти 10 лет количество рекламодателей в СМИ уменьшилось в 4 раза – с 3 372 в 2015 до 1087 в 2024 году. За эти полгода количество рекламодателей уменьшилось до 772. Цифры говорят сами за себя – рынок скукожился вчетверо и этот тренд в целом ежегодный.
И в то же самое время растёт госинформзаказ. Если в середине 2010-х он измерялся десятками миллиардов тенге, то сегодня переваливает за шестьдесят и двигается к семидесяти. СМИ выживают уже не за счёт рынка, а за счёт государства.
Конечно не стоит отрицать глобальные треды уменьшения рекламы в СМИ и их постепенный переход в соцсети, где реклама дешевле и эффективнее. Это общемировой тренд, только в Казахстане он оказался куда болезненнее. Если в США или Европе традиционные медиа ещё держатся на плаву за счёт крупных контрактов, у нас рекламодатели уходят быстрее.
– А ты че запрещаешь то?
– О детях забочусь, бля, не видишь что ли?
Тем временем в июне стало известно, что Минздрав прорабатывает вопрос об ограничении рекламы фастфуда и вредных продуктов. Это при том, что продукты питания и напитки составляют почти половину рынка рекламы в стране и, при вероятном ограничении, рынок рекламы уменьшится еще сильнее.
А это приведет к тому, что все крупные рекламные контракты могут остаться только у информгигантов просто за счёт огромного трафика. А это уже другая проблема о которой я писал – отсутствие сегментации аудитории в СМИ.
В результате журналистика перестаёт быть качественной – у Курсива закрылся раздел Research, классические аналитические статьи ты едва встретишь. Мы дожили до эпохи, когда сайты стали приложением к телеграм-каналу, где все стремятся пораньше дать одну и ту же новость о назначении/увольнении/аресте.
Журналистика как институт, с редакционной политикой, с рынком, с конкуренцией за читателя постепенно исчезает. Её место занимает либо госпропаганда (которую никто не читает), либо соцсети, которые в силу особенностей обезличены и могут транслировать любые безумные идеи.
Конечно, и со временем читательский рынок скукожился – спрос на большие лонгриды явно сократился на фоне простых и понятных ИИ-слопов в Тредсе.
Другой вопрос есть ли у нас достаточная аудитория, готовая читать и платить за качественные и независимые новости? Есть ли у нас средний класс, готовый платить за то что читает?
🔥23
Исполнительный дурак – горе в стране
На следующий день после обращения Токаева, где он вскользь упомянул самокаты, в Алматы полиция начала массово эвакуировать (читай “отжимать”) самокаты с улиц города.
А сегодня выяснилось, что Управление городской мобильности Алматы не проверяло электросамокаты Bolt и не выдавало разрешения на их эксплуатацию, так как таких функций у ведомства нет. При этом в компании заявили, что запуск согласовывали с акиматом и выполнили все требования, а прокат самокатов в городе вообще не регламентирован. Руководство Bolt заверило, что более тысячи самокатов исправны, соответствуют европейским стандартам и проходят дополнительную проверку, такие же модели работают в Польше, Украине, Грузии, Болгарии и Эстонии.
Ирония в том, что все разговоры о защите бизнеса рушатся в один момент – стоит какому-то чиновнику решить выслужиться, и целая отрасль оказывается “обнулена”. Видно, что при чьем-то желании все договоренности не стоят ничего, а это плохо для бизнеса.
История с самокатами наглядно показывает: достаточно одного желающего выслужиться исполнителя, чтобы уничтожить весь бизнес. Рискнут ли самокатные компании пойти в суд за компенсацией убытков, причиненных акцией? И если компания выиграет, то станет ясно, что государство действительно готово защищать предпринимателей, а не только говорить об этом.
На следующий день после обращения Токаева, где он вскользь упомянул самокаты, в Алматы полиция начала массово эвакуировать (читай “отжимать”) самокаты с улиц города.
А сегодня выяснилось, что Управление городской мобильности Алматы не проверяло электросамокаты Bolt и не выдавало разрешения на их эксплуатацию, так как таких функций у ведомства нет. При этом в компании заявили, что запуск согласовывали с акиматом и выполнили все требования, а прокат самокатов в городе вообще не регламентирован. Руководство Bolt заверило, что более тысячи самокатов исправны, соответствуют европейским стандартам и проходят дополнительную проверку, такие же модели работают в Польше, Украине, Грузии, Болгарии и Эстонии.
Ирония в том, что все разговоры о защите бизнеса рушатся в один момент – стоит какому-то чиновнику решить выслужиться, и целая отрасль оказывается “обнулена”. Видно, что при чьем-то желании все договоренности не стоят ничего, а это плохо для бизнеса.
История с самокатами наглядно показывает: достаточно одного желающего выслужиться исполнителя, чтобы уничтожить весь бизнес. Рискнут ли самокатные компании пойти в суд за компенсацией убытков, причиненных акцией? И если компания выиграет, то станет ясно, что государство действительно готово защищать предпринимателей, а не только говорить об этом.
Власть
Управление городской мобильности Алматы не осуществляло проверку электросамокатов Bolt
Управление городской мобильности Алматы не осуществляло проверку электросамокатов компании Bolt в связи с отсутствием нужных компетенций и других контрольно-надзорных функций. Ведомство также не выдавало разрешение на их эксплуатацию, говорится в его ответе…
🔥17
Те же грабли
На днях стало известно, что министерство национальной экономики обещает удерживать инфляцию в пределах 10–11% и заморозить рост тарифов на коммунальные услуги до конца 2025 года. У монополистов не будут принимать новые заявки на повышение цен, корректировки переносят, а производителей социально значимых продуктов подстраховывают льготными тарифами.
Что любопытно, ровно так же правительство действовало несколько лет назад, и результат мы уже видели. С 2020-го по 2021-й годы власть удерживала тарифы, ограничивала торговые надбавки, директивно сдерживала цены на продукты. На короткой дистанции это сдерживало инфляцию, но лишь создало отложенный эффект, который потом отпружинил в 2022 году, как только ослаб контроль.
Тогда инфляция взлетела до 20,3%. Продукты подорожали на 25%, бытовые товары на 20%, а доходы пенсионного фонда ушли в минус.
И вот опять те же грабли причем на фоне судьбоносного 2026 года, когда вступает в силу новый налоговый кодекс.
На днях стало известно, что министерство национальной экономики обещает удерживать инфляцию в пределах 10–11% и заморозить рост тарифов на коммунальные услуги до конца 2025 года. У монополистов не будут принимать новые заявки на повышение цен, корректировки переносят, а производителей социально значимых продуктов подстраховывают льготными тарифами.
Что любопытно, ровно так же правительство действовало несколько лет назад, и результат мы уже видели. С 2020-го по 2021-й годы власть удерживала тарифы, ограничивала торговые надбавки, директивно сдерживала цены на продукты. На короткой дистанции это сдерживало инфляцию, но лишь создало отложенный эффект, который потом отпружинил в 2022 году, как только ослаб контроль.
Тогда инфляция взлетела до 20,3%. Продукты подорожали на 25%, бытовые товары на 20%, а доходы пенсионного фонда ушли в минус.
И вот опять те же грабли причем на фоне судьбоносного 2026 года, когда вступает в силу новый налоговый кодекс.
👍23
Дореволюционный медицинский туризм
В XIX веке в России и Европе кумыс стал модным медицинским средством. Считалось, что он помогал при туберкулёзе и лёгочных болезнях. В Самаре, Оренбурге, Башкирии открывались специальные кумысные санатории.
И вот недавно мне попались очерки 1901 года о подобной поездке. Автор считал себя труЪ кумысником и потому поехал прямо в степь вместо санатория.
Про сорта кумыса:
Расписание в подобном санатории выглядело так:
8-9 утра подъем и завтрак – пьют чай с молоком, белым хлебом и яйцами, которые привозят и ближайшего города. После прогулка.
В 2 часа у туристов обед – жареная или вареная баранина. А после потребление кумыса.
В 5-6 часов – вечерний чай.
В 9 часов – ужин.
А между всем этим — потребление кумыса.
Д.Дмитриев "На кумысе у киргизов", 1901
В XIX веке в России и Европе кумыс стал модным медицинским средством. Считалось, что он помогал при туберкулёзе и лёгочных болезнях. В Самаре, Оренбурге, Башкирии открывались специальные кумысные санатории.
И вот недавно мне попались очерки 1901 года о подобной поездке. Автор считал себя труЪ кумысником и потому поехал прямо в степь вместо санатория.
“В нашем вагоне почти все пассажиры ехали на кумыс и все в разные местности. Многие ехали второй и даже третий раз, следовательно, были людьми бывалыми в кумысных краях. Нам, новичкам, приятно и даже полезно было расспросить таких пассажиров, где, что и как. Все кумысники ехали, как выяснилось из расспросов, в благоустроенные кумысные заведения, расположенные за Самарой по линиям железных дорог. Тщетно старался я отыскать между кумысниками таких, какие ехали бы к киргизам: все мои поиски не увенчались успехом”
“Нас, кумысников, 10 человек. Одна между нами женщина, приехавшая на кумыс с мужем. За день до моего приезда, сказали мне, отсюда уехала еще одна барыня. Все мы размещены по кибиткам от двух до трех человек в каждой”
Про сорта кумыса:
“Все кумысники предпочитают пить средний кумыс. Крепкий кумыс слишком хмельной, и его выпить много нет возможности, притом он крепит желудок. Слабый же кумыс не так приятен и, кроме того, он слабит желудок. Поэтому к крепкому и слабому кумысу прибегают только в виду крайности. Каждый кумысник выпивает от пяти до пятнадцати бутылок кумыса в день.
Расписание в подобном санатории выглядело так:
8-9 утра подъем и завтрак – пьют чай с молоком, белым хлебом и яйцами, которые привозят и ближайшего города. После прогулка.
“Выйдешь из кибитки; воздух чистый, сухой! Да откуда здесь и сырости-то быть, когда в степи нет ни одного болотца, а воду достают из колодцев? Пройдешь этак с версту, станешь посредине этого необъятного горизонта, и такой ты мизерной величиной кажешься, что и вообразить трудно! Живя среди самой лесной местности Европейской России, я никогда и нигде не встречал такого чистого и сухого воздуха, как здесь”
В 2 часа у туристов обед – жареная или вареная баранина. А после потребление кумыса.
В 5-6 часов – вечерний чай.
В 9 часов – ужин.
А между всем этим — потребление кумыса.
“Все заметно поправляются, что радует каждого. Некоторые из моих сожителей в прошлом году жили на благоустроенных кумысных курортах, и каждый из них отзывается о них дурно, а особенно о кумысе. Один рассказывал, что он жил на курорте полтора месяца, истратил много денег и не увеличился ни на фунта. Правда, на курортах пища и жизнь разнообразнее, но зато кумыс невозможный! Да это и естественно: можно ли приготовить потребное количество кумыса да еще всяких сортов на 100–200 человек (на некоторых курортах народу бывает и больше) от 20–30 кобылиц, когда мы с семейством киргиза (всего около 20 человек) выпиваем кумыс, приготовленный и выдоенный от 25 кобылиц? И если бы нам потребовалось кумыса больше, то стали бы доить большее количество кобылиц, которых у киргиза около сотни. Кобылица дает очень немного молока, значительно меньше коровы среднего удоя.
Д.Дмитриев "На кумысе у киргизов", 1901
🔥27