В еженедельные #анонсы- #дайджесты добавлен гугл-#календарь: https://t.me/Products_Events/1180
#weekly Супер комбо-#Дайджест
#weekly Супер комбо-#Дайджест
Telegram
Products Events
#weekly Супер комбо-#Дайджест v2.3.3 на неделю #w14 30.03 — 05.04
- от @products_events, @div_conv/@bxdes и @dmitrii_ireshev_Agile_PMP
🗓пн, 30/03
🌏 30.03 — 03.04 в 10:00 и 19:00 Podlodka Android Crew. Неделя «Безопасность» link
🔸 Podlodka Android Crew —…
- от @products_events, @div_conv/@bxdes и @dmitrii_ireshev_Agile_PMP
🗓пн, 30/03
🌏 30.03 — 03.04 в 10:00 и 19:00 Podlodka Android Crew. Неделя «Безопасность» link
🔸 Podlodka Android Crew —…
Forwarded from Платформа данных Yandex Cloud
Уже завтра, 2 апреля, вас ждёт два события от команды Yandex Cloud:
Регистрация
Ветка с вопросами и ответами в сообществе
— разберём миграцию и работу 1С в облаке
— посмотрим, чем сборка PostgreSQL для «1С:Предприятия» от Yandex Cloud отличается от стандартной (спойлер: оптимизация на уровне ядра и специальные расширения)
— покажем, как построить отказоустойчивую архитектуру
— увидим, как развернуть отказоустойчивый кластер для 1С и обеспечить надёжность данных
— изучим кейсы пользователей: как выглядят реальные архитектуры клиентов, уже работающих с 1С в облаке.
Регистрация
Ветка с вопросами и ответами в сообществе
Вы узнаете, как построить современную аналитику от данных до BI:
— как хранить сырые данные в Object Storage (S3)
— организовать табличный слой на Iceberg
— обрабатывать данные в Trino и Spark
— строить быстрые витрины в ClickHouse и доводить результат до дашбордов в DataLens.
В финальном докладе поделимся видением: собственный Iceberg REST Catalog для управляемости и контроля доступа, а также AI‑агенты для ускорения работы с кодом и пайплайнами.
Спикеры события — команда продуктовых архитекторов Yandex Cloud во главе с лидером продуктовой архитектуры Леонидом Савченковым. На митапе соберём лист ожидания для раннего доступа к новым возможностям!
Please open Telegram to view this post
VIEW IN TELEGRAM
yandex.cloud
Managed PostgreSQL: запускаем 1С в облаке и ускоряем работу базы данных
Как малому и среднему бизнесу получить стабильную работу PostgreSQL в 1С без команды администраторов.
❤3
#ClickHouse — тот самый инструмент, про который все говорят: “очень быстрый”, “тащит миллиарды строк”, “почти бесплатный DWH”.
А потом ты строишь на нём DWH целиком — и знакомишься с OOM, JOIN’ами, партициями, MergeTree, мутациями и прочей взрослой жизнью😅
Сам использую ClickHouse как основу DWH, поэтому знаю не только про “вау, он быстрый”, но и про места, где он внезапно начинает кусаться. Если вы прошли этот путь или только планируете — приходите сегодня на открытую встречу.
Поэтому особенно интересен честный разбор:
— так ли ClickHouse хорош, как его хайпят?
— можно ли на нём нормально строить DWH?
— что стало или скоро станет лучше с JOIN’ами, OOM и оптимизацией?
— как у него сейчас с Iceberg и Lakehouse?
— держит ли он удар против наступающего StarRocks?
Сегодня DevHands проводят открытую встречу по ClickHouse с Алексеем Белозерским — CDO inSales / СБЕР 2B, ex VK Tech, М.Видео, Эльдорадо.
Будет полезно аналитикам, дата-инженерам, backend-разработчикам, инфраструктурным инженерам, тимлидам и CTO — всем, кто уже использует ClickHouse или думает, можно ли на нём строить серьёзную аналитическую платформу.
В программе:
🤩 демо кейсов
⚡ потоковая загрузка и фоновые агрегации
🛠 инструменты оптимизации
🧠 хитрые вопросы: потеря данных, TTL, движки, мутации, point-запросы
💬 открытая Q&A-сессия
📅 Когда: 4 июня 2026, 18:00 MSK (да-да, через 10 минут😁 )
🎙 Ведущий: Алексей Белозерский, Chief Data Officer в inSales
🏢 Организатор: R&D-центр DevHands
Как попасть: Регистрируйтесь через бота
Если ClickHouse у вас уже в проде — я бы сходил хотя бы ради Q&A (да и сходил бы, но только на волейбол уже записался😅 Надеюсь запись будет))
А eщё у DevHands стартует курс по ClickHouse для аналитиков и инженеров данных. Судя по программе, там не просто “пишем SELECT”, а мясо: архитектура, MergeTree, S3, Kafka, dbt/Airflow, кластеры, оптимизация, troubleshooting, Iceberg/Lakehouse и свежие релизы.
Короче, выглядит как хороший повод системно разобраться: ClickHouse — это уже DWH-платформа или всё ещё очень быстрый OLAP-движок с нюансами?
Старт 11 июня.
Программа тут
А потом ты строишь на нём DWH целиком — и знакомишься с OOM, JOIN’ами, партициями, MergeTree, мутациями и прочей взрослой жизнью
Сам использую ClickHouse как основу DWH, поэтому знаю не только про “вау, он быстрый”, но и про места, где он внезапно начинает кусаться. Если вы прошли этот путь или только планируете — приходите сегодня на открытую встречу.
Поэтому особенно интересен честный разбор:
— так ли ClickHouse хорош, как его хайпят?
— можно ли на нём нормально строить DWH?
— что стало или скоро станет лучше с JOIN’ами, OOM и оптимизацией?
— как у него сейчас с Iceberg и Lakehouse?
— держит ли он удар против наступающего StarRocks?
Сегодня DevHands проводят открытую встречу по ClickHouse с Алексеем Белозерским — CDO inSales / СБЕР 2B, ex VK Tech, М.Видео, Эльдорадо.
Будет полезно аналитикам, дата-инженерам, backend-разработчикам, инфраструктурным инженерам, тимлидам и CTO — всем, кто уже использует ClickHouse или думает, можно ли на нём строить серьёзную аналитическую платформу.
В программе:
🤩 демо кейсов
⚡ потоковая загрузка и фоновые агрегации
🛠 инструменты оптимизации
🧠 хитрые вопросы: потеря данных, TTL, движки, мутации, point-запросы
💬 открытая Q&A-сессия
📅 Когда: 4 июня 2026, 18:00 MSK (да-да, через 10 минут
🎙 Ведущий: Алексей Белозерский, Chief Data Officer в inSales
🏢 Организатор: R&D-центр DevHands
Как попасть: Регистрируйтесь через бота
Если ClickHouse у вас уже в проде — я бы сходил хотя бы ради Q&A (да и сходил бы, но только на волейбол уже записался
А eщё у DevHands стартует курс по ClickHouse для аналитиков и инженеров данных. Судя по программе, там не просто “пишем SELECT”, а мясо: архитектура, MergeTree, S3, Kafka, dbt/Airflow, кластеры, оптимизация, troubleshooting, Iceberg/Lakehouse и свежие релизы.
Короче, выглядит как хороший повод системно разобраться: ClickHouse — это уже DWH-платформа или всё ещё очень быстрый OLAP-движок с нюансами?
Старт 11 июня.
Программа тут
Please open Telegram to view this post
VIEW IN TELEGRAM
devhands.ru
Clickhouse для аналитиков и инженеров данных
Forwarded from Nik в мире данных
Возвращаюсь в онлайн вебинары 🙂
Залечу на вебинар на следующей неделе во вторник в легендарный DataTalksClub к поговорить (угадайте про что😘 ) про Agentic для дата инженеров.
📚Описание
The Agentic Shift in Data Engineering: From Pipeline Builders to Architects of Controlled Chaos
AI agents are changing data engineering on two fronts at once.
In development, they compress the engineering loop: helping write SQL, generate transformations, debug pipelines, create tests, document systems, and reason about legacy codebases.
In production, they become active participants in the data ecosystem: consuming context, calling tools, triggering workflows, creating side effects, and introducing new forms of operational chaos.
This changes the role of the data engineer. It is no longer enough to build pipelines that move data from A to B. Data engineers now need to design the control layer for agentic systems: trusted context, data contracts, permissions, observability, audit trails, and closed feedback loops.
🔮The future data engineer is not just a pipeline builder. They are the architect of controlled autonomy.
🔗 Если интересно, инвайт в Luma - https://luma.com/hpuirqjd
Залечу на вебинар на следующей неделе во вторник в легендарный DataTalksClub к поговорить (угадайте про что
📚Описание
The Agentic Shift in Data Engineering: From Pipeline Builders to Architects of Controlled Chaos
AI agents are changing data engineering on two fronts at once.
In development, they compress the engineering loop: helping write SQL, generate transformations, debug pipelines, create tests, document systems, and reason about legacy codebases.
In production, they become active participants in the data ecosystem: consuming context, calling tools, triggering workflows, creating side effects, and introducing new forms of operational chaos.
This changes the role of the data engineer. It is no longer enough to build pipelines that move data from A to B. Data engineers now need to design the control layer for agentic systems: trusted context, data contracts, permissions, observability, audit trails, and closed feedback loops.
🔮The future data engineer is not just a pipeline builder. They are the architect of controlled autonomy.
Please open Telegram to view this post
VIEW IN TELEGRAM
Luma
The Agentic Shift in Data Engineering: From Pipeline Builders to Architects of Controlled Chaos · Luma
AI agents are changing data engineering on two fronts at once.
In development, they compress the engineering loop: helping write SQL, generate transformations,…
In development, they compress the engineering loop: helping write SQL, generate transformations,…
Data & AI Career
Возвращаюсь в онлайн вебинары 🙂 Залечу на вебинар на следующей неделе во вторник в легендарный DataTalksClub к поговорить (угадайте про что 😘 ) про Agentic для дата инженеров. 📚Описание The Agentic Shift in Data Engineering: From Pipeline Builders to Architects…
Telegram
Nik в мире данных
Запись - https://www.youtube.com/watch?v=CE0K9ErBqsI
Презентация в приложении. Вроде получилось довольно неплохо, хоть и с небольшими проседаниями, так как давно не делал презентаций на английском.
Из интересного, удалось сделать полноценный pet project…
Презентация в приложении. Вроде получилось довольно неплохо, хоть и с небольшими проседаниями, так как давно не делал презентаций на английском.
Из интересного, удалось сделать полноценный pet project…
Forwarded from Nik B
Сделаем дискуссии про состояние agentic в de ?
+ можем побрейнштормить про https://t.me/analytics_engineer/97
+ можем побрейнштормить про https://t.me/analytics_engineer/97
Telegram
Nik в мире данных
DEMate - тот, кто тебя заменит
Meta пошарила статью про DEmate - внутреннего AI-ассистента для data engineering, который не просто SQL / питон генератор кода, а готовый AI-слой для полноценного цикла разработки (ака накидаем md в контекст в первых версиях😂)…
Meta пошарила статью про DEmate - внутреннего AI-ассистента для data engineering, который не просто SQL / питон генератор кода, а готовый AI-слой для полноценного цикла разработки (ака накидаем md в контекст в первых версиях😂)…
❤1
Data engineering events
Сделаем дискуссии про состояние agentic в de ? + можем побрейнштормить про https://t.me/analytics_engineer/97
Telegram
Nik B in DE Talks
Привет! Предлагаю здесь обсуждать и закидывать идеи для обсуждений всего по недетерминистические вещи ака Agentic in Data. Агенты / хранение / разработка - топиков много.
Думаю сделать регулярные созвоны в формате пообсуждать / поразбивать статьи / юз…
Думаю сделать регулярные созвоны в формате пообсуждать / поразбивать статьи / юз…
Никто глубоко сведущий не хочет зачитать вебинар по стримингу? 🤓 😁
• https://t.me/de_zoomcamp/615/1088
• https://t.me/de_zoomcamp/615/1088
Please open Telegram to view this post
VIEW IN TELEGRAM
Telegram
DE Talks
я бы предложил сначала вообще вводный вебинар по стримингу в целом, концепциям, основным тулами и их сравнению – обширно, но не прям вглубь
а потом уже Flink 😁
• тогда уже и его место в нише понятнее будет
• и почему он самый продвинутый
тут же дело, как…
а потом уже Flink 😁
• тогда уже и его место в нише понятнее будет
• и почему он самый продвинутый
тут же дело, как…
Lakehouse для аналитиков и инженеров данных
Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
В программе курса:
• Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino.
• Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой.
• Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов.
• Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем.
• Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия.
Кто мы: R&D-центр Devhands, наш канал.
Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B), ex: VK Tech, М.Видео, Эльдорадо
🗓 Старт курса: 27 августа
Изучить программу и записаться можно здесь.
Ждём вас!
Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8
Приглашаем изучить популярный подход построения хранилищ данных Data Lakehouse c разделенным Compute и Storage на основе Iceberg и Trino.
В программе курса:
• Современная архитектура аналитических систем от DWH и Data Lake до Lakehouse с разделением Compute и Storage на базе Apache Iceberg и Trino.
• Iceberg: управление файлами, снимками, каталогами, схемами изменений и очисткой.
• Практическое использование Iceberg Catalog, работа с кластером Trino (на Kubernetes), подключение данных на S3 и выполнение SQL/ Python-запросов.
• Работа с Iceberg+Trinо на больших масштабах: сложные запросы к датасету TPC-DS (2.8 млрд строк), интеграция с DBT, Apache Airflow, оценка производительность систем.
• Построение пайплайнов, инструменты для корректной поддержки, обновления и масштабирования Lakehouse-инфраструктуры на уровне предприятия.
Кто мы: R&D-центр Devhands, наш канал.
Автор курса — Алексей Белозерский, CDO в inSales (Сбер 2B), ex: VK Tech, М.Видео, Эльдорадо
🗓 Старт курса: 27 августа
Изучить программу и записаться можно здесь.
Ждём вас!
Реклама. ИП Рыбак А.А. ИНН 771407709607 Erid: 2VtzquZf5с8
👍4🤡2🤔1
Data engineering events
https://t.me/de_zoomcamp/1092/1135
Telegram
Nik B in DE Talks
📅 Пн 17 августа - сессия 2: trace & evaluation
Добъем тогда в пнд части, которые не обсудили
• trace: что сохраняем и как
• evals: почему один прогон часто не хватает для норм evals, и как можно словить eval drift и eval overfitting
• improvement loop:…
Добъем тогда в пнд части, которые не обсудили
• trace: что сохраняем и как
• evals: почему один прогон часто не хватает для норм evals, и как можно словить eval drift и eval overfitting
• improvement loop:…
Forwarded from Кабанчик бот
Новый поток Designing Data-Intensive Applications, второе издание со следующей недели!
Звонки будут по четвергам в 18:00 по Берлину (неважно, летнее или зимнее время в Берлине), первая встреча 27 августа
Обсуждение в топике t.me/lenka_ne_club/18033.
Успейте записаться на поток в боте:
Звонки будут по четвергам в 18:00 по Берлину (неважно, летнее или зимнее время в Берлине), первая встреча 27 августа
Обсуждение в топике t.me/lenka_ne_club/18033.
Успейте записаться на поток в боте:
/courses -> "Хочу читать кабанчика" -> "Хочу участвовать"O’Reilly Online Learning
Designing Data-Intensive Applications, 2nd Edition
Data is at the center of many challenges in system design today. Difficult issues such as scalability, consistency, reliability, efficiency, and maintainability need to be resolved.... - Selection from Designing Data-Intensive Applications, 2nd Edition [Book]