Мониторим ИТ
8.6K subscribers
394 photos
2 files
1.77K links
Канал о наблюдаемости (Observability): логи, трейсы, метрики.

Реклама: @gals_ad_bot
Вопросы: @antoniusfirst

@usr_bin_linux — Linux

@zabbix_ru — Zabbix

@elasticstack_ru — ElasticSearch/OpenSearch
Download Telegram
Tempo 3.1 release: new features for Kafka, TraceQL metrics updates, trace redaction, and more

В новом релизе появились защищённые подключения к Kafka, чтение данных из своей зоны доступности для снижения сетевых расходов и поддержка дополнительных алгоритмов сжатия.

Чувствительные данные теперь можно удалять сразу из нужных трейсов с помощью запроса TraceQL — перечислять каждый trace ID вручную больше не требуется. Метрики TraceQL научились учитывать сэмплирование, а ускоренный путь чтения позволяет выполнять некоторые запросы почти вдвое быстрее.

Кроме того, форматом хранения по умолчанию стал Parquet5, улучшены генератор метрик и карты сервисов, а экспериментальная функция сравнения трейсов помогает искать регрессии между запусками.

Подробнее в блоге Grafana →

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9⚡2❤2
Forwarded from Zabbix Recipes
🚀 Вышел Zabbix 8.0.0rc1

Первый релиз-кандидат Zabbix 8.0 показывает, каким будет следующий крупный LTS-релиз.

Главный вектор развития — переход от классического мониторинга инфраструктуры к полноценной observability-платформе.

Что нового:

🚀 Поддержка OpenTelemetry — сбор данных через Zabbix Proxy, хранение APM-данных и визуализация распределённых трассировок прямо в интерфейсе Zabbix.

🚀 ClickHouse как хранилище истории — для масштабируемой работы с большими объёмами телеметрии.

🚀 Telemetry query — новый тип элемента данных для запросов к телеметрии.

🚀 Готовые OpenTelemetry-шаблоны для Proxmox, Envoy Proxy и OpenRouter.

🚀 Новый интерфейс — тёмно-синяя тема, обновлённый дизайн и улучшенная доступность.

🚀 Экспорт и импорт дашбордов, новый Scatter plot и доработанные графики.

🚀 Усиление безопасности — API по умолчанию отключён для ролей, добавлена ролевая видимость прокси и поддержка HashiCorp Vault AppRole.

🚀 Новые шаблоны для MariaDB, Percona, GCP, Oracle Cloud и других систем.

Поскольку это RC — пока только постельный режим тестовое окружение.

Полный список изменений Zabbix 8.0.0rc1 →

@zabbix_ru
🔥10👍4⚡1❤1
📊 Metabase — аналитика observability-данных без барьера в виде SQL (подойдет, когда вас просят то, не знаю что)

Metabase — open source BI-платформа, которая позволяет подключить базу данных и быстро собрать интерактивные графики, отчёты и дашборды. Бизнес-пользователи могут исследовать данные через визуальный конструктор, а аналитики — писать сложные запросы во встроенном SQL-редакторе.

Платформа поддерживает фильтры, автообновление, уведомления при изменении показателей и регулярную отправку отчётов в почту, Slack или через вебхук. Готовые графики и даже целые аналитические интерфейсы можно встроить в собственное приложение.

Базы, которые поддерживаются →

Репыч на Гитхабе →

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7❤5👍3
🛠 OpsDeck — рабочее место DevOps-инженера в одном приложении

Если рабочий день начинается с открытия терминала, Lens, Grafana, Argo CD, GitLab, DBeaver, KeePass и Obsidian, OpsDeck говорит, дружок, а давай соберем всё это в одном окне.

Внутри — терминал с блоками команд и AI-панелью, управление Kubernetes и Helm, просмотр алертов Grafana и Alertmanager, клиенты для популярных баз данных, встроенная IDE с Git, SSH-профили, KeePass, Markdown-заметки и сетевые инструменты.

Для продовых кластеров и баз предусмотрен режим «только чтение», а локальная модель Qwen умеет предлагать команды с учётом заметок и истории пользователя.

Приложение написано на Rust и Tauri 2, работает в Linux, Windows и macOS. Проект только недавно закоммтили в репозиторий.

Идея выглядит интересно, но заменять привычные инструменты на нечто выглядит сомнительно.

Репыч на Гитхабе →

Обзор со скриншотами на Хабре →

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥11❤4👍3
Как связать трейсы и логи без изменений в коде приложения

OpenTelemetry eBPF Instrumentation — OBI — научился автоматически добавлять trace_id и span_id в существующие логи контейнеров. Не нужно подключать SDK, настраивать библиотеку логирования, пересобирать или повторно развёртывать приложение.

OBI через eBPF определяет, какой запрос в данный момент обрабатывает поток, и дополняет связанные с ним записи. Это работает с JSON, NDJSON и обычным текстом: из трейса можно сразу перейти к нужным логам, а из подозрительной записи — найти соответствующий трейс.

Но есть ограничения: обогащаются только логи из stdout и stderr, необходим активный trace-контекст, CAP_SYS_ADMIN и подходящая версия ядра.

В статье в блоге OpenTelemetry показаны принцип работы, конфигурация OBI и схема внедрения.

Читать статью

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥9👍3❤1
Building Observability at Scale: 250+ Nodes, 3,000+ Pods

В статье разобран практический переход к распределённой архитектуре для инфраструктуры из 250+ узлов и 3000+ подов: Grafana Alloy собирает телеметрию локально на каждом узле, а Mimir, Loki, Tempo и Pyroscope работают в отдельном observability-кластере.

Автор показывает конфигурацию, расчёт ресурсов, борьбу с высокой кардинальностью, изоляцию тенантов и подход, при котором команды сами поставляют дашборды и правила мониторинга вместе со своими сервисами.

Рекомендасьон к прочтению.

Читать статью на Medium

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6👍4⚡2
This media is not supported in your browser
VIEW IN TELEGRAM
netwatch

Инструмент показывает сетевую активность в реальном времени, связывает соединения с процессами, декодирует протоколы прикладного уровня, строит топологию и помогает искать причины отклонений от привычного поведения сети. Есть компактный режим для SSH-сессий, экспорт PCAP и метрик Prometheus, а также диагностический движок, который не только обнаруживает проблему, но и проверяет результат исправления.

Репыч на Гитхаб

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥11👍3⚡2
Как применять практики безопасности OpenTelemetry в легаси-системах

OpenTelemetry часто воспринимают как нейтральный транспорт телеметрии: поставили Collector, подключили источники — и получили логи, метрики и трейсы. Но в легаси и промышленных системах такой конвейер сам может создать новые точки входа, соединить ранее изолированные сегменты и вывести за пределы контура чувствительные данные.

В этом переводе статьи разбирается, как адаптировать практики безопасности к инфраструктуре, которую нельзя быстро обновить или инструментировать современными SDK.

Любопытная мысль из статьи: OpenTelemetry Collector нужно рассматривать не просто как маршрутизатор данных, а как контролируемую границу безопасности.

В статье рассмотрено:

— где размещать Collector относительно сетевых сегментов;

— почему внешний мост обычно безопаснее установки внутри легаси-среды;

— как ограничивать receivers, exporters и сетевой доступ;

— как учитывать уровень доверия к источникам телеметрии;

— как фильтровать, маскировать и хешировать чувствительные атрибуты;

— почему для старых систем полезная и безопасная телеметрия важнее попытки собрать абсолютно всё.

Читать на Хабре

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5👍4❤2
Мониторинг SSL: как не пропустить истекающий сертификат

Срок действия публичных сертификатов постепенно сокращается: сейчас их приходится обновлять чаще, а к 2029 году максимальный срок составит всего 47 дней. Поэтому просто календарных напоминаний недостаточно и нужен постоянный мониторинг.

В этой статье разобраны семь вариантов контроля сертификатов: от простого Bash-скрипта с уведомлениями в Telegram и Uptime Kuma до связки Prometheus + Blackbox Exporter + Alertmanager, а также решений на базе Zabbix, Icinga, Netdata и Kubernetes.

Простой мониторинг желательно дополнить автоматическим продлением серта. Ну, или. максимально этот процесс автоматизировать.

Читать статью на Хабре →

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7👍6⚡3
Prometheus или OpenTelemetry? Похоже, выбирать уже необязательно

Интересные результаты опроса пользователей Prometheus и OpenTelemetry за 2026 год. За два года доля тех, кому сложно использовать эти технологии вместе, сократилась с 29% до 10%.

На практике формируется гибридный стек: для инфраструктуры чаще применяют экспортёры Prometheus, для приложений — OpenTelemetry SDK, а обработку метрик делят между relabeling-правилами и OTel Collector. То есть OpenTelemetry не столько вытесняет Prometheus, сколько постепенно дополняет его.

В статье также разобраны оставшиеся проблемы совместимости: различия в моделях данных, работа с resource attributes, именование метрик и поддержка сценариев с MCP и агентным ИИ.

Будет полезно тем, кто проектирует или модернизирует платформу мониторинга и выбирает стратегию внедрения OpenTelemetry.

Читать на Хабре

Это перевод статьи, подготовленной авторами из сообществ OpenTelemetry, Grafana Labs и SigNoz.

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥8❤3⚡1👍1
🚀 Prom++ против Prometheus: реальная экономия или удачный маркетинг?

Автор проверил заявленную экономию памяти на собственном стенде: 500 тысяч активных серий, 27,4 млн точек и 38 PromQL-запросов. Результат оказался убедительным, хотя и скромнее обещаний разработчиков:

— 255 МБ RAM у Prom++ против примерно 1,1 ГБ у Prometheus;

— в 3,8 раза меньше CPU при записи;

— запросы быстрее на 14–24% в зависимости от параллельности;

— практически одинаковый объём данных на диске.

Также в статье разобраны расхождения в результатах PromQL, влияние длины лейблов и ограничения тестового стенда.

Читать на Хабре

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥12⚡3❤2
OpenStatus — open source-платформа для uptime-мониторинга и управления инцидентами

Проект объединяет в одном решении мониторинг сайтов и API, публичные status pages и координацию инцидентов.

В решении реализован подход Infrastructure as Code: мониторы, страницы состояния и каналы оповещения описываются в YAML или Terraform и применяются через CLI либо CI/CD. Есть MCP-сервер, позволяющий управлять мониторингом и инцидентами с помощью AI-ассистентов — Claude, ChatGPT или Cursor.

OpenStatus можно использовать как облачный сервис или развернуть самостоятельно через Docker. Проект распространяется под лицензией AGPL-3.0 и может стать открытой альтернативой коммерческим сервисам мониторинга доступности.

Репыч на Гитхаб

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥10❤4⚡3🤔1
Как сократить обнаружение инцидентов с 40 до 10 секунд

Команда Atlassian перестроила платформу обработки клиентской телеметрии, заменив Node.js-агрегаторы и общую очередь на архитектуру с Apache Kafka, Flink, Kubernetes и OpenTelemetry.

Результаты оказались такими:

— задержка от события до метрики сократилась с 40+ до менее 10 секунд;

— около 90 виртуальных машин заменили четыре Kubernetes-пода;

— ежемесячные расходы снизились с $20 000 до $650;

— пропускная способность превысила миллиард событий в сутки;

— число регулярных перезапусков Flink-задания сократилось с восьми в день до нуля.

Авторы статьи разбирают ложные срабатывания, пропущенные инциденты, ошибки автоскейлинга и ситуацию, когда отсутствие телеметрии ошибочно принимается за нормальную работу.

Читать на Хабре

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6👍4⚡2
Как контролировать дисковое пространство в Linux и узнавать о проблемах до падения сервиса

Переполненный диск способен остановить базу данных, контейнеры, журналирование и даже установку обновлений. В статье собрана шпаргалка по диагностике таких проблем:

— df — проверка свободного пространства и inode;

— du, find и ncdu — поиск крупных каталогов и файлов;

— journalctl и docker system df — анализ журналов и хранилища Docker;

— iostat — оценка задержек и загрузки дисковой подсистемы;

— Bash и cron — простейшие локальные уведомления;

— Prometheus и Node Exporter — централизованный мониторинг нескольких серверов.

Автор также приводит готовый PromQL-запрос и правило оповещения о нехватке места.

Читать статью на Medium

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5👍4⚡2
Сколько на самом деле стоит сбой ИТ-системы?

В «Петрович-Техе» прошли путь от ручного учёта инцидентов в Excel до модели, которая переводит влияние технических сбоев в понятные бизнесу рубли.

Сначала учитывали только количество и длительность инцидентов. Затем появилась метрика негативного влияния, включающая критичность сервиса, масштаб проблемы, время возникновения, затронутую аудиторию и повторяемость сбоя. Но условные баллы хорошо работали только внутри ИТ — бизнесу требовался более понятный язык.

В итоге оставили две оценки:

— негативное влияние — для оперативной приоритизации внутри ИТ;

— потенциально недополученную выручку — для обсуждения рисков и инвестиций с бизнесом.

Например, час недоступности продающей системы в пиковое время оценили примерно в 3 млн рублей потенциальных потерь. Такие цифры помогают обосновывать вложения в мониторинг, отказоустойчивость и профилактику повторных инцидентов.

Полезный практический кейс о том, как связать управление инцидентами с бизнес-метриками, не пытаясь сразу построить идеальную финансовую модель.

Читать статью на Хабре

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7❤2👍2⚡1
ClickStack масштабирует алертинг и добавляет встроенный поиск аномалий

ClickHouse продолжает превращать ClickStack в полноценную платформу наблюдаемости. В новой версии Managed ClickStack появилась встроенная детекция аномалий на основе z-score: система сравнивает текущее поведение с недавней историей, позволяет настроить чувствительность и заранее оценить количество срабатываний.

Обновили и саму платформу алертинга:

🚀 оценка правил распределяется между несколькими воркерами;

🚀 поддерживаются десятки тысяч алертов;

🚀 улучшены поиск, фильтрация и визуализация активности;

🚀 расширена история вычислений, упрощающая разбор срабатываний и ошибок.

Алертинг будет полезен тем, что уже хранит телеметрию в ClickHouse, но продолжают использовать Grafana или отдельные системы ради продвинутого алертинга. Теперь всё больше подобных сценариев можно выполнять непосредственно в ClickStack.

Scaling ClickStack alerting with built-in anomaly detection (блог Clickhouse)

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥5❤3🤔3
This media is not supported in your browser
VIEW IN TELEGRAM
dozzle

Лёгкий веб-интерфейс для просмотра логов контейнеров в реальном времени.

Пригодится, когда после релиза нужно быстро проверить ошибки или одновременно посмотреть, что происходит в нескольких сервисах.

Что внутри:

🚀 Просмотр нескольких потоков логов на разделённом экране.

🚀 Поиск по регулярным выражениям и SQL-запросам.

🚀 Показатели загрузки CPU и потребления памяти.

🚀 Подключение нескольких Docker-хостов через агенты.

🚀 Поддержка Docker Swarm и Kubernetes.

🚀 Аутентификация пользователей и интеграция с авторизацией через прокси.

Dozzle не хранит логи самостоятельно. Это инструмент для оперативной диагностики, а не замена централизованному хранилищу с историей и длительным хранением.

Репыч на Гитхаб

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥8⚡1👍1
This media is not supported in your browser
VIEW IN TELEGRAM
🐳 Docker на нескольких серверах — в одном терминале

Когда нужно быстро понять, какой контейнер потребляет ресурсы и что происходит в его логах, переключаться между SSH-сессиями неудобно.

dtop — терминальная панель для мониторинга Docker-контейнеров сразу на нескольких хостах. Показывает состояние контейнеров, загрузку CPU и потребление памяти в реальном времени.

Что умеет:

🚀 Подключаться к локальному Docker и удалённым хостам через SSH или TLS.

🚀 Показывать поток логов прямо в терминале.

🚀 Открывать логи в Dozzle (см. вчерашний пост) по горячей клавише.

Написан на Rust, распространяется под лицензией MIT. Хороший инструмент для оперативной диагностики: быстро посмотреть, что происходит с контейнерами, не покидая командную строку.

Репыч на Гитхаб

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥7⚡2👍2
Glances

Инструмент с открытым исходным кодом для мониторинга состояния серверов. Собирает основные показатели на одном экране и помогает быстро определить, какие процессы и ресурсы требуют внимания.

Возможности:

🚀 Мониторинг CPU, оперативной памяти, дисков и сети.

🚀 Просмотр работающих процессов и потребляемых ими ресурсов.

🚀 Отображение температур, напряжений и скорости вентиляторов при наличии поддерживаемых датчиков.

🚀 Мониторинг контейнеров Docker и LXC.

🚀 Работа в терминале и через веб-интерфейс, наблюдение за удалёнными системами.

🚀 Доступ к метрикам через REST API и экспорт данных в файлы и внешние системы хранения.

Glances написан на Python, поддерживает Linux, BSD, macOS и Windows. Также можно расширить его возможности при помощи плагинов.

Репыч на Гитхаб

📱 Telegram | 📲 MAX
Please open Telegram to view this post
VIEW IN TELEGRAM
🔥6❤3⚡2👍1👎1