Provision
—— XP

Мониторинг

Метрики и Prometheus, язык запросов, панели Grafana, цели по надёжности и оповещения — и чем другие системы мониторинга отличаются от этой.

13 уроков7 теории6 практики~4 ч4180 XP
·Зачем мониторингЧем мониторинг отличается от наблюдаемости, три вида сигналов и четыре показателя, с которых начинают любой разбор.6 мин · 190 XP·Prometheus: как он собирает метрикиЧто это за программа, почему она сама ходит за данными, как выглядит метрика и почему в метку нельзя класть идентификатор.6 мин · 190 XP▸Практика: Prometheus и экспортёры на ComposeПоднять Prometheus, node-exporter и cAdvisor одним описанием, увидеть три живые цели и поймать упавшую.25 мин · 475 XP·PromQL: минимум для работыКак выбрать метрику по меткам, превратить счётчик в скорость функцией rate и сложить ряды через sum by — три приёма, на которых держатся почти все запросы, — и как из гистограммы получить перцентиль.7 мин · 190 XP▸Практика: первые запросы к стендуСпросить у Prometheus про процессор, память и диск, устроить нагрузку своими руками и найти виновника одним запросом.25 мин · 475 XP▸Практика: метрики приложения и базыДать стенду метрики со стороны пользователя: экспортёр по журналу прокси, три запроса RED с перцентилем p95, ошибки своими руками и экспортёр базы с числом подключений.35 мин · 475 XP·Grafana и готовые дашбордыЧто такое Grafana и почему она ничего не хранит, из чего состоит дашборд и как поставить готовый по номеру вместо того, чтобы собирать панели руками.6 мин · 190 XP▸Практика: Grafana с готовыми дашбордамиПоднять Grafana рядом с Prometheus, подключить источник данных файлом, поставить по номеру два готовых дашборда и собрать свой — с ошибками и задержкой стенда.35 мин · 475 XP·Оповещения и AlertmanagerКак устроено правило оповещения, зачем ему пауза for, на что будить человека, а на что нет, и что делает Alertmanager между Prometheus и твоим телефоном.6 мин · 190 XP▸Практика: первое оповещениеНаписать правило TargetDown, поднять Alertmanager, уронить экспортёр и проследить, как сигнал проходит путь от метрики до получателя.30 мин · 475 XP·SLO и дежурство на пальцахТри буквенных сокращения — SLI, SLO, SLA, — бюджет ошибок как способ договориться с разработкой и как устроено дежурство: смены, инструкции, передача.6 мин · 190 XP▸Миссия: стенд, который зовёт на помощьФинал раздела: проверка доступности стенда, оповещения на симптом, на долю ошибок и на будущую беду, два уровня важности, инструкция к побудке — и авария своими руками с замером времени обнаружения.60 мин · 475 XP·Инструменты: шпаргалка мониторингаПять команд, когда мониторинг сам сломался, шпаргалка запросов на каждый день и коротко о других системах — Zabbix, VictoriaMetrics, Netdata.4 мин · 190 XP