Provision
—— XP

Отладка и инциденты

Как искать причину по слоям — от DNS до базы, готовые маршруты для типовых поломок и разбор инцидента без поиска виноватых.

13 уроков9 теории4 практики~3 ч5510 XP
·Методика: как искать причинуПять шагов от «не работает» до причины: точный симптом, слой, одна гипотеза, одна проверка, вывод — и почему сначала восстанавливают, а потом разбираются.6 мин · 290 XP·Карта слоёв запросаПуть запроса от имени сайта до базы: шесть слоёв, по одной команде на каждый, и как по тексту ошибки curl сразу понять, на каком слое поломка.6 мин · 290 XP▸Практика: пройти запрос по слоямПройти путь запроса на своём стенде от имени до базы, по одной короткой команде на слой, и записать карту стенда для дежурного.25 мин · 725 XP·Маршрут: сайт не открывается и 502 от nginxЧем отличаются 502, 504 и 500, где nginx пишет настоящую причину, четыре строки ошибки, которые встречаются чаще всего, и ловушка с запомненным адресом контейнера.7 мин · 290 XP▸Поломка: 502 от проксиСломать стенд двумя способами — остановить приложение и указать прокси не тот порт — и найти обе причины по логу ошибок nginx.30 мин · 725 XP·Маршрут: диск, память, процессорТри ресурса машины, на которых чаще всего кончается терпение сервиса: как узнать заполненный диск, убийство процесса из-за нехватки памяти и занятый процессор — по одной-две команды на каждый.9 мин · 290 XP·Маршрут: перезапуск по кругу, CrashLoopBackOff и PendingЧто делать, когда контейнер перезапускается без конца, а под в Kubernetes висит в CrashLoopBackOff или Pending: коды выхода, логи предыдущего запуска и события.7 мин · 290 XP▸Поломки: диск, память, перезапускТри поломки своими руками: найти, кто съел место на диске, увидеть убийство контейнера из-за лимита памяти и разобрать контейнер, который падает по кругу.30 мин · 725 XP·Маршрут: истёкший сертификат и красный пайплайнДве поломки, которые готовятся месяцами, а случаются за секунду: как проверить срок сертификата снаружи и на диске, почему продлённый сертификат может не работать, и как читать упавший пайплайн.7 мин · 290 XP·Процесс инцидента: роли, серьёзность, общениеКак устроена авария, когда в ней больше одного человека: уровни серьёзности, роли ведущего, исполнителя и связного, ритм статусов для бизнеса, когда звать на помощь и четыре цифры DORA, на которых о надёжности говорят руководители.7 мин · 290 XP·Разбор инцидента без поиска виноватыхЧто такое постмортем и когда его пишут, почему вопрос «кто виноват» мешает найти причину, пять «почему», шаблон документа и как не дать разбору превратиться в пустую бумагу.7 мин · 290 XP▸Миссия: учебная авария от сигнала до постмортемаФинал раздела: устроить аварию, которую мониторинг не видит, найти её по слоям с журналом в руках, восстановить стенд, написать постмортем по шаблону и выполнить один пункт «Что меняем».60 мин · 725 XP·Инструменты: шпаргалка отладкиШпаргалка отладки по слоям запроса — от имени до базы, — коды ошибок, по которым узнают слой, и программы, к которым тянутся, когда коротких команд не хватает.6 мин · 290 XP