Раздел закончен, и это урок-справочник: как за минуту понять, что сломалось в кластере, какие команды держать под рукой и какие программы снимают рутину эксплуатации. Ничего отсюда не обязательно ставить прямо сейчас — важно знать, что такое есть.
Быстрая отладка кластера
Когда в кластере «что-то не работает», начинают всегда с одних и тех же пяти команд — от общего к частному. Подробно отладку разберём в разделе 20, а это минимум на каждый день.
kubectl get pods -A | grep -v Running # -A — все пространства имён kubectl describe pod web-7d9f # события: почему не стартует kubectl logs web-7d9f --previous # журнал прошлого, упавшего запуска kubectl get events --sort-by=.lastTimestamp # что происходило kubectl top pods # кто съел ресурсы
Порядок важен. Первая команда показывает, что не в порядке, вторая — почему, третья — что сказало само приложение перед смертью. Флаг --previous нужен, когда под уже перезапустился: обычный logs покажет новый, ещё живой запуск. Флаг --sort-by упорядочивает события по времени.
Это отладка подов. На следующем уровне — права, сеть и данные, и для каждого у тебя теперь есть своя команда.
Шпаргалка раздела
Восемь команд, которые встречались в практиках и пригодятся в первый же месяц работы.
kubectl top nodes # загрузка узлов kubectl get hpa # цель и текущие реплики helm history web # ревизии релиза helm rollback web 1 # откат к ревизии kubectl drain $N --ignore-daemonsets # вывести узел kubectl uncordon $N # вернуть узел kubectl auth can-i list pods --as=$SA # проверить права kubectl get pvc,pv # заявки и тома
Флаг --ignore-daemonsets оставляет на узле служебные поды, флаг --as задаёт вопрос от чужого имени. $N и $SA — переменные с именем узла и учётной записи, как в практиках.
Команды закрывают ручную работу. Остальное за тебя делают программы.
Проверки и политики
Ошибки в описаниях дешевле поймать до выката, чем после.
Проверки не дают сломать. Следующая группа помогает подобрать числа и пережить аварию.
Ресурсы, копии и секреты
Вторая группа программ отвечает на три вопроса из практик: какие числа ставить в ресурсы, как пережить потерю данных и где держать секреты, если всё лежит в Git.
Goldilocks показывает рекомендованные запросы и лимиты по наблюдению за каждым Deployment — это ответ на вопрос «какие числа ставить» из первой практики. Velero бэкапит объекты кластера и тома в объектное хранилище и восстанавливает их в этот же или другой кластер.
Для секретов в GitOps есть две программы: Sealed Secrets хранит их в Git зашифрованными, External Secrets подтягивает из Vault или облачного хранилища. А k9s — терминальный интерфейс к кластеру: те же команды отладки, но на одном экране и по горячим клавишам.
Последняя группа нужна не каждому кластеру, но о ней обязательно спросят.
Сеть между сервисами: service mesh
Когда сервисов в кластере становятся десятки, у сети появляются вопросы, которых не было при трёх подах. Как зашифровать трафик между подами, если внутри кластера он идёт открытым? Как повторить запрос, который упал из-за секундного сбоя соседа? Как пустить на новую версию ровно 5% пользователей? Кто к кому вообще ходит?
Раньше это дописывали в код каждого сервиса. Service mesh («сетка сервисов») снимает эту работу с разработчиков: рядом с каждым подом встаёт маленький прокси — обычно Envoy, — и весь трафик пода идёт через него. Прокси шифрует соединения (mTLS — взаимная проверка сертификатов, когда обе стороны доказывают, кто они), повторяет запросы, считает задержки и делит трафик между версиями по правилам, которые ты описываешь в YAML.
В первый месяц ставить mesh тебе не придётся: на трёх-пяти сервисах он больше мешает, чем помогает. Достаточно понимать, какую задачу он решает, и не путать его с Ingress: Ingress пускает трафик снаружи в кластер, а mesh управляет трафиком между сервисами внутри.
Что дальше
Кластер Kubernetes ты теперь умеешь не только запускать, но и эксплуатировать. Следующий раздел — бонус: HashiStack, где те же задачи решают Nomad, Consul и Vault.