Provision
—— XP

Инструменты: эксплуатация кластера

теория~5 минут+270 XP

Раздел закончен, и это урок-справочник: как за минуту понять, что сломалось в кластере, какие команды держать под рукой и какие программы снимают рутину эксплуатации. Ничего отсюда не обязательно ставить прямо сейчас — важно знать, что такое есть.

Быстрая отладка кластера

Когда в кластере «что-то не работает», начинают всегда с одних и тех же пяти команд — от общего к частному. Подробно отладку разберём в разделе 20, а это минимум на каждый день.

от общего к частному
kubectl get pods -A | grep -v Running   # -A — все пространства имён
kubectl describe pod web-7d9f            # события: почему не стартует
kubectl logs web-7d9f --previous         # журнал прошлого, упавшего запуска
kubectl get events --sort-by=.lastTimestamp   # что происходило
kubectl top pods                         # кто съел ресурсы

Порядок важен. Первая команда показывает, что не в порядке, вторая — почему, третья — что сказало само приложение перед смертью. Флаг --previous нужен, когда под уже перезапустился: обычный logs покажет новый, ещё живой запуск. Флаг --sort-by упорядочивает события по времени.

Это отладка подов. На следующем уровне — права, сеть и данные, и для каждого у тебя теперь есть своя команда.

Шпаргалка раздела

Восемь команд, которые встречались в практиках и пригодятся в первый же месяц работы.

на каждый день
kubectl top nodes                       # загрузка узлов
kubectl get hpa                         # цель и текущие реплики
helm history web                        # ревизии релиза
helm rollback web 1                     # откат к ревизии
kubectl drain $N --ignore-daemonsets    # вывести узел
kubectl uncordon $N                     # вернуть узел
kubectl auth can-i list pods --as=$SA   # проверить права
kubectl get pvc,pv                      # заявки и тома

Флаг --ignore-daemonsets оставляет на узле служебные поды, флаг --as задаёт вопрос от чужого имени. $N и $SA — переменные с именем узла и учётной записи, как в практиках.

Команды закрывают ручную работу. Остальное за тебя делают программы.

Проверки и политики

Ошибки в описаниях дешевле поймать до выката, чем после.

Чем проверяют кластер
Kyverno
Проверяет каждый создаваемый объект по правилам: не пускать Deployment без лимитов, с тегом latest, без своей учётной записи. Правила пишутся на YAML, а не на отдельном языке.
Popeye
Обходит кластер и выдаёт отчёт о неряшливости: поды без проб, лишние права, неиспользуемые ConfigMap. Хорош при знакомстве с чужим кластером.
Trivy Operator
Тот же Trivy, но живущий в кластере: постоянно сканирует запущенные образы и складывает отчёты в объекты.
kube-bench
Сверяет настройки кластера с рекомендациями CIS — набором правил безопасности, по которым проходят аудиты.

Проверки не дают сломать. Следующая группа помогает подобрать числа и пережить аварию.

Ресурсы, копии и секреты

Вторая группа программ отвечает на три вопроса из практик: какие числа ставить в ресурсы, как пережить потерю данных и где держать секреты, если всё лежит в Git.

Goldilocks показывает рекомендованные запросы и лимиты по наблюдению за каждым Deployment — это ответ на вопрос «какие числа ставить» из первой практики. Velero бэкапит объекты кластера и тома в объектное хранилище и восстанавливает их в этот же или другой кластер.

Для секретов в GitOps есть две программы: Sealed Secrets хранит их в Git зашифрованными, External Secrets подтягивает из Vault или облачного хранилища. А k9s — терминальный интерфейс к кластеру: те же команды отладки, но на одном экране и по горячим клавишам.

Последняя группа нужна не каждому кластеру, но о ней обязательно спросят.

Сеть между сервисами: service mesh

Когда сервисов в кластере становятся десятки, у сети появляются вопросы, которых не было при трёх подах. Как зашифровать трафик между подами, если внутри кластера он идёт открытым? Как повторить запрос, который упал из-за секундного сбоя соседа? Как пустить на новую версию ровно 5% пользователей? Кто к кому вообще ходит?

Раньше это дописывали в код каждого сервиса. Service mesh («сетка сервисов») снимает эту работу с разработчиков: рядом с каждым подом встаёт маленький прокси — обычно Envoy, — и весь трафик пода идёт через него. Прокси шифрует соединения (mTLS — взаимная проверка сертификатов, когда обе стороны доказывают, кто они), повторяет запросы, считает задержки и делит трафик между версиями по правилам, которые ты описываешь в YAML.

Кто чем известен
Istio
Самый известный и самый богатый возможностями. Плата — сложность: много своих объектов и заметный расход памяти на прокси. Режим ambient обходится без прокси в каждом поде.
Linkerd
Проще и легче: ставится за минуты, шифрование и метрики включаются сразу. Возможностей меньше, чем у Istio.
Cilium
Сетевой плагин кластера, который умеет часть задач mesh прямо в ядре, без отдельного прокси.

В первый месяц ставить mesh тебе не придётся: на трёх-пяти сервисах он больше мешает, чем помогает. Достаточно понимать, какую задачу он решает, и не путать его с Ingress: Ingress пускает трафик снаружи в кластер, а mesh управляет трафиком между сервисами внутри.

Что дальше

Кластер Kubernetes ты теперь умеешь не только запускать, но и эксплуатировать. Следующий раздел — бонус: HashiStack, где те же задачи решают Nomad, Consul и Vault.

Проверь себя+270 XPдве попытки
1
Быстрая отладка
Под висит в Pending. Где искать причину в первую очередь?
2
Политики
Для чего ставят Kyverno?
3
Ресурсы
Что подсказывает Goldilocks?
ответь на все вопросы, чтобы проверить

Нашёл ошибку или непонятное место? Наведи на абзац — слева появится «+», нажми и напиши, что не так. Замечание увидит автор курса.Нашёл ошибку или непонятное место? Нажми «+» справа от заголовка раздела и напиши, что не так. Замечание увидит автор курса.