Provision
—— XP

Пробы и ресурсы

теория~6 минут+250 XP

Под в статусе Running, перезапусков ноль, а пользователи получают ошибку. Кластер не врёт: процесс действительно запущен. Он просто не знает, что приложение ещё подключается к базе или давно зависло, — ему никто не объяснил, как это проверить. И он же спокойно даст одному поду съесть всю память узла вместе с соседями.

Пробы (probes) — проверки, которыми кластер регулярно спрашивает приложение «ты готов?» и «ты жив?». От ответа зависит, пойдут ли на под запросы и не пора ли его перезапустить. Ресурсы — два числа в описании пода: сколько ему нужно процессора и памяти гарантированно и сколько максимум можно взять.

Без проб и ресурсов кластер считает под готовым, как только процесс запустился. В этом уроке ты научишь его отличать «запущен» от «работает» и узнаешь, по какому статусу понять, где искать причину.

Running ещё не значит «работает»

Статус Running означает только одно: процесс в контейнере запущен. Готово ли приложение отвечать, кластер не знает.

Приложению на Python или Java нужно несколько секунд, чтобы подняться: подключиться к базе, прогреть кеш. Если в этот момент на под пойдут запросы, пользователи увидят ошибки. А при обновлении Deployment решит, что новый под готов, и уберёт старый раньше времени. В Compose из раздела 08 для того же была healthcheck, здесь — пробы.

Две пробы

Чаще всего настраивают две пробы, и они делают разное. Первая — проба готовности (readiness).

в описании контейнера
          readinessProbe:
            httpGet:
              path: /health     # какой адрес спрашивать
              port: 8000
            periodSeconds: 5    # как часто

Кластер каждые пять секунд делает запрос на /health. Ответ 200 — под готов, и его включают в балансировку. Ошибка — под исключают и ждут, но не перезапускают: может, он просто прогревается. В колонке READY это видно как 0/1 при статусе Running.

Вторая — проба живости (liveness).

рядом с readinessProbe
          livenessProbe:
            httpGet:
              path: /health
              port: 8000
            initialDelaySeconds: 10  # дать время на старт
            periodSeconds: 15

Не прошла несколько раз подряд — контейнер убивают и запускают заново. Она нужна для процессов, которые зависли, но не упали. Параметр initialDelaySeconds даёт приложению время подняться, иначе его убьют на старте.

С живостью связана классическая авария. Её настроили на маршрут, который ходит в базу; база затормозила, все поды разом признаны мёртвыми, кластер перезапускает их одновременно, и холодный старт добивает базу. Правило простое: живость проверяет только сам процесс, а готовность может проверять и зависимости.

Запросы и пределы

Теперь ресурсы. Их задают блоком resources в том же описании контейнера.

в описании контейнера
          resources:
            requests:          # гарантированно нужно
              cpu: 50m
              memory: 64Mi
            limits:            # потолок
              cpu: 500m
              memory: 256Mi

Единицы непривычные. 50m — пятьдесят милли-ядер, то есть пять сотых одного ядра процессора; 500m — половина ядра. 64Mi — 64 мебибайта, почти то же, что мегабайты.

Запросы (requests) — заявка: планировщик ставит под только на узел, где столько ещё свободно. Пределы (limits) — потолок. Упёрся в предел процессора — процесс просто притормозят. Упёрся в предел памяти — ядро Linux убьёт процесс, и в событиях появится OOMKilled (от out of memory).

Без блока resources под может съесть всю память узла и уронить соседей. Как подбирать числа по реальному потреблению и что такое классы качества обслуживания, разберём в разделе 18, а для начала хватит скромных запросов и разумного потолка.

Статус говорит, где искать

Пробы и ресурсы добавляют свои поломки к тем, что ты видел в практике. Все они узнаются по статусу пода, и у каждой своё место, куда смотреть.

Что видно в get podsЧто это значитГде причина
PendingНе нашлось узла: не хватает ресурсов из requestsdescribe pod, события
ImagePullBackOffОбраз не скачался: нет тега или доступаdescribe pod, события
CrashLoopBackOffПроцесс стартует и падаетlogs --previous
Running, но 0/1Проба готовности не проходитdescribe pod, строки Readiness probe failed
RESTARTS растёт при RunningУбивает проба живости или памятьdescribe pod, Last State
OOMKilled в Last StateПревышен предел памятипотребление и limits

Возьми для примера четвёртую строку: под запущен, но в балансировку не попадает. В событиях будет строка вида Readiness probe failed: HTTP probe failed with statuscode: 500, и дальше дорога — в логи приложения, почему оно отвечает ошибкой.

Словарь урока

Проба готовности
readinessProbe. Не прошла — под исключают из балансировки, но не перезапускают. ↩ к тексту
Проба живости
livenessProbe. Не прошла несколько раз — контейнер перезапускают. Проверяет только сам процесс. ↩ к тексту
requests
Сколько ресурсов поду нужно гарантированно. По ним планировщик выбирает узел.
limits
Потолок. Превышение памяти убивает процесс (OOMKilled), превышение процессора тормозит. ↩ к тексту
Милли-ядро
Тысячная доля ядра процессора: 500m — половина ядра.

Что спросят на собеседовании

  • Чем readiness отличается от liveness?
    Готовность решает, пускать ли трафик: не прошла — под убирают из балансировки. Живость решает, жив ли процесс: не прошла — контейнер перезапускают.
  • Под в Pending. Какая самая частая причина?
    Ни на одном узле нет столько свободных ресурсов, сколько указано в requests. Это видно в событиях describe pod.
  • Что будет, если не задать limits?
    Под может съесть всю память узла, и ядро начнёт убивать процессы, в том числе соседей.

Что дальше

Теории хватит на настоящий выкат. В практике ты опишешь приложение стенда Deployment-ом с пробами и ресурсами, удалишь под, обновишь версию и откатишь неудачную.

Проверь себя+250 XPдве попытки
1
Две пробы
Проба готовности не проходит. Что сделает кластер?
2
Две пробы
Почему пробу живости не настраивают на маршрут, который ходит в базу?
3
Запросы и пределы
По какому полю планировщик выбирает узел для пода?
4
Статусы
В describe у пода Last State: Terminated, Reason: OOMKilled. Что случилось?
ответь на все вопросы, чтобы проверить

Нашёл ошибку или непонятное место? Наведи на абзац — слева появится «+», нажми и напиши, что не так. Замечание увидит автор курса.Нашёл ошибку или непонятное место? Нажми «+» справа от заголовка раздела и напиши, что не так. Замечание увидит автор курса.