Provision
—— XP

Запросы и лимиты

теория~5 минут+270 XP

Под работал неделю без замечаний, а ночью его выселили с узла — без ошибки в коде и без выката. В соседнем поде в это время раздулся кэш и съел память машины, и кластеру пришлось решать, кого выгнать. Он выгнал того, про кого ничего не знал: в описании твоего пода не было ни одного числа про ресурсы.

Эти числа называются запросы и лимиты. Запрос говорит, сколько процессора и памяти контейнеру нужно, чтобы работать, лимит — сколько ему разрешено взять при всём желании. Удобно думать о них как о брони столика: «нас будет четверо» — и места держат, даже если двое опоздали; «больше шести за стол не садится» — и седьмому откажут, даже если рядом пусто. Пока ты учился в разделе 16, числа можно было не задавать: кластер на ноутбуке прощает многое. В проде по ним решаются три вопроса — куда поставить под, сколько он может съесть и кого выгонять первым, когда на узле стало тесно.

Запрос: бронь на узле

Начнём с того, как кластер выбирает узел. Планировщик — программа, которая решает, где запустить новый под, — смотрит только на запросы: складывает их у подов, уже стоящих на узле, и проверяет, влезет ли новый.

кусок описания контейнера
resources:
  requests:
    cpu: 100m        # 0,1 ядра
    memory: 128Mi    # 128 мебибайт

Буква m — это тысячная доля ядра: 100m значит одна десятая процессора, 1000m — одно ядро целиком. Mi — мебибайты, почти то же, что мегабайты.

Отсюда первая ошибка новичка. Под висит в статусе Pending, а в событиях написано Insufficient cpu, хотя узлы почти не загружены. Узлы не загружены по факту, но забронированы — запросы других подов уже съели всю ёмкость на бумаге.

Бронь гарантирует минимум, но не ограничивает сверху — для этого второе число.

Лимит: потолок

Лимит говорит, сколько контейнер может взять максимум. Здесь процессор и память ведут себя по-разному, и это стоит запомнить раз и навсегда.

лимиты рядом с запросами
resources:
  requests:
    cpu: 100m
    memory: 128Mi
  limits:
    memory: 256Mi    # больше — смерть процесса

Процессор можно «притормозить»: контейнер, упёршийся в лимит процессора, просто работает медленнее. Память притормозить нельзя: если контейнер попросил больше лимита, ядро Linux убивает процесс. В kubectl get pods это выглядит как перезапуски, а в описании пода — так:

ubuntu@stand:~$
kubectl describe pod web-7d9f | grep -A3 "Last State"

Флаг -A3 у grep показывает найденную строку и ещё три после неё.

ubuntu@stand:~$
    Last State:     Terminated
      Reason:       OOMKilled
      Exit Code:    137

OOMKilled расшифровывается как «убит из-за нехватки памяти». Код 137 ты уже видел в разделе про Docker: это 128 плюс номер сигнала KILL, то есть процесс не упал сам, а его убили. В логах приложения при этом пусто — оно не успело ничего написать.

Многие команды намеренно не ставят лимит процессора: он тормозит приложение даже на свободном узле, а соседей и так защищает запрос. Лимит памяти, наоборот, ставят всегда.

Из того, как заданы два числа, кластер выводит третью вещь — порядок выселения.

Классы качества

Когда на узле кончается память, кластер выселяет поды, и делает это не наугад. Каждому поду при создании присваивается класс качества (QoS) — по тому, как заданы его ресурсы.

КлассКогда присваиваетсяКого выселят
GuaranteedЗапросы равны лимитам по процессору и памятиПоследним
BurstableЗапросы заданы, но лимиты больше или не вездеВторым
BestEffortРесурсы не заданы вовсеПервым

Возьмём вторую строку: у нашего примера запрос памяти 128Mi, лимит 256Mi — это Burstable. Посмотреть класс можно одной командой:

ubuntu@stand:~$
kubectl get pod web-7d9f -o jsonpath='{.status.qosClass}'

Флаг -o jsonpath= вырезает из описания объекта одно поле по пути.

ubuntu@stand:~$
Burstable

Как подобрать сами числа? Не наугад: посмотреть реальное потребление командой kubectl top pods за пару дней и поставить запрос чуть выше обычного, а лимит памяти — с запасом на всплеск. Это ты сделаешь руками в практике.

Словарь урока

Запрос (requests)
Сколько ресурсов контейнеру гарантировано. По сумме запросов планировщик решает, влезет ли под на узел.
Лимит (limits)
Потолок ресурсов. За лимит процессора контейнер тормозят, за лимит памяти — убивают.
OOMKilled
Статус контейнера, убитого ядром за превышение памяти. Код выхода 137.
Класс качества (QoS)
Guaranteed, Burstable или BestEffort — определяет порядок выселения при нехватке памяти.

Что спросят на собеседовании

  • Чем запрос отличается от лимита?
    Запрос — гарантия и основа для планирования, лимит — потолок. По запросам выбирается узел, лимит срабатывает уже во время работы.
  • Под перезапускается, в логах пусто. Что проверишь?
    describe pod и Last State: если там OOMKilled и код 137, контейнеру не хватило лимита памяти или приложение течёт.
  • Почему иногда не ставят лимит процессора?
    Он тормозит приложение даже на свободном узле. Соседей от жадного пода защищает запрос, поэтому лимит процессора часто опускают, а лимит памяти оставляют.

Что дальше

Ресурсы заданы — теперь кластер может сам менять число подов под нагрузку. Об этом следующий урок.

Проверь себя+270 XPдве попытки
1
Запрос
По какому числу планировщик решает, на какой узел поставить под?
2
Лимит
Что происходит с контейнером, который превысил лимит памяти?
3
Классы качества
Чей под выселят первым, когда на узле кончится память?
ответь на все вопросы, чтобы проверить

Нашёл ошибку или непонятное место? Наведи на абзац — слева появится «+», нажми и напиши, что не так. Замечание увидит автор курса.Нашёл ошибку или непонятное место? Нажми «+» справа от заголовка раздела и напиши, что не так. Замечание увидит автор курса.