Под работал неделю без замечаний, а ночью его выселили с узла — без ошибки в коде и без выката. В соседнем поде в это время раздулся кэш и съел память машины, и кластеру пришлось решать, кого выгнать. Он выгнал того, про кого ничего не знал: в описании твоего пода не было ни одного числа про ресурсы.
Эти числа называются запросы и лимиты. Запрос говорит, сколько процессора и памяти контейнеру нужно, чтобы работать, лимит — сколько ему разрешено взять при всём желании. Удобно думать о них как о брони столика: «нас будет четверо» — и места держат, даже если двое опоздали; «больше шести за стол не садится» — и седьмому откажут, даже если рядом пусто. Пока ты учился в разделе 16, числа можно было не задавать: кластер на ноутбуке прощает многое. В проде по ним решаются три вопроса — куда поставить под, сколько он может съесть и кого выгонять первым, когда на узле стало тесно.
Запрос: бронь на узле
Начнём с того, как кластер выбирает узел. Планировщик — программа, которая решает, где запустить новый под, — смотрит только на запросы: складывает их у подов, уже стоящих на узле, и проверяет, влезет ли новый.
resources: requests: cpu: 100m # 0,1 ядра memory: 128Mi # 128 мебибайт
Буква m — это тысячная доля ядра: 100m значит одна десятая процессора, 1000m — одно ядро целиком. Mi — мебибайты, почти то же, что мегабайты.
Отсюда первая ошибка новичка. Под висит в статусе Pending, а в событиях написано Insufficient cpu, хотя узлы почти не загружены. Узлы не загружены по факту, но забронированы — запросы других подов уже съели всю ёмкость на бумаге.
Бронь гарантирует минимум, но не ограничивает сверху — для этого второе число.
Лимит: потолок
Лимит говорит, сколько контейнер может взять максимум. Здесь процессор и память ведут себя по-разному, и это стоит запомнить раз и навсегда.
resources: requests: cpu: 100m memory: 128Mi limits: memory: 256Mi # больше — смерть процесса
Процессор можно «притормозить»: контейнер, упёршийся в лимит процессора, просто работает медленнее. Память притормозить нельзя: если контейнер попросил больше лимита, ядро Linux убивает процесс. В kubectl get pods это выглядит как перезапуски, а в описании пода — так:
kubectl describe pod web-7d9f | grep -A3 "Last State"Флаг -A3 у grep показывает найденную строку и ещё три после неё.
Last State: Terminated Reason: OOMKilled Exit Code: 137
OOMKilled расшифровывается как «убит из-за нехватки памяти». Код 137 ты уже видел в разделе про Docker: это 128 плюс номер сигнала KILL, то есть процесс не упал сам, а его убили. В логах приложения при этом пусто — оно не успело ничего написать.
Многие команды намеренно не ставят лимит процессора: он тормозит приложение даже на свободном узле, а соседей и так защищает запрос. Лимит памяти, наоборот, ставят всегда.
Из того, как заданы два числа, кластер выводит третью вещь — порядок выселения.
Классы качества
Когда на узле кончается память, кластер выселяет поды, и делает это не наугад. Каждому поду при создании присваивается класс качества (QoS) — по тому, как заданы его ресурсы.
| Класс | Когда присваивается | Кого выселят |
|---|---|---|
| Guaranteed | Запросы равны лимитам по процессору и памяти | Последним |
| Burstable | Запросы заданы, но лимиты больше или не везде | Вторым |
| BestEffort | Ресурсы не заданы вовсе | Первым |
Возьмём вторую строку: у нашего примера запрос памяти 128Mi, лимит 256Mi — это Burstable. Посмотреть класс можно одной командой:
kubectl get pod web-7d9f -o jsonpath='{.status.qosClass}'Флаг -o jsonpath= вырезает из описания объекта одно поле по пути.
BurstableКак подобрать сами числа? Не наугад: посмотреть реальное потребление командой kubectl top pods за пару дней и поставить запрос чуть выше обычного, а лимит памяти — с запасом на всплеск. Это ты сделаешь руками в практике.
Словарь урока
Что спросят на собеседовании
- Чем запрос отличается от лимита?Запрос — гарантия и основа для планирования, лимит — потолок. По запросам выбирается узел, лимит срабатывает уже во время работы.
- Под перезапускается, в логах пусто. Что проверишь?describe pod и Last State: если там OOMKilled и код 137, контейнеру не хватило лимита памяти или приложение течёт.
- Почему иногда не ставят лимит процессора?Он тормозит приложение даже на свободном узле. Соседей от жадного пода защищает запрос, поэтому лимит процессора часто опускают, а лимит памяти оставляют.
Что дальше
Ресурсы заданы — теперь кластер может сам менять число подов под нагрузку. Об этом следующий урок.