Provision
—— XP

Хранилище и бэкап в проде

теория~5 минут+270 XP

Под с базой можно удалить, пересоздать, перенести на другой узел — и данные должны остаться на месте. В разделе 16 ты добился этого заявкой PersistentVolumeClaim. Но в проде за той же заявкой встают вопросы, которых на ноутбуке не было: кто создаёт диски, когда заявок десятки, что случится с диском, когда заявку удалят, и из чего вернуть данные, если их испортила сама база.

Всё это — про постоянный том, диск, который переживает смерть пода: под удалили, создали заново, а данные на месте. В уроке разберёшь, как кластер выдаёт тома по заявке, какая настройка решает, переживёт ли диск удаление заявки, и что именно бэкапить. О бэкапе думают до аварии: после неё думать уже не о чем.

Диск по заявке

Заявка (PVC) говорит, сколько места нужно и какого класса. StorageClass — описание класса хранилища: какая программа создаёт диски и с какими свойствами. Когда приходит заявка, эта программа сама создаёт том. Это называют динамическим выделением.

ubuntu@stand:~$
kubectl get storageclass
ubuntu@stand:~$
NAME                   PROVISIONER             RECLAIMPOLICY   VOLUMEBINDINGMODE
local-path (default)   rancher.io/local-path   Delete          WaitForFirstConsumer

Разберём строку. local-path — имя класса, (default) — его берут, если заявка класс не назвала. PROVISIONER — программа, которая создаёт тома: в k3s это каталог на диске узла, в облаке — заказ диска через API. WaitForFirstConsumer значит «не создавать том, пока не появится под, который его использует», поэтому заявка без пода висит в Pending — это нормально.

Самая важная колонка — третья.

Политика возврата

RECLAIMPOLICY — что делать с томом, когда заявку удалили. У большинства классов умолчание Delete: заявку удалили — диск удалён, данные пропали. Это удобно для временных стендов и страшно для базы.

Отсюда классическая авария: кто-то удаляет пространство имён, чтобы «пересоздать начисто», а вместе с ним уходят заявки и, по цепочке, тома с данными. Защита — класс или том с политикой Retain: заявка удалится, а том останется в статусе Released и дождётся, пока администратор решит, что с ним делать.

Ещё одна полезная вещь — увеличение тома. Если класс разрешает (allowVolumeExpansion: true), достаточно поменять размер в заявке, и диск вырастет без пересоздания. Уменьшить нельзя никогда.

Но даже Retain не спасает от ошибки внутри данных: удалённой таблицы или сломанной миграции. Для этого нужен бэкап.

Что бэкапить

В кластере две разные вещи, и бэкапятся они по-разному.

Описания — Deployment, Service, ConfigMap, чарты. Если они лежат в Git и выкатываются конвейером, бэкап у тебя уже есть: кластер можно поднять заново из репозитория за минуты. Поэтому правило прода — ничего не применять руками мимо Git.

Данные — постоянные тома и базы. Их Git не спасёт. Для баз самый надёжный способ ты знаешь из раздела 9: дамп средствами самой базы (pg_dump) по расписанию, в отдельное хранилище. В кластере расписание задают объектом CronJob — тот же cron, только поды по расписанию.

Для всего кластера целиком есть Velero: он сохраняет описания объектов и снимки томов в S3-совместимое объектное хранилище и восстанавливает их в этот же или другой кластер. Ставят его обычно Helm-чартом; инструкция — в документации Velero, разбор на русском — на Хабре.

И главное правило, которое повторяют во всех разборах аварий: бэкап, который ни разу не восстанавливали, — не бэкап. Проверка восстановления — такая же часть работы, как сам бэкап.

Словарь урока

StorageClass
Класс хранилища: какая программа создаёт тома и с какими свойствами. ↩ к тексту
Динамическое выделение
Том создаётся автоматически по заявке PVC, без участия администратора.
Политика возврата
Что делать с томом после удаления заявки: Delete — удалить, Retain — оставить.
Velero
Программа для бэкапа и восстановления объектов кластера и томов. ↩ к тексту

Что спросят на собеседовании

  • Удалили namespace — пропали данные базы. Как такое предотвратить?
    Политика возврата Retain у тома базы, регулярный дамп базы в отдельное хранилище и запрет на удаление пространств имён в проде без согласования.
  • Заявка на том висит в Pending. Что проверишь?
    describe pvc: нет подходящего класса, нет пода при WaitForFirstConsumer или поставщик не смог создать диск.
  • Как проверить, что бэкап рабочий?
    Восстановить его в отдельное место и убедиться, что данные читаются. Регулярно, а не после аварии.

Что дальше

В практике ты закажешь том, запишешь на него данные, переживёшь смерть пода, сделаешь копию и убедишься, что Delete действительно удаляет.

Проверь себя+270 XPдве попытки
1
StorageClass
Что делает StorageClass, когда появляется новая заявка на диск?
2
Политика возврата
У тома политика возврата Delete. Что будет с данными, если удалить PVC?
3
Что бэкапить
Описания приложений лежат в Git. Что ещё обязательно бэкапить?
4
Инструменты
Для чего обычно ставят Velero?
ответь на все вопросы, чтобы проверить

Нашёл ошибку или непонятное место? Наведи на абзац — слева появится «+», нажми и напиши, что не так. Замечание увидит автор курса.Нашёл ошибку или непонятное место? Нажми «+» справа от заголовка раздела и напиши, что не так. Замечание увидит автор курса.