Объёмный кластер Kubernetes из глифов: над платформой управляющий слой со штурвалом и тремя etcd, ниже три пула узлов-кубов с подами. Планировщик раскладывает поды, автоскейлер собирает новые узлы из частиц и убирает лишние, упавший узел рассыпается и собирается заново.
- Главная
- Kubernetes
Managed Kubernetes · Container Registry · аддоны
Хватит нянчить etcd.
Управляющий слой, etcd и обновления держит платформа. Упавший узел заменяется сам, пул растёт под нагрузку, а образы, аддоны и GitOps живут в том же проекте. Управляющий слой — от 1 090 ₽ в месяц за реплику, узлы — по цене vCPU и RAM.
Kubernetes 1.34–1.37·Cilium·аддоны бесплатно
Уровень OCL L5Автопилот→
листайте: кластер растёт 01 · масштаб
Один под или десять тысяч — кластеру всё равно.
Под живёт на узле, узлы собраны в пулы, пулов в кластере несколько. Cluster autoscaler добавляет узлы, когда поды не помещаются, и убирает лишние после затишья: через 1–60 минут без нагрузки, по умолчанию через 10. PROD-кластер растёт до 100 узлов, metrics-server ставит платформа, так что HPA работает сразу.
cluster autoscaler·пулы узлов·HPA из коробки
02 · управляющий слой
Мы держим управляющий слой, вы — кластер
API-сервер, etcd, scheduler и controller-manager работают на нашей стороне, их обслуживает платформа. Вам остаются узлы и приложения. DEV — одна реплика и общий etcd, PROD — собственный etcd из трёх реплик и 1, 3 или 5 реплик управляющего слоя.
от 1 090 ₽/мес за реплику·DEV до 10 узлов·PROD до 100 узлов
03 · автолечение
Когда узел падает, вы узнаёте об этом из журнала
Платформа следит за узлами: неотвечающий узел выводится из кластера, вместо него поднимается новый, поды переезжают. Патчи и миноры Kubernetes ставятся в ваше окно обслуживания по выбранной политике, узлы обновляются по очереди.
автолечение узлов·окно обслуживания·обновление без пересоздания
04 · Container Registry
Образы живут в соседнем подъезде.
Container Registry на Harbor: Docker-образы и Helm-чарты (OCI) по адресу cr.h3llo.cloud, проверка на уязвимости при загрузке, логины для CI. К кластеру реестр подключается одной кнопкой: платформа сама создаст секрет и пропишет imagePullSecrets. Платите за занятое место после дедупликации слоёв — 4,30 ₽ за ГБ в месяц.
Harbor·проверка образов включена·переезд с Yandex Container Registry →
05 · аддоны
Бесплатные аддоны и GitOps с первого дня
Argo CD, cert-manager, Traefik, External Secrets, Hubble и NodeLocal DNSCache ставятся галочкой при создании кластера или позже. Платите только за ресурсы, которые они занимают. Если такое ПО вы уже поставили сами, аддон его не перезапишет и сообщит о конфликте.
Argo CD 3.5·cert-manager 1.21·Traefik 3.7
$ kubectl get nodes | wc -l
pool-a ▮▮▮▮▮▯▯▯▯▯ 5/10 узлов
pool-b ▮▮▯▯ 2/4 узлов
поды в ожидании: ░░ 2
↳ нагрузка ↑ · добавляем узлы
┌─ управляющий слой · h3llo.cloud ───────┐
│ kube-apiserver etcd ×3 scheduler │
│ controller-manager konnectivity │
└───────────────────┬────────────────────┘
│ обновляем · следим · чиним
┌────────────┼────────────┐
┌ node-1 ┐ ┌ node-2 ┐ ┌ node-3 ┐
│ ● ● ● │ │ ● ● ○ │ │ ● ● ● │
└────────┘ └────────┘ └────────┘
ваши узлы и поды$ kubectl get nodes -w
NAME STATUS ROLES AGE
node-1 Ready<none> 12d
node-2 выведен<none> 12d
node-3 Ready<none> 12d
node-4 Ready<none> 40s
↳ поды переехали · вы спали
$ docker push cr.h3llo.cloud/a1-shop/api:1.4
1.4: digest: sha256:9f2c…e41 size: 2843
↳ проверка уязвимостей ................ ok
critical 0 · high 0 · medium 2
[ Подключить к кластеру ▸ prod ]
✓ секрет в namespace default
✓ imagePullSecrets → sa/default
$ kubectl rollout status deploy/api
deployment "api" successfully rolled out
Аддоны кластера prod
────────────────────────────────────────
[x] Argo CD 3.5.5 READY
[x] cert-manager 1.21.2 READY
[x] Traefik 3.7.16 READY
[x] External Secrets 2.13.0 READY
[x] Hubble READY
[x] NodeLocal DNSCache 1.26.8 READY
────────────────────────────────────────
за аддоны: 0 строк в счёте
за ресурсы: по факту
кластер → пулы → узлы → поды · pool-c добавляет autoscaler
управляющий слой и etcd ×3 — на стороне платформы
node-2 NotReady → выведен · поды переехали на новый узел
слои образа проверены и едут в узлы кластера
шесть аддонов на рукоятках штурвала · седьмая — ваша
Что вы получаете вместе с кластером
Вокруг управляющего слоя — реестр, секреты, наблюдаемость, GitOps и приватная сеть, всё в одном проекте и одном счёте.
Управляющий слой под ключ
API-сервер, etcd, scheduler и controller-manager обслуживает платформа. Тип DEV — для стендов, PROD — собственный etcd из трёх реплик.
Автолечение узлов
Узел, который перестал отвечать, заменяется новым, поды переезжают на соседей. Без тикета и без ночного звонка.
Автомасштабирование и пулы
Cluster autoscaler по пулам, несколько пулов разного размера в одном кластере, HPA сразу после создания.
Обновления в окне
Версии от 1.34 до 1.37, по умолчанию 1.36. Патчи и миноры — автоматически в ваше окно обслуживания по выбранной политике, узлы по очереди.
Container Registry рядом
Harbor, проверка образов на уязвимости, логины для CI, подключение к кластеру одной кнопкой, зеркало публичных реестров для узлов.
Бесплатные аддоны
Argo CD, cert-manager, Traefik, External Secrets, Hubble, NodeLocal DNSCache. Обновляются платформой, не затирают ваше.
Secrets
Хранилище секретов на OpenBao рядом с кластером: секреты попадают в поды через External Secrets, без статичных токенов.
Метрики и алерты
Вкладка «Метрики»: нагрузка узлов, доступность API-сервера, CPU и память управляющего слоя. Письма, если узел перестал отвечать или управляющий слой недоступен.
Managed Argo CD
Экземпляр Argo CD работает у нас, в кластере — только агент, без kubeconfig и открытого наружу API.
Кластер в вашей VPC
Узлы кластера в приватной сети проекта, рядом с базами и серверами, выход в интернет — через NAT.
Безопасные настройки с первого дня
Новый кластер создаётся по рекомендациям CIS: Pod Security baseline, ограничения для kubelet, шифрование секретов в etcd, журнал обращений к API в вашем проекте. Если какому-то namespace нужны привилегии, их можно вернуть стандартной меткой.
Проверка безопасности по кнопке
Вкладка «Безопасность» запускает kube-bench и Kubescape и показывает, что настроено не по CIS и NSA и как это исправить. Отчёт можно скачать в JSON.
Доступ к API по списку адресов
API-сервер отвечает только адресам из вашего списка. Kubeconfig выдаётся только тем, у кого есть право записи.
Сценарии, которые собираются за вечер
Взяли популярные руководства из библиотек решений крупных облаков и пересказали под наш стек.
Новый проект на Kubernetes
Кластер, реестр образов и публичный адрес для приложения. Образы — в Container Registry, вход снаружи — через аддон Traefik и Service типа LoadBalancer.
- Managed Kubernetes
- Container Registry
- Traefik
Пошаговая инструкция → GitOps с Argo CD
Манифесты в git, Argo CD сам приводит кластеры к описанию. Аддон в кластере или управляемый Argo CD на несколько кластеров; образы — из подключённого реестра без ручных секретов.
- Managed Argo CD
- Container Registry
- привязка реестра
Пошаговая инструкция → CI/CD из GitLab с проверкой образов
GitLab и раннер на сервере, сборка и push в реестр, проверка уязвимостей при загрузке, выкатка в кластер.
- Серверы
- Container Registry
- Managed Kubernetes
Пошаговая инструкция → Автомасштабирование под нагрузку
HPA увеличивает число подов по CPU, cluster autoscaler добавляет узлы, когда подам не хватает места, и убирает их после затишья.
- HPA
- cluster autoscaler
- пулы узлов
Пошаговая инструкция → Резервные копии кластера в S3
Velero сохраняет ресурсы кластера и данные томов в бакет S3 h3llo.cloud по расписанию и восстанавливает их в тот же или новый кластер.
- Velero
- S3
- Managed Kubernetes
Пошаговая инструкция → Секреты из хранилища прямо в поды
Пароли и ключи лежат в Secrets, External Secrets синхронизирует их в Secret нужного namespace и обновляет при ротации.
Цены берём прямо из биллинга
Цены подставляются из прайс-листа при сборке страницы. Указаны за месяц, списываются поминутно: месяц в расчёте — 720 часов.
Управляющий слой
за каждую реплику: кластер с тремя репликами оплачивается как три
| Small | 1 090 ₽ / мес |
|---|
| Medium | 2 180 ₽ / мес |
|---|
| Large | 4 360 ₽ / мес |
Рабочие узлы
узлы — это виртуальные машины, цена по vCPU и RAM
| vCPU | 1,25 ₽ / ч · 900 ₽ / мес |
|---|
| RAM, 1 ГБ | 0,50 ₽ / ч · 360 ₽ / мес |
|---|
| Диск до 20 000 IOPS*, 1 ГБ | 14,40 ₽ / мес |
|---|
| Публичный IPv4 балансировщика | 90 ₽ / мес |
Container Registry
за фактически занятое место после дедупликации слоёв
| Хранение, 1 ГБ | 4,30 ₽ / мес |
|---|
| Исходящий трафик, 1 ГБ | 0,90 ₽ |
|---|
| Проверка образов, логины, правила хранения | входит в цену |
Вокруг кластера
аддоны бесплатны: платите только за ресурсы, которые они занимают
| Аддоны (Argo CD, cert-manager, Traefik и др.) | бесплатно |
|---|
| Метрики кластера в консоли | входит в цену |
|---|
| Secrets, 1 секрет | 15 ₽ / мес |
|---|
| Managed Argo CD | 0 ₽, платите только за ресурсы |
Пример. Управляющий слой Small (1 реплика) и два узла по 2 vCPU и 4 ГБ RAM на весь месяц: 1 090 ₽ + 3 600 ₽ + 2 880 ₽ = 7 570 ₽. Диски узлов, тома и адреса балансировщиков — сверху, по ценам их классов.
Посчитать кластер целиком — в калькуляторе, полный прайс — в тарифах.
Вопросы
Сколько стоит кластер?
Управляющий слой — 1 090 ₽ в месяц за реплику размера Small. Узлы — vCPU 1,25 ₽ в час и RAM 0,50 ₽ за ГБ в час. Диски, тома и публичные адреса — по ценам серверов и сетей. Аддоны бесплатны.
Чем DEV отличается от PROD?
DEV — одна реплика управляющего слоя и общий etcd, до 10 узлов: для стендов и экспериментов. PROD — собственный etcd из трёх реплик, 1, 3 или 5 реплик управляющего слоя и до 100 узлов.
Что будет, если узел упадёт?
Платформа выведет неисправный узел, поднимет новый и перенесёт на него поды. Чтобы приложение не заметило замены, держите в PROD минимум два узла и по две реплики важных сервисов.
Как обновляется Kubernetes?
Автоматически, в окно обслуживания, которое вы выбираете: только патчи или патчи и миноры, по одной версии за окно. Минор можно поднять и вручную кнопкой. Узлы обновляются по очереди, поэтому PodDisruptionBudget должен разрешать выселение хотя бы одной реплики.
Можно ли закрыть API кластера списком адресов?
Да: задайте список адресов при создании кластера или позже, и API-сервер будет отвечать только им. Скачать kubeconfig может только участник проекта с правом записи.
Сколько стоит Container Registry?
4,30 ₽ за ГБ занятого места в месяц и 0,90 ₽ за ГБ исходящего трафика. Общие слои образов оплачиваются один раз, объём реестра при создании — только верхняя граница. Проверка образов и логины для CI входят в цену.
Как проверить, что кластер настроен безопасно?
Откройте вкладку «Безопасность» на странице кластера и нажмите «Проверить кластер». Узлы проверяет kube-bench, объекты кластера — Kubescape по рекомендациям CIS и NSA. Настройки управляющего слоя обслуживает платформа, они отмечены отдельно и в вашу оценку не входят.
Платный ли исходящий трафик кластера?
Исходящий интернет-трафик узлов кластера по объёму не тарифицируется, ограничения — в Правилах допустимого использования. Платный трафик есть только у S3 и реестра образов. Входящий трафик бесплатный.
Как передать секреты в поды?
Храните их в Secrets и включите аддон External Secrets: он синхронизирует значения в Secret нужного namespace и обновит их при ротации. Статичные токены для этого не нужны.
$ kubectl get pods --all-namespaces | grep -c CrashLoopBackOff → 0
Отдайте нам штурвал.
Регистрация — три нажатия Enter, на старт — 4 000 ₽ на баланс. Бонус начисляется после подтверждения телефона и привязки карты. Этих денег хватит, чтобы поднять кластер, подключить реестр и посмотреть, как он лечит себя сам.
Нужен Argo CD на несколько кластеров — подключите Managed Argo CD.
* IOPS растут с объёмом диска; точные значения для вашего объёма видны в консоли при выборе.