Компании, активно использующие Kubernetes в публичном облаке, рано или поздно приходят к расчёту TCO. Managed Kubernetes с хранилищем, балансировщиками и трафиком обходится в 4–8 млн ₽ в год для нагрузки 200 микросервисов. Bare-metal кластер на собственном железе окупается за 18–24 месяца.
Задача клиентаИТ-компания с командой из 60 разработчиков мигрировала с managed Kubernetes в публичном облаке на собственную инфраструктуру. Причина — счёт за облако вырос до 3,8 млн ₽ в месяц при постоянной нагрузке. Требовался production-кластер с аналогичными возможностями: динамическое хранилище, ingress, мониторинг, CI/CD-интеграция.
Ограничения и требованияРазвёртывание без остановки продуктивных сервисов (параллельная работа облачного и on-prem кластеров в период миграции). Все компоненты — open source или с российским лицензированием. Полная документация для внутреннего DevOps-отдела. Поставка по счёту с НДС.
Что предложилиШесть серверов Dell PowerEdge R650 с 3 дисками Samsung PM9A3 3,84 ТБ NVMe каждый для Ceph OSD. Два узла — дополнительные Ceph Monitor. Сеть — 25G через Mellanox ConnectX-6 Dx с Cilium eBPF. Управляющая плоскость Kubernetes — kubeadm с высокой доступностью. Мониторинг — Prometheus + Grafana + Alertmanager. CI/CD — GitLab Runner на кластере.
Состав поставки- Dell PowerEdge R650 — 6 шт.
- Samsung PM9A3 3,84 ТБ NVMe — 18 шт. (3 на сервер для Ceph)
- ОЗУ DDR4 RDIMM 512 ГБ на сервер (8×64 ГБ Samsung)
- Сетевой адаптер Mellanox ConnectX-6 Dx 25G — 6 шт.
- Коммутатор Ruijie RG-S6510-32CQ 100G — 2 шт., DAC-кабели QSFP28
Партнёрский статус Dell и авторизация Mellanox позволили получить скидку 13% на ключевые позиции. Итоговая стоимость поставки оборудования — 5 800 000 ₽ с НДС. Работы по развёртыванию кластера и миграции сервисов — отдельный договор.
Этапы и срокиДни 1–3: монтаж серверов, подключение сети, базовая ОС. Дни 4–7: развёртывание Ceph-кластера, проверка производительности хранилища. Дни 8–12: установка Kubernetes, настройка MetalLB, Ingress NGINX, Cilium. Дни 13–17: настройка мониторинга, CI/CD, документирование. Дни 18–21: параллельная миграция сервисов из облака, финальная приёмка. Итого — 21 рабочий день.
Результат200 микросервисов мигрированы без инцидентов. Задержка между подами снизилась с 2,1 до 0,3 мс (убраны сетевые overlay-цепочки облака). Расходы на инфраструктуру — 380 000 ₽/месяц (амортизация + электричество) против 3 800 000 ₽/месяц в облаке. ROI — 14 месяцев.
Почему выбрали насПостроение production Kubernetes требует экспертизы не только в Linux и containers, но и в сетевом оборудовании, хранилищах и физическом монтаже. ВИСТЛАН закрывает весь стек: от выбора сервера до настройки eBPF-сетевых политик. Опыт с 2006 года в корпоративной инфраструктуре.
Цифры и характеристики приведены для иллюстрации компетенций; фактические параметры проекта согласуются индивидуально.