Инфраструктура виртуализации

Виртуализация нового уровня
на оборудовании прошлых поколений

Кластеры Proxmox + KVM из серверов 10–11 поколения. Премиальная отказоустойчивость — без премиальной цены.

Наша философия

Мы не гонимся за новейшими поколениями серверов. Вместо этого мы тщательно отбираем оборудование ведущих производителей — Dell PowerEdge, HPE ProLiant, Lenovo ThinkSystem — прошлых и позапрошлых поколений (10-е и 11-е). И это не компромисс, а стратегическое решение, проверенное годами эксплуатации.

Серверы 10–11 поколений (Dell R730/R730xd, HPE DL380 Gen9, Lenovo x3650 M5) были флагманами enterprise-сегмента в своё время. Они проектировались с запасом прочности на десятилетия: hot-swap корзины дисков, модульные блоки питания, iDRAC/iLO с полноценным IPMI, ECC Registered память, аппаратные RAID-контроллеры с кэшем и battery backup — всё это инженерное наследие премиальных брендов, которое продолжает работать на десятилетия дольше срока службы, заложенного производителем.

Переход на новые поколения серверов даёт в среднем 10–15% прироста производительности на ядро. Но цена современного сервера в 4–6 раз выше, чем у проверенного предшественника. Наш подход — кластеризация. Несколько серверов прошлых поколений в кластере не только догоняют, но и превосходят однопроцессорную производительность новейшей машины — и делают это с резервированием N+2.

10–11
поколения серверов
4×
больше за те же деньги
N+2
резервирование кластера
~70%
экономия бюджета

Почему прошлые поколения?

Разбираем мифы и показываем реальную инженерную арифметику

Enterprise-наследие

Hot-swap корзины дисков, iDRAC/iLO с IPMI, ECC Registered память, RAID-контроллеры с battery backed cache — возможности enterprise-уровня, которые остаются актуальными спустя годы.

Dell R730 • HPE DL380 Gen9 • Lenovo x3650 M5

DDR4 — дёшево и много

DDR4 — самый доступный тип серверной памяти на рынке. Стоимость 1 ГБ DDR4 в 3–5 раз ниже DDR5 при сопоставимой для большинства задач производительности.

До 1.5 ТБ на сервер • 2400–3200 МГц

Аппаратная виртуализация

Intel VT-x / AMD-V, SR-IOV для сетевых карт, поддержка NVMe/U.2 — все enterprise-фичи аппаратной виртуализации доступны уже в серверах 10-го поколения.

VT-x • SR-IOV • NVMe • U.2

Достаточная производительность

Для 90% задач (контейнеры, VM, storage, CI/CD) двухпроцессорного сервера с Intel Xeon E5-2600 v4 / v3 более чем достаточно. Узкое место почти никогда не в CPU.

E5-2699 v4 • 22 ядра / 44 потока

Проверенная стабильность

Оборудование прошлых поколений — это не только цена. Это десятки тысяч часов наработки в дата-центрах, выявленные и исправленные производителем ошибки, зрелые прошивки (BIOS/iDRAC/iLO) и полная совместимость со всем open-source стеком.

MTBF > 200,000 часов

Запчасти и обслуживание

Рынок б/у серверов насыщен — замена блока питания, вентилятора или диска доступна в течение 24–48 часов. Для нового оборудования время ожидания может составлять недели.

24–48 ч замена • Избыток на рынке

Отказоустойчивость через кластеризацию

Open-source стек, обеспечивающий enterprise-уровень надёжности

Proxmox VE + Ceph

Proxmox VE — зрелая платформа виртуализации на базе KVM и LXC. Ceph обеспечивает распределённое хранилище с репликацией данных между всеми нодами кластера. При падении ноды VM автоматически перезапускается на другой ноде — без потери данных и с минимальным временем простоя.

Линейная масштабируемость

Добавляем ноду — получаем +ресурсы и +резервирование одновременно. Corosync/Pacemaker управляют кворумом и автоматическим восстановлением. Кластер продолжает работать при потере до двух нод (N+2).

Live Migration без даунтайма

Proxmox поддерживает live-миграцию для LVM Thin, Ceph и ZFS. Виртуальные машины перемещаются между нодами без остановки сервисов. Плановое обслуживание ноды — без единой секунды простоя.

Автоматический Failover

При аппаратном сбое ноды corosync детектирует потерю кворума, и Proxmox автоматически перезапускает все VM на оставшихся нодах. Время восстановления — от 30 секунд до 2 минут, в зависимости от сложности конфигурации.

Резервное копирование

Proxmox Backup Server обеспечивает дедуплицированное, инкрементальное резервное копирование VM и контейнеров. Snapshot-ы, репликация между нодами, scheduled backup — полный набор для соответствия любым SLA по RPO/RTO.

Сетевой уровень

Network Bonding (802.3ad) для агрегации каналов и отказоустойчивости сети. Multipath I/O для хранения. Каждый компонент кластера имеет полное резервирование на сетевом уровне — ни один кабель или коммутатор не является единой точкой отказа.

Экономическая эффективность

Цифры и расчёты: почему кластер из 4 б/у серверов превосходит 1 новый

Концепция N+2 на базе серверов прошлых поколений

По стоимости ОДНОГО современного сервера можно приобрести 4 б/у сервера прошлых поколений. Это не утопия — это реальная рыночная цена enterprise-оборудования с аукционов и стоков дата-центров.

4 сервера — это полноценный кластер с резервированием N+2. При выходе из строя двух нод кластер продолжает работать. Для отдельного сервера отказ — это стоп-кран. Для кластера — просто статистика.

В конфигурации, где достаточно одной VM под задачу, резервирование N+2 даёт до 6-кратный запас по мощности: 4 ноды × N ядер — при необходимости отказ трёх нод всё ещё оставляет рабочую VM на четвёртой.

Сравнение стоимости кластера

1 новый сервер (2024) 100% бюджета
Кластер 4× б/у сервера ~100% бюджета
Экономия на оборудовании ~75%
Прирост суммарной производительности +280%
Резервирование N+2

Математика производительности:

100%

Новое поколение (2024) — базовая производительность 1 ядра

~85–90%

11-е поколение (2018) — на 10–15% медленнее новейшего чипа. Но это не имеет значения при кластеризации 4 нод.

~70%

10-е поколение (2016) — позапрошлое, примерно на 30% медленнее на ядро

280%

4 × 70% = 280% от производительности одной новой ноды!

Итог: кластер из 4 б/у серверов даёт ~180% прироста суммарной производительности (280% vs 100%) по сравнению с 1 новым сервером — И при этом с резервированием N+2. Это не компромисс — это арифметика.

~70% экономии

Относительно цены нового сервера при 4-кратном увеличении суммарных ресурсов.

Нулевые лицензии

Proxmox и весь стек — open-source. Никаких лицензий VMware или Hyper-V.

Резервирование N+2

Кластер продолжает работать при выходе из строя двух нод. Ремонт без спешки.

Типовые сценарии

Как наши кластеры решают реальные бизнес-задачи

Production-кластеры

Веб-серверы, базы данных, file-серверы, 1С, ERP-системы — полноценный production под управлением Proxmox HA. Live migration, автоматический failover, распределённое хранилище.

HA • Ceph • Live Migration

Dev/Stage окружения

Изолированные среды для разработки и тестирования. Snapshot-ы позволяют откатиться за секунды, быстрое развёртывание новых окружений через шаблоны и Terraform-подобные сценарии.

Snapshots • Шаблоны • Изоляция

Private Cloud

Построение частного облака на базе OpenStack или KubeVirt. Полная изоляция клиентов, self-service портал, биллинг ресурсов. Enterprise-облако без enterprise-цены.

OpenStack • KubeVirt • Self-Service

Disaster Recovery

Репликация VM между нодами кластера и между географически распределёнными кластерами. Автоматическое переключение на резервную площадку при катастрофе.

Репликация • DR • Geo-Redundancy

CI/CD пайплайны

Контейнеризованные раннеры на каждой ноде кластера. GitLab Runner / GitHub Actions / Jenkins — горизонтальное масштабирование пайплайнов без ограничений.

GitLab CI • GitHub Actions • Docker

Универсальная платформа

Один кластер — все задачи. VM для legacy-приложений, LXC контейнеры для микросервисов, KVM для изолированных сред. Proxmox управляет всем через единый web-интерфейс.

VM + LXC + KVM • Единое управление

Стек технологий

Полностью open-source экосистема для виртуализации enterprise-уровня

Proxmox VE
Платформа виртуализации
KVM / QEMU
Гипервизор
LXC
Контейнеризация
Ceph
Распределённое хранилище
LVM
Управление томами
ZFS
Файловая система
Corosync
Кластерный менеджер
Pacemaker
Resource manager (HA)
systemd-networkd
Сеть и bonding
Docker
Контейнеры приложений
Kubernetes (k3s)
Оркестрация
Proxmox Backup Server
Резервное копирование
Veeam CE
Enterprise backup
Multipath I/O
Отказоустойчивое хранение
802.3ad Bonding
Агрегация каналов
OpenStack / KubeVirt
Private cloud

Обсудим вашу задачу?

Расскажите о ваших требованиях — мы подберём оптимальную конфигурацию кластера и рассчитаем стоимость

Связаться с нами →