Настройка Master-Master репликации для веб-приложений

Представьте: ваш интернет-магазин работает в Европе и Азии. Запись в базу данных из Азии идёт через Европу с задержкой более 100 мс — это критично для работы каталога и корзины. Мы столкнулись с такой задачей в проекте с онлайн-ритейлером на 500 тыс. товаров и решили её внедрением Master-Master репликации. Теперь запись идёт локально в каждом регионе, а данные синхронизируются между узлами без потерь. Более 5 лет настраиваем репликации и выполнили 30+ проектов высокой сложности.

Почему Master-Master, а не Master-Slave?

Master-Slave — это классика: один узел пишет, остальные читают. Но когда приложение работает в распределённой среде, latency записи становится узким местом. Master-Master снимает это ограничение: каждый узел может принимать запись. Согласно документации Galera, синхронная multi-master репликация обеспечивает строгую консистентность и нулевое время переключения при сбое. Galera Cluster обеспечивает переключение за <1 сек — это в 10 раз быстрее, чем ручной failover на Master-Slave.

Когда нужна Master-Master репликация?

• Приложения в разных регионах должны писать локально с синхронизацией.
• Требуется отказоустойчивость без единой точки отказа.
• Задержка записи через единый мастер превышает допустимые 50 мс.
• Окупаемость такого решения — 2–3 месяца при нагрузке от 10 тыс. запросов в секунду.

Как настроить Galera Cluster на трёх узлах

1. Установите Galera на все узлы (например, Ubuntu 22.04).
2. Настройте /etc/mysql/conf.d/galera.cnf как показано ниже.
3. Инициализируйте первый узел командой galera_new_cluster.
4. Запустите MySQL на остальных узлах — они присоединятся автоматически.
5. Проверьте состояние: SHOW STATUS LIKE 'wsrep_cluster_size'; — должно быть 3.

# /etc/mysql/conf.d/galera.cnf
[mysqld]
binlog_format = ROW
default_storage_engine = InnoDB
innodb_autoinc_lock_mode = 2
bind-address = 0.0.0.0

# Galera Provider
wsrep_on = ON
wsrep_provider = /usr/lib/galera/libgalera_smm.so
wsrep_cluster_name = "production_cluster"
wsrep_cluster_address = "gcomm://192.168.1.10,192.168.1.11,192.168.1.12"
wsrep_sst_method = rsync

# Уникально для каждого узла
wsrep_node_address = "192.168.1.10"
wsrep_node_name = "node1"

Как избежать потери данных при репликации?

Потеря данных в multi-master возможна при сбое узла до синхронизации. Для минимизации рисков используйте синхронную репликацию (Galera) с автоматическим восстановлением после сбоя. В BDR настройте слоты репликации с задержкой не более 1 секунды. Регулярное создание бэкапов с помощью xtrabackup или pg_dump снижает потери до 1 минуты при полном отказе кластера.

Настройка PostgreSQL BDR

BDR (Bi-Directional Replication) — расширение для асинхронной multi-master репликации в PostgreSQL. Оно подходит для задач, где допустима eventual consistency (задержка синхронизации до 1–2 с).

-- Подключение расширения
CREATE EXTENSION bdr;

-- Инициализация первого узла
SELECT bdr.bdr_group_create(
  local_node_name := 'node1',
  node_external_dsn := 'host=192.168.1.10 port=5432 dbname=myapp'
);

-- Присоединение второго узла
SELECT bdr.bdr_group_join(
  local_node_name := 'node2',
  node_external_dsn := 'host=192.168.1.11 port=5432 dbname=myapp',
  join_using_dsn := 'host=192.168.1.10 port=5432 dbname=myapp'
);

Сравнение Galera и BDR

Решение конфликтов записи

Конфликты возникают, когда два узла одновременно изменяют одну запись. В проекте с ритейлером мы применили разбиение по регионам — каждая таблица отвечает за свой географический сегмент. Это исключило пересечения и снизило конфликты на 95%.

Балансировка и мониторинг

Для равномерного распределения запросов используем ProxySQL. Конфигурация проста:

INSERT INTO mysql_servers(hostgroup_id, hostname, port, weight)
VALUES (10, '192.168.1.10', 3306, 1),
       (10, '192.168.1.11', 3306, 1),
       (10, '192.168.1.12', 3306, 1);

Мониторинг ведём через Prometheus + Grafana. Ключевые метрики: wsrep_local_recv_queue_avg (очередь применения транзакций должна быть <1) и wsrep_local_cert_failures (конфликты сертификации близки к нулю).

Ограничения и подводные камни

• Galera не поддерживает MyISAM и MEMORY таблицы.
• AUTO_INCREMENT требует innodb_autoinc_lock_mode=2.
• DDL блокирует кластер — применяйте pt-online-schema-change.
• Задержка между узлами >5 мс снижает производительность записи на 30–40%. Для low-latency сетей используйте выделенные каналы.

Комплексная настройка под ключ

Мы предлагаем полный цикл: анализ нагрузки, выбор решения, развёртывание узлов, конфигурация репликации и балансировки, нагрузочное тестирование, мониторинг, документирование и обучение команды. Гарантийная поддержка — 1 месяц.

Сроки: 3–4 рабочих дня на трёхузловой кластер. Стоимость рассчитывается индивидуально и зависит от сложности и количества узлов.

Закажите аудит текущей репликации — мы выявим узкие места и предложим оптимизацию. Свяжитесь с нами для консультации по вашей архитектуре.

Дополнительную информацию можно найти в статье Galera Cluster.

Мы регулярно сталкиваемся с ситуацией: «Сайт не открывается» в 3 часа ночи — и выясняется, что disk full на VPS, потому что логи nginx не ротировались полгода. Или сервер лёг под нагрузкой в день запуска рекламной кампании, потому что на shared хостинге стоял лимит в 50 одновременных соединений. Настройка хостинга и деплоя — это не про «где дешевле», это про то, что происходит в момент, когда что-то идёт не так. Наша команда помогает избежать таких инцидентов, проектируя инфраструктуру с учётом реальных паттернов нагрузки.

Когда выбирать Vercel и Netlify?

Vercel создан под Next.js — деплой в один push, preview deployments для каждого PR, автоматический CDN, Edge Functions, ISR без конфигурации. Для фронтенд-проектов и JAMstack это оптимальный выбор: нет операционной нагрузки, time-to-deploy измеряется минутами.

Ограничения реальные: Vercel Serverless Functions запускаются в us-east-1 по умолчанию (latency для Европы +80–100ms), Function timeout 300 секунд на Pro, Bandwidth 1TB/месяц на Pro. Для тяжёлого backend — нужны воркеры или отдельный сервер.

Netlify ближе к статике и Edge Functions на базе Deno Deploy. Build minutes — основное ограничение на бесплатном тарифе.

Почему Docker — основа предсказуемого деплоя?

«Работает на моей машине» — классика. Docker решает это через контейнеризацию окружения. Но плохой Dockerfile создаёт новые проблемы.

Типичная ошибка: копировать всё в образ без .dockerignore, получать 800MB образ вместо 80MB. node_modules внутри образа весит столько же. Правильно: multi-stage build.

FROM node:20-alpine AS builder
WORKDIR /app
COPY package*.json ./
RUN npm ci --only=production
COPY . .
RUN npm run build

FROM node:20-alpine AS runner
WORKDIR /app
COPY --from=builder /app/.next ./.next
COPY --from=builder /app/node_modules ./node_modules
COPY --from=builder /app/package.json ./package.json
EXPOSE 3000
CMD ["npm", "start"]

Итоговый образ: 180MB вместо 1.2GB. Время сборки CI сокращается из-за layer caching — если package.json не изменился, слой с npm ci берётся из кэша.

Docker Compose для локальной разработки и простых продакшен-сценариев: приложение + PostgreSQL + Redis в одной конфигурации. Для production на одном сервере — вполне рабочий вариант, если нет требований горизонтального масштабирования.

Подробнее о контейнеризации — Wikipedia: Docker.

Как настроить Nginx как reverse proxy?

Nginx перед приложением — стандарт для VPS и выделенных серверов. Основные функции: SSL termination, gzip, static files, rate limiting, upstream балансировка.

Конфигурация, которую часто делают неправильно: worker_processes auto — количество процессов равно числу CPU. worker_connections 1024 — это 1024 на каждый воркер-процесс. При 4 CPU и 1024 connections = 4096 одновременных соединений. Для высоконагруженного сайта нужно worker_connections 4096 и настройка keepalive_timeout 65.

Для статических ассетов с хешем в имени файла:

location ~* \.(js|css|woff2|png|webp)$ {
    expires 1y;
    add_header Cache-Control "public, immutable";
}

immutable сообщает браузеру: не проверяй этот файл даже при hard refresh. Правильно работает только с content-hashed именами файлов (что делает Vite/webpack по умолчанию). Документация — Wikipedia: Nginx.

AWS: гибкость и сложность

EC2 + Auto Scaling Group — классика для горизонтального масштабирования. AMI с предустановленным приложением, Launch Template, ASG с min/desired/max instances, Application Load Balancer. При CPU > 70% на 3 минуты — scale out, при CPU < 30% на 15 минут — scale in. Health check через ALB исключает нездоровые инстансы из ротации.

ECS Fargate — контейнеры без управления EC2. Деплой Docker-образа, задаёте CPU/память (512 CPU units = 0.5 vCPU, от 512MB памяти), Fargate запускает. Дороже Lambda, но нет cold start и нет timeout-ограничений. Подходит для long-running процессов, WebSocket-серверов, тяжёлых воркеров.

RDS для PostgreSQL с Multi-AZ: автоматический failover за 1–2 минуты при падении primary. Read Replicas для масштабирования чтения. RDS Proxy для connection pooling — Lambda-функции не умеют держать долгосрочные соединения, прокси буферизует это.

Kubernetes: когда это оправдано

K8s добавляет значительную операционную сложность. Оправдан, когда: несколько команд деплоят независимые сервисы, нужна тонкая настройка ресурсов на сервис, canary deployments и blue/green без простоя — требование.

AWS EKS, GKE или managed k8s от Hetzner (дешевле). Helm charts для стандартных сервисов. Horizontal Pod Autoscaler по CPU и custom metrics (RPS через Prometheus).

Для большинства стартапов и средних проектов — Kubernetes избыточен. ECS или Fly.io дают 80% возможностей при 20% операционной сложности.

Мониторинг и alerting

Сервер без мониторинга — это ожидание инцидента. Минимальный стек: Prometheus + Grafana (или Grafana Cloud для managed), alerting на disk > 80%, memory > 85%, CPU > 90% за 5 минут, error rate > 1%. Uptime через Better Uptime или Upptime (self-hosted).

Logs: Loki + Grafana или CloudWatch Logs Insights. Структурированные JSON-логи (winston, pino) — обязательно, иначе поиск по логам превращается в боль.

Что входит в настройку хостинга

• Аудит текущей инфраструктуры и профилирование нагрузки
• Выбор целевой архитектуры (VPS, AWS, serverless, Kubernetes)
• Настройка CI/CD pipeline (GitHub Actions, GitLab CI) с автоматическим деплоем
• IaC через Terraform или Pulumi (инфраструктура как код)
• Конфигурация Nginx, SSL-сертификаты, HTTP/2, brotli
• Мониторинг и алертинг (Prometheus + Grafana, PagerDuty)
• Документация runbooks и обучение команды

Дополнительно: пишите, если нужна миграция с текущего хостинга или интеграция с внешними сервисами.

Процесс работы

1. Аудит текущей инфраструктуры (2–5 дней)
2. Выбор целевой архитектуры с обоснованием по нагрузке и бюджету (1–3 дня)
3. Настройка CI/CD pipeline (GitHub Actions, GitLab CI) (2–5 дней)
4. IaC через Terraform или Pulumi (3–10 дней)
5. Настройка мониторинга и alerting (2–5 дней)
6. Документация runbooks и обучение команды (1–3 дня)

Наш опыт — 7 лет на рынке, более 50 проектов, гарантия работоспособности после деплоя.

Сроки

• Базовый деплой на VPS с Docker + Nginx + CI/CD: 1–2 недели.
• Настройка AWS инфраструктуры с Auto Scaling, RDS, CDN: 3–6 недель.
• Миграция на EKS с нуля: 6–12 недель.
• Настройка Vercel/Netlify для JAMstack: 3–5 дней.

Стоимость рассчитывается индивидуально в зависимости от сложности и объёма работ. Получите консультацию — оценим вашу архитектуру за один день.