Налаштування автоматичного відновлення сайту з бекапу

Налаштування автоматичного відновлення сайту з бекапу

Сервер упав, базу даних втрачено, а останній бекап — тижневої давнини. Якщо ви не тестували відновлення заздалегідь, кожна година простою коштує $500–$1000 втраченої виручки для середнього інтернет-магазину. Ми вирішуємо цю проблему: розробляємо скрипти та процедури, які гарантують RTO (Recovery Time Objective) не більше 1 години для будь-якого веб-проекту. У цій статті — реальний кейс автоматизації відновлення PostgreSQL та файлів.

Відновлення з бекапу — процес, який часто відкладають до останнього моменту. Однак коли настає реальний інцидент, кожна хвилина на рахунку. Ручні операції з підняття дампу, налаштування прав та перенаправлення трафіку призводять до хаосу та помилок. Ми автоматизуємо весь цикл: від виявлення збою до повного повернення сайту в роботу. Понад 5 років практики в disaster recovery та 40+ успішних впроваджень для e-commerce та медіа-проектів підтверджують: автоматизація — єдиний спосіб гарантувати передбачуваний час відновлення.

Реальні проблеми відновлення з бекапу

Багато компаній зберігають бекапи, але ніколи не перевіряють, як їх розгортати. Типові вузькі місця:

• Відсутність документації: черговий інженер у паніці шукає, де лежать дампи та які паролі.
• Повільний restore: відновлення PostgreSQL через pg_restore може зайняти години, якщо база велика.
• Помилки сумісності версій: дамп зроблено на старій версії PostgreSQL, а нова не приймає.
• Втрата інкрементних бекапів: ланцюжок бекапів переривається, і відновити можна тільки до моменту збою.

Ми стикалися з кожним із цих сценаріїв. Рішення — автоматизований pipeline з перевіркою цілісності та щомісячними drill-тестами.

Як автоматизувати відновлення PostgreSQL?

Ми використовуємо bash-скрипти для відновлення БД та файлів, а також git для коду. Основний стек: PostgreSQL 15, Nginx, PHP 8.3, AWS S3 для зберігання бекапів. Архітектура скриптів враховує типові помилки та автоматично перевіряє цілісність даних.

Скрипт відновлення PostgreSQL

#!/bin/bash
# /usr/local/bin/restore-db.sh
# Використання: restore-db.sh [backup-file|latest] [target-database]
set -euo pipefail

BACKUP_SOURCE="${1:-latest}"
TARGET_DB="${2:-myapp_restore}"
S3_BUCKET="s3://myapp-backups/postgresql"
LOCAL_BACKUP_DIR="/var/backups/postgresql"

echo "[$(date)] Starting database restore"
echo " Source: $BACKUP_SOURCE"
echo " Target: $TARGET_DB"

# Знайти файл backup
if [ "$BACKUP_SOURCE" = "latest" ]; then
    BACKUP_FILE=$(aws s3 ls "${S3_BUCKET}/" | sort | tail -1 | awk '{print $4}')
    echo " Latest backup: $BACKUP_FILE"
    # Скачати
    aws s3 cp "${S3_BUCKET}/${BACKUP_FILE}" "/tmp/${BACKUP_FILE}"
    LOCAL_FILE="/tmp/${BACKUP_FILE}"
else
    LOCAL_FILE="$BACKUP_SOURCE"
fi

# Перевірити файл
if [ ! -f "$LOCAL_FILE" ]; then
    echo "ERROR: Backup file not found: $LOCAL_FILE"
    exit 1
fi

# Створити цільову БД (якщо не існує)
psql -U postgres -c "CREATE DATABASE ${TARGET_DB};" 2>/dev/null || true

# Очистити існуючі дані
psql -U postgres -c "
    DROP DATABASE IF EXISTS ${TARGET_DB}_old;
    ALTER DATABASE ${TARGET_DB} RENAME TO ${TARGET_DB}_old;
    CREATE DATABASE ${TARGET_DB};
" 2>/dev/null || true

# Відновити
echo "[$(date)] Restoring database..."
gunzip -c "$LOCAL_FILE" | psql -U postgres -d "$TARGET_DB" -v ON_ERROR_STOP=1

# Перевірити
TABLES=$(psql -U postgres -d "$TARGET_DB" -t -c "SELECT COUNT(*) FROM information_schema.tables WHERE table_schema = 'public';")
echo "[$(date)] Restore completed. Tables restored: $TABLES"

# Очистити
rm -f "$LOCAL_FILE"
psql -U postgres -c "DROP DATABASE IF EXISTS ${TARGET_DB}_old;" 2>/dev/null || true
echo "[$(date)] Database restore finished successfully"

Пояснення: скрипт шукає останній бекап в S3, скачує, створює цільову БД, відновлює через gunzip+psql, перевіряє кількість таблиць та очищає тимчасові файли. Все з логами та обробкою помилок (set -euo pipefail).

Повне відновлення сайту

#!/bin/bash
# /usr/local/bin/restore-site.sh
# Повне відновлення: БД + файли + код

DOMAIN="example.com"
APP_DIR="/var/www/myapp"
GIT_REPO="[email protected]:company/myapp.git"
GIT_TAG="${1:-main}"

echo "=== Site Recovery Started ==="
echo "Domain: $DOMAIN"
echo "Deploying: $GIT_TAG"

# 1. Включити maintenance page
cat > /var/www/maintenance/index.html << 'EOF'
<!DOCTYPE html>
<html><body>
<h1>Технічні роботи</h1>
<p>Сайт тимчасово недоступний. Відновлення займе не більше 60 хвилин.</p>
</body></html>
EOF
# Nginx: перенаправити на maintenance
nginx -s reload

# 2. Відновити код з git
if [ -d "$APP_DIR" ]; then
    mv "$APP_DIR" "${APP_DIR}.bak.$(date +%s)"
fi
git clone --branch "$GIT_TAG" "$GIT_REPO" "$APP_DIR"
cd "$APP_DIR"
composer install --no-dev --optimize-autoloader
cp .env.production .env

# 3. Відновити БД
/usr/local/bin/restore-db.sh latest myapp

# 4. Відновити файли
aws s3 sync s3://myapp-backups/files/uploads/ \
    "${APP_DIR}/storage/app/uploads/"

# 5. Права та кеш
chown -R www-data:www-data "$APP_DIR/storage" "$APP_DIR/bootstrap/cache"
php artisan config:cache
php artisan route:cache
php artisan view:cache
php artisan migrate --force

# 6. Прибрати maintenance, перевірити
# Відновити основний nginx конфіг
nginx -s reload

# Базова перевірка
HTTP_CODE=$(curl -s -o /dev/null -w "%{http_code}" "https://${DOMAIN}/health")
if [ "$HTTP_CODE" = "200" ]; then
    echo "=== Recovery SUCCESSFUL: HTTP $HTTP_CODE ==="
else
    echo "=== Recovery FAILED: HTTP $HTTP_CODE ==="
    exit 1
fi

Цей скрипт автоматизує розгортання коду з git, відновлення БД, синхронізацію файлів, налаштування кешу та перемикання з режиму обслуговування. Все в одному виклику: restore-site.sh v1.2.3.

Як ми тестуємо відновлення?

Автоматично. Щомісяця о 8 ранку 1-го числа cron запускає restore-site.sh у тестове середовище. Якщо відновлення завершилося успішно (HTTP 200), надсилається heartbeat у healthchecks.io. Якщо ні — ми отримуємо алерт і виправляємо скрипт до того, як станеться реальний інцидент. Такий підхід дозволив нашим клієнтам заощадити до $20,000 на рік на потенційних простоях.

Додаткові інструменти для DR

Окрім S3, використовуємо rsync для інкрементних бекапів файлів та pg_dump зі стисненням для баз даних. Для моніторингу цілісності — хеші SHA-256. У runbook включаємо команди для швидкої заміни інстанса та перемикання DNS. Замовте аудит вашої схеми — він допоможе виявити вузькі місця.

Порівняння методів резервного копіювання

Процес роботи

1. Аналітика: аудит поточної схеми бекапів, визначення RTO/RPO.
2. Проектування: вибір інструментів (S3, rsync, pg_dump), архітектура скриптів.
3. Реалізація: написання restore-скриптів, налаштування системи оповіщення.
4. Тестування: повний drill з годинами та перевіркою цілісності даних.
5. Документування: runbook для чергового, чек-лист для post-mortem.
6. Передача: навчання команди, передача доступів та вихідних кодів.

Що входить у роботу

• Скрипти відновлення БД та файлів (github-репозиторій).
• Runbook українською мовою для чергового.
• Щомісячний автоматичний drill через cron + healthchecks.
• Консультація з оптимізації RTO/RPO.
• Гарантія: якщо відновлення не вкладається в обумовлений час — ми доопрацьовуємо безкоштовно.

Понад 5 років досвіду та 40+ впроваджень для e-commerce та медіа-проектів говорять самі за себе. Отримайте консультацію інженера — обговоримо вашу задачу.

Терміни та вартість

Налаштування повного циклу автоматичного відновлення займає від 3 до 5 робочих днів залежно від складності проекту. Точну вартість розраховуємо після аудиту.

Хочете таку ж надійність? Напишіть нам — оцінимо ваш проект за один день.