Разработка E2E Smoke Tests для мониторинга продакшена

Почему smoke tests должны запускаться на продакшене?

Каждый день на продакшене происходят инциденты: кривая конфигурация Nginx приводит к 502 ошибке, ошибка в миграции БД блокирует запись, утечка памяти превышает лимиты, а сбой CDN отключает статику. Без постоянного мониторинга вы узнаете о проблеме от первого негативного отзыва пользователя — а это уже потерянная выручка и репутация. Мы внедряем дымовые тесты — минимальный набор e2e проверок критических сценариев, которые запускаются каждые 5–15 минут на продакшене. Если что-то сломалось — алерт уходит в Slack или PagerDuty. Команда автоматизирует этот процесс для вашего проекта, сокращая время обнаружения сбоя с 30 минут до 2 минут — проверено на десятках проектов.

Например, на одном из проектов интернет-магазина после деплоя новой версии ORM smoke-тест на страницу списка товаров показал рост времени ответа в 3 раза. Оказалось, что миграция добавила N+1 запрос. Алерт ушёл в Slack, и разработчик откатил изменение за 15 минут, до того как пользователи массово пожаловались на скорость.

Smoke-тесты — первая линия обороны вашего продакшена. Они должны работать 24/7 и сообщать о любых отклонениях немедленно. Определение подхода можно найти в Smoke testing (software).

Какие проблемы решаем?

• N+1 запросы после релиза ORM миграции — smoke-тест на страницу списка товаров покажет рост времени ответа.
• Ошибки авторизации из-за неправильного токена — тест на логин завалится и уведомит администратора.
• Crash формы заказа при изменении frontend-компонентов — smoke-тест на checkout обнаружит пропажу кнопки.
• Падение API health endpoint после деплоя бэкенда — отдельный тест проверяет ответ /api/health.
• Потеря ключевого элемента в DOM после обновления CSS-фреймворка.

Как мы выбираем инструмент: таблица сравнения

На практике мы используем Playwright — он надёжнее Selenium, современный API, встроенная поддержка сетевых моков и trace viewer для отладки. Пример кода ниже.

Как мы это делаем: реальный кейс

Проект: интернет-магазин на Next.js + Laravel, 10k товаров, нагрузка 1000 запросов/мин. Задача: настроить smoke-тесты для корзины, оформления заказа, поиска и API health. Что сделали:

1. Выделили critical happy paths: главная → поиск → карточка товара → корзина → оформление → логин (если не залогинен) → оплата mock.
2. Написали 8 тестов на Playwright (TypeScript).
3. Настроили расписание GitHub Actions каждые 10 минут с повторной попыткой 2 раза.
4. Создали smoke-test пользователя с флагом is_synthetic: true в БД и минимальными правами.
5. Организовали уведомления в Slack через webhook при падении.

Результат: среднее время обнаружения сбоя снизилось с 30 минут до 2 минут. За месяц smoke-тесты предотвратили 5 инцидентов, которые могли вызвать потерю выручки.

Как выглядит типовое внедрение?

1. Аналитика: вместе с вами определяем критические сценарии, которые должны быть доступны всегда. Составляем матрицу покрытия.
2. Проектирование: выбираем инструмент (Playwright/Cypress/k6), проектируем архитектуру тестов, настраиваем окружение и секреты.
3. Реализация: пишем дымовые тесты, настраиваем конфигурацию (reporter, retries, workers).
4. Тест на staging: прогоняем тесты на staging-окружении, проверяем, что они не ломают реальный трафик.
5. Деплой на продакшен: настраиваем cron-расписание в CI (GitHub Actions/GitLab), подключаем алерты.
6. Сопровождение: 2 недели поддержки: мониторим отклонения, корректируем тесты под новые релизы.

Сроки и что входит в работу

Точные сроки рассчитываем после анализа вашего приложения. Каждый проект уникален.

Наш опыт

Более 7 лет мы автоматизируем тестирование, выполнили 10+ успешных проектов для e-commerce. Инженеры сертифицированы по Playwright и Kubernetes. Предоставляем гарантию 3 месяца на стабильную работу внедрённых тестов: если smoke-тест ложно падает из-за изменений в приложении — бесплатно адаптируем его. Наши решения используют в компаниях из топ-10 e-commerce России и Беларуси.

Как начать?

Свяжитесь с нами, чтобы мы проанализировали ваши критические сценарии. Закажите пилотный проект — за 2 недели мы внедрим smoke-мониторинг и настроим алерты. Оценим объём работы бесплатно.

Почему юнит-тесты важны, но не панацея?

Баг, найденный юнит-тестом, стоит минуты исправления. Тот же баг в продакшене — часы инцидента, компенсации и потеря доверия. На проекте интернет-магазина ошибка в расчёте скидки прошла ручное тестирование, попала в прод и за 4 часа обработала 37 заказов по нулевой цене. Автотест на граничные случаи расчёта поймал бы её при первом же push. Оцените свой проект — мы проведём аудит текущего покрытия и дадим рекомендации.

Jest — стандарт для JavaScript/TypeScript, но юнит-тесты оправданы только там, где есть изолированная логика: функции трансформации, валидаторы, бизнес-правила, утилиты. Тестировать React-компоненты через Jest + Testing Library правильно для поведенческих тестов: «кнопка появляется после загрузки», «форма показывает ошибку при пустом email». Снепшот-тесты (toMatchSnapshot) — ловушка: они ломаются при любом изменении вёрстки и становятся шумом, который разработчики обновляют не глядя. Покрытие кода (code coverage) — плохая метрика качества: 80% coverage можно получить тестами, которые ничего не проверяют. Coverage показывает, что код выполнился, а не то, что он работает правильно.

Vitest как альтернатива Jest для Vite-проектов: в 10–20 раз быстрее за счёт нативных ES modules без трансформации через Babel. Для монорепозиториев с тысячами тестов разница в скорости ощутима. Подробнее о юнит-тестировании.

Как настроить E2E тесты, которые не будут flaky?

Playwright обошёл Cypress по ключевым параметрам: нативная поддержка multi-tab, multi-origin, iframe; параллельное выполнение на уровне тестов; WebKit, Firefox, Chromium из коробки; нет iframe для приложения — тесты работают в реальном браузере.

Playwright codegen записывает действия и генерирует тест — хорошая точка старта, но сгенерированный код нужно рефакторить. Локаторы по text content хрупки: getByRole('button', { name: 'Оформить заказ' }) — устойчивее, чем locator('.btn-primary').

Page Object Model — стандарт организации E2E тестов. Каждая страница — отдельный класс с методами вместо прямых локаторов. Когда кнопка переехала из хедера в сайдбар — меняем в одном месте, не ищем по всем тестам.

// Плохо
await page.click('#submit');
await page.waitForTimeout(2000);
await expect(page.locator('.success')).toBeVisible();

// Хорошо
await page.click('#submit');
await page.waitForResponse(resp =>
  resp.url().includes('/api/orders') && resp.status() === 201
);
await expect(page.getByRole('alert', { name: /заказ создан/i })).toBeVisible();

Наши инженеры гарантируют стабильность тестов в CI. Документация Playwright — основной инструмент на проектах с миллионами пользователей.

Нагрузочное тестирование с k6

k6 — инструмент для нагрузочного тестирования с JavaScript API. Сценарии пишутся как код, версионируются в git, запускаются в CI. Три основных сценария:

• Spike test — резкий рост нагрузки: 0 → 1000 пользователей за 30 секунд. Имитирует запуск рекламной кампании. Показывает способность системы реагировать на пики.
• Soak test — стабильная нагрузка на 2–4 часа. Выявляет memory leaks, connection pool exhaustion, деградацию производительности.
• Stress test — нагрузка выше расчётной (150–200% от ожидаемого пика). Показывает точку отказа и graceful degradation.

Пороговые значения:

thresholds: {
  http_req_duration: ['p95<500', 'p99<1000'],
  http_req_failed: ['rate<0.01'],
}

p95 < 500ms означает: 95% запросов отвечают быстрее полусекунды. Если порог не выполняется — k6 завершается с кодом ошибки, CI-пайплайн падает.

На одном проекте интернет-магазина мы выявили деградацию API на 4-й час теста: p95 вырос с 200ms до 2s из-за утечки соединений. После оптимизации клиент сэкономил около $15,000 в год на инцидентах и лишних ресурсах. Получите аналогичный аудит вашего проекта — закажите нагрузочное тестирование.

Как Core Web Vitals влияют на ранжирование?

Google использует Core Web Vitals в ранжировании. Lighthouse CLI в CI-пайплайне: при каждом деплое проверяем, что LCP < 2.5s, CLS < 0.1, INP < 200ms. Подробнее о веб-производительности. Реальные проблемы, которые Lighthouse находит:

• Hero image без width/height атрибутов: CLS 0.35 при загрузке.
• JavaScript-бандл 2.1MB синхронно блокирует парсинг: INP 450ms.
• Шрифты без font-display: swap: невидимый текст до загрузки шрифта (FOIT).
• Неоптимизированный hero image 4MB: LCP 8.2s.

Lighthouse CI (lhci) сохраняет историю метрик и отправляет комментарий к PR с деградацией. По данным Google, 53% пользователей покидают сайт при загрузке дольше 3 секунд — наши тесты предотвращают такие потери.

Пирамида тестирования в проекте

Что входит в работу?

• Аудит текущего покрытия и определение критических user flows.
• Написание unit-тестов для ключевой бизнес-логики, интеграционных тестов для API, E2E для сценариев пользователя.
• Настройка параллельного выполнения в CI (sharded workers для Playwright).
• Нагрузочное тестирование с отчётом и рекомендациями.
• Документация по тест-кейсам, обучение вашей команды работе с тестами.
• Гарантийная поддержка 1 месяц после внедрения.

Процесс работы

1. Аналитика — аудит текущего тестирования, выявление слабых мест, определение приоритетов.
2. Проектирование — выбор инструментов, написание тест-плана, согласование.
3. Реализация — написание тестов, интеграция в CI.
4. Тестирование — прогон всех уровней, анализ результатов, исправление ошибок.
5. Деплой — запуск в прод, мониторинг метрик, обучение команды.

Сроки

Настройка полного тест-пайплайна (Jest + Playwright + k6 + Lighthouse CI) с нуля: 2–4 недели. Покрытие E2E-тестами существующего проекта (20–30 сценариев): 3–6 недель. Нагрузочное тестирование с отчётом и рекомендациями: 1–2 недели. Стоимость рассчитывается индивидуально после аудита.

Готовы обсудить ваш проект? Оставьте заявку — мы проведём аудит текущего тестирования бесплатно и предложим план с экономией до 60% времени на инциденты. Получите консультацию по тестированию веб-приложений — напишите нам.