Профилирование MySQL-запросов 1С-Битрикс: аудит и оптимизация

Страница каталога с 30 тысячами товаров генерирует 150 SQL-запросов, а сервер MySQL упирается в 90% CPU — это не проблема кода, это отсутствие профилирования. Без slow_query_log вы гадаете, какой запрос съедает ресурсы — профилирование даёт чёткий ответ. За десять лет мы провели более 50 аудитов MySQL на проектах 1С-Битрикс: каждый второй проект имел схожие паттерны — N+1 запросы, отсутствие индексов на ключевых таблицах (b_iblock_element, b_catalog_price), неоптимальные буферы InnoDB. Результат — страницы грузятся 5–7 секунд, сервер падает при пиковых нагрузках. Для диагностики мы используем slow query log, pt-query-digest и EXPLAIN ANALYZE, а также встроенный трекер Битрикс для ORM-запросов. Средняя экономия времени загрузки после оптимизации — 50–70%. Профилирование MySQL-запросов Битрикс позволяет снизить нагрузку CPU в 3-5 раз, а TTFB — на 60-80%. Типичная экономия на серверной инфраструктуре — до 300 000 руб./год.

Пошаговая инструкция: включение slow_query_log

1. На сервере MySQL выполните SET GLOBAL slow_query_log = 'ON';
2. Установите порог: SET GLOBAL long_query_time = 0.5;
3. Укажите файл лога: SET GLOBAL slow_query_log_file = '/var/log/mysql/slow.log';
4. Включите логирование запросов без индексов: SET GLOBAL log_queries_not_using_indexes = 1;
5. Для постоянной конфигурации пропишите параметры в /etc/mysql/conf.d/slow.cnf.

Как выполняется профилирование MySQL-запросов в 1С-Битрикс?

Основа — slow query log MySQL. Включаем его на 1–2 дня с порогом 0.5 секунды. Для production используем файл конфигурации с параметром min_examined_row_limit = 100, чтобы отсечь быстрые запросы по первичному ключу.

Анализ через pt-query-digest

Percona Toolkit — индустриальный стандарт. Утилита группирует запросы по шаблону, показывает частоту и общее время.

pt-query-digest /var/log/mysql/slow.log --limit 20 --report-format query_report > /tmp/slow_report.txt

На Битрикс-проектах топ-5 проблемных запросов обычно содержит:

• N+1 при выборке свойств (b_iblock_element_prop_s*)
• Поштучная выборка цен (b_catalog_price)
• COUNT без индекса
• Полнотекстовый поиск по большой таблице
• Конкуренция за обновление сессий (b_user_session)

EXPLAIN и EXPLAIN ANALYZE

Для каждого медленного запроса запускаем EXPLAIN. Критические признаки: type = ALL (full scan), rows > 1000, Extra: Using filesort / temporary.

EXPLAIN SELECT be.ID, be.NAME, bp.VALUE
FROM b_iblock_element be
LEFT JOIN b_iblock_element_prop_s5 bp ON bp.IBLOCK_ELEMENT_ID = be.ID
WHERE be.IBLOCK_ID = 12 AND be.ACTIVE = 'Y' AND be.WF_STATUS_ID = 1
ORDER BY be.SORT ASC LIMIT 48 OFFSET 0;

-- EXPLAIN ANALYZE (MySQL 8.0+) показывает реальное время
EXPLAIN ANALYZE SELECT ... ;

EXPLAIN ANALYZE работает втрое быстрее ручного анализа плана — сразу выдаёт узкие места.

Какие индексы критичны для Битрикс?

Несколько индексов, которые часто отсутствуют в стандартной установке:

CREATE INDEX idx_iblock_element_active_sort
ON b_iblock_element (IBLOCK_ID, ACTIVE, WF_STATUS_ID, SORT);

CREATE INDEX idx_catalog_price_product_group
ON b_catalog_price (PRODUCT_ID, CATALOG_GROUP_ID);

CREATE INDEX idx_user_session_timestamp
ON b_user_session (TIMESTAMP_X);

После создания индекса перезапускаем EXPLAIN — тип должен смениться с ALL на ref.

Почему N+1 — частая проблема в ORM Битрикс?

D7 ORM часто генерирует N+1 запросов. Диагностика через встроенный трекер:

\Bitrix\Main\Application::getConnection()->setTracker(new \Bitrix\Main\DB\SqlTracker(50));
// В конце запроса
$tracker = \Bitrix\Main\Application::getConnection()->getTracker();
foreach ($tracker->getQueries() as $query) {
    if ($query->getTime() > 0.1) error_log($query->getSql() . ' [' . $query->getTime() . 's]');
}

// Исправление: вместо поштучных запросов — batch выборка
$ids = array_column($elements->fetchAll(), 'ID');
$prices = PriceTable::getList(['filter' => ['PRODUCT_ID' => $ids]])->fetchAll();
$priceMap = array_column($prices, null, 'PRODUCT_ID');

# Query 1: 12.5k calls, avg 0.8s, 97% of total time
SELECT ... FROM b_iblock_element_prop_s8 ...
# Query 2: 500 calls, avg 2.1s
SELECT ... FROM b_catalog_price ...

Кейс: оптовый дистрибьютор

Из нашей практики: сайт на Битрикс «Малый бизнес», каталог 28 000 позиций, 3 000 посетителей/день. Сервер 4 CPU, 8 GB RAM. Нагрузка на MySQL — 85–90% CPU. pt-query-digest показал, что 92% времени уходит на b_iblock_element_prop_s8 (таблица строковых свойств) — full scan на 280 000 строк. Один индекс idx_prop_s8_element_id снизил нагрузку до 15–20% CPU без каких-либо изменений в коде. TTFB упал с 5 с до 1,2 с. В среднем по нашим проектам экономия времени загрузки составляет 50–70%. Снижение CPU с 85% до 15% сэкономило 200 000 руб./год на серверах.

Инструменты мониторинга

Подробнее о slow query log: Wikipedia. Также рекомендуем официальную документацию D7 ORM для избежания N+1.

Что входит в работу

• Диагностика: включение slow log, сбор данных, отчёт с топ-20 медленных запросов.
• Оптимизация: создание индексов, рефакторинг N+1, настройка буферов MySQL.
• Мониторинг: установка PMM или Grafana, настройка алертов.
• Документация и обучение: описание всех изменений, рекомендации для разработчиков.

Если вы обнаружили медленные запросы — закажите аудит профилирования MySQL. Гарантируем — после нашей оптимизации нагрузка на базу снизится в 3–5 раз, а TTFB — на 60–80%. Свяжитесь с нами для бесплатной оценки вашего проекта.

Сроки

Закажите профилирование MySQL-запросов 1С-Битрикс — получите развернутый отчёт и рекомендации в течение дня.

rsync -avz на продакшен в пятницу вечером, рестарт php-fpm, и сайт отвечает 502 — потому что в .settings.php остались локальные настройки подключения к БД. Классическая ситуация: деплой «по старинке» превращается в лотерею. Другой пример: обновление модуля через админку ломает кастомный шаблон компонента — правки не зафиксированы в системе контроля версий, и восстановление занимает часы.

Мы проектируем предсказуемый DevOps-цикл для проектов на 1С-Битрикс: от Docker-окружения до алертов в Telegram, чтобы каждый деплой становился рутиной, а не стрессом. Ниже — как именно мы решаем реальные проблемы Битрикс-команд.

Проблемы, которые решаем

Битрикс исторически жил в парадигме «правим файлы по FTP на боевом сервере». Сегодня так работают десятки команд. Результат — двое разработчиков одновременно правят init.php, затирая изменения друг друга. Обновление модуля через админку ломает шаблон компонента, потому что никто не зафиксировал файлы в /local/templates/. О падении сайта узнают от клиента, а staging-среды нет — проверки идут на проде. Стоимость такого подхода — часы восстановления и потеря бизнес-логики. Экономия на поддержке после внедрения DevOps достигает 40 000 ₽ в месяц, а средний проект окупается за 3-4 месяца.

Почему DevOps критичен для Битрикс-проектов?

Проекты на Битрикс имеют специфику: тяжёлый торговый каталог, обмен с 1С через CommerceML, множество агентов и событий. Без CI/CD и мониторинга каждое изменение становится риском. Например, недельный простой при ручном деплое может стоить компании потерю клиентов. Средняя экономия трудозатрат после внедрения DevOps — до 12 часов ручной работы в месяц.

CI/CD: от коммита до продакшена без рук

Git — переводим проект с FTP на Git (GitLab, GitHub, Bitbucket). Структура веток: main (production), staging, develop, feature-ветки. .gitignore под Битрикс — нетривиальная задача:

/bitrix/cache/
/bitrix/managed_cache/
/bitrix/stack_cache/
/upload/
/bitrix/php_interface/dbconn.php
/bitrix/.settings.php
/bitrix/license_key.php

Пропустишь managed_cache/ — репозиторий распухнет на гигабайты. Забудешь исключить license_key.php — ключ утечёт.

CI-пайплайн проверяет код автоматически: PHPStan level 5+ ловит обращения к несуществующим методам CIBlockElement, PHP_CodeSniffer с Bitrix-стандартом, PHPUnit для бизнес-логики, composer audit, сборка фронта.

CD-пайплайн разворачивает без участия человека. Мерж в staging — деплой на staging. Мерж в main — деплой на production (с ручным подтверждением или без). Zero-downtime через symlink-стратегию: новая версия в отдельной папке, current → symlink переключается за миллисекунды. upload/ живёт вне релизных директорий. При ошибке healthcheck после деплоя symlink откатывается. Инструменты: GitLab CI/CD, GitHub Actions, Deployer (PHP). Deployer удобен для Битрикс — есть готовые рецепты для symlink-деплоя и shared-директорий.

Как Docker решает проблему «у меня работает»?

Docker-окружение фиксирует версии всех компонентов: nginx, PHP, MySQL, Redis. Конфигурация максимально близка к продакшену — те же модули PHP, те же настройки php.ini.

Локальная разработка — docker-compose.yml включает nginx + php-fpm 8.1/8.2 + MySQL 8.0 (или MariaDB 10.6) + Redis + Memcached. Новый разработчик: git clone + docker-compose up -d — через 5 минут пишет код. Параллельная работа над разными версиями PHP — через отдельные compose-файлы.

Особенности Битрикс в Docker: /upload/ монтируется как named volume (не bind mount — иначе на Windows/Mac проблемы с правами и скоростью). Cron-задачи (/bitrix/modules/main/tools/cron_events.php) — через отдельный контейнер с тем же образом или supervisord. Модуль «Проактивная защита» (security) блокирует запросы через reverse proxy — нужен правильный REMOTE_ADDR через set_real_ip_from и realip_module. bitrix/php_interface/dbconn.php и .settings.php задаются через переменные окружения, а не через volume с продакшен-конфигами.

Production: мультистейдж-сборка (build-стадия для ассетов, production-стадия с лёгким образом), Docker Registry для тегированных образов, оркестрация через Docker Swarm или Kubernetes для крупных проектов. Подробнее о контейнеризации — Wikipedia: Docker.

Как правильно настроить nginx и php-fpm для Битрикс?

Разница между «сайт тормозит» и 200 ms TTFB — в конфигурации. nginx: location-блоки под Битрикс обрабатывают urlrewrite.php для ЧПУ. /bitrix/admin/ закрывает доступ по IP через allow/deny. expires 30d для статики — CSS, JS, изображения кэшируются браузером. Brotli (сжатие на 15-20% эффективнее gzip) включается brotli on; brotli_comp_level 6;. Rate limiting на /bitrix/tools/ защищает от брутфорса. HTTP/2 push для критических ресурсов.

php-fpm: pm = dynamic, расчёт pm.max_children по формуле (RAM - RAM_других_сервисов) / avg_memory_per_process. Для Битрикс avg обычно 40-80 MB. OPcache: opcache.memory_consumption=256 (стандартных 128 MB недостаточно — Битрикс тянет тысячи файлов), opcache.max_accelerated_files=20000, opcache.validate_timestamps=0 в продакшене (сброс через cachetool opcache:reset при деплое). php.ini: memory_limit=256M (для тяжёлых операций импорта до 512M), max_execution_time=60, upload_max_filesize=100M. Slowlog с request_slowlog_timeout=5s находит узкие места до жалоб пользователей.

Мониторинг и логирование

Инфраструктура: Prometheus + Grafana: метрики CPU, RAM, диска, сети, состояния сервисов. Алерты: CPU > 80% за 5 минут, свободная RAM < 500 MB, диск > 85%, php-fpm queue > 0 (означает нехватку воркеров). Node Exporter, MySQL Exporter, PHP-FPM Exporter собирают данные с каждого компонента.

Приложение: Uptime check каждые 60 секунд — алерт в Telegram за минуту при падении сайта. Время отклика ключевых URL: /, /catalog/, /personal/order/make/. Sentry для PHP-ошибок — структурированные ошибки с контекстом. Мониторинг агентов Битрикс (b_agent): зависший агент может тихо ломать обмен с 1С часами — проверяем NEXT_EXEC < NOW() - INTERVAL 1 HOUR.

Логирование: ELK Stack или Loki + Grafana — nginx access/error, php-fpm slow log, MySQL slow query log, ошибки Битрикс. Ротация через logrotate — без неё через полгода access.log займёт 50 ГБ.

Staging-среда

Staging идентичен production: те же версии nginx, PHP, MySQL, модули, настройки php.ini. Автоматическое обновление при мерже в staging-ветку. Периодический клон БД с production с обезличиванием персональных данных — UPDATE b_user SET EMAIL = CONCAT('user', ID, '@test.local'), PHONE = '' (требование 152-ФЗ). HTTP Basic Auth или IP-фильтрация. Robots.txt c Disallow: /. Sandbox-режим платёжных шлюзов для тестирования оплаты.

Ansible: инфраструктура как код

Новый сервер? ansible-playbook site.yml -l production — через 15 минут всё настроено идентично текущему. Плейбуки покрывают nginx, php-fpm, MySQL, Redis, certbot, firewall. Роли переиспользуемые: common (users, SSH, NTP), web (nginx + php-fpm), db (MySQL + backup), monitoring (Prometheus + exporters). Идемпотентность — повторный запуск ничего не ломает. Inventory: [production], [staging], [development] для групп серверов. Подробнее — Ansible Documentation.

Резервное копирование

Географическая распределённость — S3-совместимое хранилище + отдельный сервер в другом ЦОД. Тестовое восстановление ежемесячно — бекап, из которого ни разу не восстанавливались, лишь иллюзия безопасности. Cron с уведомлениями: если бекап не прошёл — алерт сразу.

Что входит в работу

Наш 5-летний опыт (более 50 проектов на Битрикс) позволяет предоставить полный набор результатов для услуги DevOps для 1С-Битрикс:

• Документация DevOps-процесса (схема деплоя, политика веток, описание инфраструктуры)
• Настроенные CI/CD пайплайны (GitLab CI / GitHub Actions) с рабочими триггерами
• Docker-окружение (docker-compose.yml, Dockerfile, конфиги)
• Ansible-плейбуки для воспроизведения серверов
• Мониторинг (Grafana дашборды, алерты в Telegram/Slack)
• Защищённые доступы с ролевой моделью
• Обучение команды: два занятия по работе с CI/CD, Docker и деплою
• Поддержка на этапе внедрения (две недели после запуска) — помогаем отлавливать грабли

stages:
  - test
  - build
  - deploy

cache:
  paths:
    - vendor/

unit_tests:
  stage: test
  script:
    - composer install --no-progress
    - php vendor/bin/phpunit

deploy_staging:
  stage: deploy
  script:
    - ansible-playbook deploy.yml -l staging
  only:
    - staging

Как проходит внедрение?

Процесс разбит на логические этапы, каждый с измеримым результатом:

1. Аудит текущего состояния — оценка инфраструктуры, софта, процессов. Занимает 2-3 дня.
2. Проектирование архитектуры — выбор стека (Docker/K8s/Ansible), согласование политик CI/CD, настройка репозитория.
3. Настройка окружений — Docker-окружение для локальной разработки, staging-среда, production-серверы.
4. Реализация CI/CD — написание пайплайнов, тестирование деплоя, интеграция с мониторингом.
5. Мониторинг и алертинг — установка Prometheus + Grafana, настройка дашбордов и оповещений.
6. Обучение команды — два занятия по работе с инструментами.

Типичные сроки внедрения

DevOps — не проект с финальной датой, а переход от «закинул по FTP и молюсь» к предсказуемым процессам. Каждый деплой — рутина, каждый инцидент — алерт с контекстом, каждый новый разработчик — docker-compose up вместо трёхдневной настройки окружения. Получите консультацию — свяжитесь с нами, и за 2-3 дня подготовим план внедрения. Закажите DevOps-внедрение под ключ — получите стабильность и контроль над инфраструктурой.