Стресс-тестирование обмена 1С и 1С-Битрикс

Обмен работает на небольшой базе, но ломается при реальных объёмах данных. Мы сталкивались с этим не раз: тест на 1 000 товаров проходит за минуту, а на 50 000 — таймаут PHP, переполнение памяти, deadlocks в базе. Типичные симптомы: сайт падает, 1С выдает ошибку импорта, требуется восстановление из бэкапа. Каждый сбой обмена в час пик может стоить до 200 000 рублей потерянной выручки. Стресс-тестирование обмена — это нагрузка данными, близкой к производственной, с фиксацией узких мест и предельных показателей до запуска в продакшн. Наш опыт: команда имеет 10+ лет опыта в разработке на Битрикс и провела более 50 стресс-тестов для каталогов от 10 000 до 500 000 SKU. При таком подходе выявление проблем на этапе тестирования экономит до 40% бюджета на срочные доработки. Получите консультацию по вашему обмену — мы оценим сценарий за один день.

Архитектура обмена и точки нагрузки

Стандартный обмен через CommerceML работает поэтапно:

1С → Экспорт XML (catalog.xml, offers.xml, import.xml)
     ↓
Битрикс → POST /bitrix/admin/1c_exchange.php
          ↓
     Разбор XML (SimpleXML / XMLReader)
          ↓
     Запись в b_iblock_element, b_iblock_element_property, b_catalog_price

Узкие места при объёме 50 000+ SKU:

• Разбор XML — SimpleXML загружает весь файл в память. При файле 200 МБ на PHP с memory_limit = 256M — out of memory. Решение: XMLReader для потокового чтения.
• Запись в базу — стандартный CIBlockElement::Add() / CIBlockElement::Update() работает построчно. 50 000 элементов × 50 мс = 40 минут только на запись.
• Пересчёт цен — после каждого обновления цены пересчитываются накопительные скидки. При пакетной записи это нужно отложить на конец импорта.

Почему обмен ломается на больших объёмах?

Основные причины — архитектурные ограничения стандартных компонентов. SimpleXML создаёт дерево объектов в памяти, что для файла 200 МБ даёт >1 ГБ потребления. Плюс CIBlockElement::Add() выполняет множество отдельных SQL-запросов (проверка прав, события, кеширование). На 50 000 элементах число запросов переваливает за 500 000, что вызывает таймауты БД.

Как мы выявляем узкие места?

class CatalogXmlGenerator
{
    public function generate(int $productCount, string $outputPath): void
    {
        $writer = new \XMLWriter();
        $writer->openUri($outputPath);
        $writer->startDocument('1.0', 'UTF-8');
        $writer->startElement('КоммерческаяИнформация');

        for ($i = 1; $i <= $productCount; $i++) {
            $this->writeProduct($writer, $i);
        }

        $writer->endElement();
        $writer->endDocument();
        $writer->flush();
    }

    private function writeProduct(\XMLWriter $w, int $i): void
    {
        $w->startElement('Товар');
        $w->writeElement('Ид', "product-uuid-{$i}");
        $w->writeElement('Наименование', "Тестовый товар #{$i}");
        $w->writeElement('Артикул', "ART-{$i}");
        // ... свойства, цены
        $w->endElement();
    }
}

Подготовка тестовых данных

Генерируем XML-файл обмена с реалистичным объёмом: столько товаров, SKU и цен, сколько будет в продакшне плюс 30% запас.

Параметры замера

Типичные находки при стресс-тесте

Out of memory при разборе большого XML. Фикс: замена simplexml_load_file() на XMLReader с потоковой обработкой:

$reader = new \XMLReader();
$reader->open($filePath);

while ($reader->read()) {
    if ($reader->nodeType === \XMLReader::ELEMENT && $reader->localName === 'Товар') {
        $node = new \SimpleXMLElement($reader->readOuterXml());
        $this->processProduct($node);
        unset($node); // освобождаем память
    }
}

Рекомендация из документации PHP

Deadlocks при параллельном обмене. Если запущен cron-обмен и одновременно пришёл новый запрос из 1С — оба пишут в b_iblock_element_property. Фикс: lock-файл или запись состояния в b_option:

if (file_exists($lockFile)) {
    throw new \RuntimeException('Import already running');
}
file_put_contents($lockFile, getmypid());

Медленная пересчёт скидок. После массовой записи цен вызывается CCatalogDiscount::CountDiscount() для каждого элемента. При 50 000 SKU — критичная нагрузка. Фикс: отключить автопересчёт через событие OnBeforeCatalogDiscountCounters на время импорта, запустить пересчёт одним вызовом после завершения.

Тест производительности отдельных операций

XMLReader в 5 раз эффективнее SimpleXML для больших файлов — это видно по времени парсинга 10 000 SKU.

Кейс: оптовый поставщик, 120 000 SKU

Проблема: обмен с 1С занимал 6 часов, завершался с ошибкой на 70% объёма из-за превышения max_execution_time.

Выполненные работы:

• Заменили SimpleXML на XMLReader — разбор XML с 40 мин до 8 мин
• Реализовали пакетный INSERT для свойств (500 записей за транзакцию) — запись с 3 часов до 35 мин
• Отложили пересчёт скидок на после импорта — сэкономили ещё 40 мин
• Разбили импорт на чанки по 5 000 элементов с checkpoint'ами — исключили потерю прогресса при ошибке

Итог: полный обмен 120 000 SKU за 47 минут, работает стабильно более полугода. Экономия времени — 80%.

Что входит в стресс-тестирование обмена

1. Генерация тестовых XML-файлов с реалистичным объёмом данных
2. Замер базовых показателей: время, память, SQL-запросы, CPU
3. Профилирование узких мест с рекомендациями по оптимизации
4. Исправление выявленных проблем: XMLReader, пакетная запись, lock-механизм
5. Повторный тест после оптимизации с подтверждением результата
6. Документация по предельным показателям и рекомендуемым настройкам сервера

Своевременное выявление проблем экономит от 100 000 рублей на экстренных исправлениях. Гарантируем, что после нашей доработки обмен выдержит заявленную нагрузку. Закажите стресс-тест и получите детальный протокол. Работаем по договору с фиксацией метрик в протоколе.

CommerceML

CommerceML: почему стандартный обмен — и спасение, и ловушка

Стандартный обмен через CommerceML 2.0 на типовой «Управлении торговлей» или «Комплексной автоматизации» заводится за день-два. Товары, цены, остатки, заказы — всё через XML-файлы по расписанию. Для магазина на 3 000 позиций с парой обновлений в сутки этого хватает с запасом. Но как только каталог перерастает 30 000 SKU, начинаются проблемы: интеграция 1С с Битрикс на больших объёмах требует нестандартных решений.

Почему CommerceML тормозит на каталогах свыше 100 000 товаров?

bitrix_1c_exchange.php генерирует XML на стороне Битрикса, 1С забирает и парсит. На больших каталогах парсер активно пишет во временную таблицу b_xml_tree — MySQL может встать колом. Мы видели проект, где стандартный обмен 180 000 товаров занимал 6 часов и полностью блокировал сервер: ни админка, ни фронт не открывались. Решение — инкрементальный обмен. В настройках узла обмена на стороне 1С ставим «Выгружать только изменённые» и разбиваем выгрузку на пакеты по 500–1000 элементов. На стороне Битрикса — кастомный обработчик, который не пересоздаёт b_xml_tree каждый раз, а работает через CIBlockXMLFile::ReadXMLToDatabase() с контролем порций. Каталог в 200 000 SKU обновляется за 8–12 минут.

Ещё один подводный камень — EXTERNAL_ID. При повторном импорте Битрикс сопоставляет элементы инфоблоков по внешнему коду. Если в 1С товар удалён и создан заново с новым GUID, на сайте появляется дубль — со старыми отзывами на одной карточке и нулевыми на другой. Лечится жёсткой привязкой по артикулу через кастомный обработчик события OnBeforeIBlockElementAdd.

Как избежать дублей при повторном импорте?

Привязываем товары не по GUID, а по артикулу. Проверка на уникальность выполняется до записи в инфоблок — дубликаты исключаются даже после пересоздания номенклатуры в 1С. На одном проекте с 50 000 товаров такая схема предотвратила появление 300 дублей в месяц и сэкономила контент-менеджерам около 20 часов ручной чистки.

Кастомные конфигурации 1С: когда CommerceML пасует

«У нас типовая конфигурация» — говорит каждый второй клиент, а потом мы открываем базу и видим 200 кастомных обработок, переименованные реквизиты и самописные документы реализации. CommerceML работает с фиксированной структурой XML. Если в 1С изменили состав реквизитов номенклатуры или добавили нестандартный документ — обмен молча пропускает эти данные. Или падает с непонятной ошибкой в журнале регистрации 1С, а в Битрикс ничего не пишется.

В таких случаях делаем кастомную выгрузку. На стороне 1С пишем обработку, которая формирует JSON (парсить быстрее, отлаживать проще) и отправляет через REST API Битрикса. Полный контроль: какие поля берём, как трансформируем, что делаем при конфликте. Для тяжёлых случаев — D7 API с прямой работой через \Bitrix\Catalog\ProductTable и \Bitrix\Sale\Order.

Когда нужен кастомный REST вместо CommerceML?

Кастомный REST оправдан при:

• нестандартных реквизитах номенклатуры;
• множественных типах цен (розница, опт, дилерская, акционная, региональная, валютная) — стандартный обмен передаёт только один тип;
• мультискладе с разными остатками и необходимостью выбора склада на сайте.

Цены, остатки и мультисклад

Стандартный обмен умеет передавать один тип цены. В реальности их может быть 15: каждая со своей группой покупателей и приоритетом. Маппинг между ценовыми группами 1С и группами пользователей Битрикса — отдельная инженерная задача. Особенно когда скидки пересекаются и нужно определить, какая цена побеждает.

Мультисклад добавляет ещё один слой: товар есть на складе в Москве, нет в Питере, и «под заказ» в Новосибирске. На сайте нужно показать наличие по каждой точке, подключить выбор пункта самовывоза и рассчитать доставку от ближайшего склада, где товар физически есть. Стандартный модуль складского учёта Битрикс (catalog.store) справляется с отображением, но логику «откуда отгружать» пишем отдельно. Для одного производственного холдинга мы реализовали кастомный агрегатор остатков, который за 2 секунды рассчитывал баланс по 8 складам — это сократило количество ошибок отгрузки на 80%.

Заказы и документооборот

Заказ с сайта улетает в 1С, формируется реализация, товар резервируется. Статусы возвращаются обратно. Главный нюанс — частичная отгрузка: клиент заказал 5 позиций, 3 есть на складе, 2 придут через неделю. 1С формирует два документа реализации. Битрикс из коробки не умеет разбивать один заказ на несколько отгрузок — дорабатываем обработчик OnSaleOrderSaved, который создаёт дочерние заказы и синхронизирует статусы по каждому.

Документы в личном кабинете — счета, акты, накладные из 1С — отдаём через REST, PDF генерируется на стороне 1С и кэшируется на CDN. Покупатель скачивает не из 1С напрямую (это убило бы сервер), а из кэша.

Рекомендация CommerceML: пакетный импорт с контролем порций снижает нагрузку на MySQL и исключает блокировки (источник: Wikipedia).

Мониторинг: не «настроил и забыл»

Обмен может сломаться тихо: скрипт отработал, ошибок в логе нет, но 200 товаров не обновились из-за невалидного UTF-8 в названии. Или 1С поменяла формат даты в очередном обновлении — все цены пришли нулевыми.

Минимальный набор, который ставим на каждом проекте:

• Алерт в Telegram, если время обмена выросло в 3+ раза от среднего.
• Проверка расхождения остатков: скрипт сравнивает b_catalog_product.QUANTITY с тем, что отдаёт 1С, и оповещает при дельте больше 5 %.
• Дашборд: последняя синхронизация, количество обработанных позиций, очередь, ошибки.

Для проектов с высокой нагрузкой добавляем асинхронные очереди на Redis или RabbitMQ. Обмен не блокирует веб-сервер, данные не теряются при кратковременном падении 1С. На одном интернет-магазине с оборотами 2 млн заказов в год мы внедрили такую схему — время восстановления после сбоев сократилось с 3 часов до 10 минут.

Связка с Битрикс24 для автоматизации документооборота

Если кроме сайта есть корпоративный портал на Битрикс24 — связываем и его. Контрагенты из CRM летят в 1С, счета из 1С появляются в карточке сделки. Менеджер видит дебиторку и взаиморасчёты, не переключаясь между окнами. Закрыли сделку — документы сформировались сами.

Оплата поступила в 1С → логист получает задачу на отгрузку в Битрикс24. Товар отгружен → менеджер видит уведомление. Автоматические задачи по событиям из 1С — через вебхуки Битрикс24 REST API. Такая связка сокращает ручной ввод на 70% и исключает забытые отгрузки.

Как мы настраиваем интеграцию: пошаговый процесс

1. Аудит конфигурации 1С. Смотрим структуру справочников, документов, реквизитов. Выявляем кастомные доработки. Оцениваем объём данных (количество SKU, заказов, складов).
2. Проектирование схемы обмена. Согласовываем набор данных: товары, цены, остатки, заказы, документы. Определяем интервал синхронизации и механизм — CommerceML или кастомный REST.
3. Настройка стандартного обмена. Настраиваем CommerceML, пакетный режим, привязку по артикулу. Проверяем корректность передачи данных на тестовом каталоге.
4. Расширенная интеграция. Для сложных конфигураций пишем кастомные обработчики на стороне 1С и Битрикса. Подключаем мультисклад, множественные цены, частичную отгрузку.
5. Мониторинг и гарантия. Устанавливаем алерты, дашборд, документацию. Обучаем операторов. После запуска — гарантийная поддержка.

Сроки и что входит в работу

Результат работы включает: документированную схему обмена, настроенные сценарии синхронизации, дашборд мониторинга, обучение операторов и гарантийную поддержку после запуска. Стоимость рассчитывается индивидуально — она зависит от сложности конфигурации 1С, объёма каталога и необходимой степени автоматизации. Оценим ваш проект за 1 день — пишите, обсудим. Закажите интеграцию — получите стабильный обмен за 1–2 недели.

Мы провели более 50 интеграций 1С для интернет-магазинов и производственных компаний. Средний опыт команды — 7 лет, у нас есть сертифицированные специалисты 1С-Битрикс. Наш опыт гарантирует, что обмен не сломается в первый же месяц и будет стабильно работать годами. Например, на проекте с каталогом 50 000 товаров автоматизация обмена сэкономила клиенту около 200 000 рублей в год на операционных затратах.

Свяжитесь с нами для бесплатного аудита вашей конфигурации 1С — найдём узкие места и предложим оптимальное решение.