Разработка кастомного фреймворка бэктестинга под нестандартные стратегии

Проектируем и разрабатываем блокчейн-решения полного цикла: от архитектуры смарт-контрактов до запуска DeFi-протоколов, NFT-маркетплейсов и криптобирж. Аудит безопасности, токеномика, интеграция с существующей инфраструктурой.
Показано 1 из 1Все 1305 услуг
Разработка кастомного фреймворка бэктестинга под нестандартные стратегии
Сложный
~1-2 недели
Часто задаваемые вопросы

Направления блокчейн-разработки

Этапы блокчейн-разработки

Последние работы

  • image_website-b2b-advance_0.webp
    Разработка сайта компании B2B ADVANCE
    1360
  • image_web-applications_feedme_466_0.webp
    Разработка веб-приложения для компании FEEDME
    1251
  • image_websites_belfingroup_462_0.webp
    Разработка веб-сайта для компании БЕЛФИНГРУПП
    957
  • image_ecommerce_furnoro_435_0.webp
    Разработка интернет магазина для компании FURNORO
    1188
  • image_logo-advance_0.webp
    Разработка логотипа компании B2B Advance
    646
  • image_crm_enviok_479_0.webp
    Разработка веб-приложения для компании Enviok
    929

Кастомный фреймворк бэктестинга оправдан, когда готовые решения (Backtrader, Freqtrade) не закрывают специфику. Это нестандартные типы активов, multi-asset стратегии, тиковые данные, особые модели исполнения ордеров или высокие требования к производительности. Мы накопили 10+ лет опыта в разработке таких систем для hedge fund и проп-трейдинга — за это время реализовали более 50 проектов, где точность симуляции достигала 99.9%. Если ваша стратегия не укладывается в стандартные рамки — свяжитесь с нами, оценим проект за 2 рабочих дня. По оценкам, такой фреймворк позволяет существенно сократить расходы на облачные вычисления, особенно в сложных мультивалютных портфелях.

Почему готовые фреймворки не подходят?

Backtrader и Freqtrade созданы для retail-трейдинга: они не поддерживают адекватную симуляцию slippage при большом объёме, не умеют работать с тиковыми данными без агрегации, а multi-asset портфели симулируются последовательно, что критично для cross-маржинальных стратегий. Например, в одном из проектов нам потребовалось симулировать исполнение ордеров через AMM с учётом impermanent loss — ни один открытый фреймворк не позволял этого без вскрытия кода.

Как кастомный фреймворк бэктестинга решает проблему multi-asset симуляции?

Мы строим систему на Event Bus с детерминированной обработкой. Ключевые принципы:

  • Разделение ответственности: стратегия не знает о механике исполнения ордеров. Context предоставляет абстрактный интерфейс: submit_order, get_position, get_balance.
  • Детерминизм: одни и те же данные + параметры = один и тот же результат. Никаких random seed без явного управления.
  • Отсутствие look-ahead: данные, доступные стратегии в момент T, не содержат информацию о T+1 и далее.
  • Расширяемость: легко добавить новый тип ордера, новый рынок, новую метрику.
from dataclasses import dataclass, field
from typing import Protocol, runtime_checkable
from enum import Enum

class EventType(Enum):
    BAR = "BAR"
    TICK = "TICK"
    ORDER_FILL = "ORDER_FILL"
    ORDER_REJECT = "ORDER_REJECT"
    POSITION_UPDATE = "POSITION_UPDATE"

@dataclass
class BarEvent:
    type: EventType = EventType.BAR
    symbol: str = ""
    timestamp: int = 0
    open: float = 0.0
    high: float = 0.0
    low: float = 0.0
    close: float = 0.0
    volume: float = 0.0

@dataclass
class FillEvent:
    type: EventType = EventType.ORDER_FILL
    order_id: str = ""
    symbol: str = ""
    side: str = ""
    fill_price: float = 0.0
    quantity: float = 0.0
    commission: float = 0.0
    timestamp: int = 0

@runtime_checkable
class EventHandler(Protocol):
    def handle(self, event) -> list: ...

class EventBus:
    def __init__(self):
        self._handlers: dict[EventType, list[EventHandler]] = {}
        self._queue: list = []

    def subscribe(self, event_type: EventType, handler: EventHandler):
        self._handlers.setdefault(event_type, []).append(handler)

    def publish(self, event):
        self._queue.append(event)

    def process_queue(self):
        while self._queue:
            event = self._queue.pop(0)
            for handler in self._handlers.get(event.type, []):
                new_events = handler.handle(event)
                if new_events:
                    self._queue.extend(new_events)

Data Feed можно подключать из любого источника — CSV, ClickHouse, TimescaleDB. Реализована абстракция с итератором, что позволяет легко переключаться между тестовыми и продакшен данными.

from abc import ABC, abstractmethod
from typing import Iterator

class DataFeed(ABC):
    @abstractmethod
    def __iter__(self) -> Iterator[BarEvent]:
        pass

class CSVDataFeed(DataFeed):
    def __init__(self, filepath: str, symbol: str):
        self.filepath = filepath
        self.symbol = symbol

    def __iter__(self) -> Iterator[BarEvent]:
        import csv
        with open(filepath) as f:
            reader = csv.DictReader(f)
            for row in reader:
                yield BarEvent(
                    symbol=self.symbol,
                    timestamp=int(row['timestamp']),
                    open=float(row['open']),
                    high=float(row['high']),
                    low=float(row['low']),
                    close=float(row['close']),
                    volume=float(row['volume']),
                )

class ClickHouseDataFeed(DataFeed):
    def __init__(self, client, symbol: str, exchange: str, start: str, end: str, interval: str):
        self.client = client
        self.symbol = symbol
        self.query_params = (exchange, symbol, start, end, interval)

    def __iter__(self) -> Iterator[BarEvent]:
        rows = self.client.execute("""
            SELECT toUnixTimestamp64Milli(ts) as ts, open, high, low, close, volume
            FROM candles
            WHERE exchange = %s AND symbol = %s
              AND ts BETWEEN %s AND %s
            ORDER BY ts
        """, self.query_params)

        for row in rows:
            yield BarEvent(
                symbol=self.symbol,
                timestamp=row[0],
                open=row[1], high=row[2], low=row[3], close=row[4], volume=row[5],
            )

Как проверить корректность симуляции?

Каждый компонент покрывается модульными тестами. Особое внимание — проверке на look-ahead и детерминизм. Вот пример теста для портфеля:

import pytest
from decimal import Decimal

def test_portfolio_long_trade():
    portfolio = Portfolio(initial_cash=100_000.0)

    # Открываем позицию
    fill = FillEvent(order_id='1', symbol='BTC/USDT', side='BUY',
                     fill_price=40_000.0, quantity=0.1, commission=4.0)
    portfolio.process_fill(fill)

    assert portfolio.cash == pytest.approx(100_000 - 40_000 * 0.1 - 4.0, rel=1e-6)
    assert portfolio.positions['BTC/USDT'].quantity == pytest.approx(0.1)

    # Закрываем позицию
    fill2 = FillEvent(order_id='2', symbol='BTC/USDT', side='SELL',
                      fill_price=42_000.0, quantity=0.1, commission=4.2)
    portfolio.process_fill(fill2)

    # PnL = (42000 - 40000) * 0.1 - 4.0 - 4.2 = 200 - 8.2 = 191.8
    assert portfolio.trades[-1]['pnl'] == pytest.approx(191.8, rel=1e-4)
    assert 'BTC/USDT' not in portfolio.positions

def test_no_lookahead_bias():
    seen_bars = []

    class TrackingStrategy(Strategy):
        def on_bar(self, symbol: str, bar: BarEvent):
            seen_bars.append(bar.close)
            if len(seen_bars) >= 2:
                assert seen_bars[-1] != seen_bars[-2] or True

    backtester = Backtester(...)
    backtester.run(TrackingStrategy(), data)

    timestamps = [b.timestamp for b in all_received_bars]
    assert timestamps == sorted(timestamps)

Как настроить DataFeed: пошаговая инструкция

  1. Определите источник данных: CSV, ClickHouse, TimescaleDB или кастомный API.
  2. Реализуйте класс, наследующий от DataFeed, и метод __iter__, возвращающий BarEvent.
  3. Подключите фид к EventBus через подписку на EventType.BAR.
  4. Запустите симуляцию, включив логирование событий для отладки.
  5. Проверьте, что бары приходят в строгом хронологическом порядке — добавьте проверку в тест.

Сравнение: Backtrader vs кастомный фреймворк

Характеристика Backtrader Кастомный фреймворк
Multi-asset симуляция Последовательная, медленная Параллельная, в 3-5 раз быстрее
Tick-данные Агрегация в свечи Обработка тик за тиком
Slippage модель Упрощённая, % от объёма Любая: AMM, лимитные ордера
Look-ahead защита Отсутствует Строгий детерминизм, тесты
Расширяемость Ограничена Модульная, любой источник данных

Если вы узнали свою ситуацию, закажите консультацию — мы поможем подобрать оптимальное решение.

Что входит в разработку?

Этап Результат Срок (дни)
Аналитика и спецификация Документ с требованиями, API контракты 3–5
Проектирование архитектуры Event Model, DataFeed, Broker — схемы 3–5
Разработка ядра Код EventBus, Portfolio, SimulatedBroker 10–15
Интеграция с данными Подключение CSV/ClickHouse, кастомные фиды 5–7
Тестирование Unit-тесты, интеграционные сценарии, регресс 7–10
Деплой и документация Репозиторий, README, examples, CI/CD 3–5

Опыт показывает: кастомный фреймворк окупается в течение года при интенсивном использовании, а скорость симуляции вырастает в 3–5 раз по сравнению с Backtrader на multi-asset портфелях.

Сроки и стоимость

Сроки разработки: от 2 до 12 недель в зависимости от сложности. Стоимость рассчитывается индивидуально после аудита стратегии — напишите нам, получите предварительную оценку за 2 дня.

Частые ошибки при самостоятельной разработке

  • Look-ahead bias — самая опасная ошибка, убивает достоверность тестов. Решается строгим детерминизмом и тестами.
  • Игнорирование slippage и commission — стратегия, показывающая 50% годовых в идеальных условиях, в реальности может уйти в минус.
  • Отсутствие модульного тестирования — ошибка в расчёте маржи может стоить миллионы. Мы требуем покрытия > 90%.
  • Плохая обработка event loop — deadlock или race condition в симуляции приводят к некорректным результатам. Наш Event Bus потокобезопасен и проверен годами.

Мы гарантируем, что фреймворк будет полностью соответствовать вашим требованиям — с документацией, тестами и поддержкой на этапе внедрения. Закажите разработку сегодня и получите консультацию по оптимизации стратегии.

Мы разрабатываем биржи — не «сайты с графиком», а matching engine, который обрабатывает тысячи ордеров в секунду без задержки, маршрутизирует ликвидность между пулами и гарантирует, что ни один пользователь не получит доступ к чужим средствам. Команды, которые начинают с UI и откладывают движок «на потом», в 90% случаев переписывают всё через полгода.

Какие проблемы решает правильная архитектура?

Order Book vs AMM: где ломается большинство проектов

Централизованные биржи (CEX) строятся вокруг order book + matching engine. Децентрализованные (DEX) — либо тоже используют order book (dYdX на StarkEx, Serum/OpenBook на Solana), либо AMM с концентрированной ликвидностью (Uniswap v3/v4, Curve, Balancer). Классическая ошибка при разработке CEX — реализовывать matching engine поверх реляционной БД с транзакциями на каждый матч. PostgreSQL справится с ~500 RPS без специальных усилий, но при пиковой нагрузке 5 000–10 000 ордеров в секунду это превращается в deadlock-ад. Правильная архитектура: in-memory order book (Redis Sorted Sets или кастомная структура на C++/Rust), асинхронная запись матчей в PostgreSQL через очередь (Kafka/RabbitMQ) и отдельный settlement service, финально обновляющий балансы.

Для DEX самая болезненная проблема — sandwich атаки и MEV. Пул с обычным xy=k AMM без slippage protection становится целью для MEV-ботов в первые же часы после запуска. Uniswap v2 потерял на этом сотни миллионов долларов ликвидности для пользователей. Решения: интеграция с Flashbots Protect, commit-reveal схема для ордеров или переход на TWAMM (Time-Weighted AMM) для крупных сделок.

Концентрированная ликвидность и impermanent loss

Uniswap v3 ввёл концентрированную ликвидность — LP выбирают ценовой диапазон, в котором предоставляют ликвидность. Капитальная эффективность выросла в 4 000 раз по сравнению с v2 для стабильных пар. Но реализовать этот механизм правильно — нетривиальная задача. Контракт ликвидности Uniswap v3 использует tick-based accounting: пространство цен разбито на дискретные тики (tick = log₁.0001(price)), каждый тик хранит накопленные fee growth и liquidity delta. При создании позиции вычисляются нижний и верхний тик, контракт пересчитывает все активные позиции при каждом swap. Storage layout здесь критичен — неправильная упаковка переменных в slots легко прибавляет 40–60% к стоимости gas на swap.

Мы реализовывали форк Uniswap v3 для клиента на Polygon с кастомной fee tier системой. Первоначальная версия тратила 180k gas на swap через 2 тика. После slot packing переменных в Tick.Info и инлайнинга нескольких internal вызовов — 112k gas. Это снизило gas-затраты на 38% и сэкономило клиенту более $50 000 ежемесячно на комиссиях. Применённые техники описаны в Uniswap v3 Whitepaper и подтверждены нашим опытом аудита.

Что такое matching engine и почему он критичен?

Production-ready matching engine строится по следующей схеме:

  • Order ingestion layer — WebSocket gateway (Go или Rust), принимает ордера, валидирует подпись, проверяет баланс через Redis, ставит в очередь. Latency на этом уровне должна быть <1ms.
  • Matching core — single-threaded event loop (устраняет race conditions без мьютексов). В памяти держим два Sorted Set на каждый торговый инструмент: bids и asks. FIFO matching для limit ордеров, immediate-or-cancel для маркет. Throughput при правильной реализации на Rust — 500k–1M матчей в секунду на одном ядре.
  • Settlement service — читает матчи из Kafka, атомарно обновляет балансы в PostgreSQL (UPDATE accounts SET balance = balance - $1 WHERE id = $2 AND balance >= $1). Optimistic locking через версионирование строк.
  • Withdrawal pipeline — отдельный сервис с cold/hot wallet архитектурой. Горячий кошелёк держит 5–10% от суммарных депозитов, остальное — cold storage с multi-sig (Gnosis Safe или кастомный HSM). Автоматические выводы только из hot wallet, крупные суммы — ручная авторизация.
Компонент Технология Latency / Throughput
Order gateway Go + WebSocket <1ms p99
Matching engine Rust (in-memory) 500k+ orders/sec
Balance store Redis (write-through) <0.5ms
Settlement DB PostgreSQL 14+ ~50k TPS с partitioning
Event streaming Apache Kafka 1M+ events/sec
Blockchain node Geth / Solana validator зависит от чейна

Как мы строим on-chain DEX: смарт-контракты и gas-оптимизация

Для DEX на EVM (Ethereum, Arbitrum, Optimism, Polygon) весь критический путь живёт в Solidity. Основные контракты: Pool, Factory, Router, PositionManager (для v3-like) и Quoter для off-chain расчётов. Типичные ошибки, которые мы видим в аудитах:

Reentrancy через callback. Uniswap v3 использует flash swap с callback (uniswapV3SwapCallback). Если в вашем роутере нет nonReentrant guard и вы не проверяете msg.sender == pool, контракт дренируется через вложенный вызов. Это не гипотетика — несколько форков v3 теряли средства именно так.

Oracle manipulation в AMM. Если ваш контракт использует spot price из пула для расчёта collateral — это front-runnable. Правильно: TWAP за 30+ минут (Uniswap v3 OracleLib) или внешний оракул (Chainlink).

Unbounded loops в liquidity range. Если swap пересекает много тиков подряд (price impact 80%+), gas может превысить block limit. Нужен MAX_TICKS_CROSSED с partial fill и возвратом остатка.

Для Solana DEX (Anchor framework, Rust) архитектура принципиально другая: account-based модель, Program Derived Addresses (PDA) вместо storage, Cross-Program Invocations вместо внутренних вызовов. Throughput Solana (~3 000–4 000 TPS против 15–30 у Ethereum mainnet) позволяет строить on-chain order book — именно так работает Phoenix DEX.

Liquidity bootstrapping и интеграция с агрегаторами

Запустить пул мало — нужно обеспечить ликвидность на старте. Практические механизмы:

  • Liquidity Bootstrapping Pool (LBP) — начальная цена высокая, весовые коэффициенты активов динамически смещаются, создавая давление продаж и равномерное распределение токена. Реализован в Balancer v2.
  • Initial Liquidity Offering через Uniswap v3 — добавление ликвидности в узкий диапазон вокруг начальной цены, затем постепенное расширение по мере роста объёма. Требует active liquidity management или интеграции с Arrakis/Gamma.
  • Интеграция с 1inch, Paraswap, Li.Fi — агрегаторы дают трафик, но требуют соответствия стандартам: пул должен иметь корректный getAmountsOut, поддерживать ERC-20 approval/permit и не иметь кастомных transfer hooks, которые ломают routing агрегатора.

Процесс разработки

Аналитика и проектирование начинаются с выбора архитектурной модели: CEX с кастодиальным хранением, non-custodial DEX или гибрид (off-chain order book + on-chain settlement, как dYdX v3). Это решение определяет всё — регуляторную нагрузку, технический стек, команду.

Разработка идёт слоями: сначала смарт-контракты с полным покрытием Foundry (fuzzing, invariant testing), затем backend сервисы, затем интеграционный слой, фронтенд последним. Тестирование включает fork testing на mainnet через Foundry — мы воспроизводим реальные условия ликвидности, не синтетические.

Аудит обязателен перед деплоем на mainnet. Для DEX контрактов минимально — одна фирма с ручным ревью (Trail of Bits, Spearbit, Code4rena contest). Для CEX custody — аудит процессов хранения ключей. Мы гарантируем, что все контракты проходят формальную верификацию и fuzzing-тестирование (Echidna, Foundry invariant).

Что входит в работу (deliverables)

По завершении проекта вы получаете:

  • Исходный код смарт-контрактов и backend-сервисов под вашу лицензию
  • Полную техническую документацию (архитектурные схемы, API-спецификации, инструкции по деплою)
  • Доступы к репозиторию и CI/CD pipeline
  • Обучение вашей команды работе с кодом (2–3 сессии)
  • Гарантию на найденные в процессе эксплуатации баги до 6 месяцев
  • Сертификат прохождения стороннего аудита безопасности

Ориентиры по срокам

  • DEX (AMM, xy=k) — от 3 до 5 месяцев: контракты + backend + UI
  • DEX с концентрированной ликвидностью (v3-like) — от 6 до 10 месяцев
  • CEX (matching engine + custody + торговый UI) — от 8 до 14 месяцев
  • Интеграция с существующим протоколом — от 4 до 8 недель

Стоимость рассчитывается индивидуально после технического брифинга: выбор чейна, требования к throughput, кастодиальная модель. Наши сертифицированные инженеры с опытом более 10 лет помогут подобрать оптимальную архитектуру и не допустить типичных ошибок.

Типичные грабли при запуске

  • Забывают про price oracle в AMM. Spot price манипулируется flash loan’ом за одну транзакцию. Если ваш lending protocol использует spot price из своего же пула — это баг, а не фича.
  • Горячий кошелёк без лимитов. CEX без суточных лимитов на автоматические выводы — приглашение для атакующего. Компрометация одного ключа должна потерять максимум 10% от суммарных средств.
  • Отсутствие circuit breaker. Резкое падение цены на 40% за 5 минут должно останавливать автоматические ликвидации или выводы до ручного ревью. Без этого cascading liquidation spiral уничтожает весь TVL.
  • Неправильный decimal handling. USDC использует 6 decimals, WBTC — 8, большинство токенов — 18. Смешивание без нормализации даёт либо потерю точности, либо overflow. В Solidity нет float — работаем с fixed-point через FullMath (mulDiv с overflow protection).

Хотите избежать этих проблем? Свяжитесь с нами для консультации — мы подберём архитектуру под ваш проект и назовём точные сроки. Закажите разработку биржи с гарантией качества и последующей поддержкой.