Разработка алгоритма статистического арбитража для криптовалют
Вы нашли две монеты, которые, кажется, ходят вместе — BTC и ETH. Но когда одна уходит вверх, а другая запаздывает, вы хотите на этом заработать. Статистический арбитраж (stat arb) именно про это: временные отклонения от исторически устойчивых соотношений. В отличие от чистого арбитража (безрисковой прибыли), stat arb несёт риск — соотношение может временно расшириться перед тем как вернётся. Именно эта рискованность и создаёт возможность для прибыли. Наш опыт 5+ лет и десятки реализованных проектов позволяют превратить эту идею в работающий алгоритм.
Почему коинтеграция важнее корреляции?
Корреляция показывает, как изменяются цены вместе, но не гарантирует возврата к среднему. Коинтеграция — статистическая связь, при которой линейная комбинация двух рядов стационарна. Проще говоря: активы могут расходиться, но в долгосрочной перспективе возвращаются друг к другу. Именно это свойство нужно для stat arb.
Тест Engle-Granger для проверки коинтеграции:
from statsmodels.tsa.stattools import coint
def find_cointegrated_pairs(prices_dict, p_threshold=0.05):
symbols = list(prices_dict.keys())
pairs = []
for i, sym1 in enumerate(symbols):
for sym2 in symbols[i+1:]:
score, p_value, _ = coint(
prices_dict[sym1],
prices_dict[sym2]
)
if p_value < p_threshold:
pairs.append((sym1, sym2, p_value))
return sorted(pairs, key=lambda x: x[2])
Хорошие кандидаты в крипте: BTC/ETH, BTC-SPOT/BTC-PERP, аналогичные Layer-1 токены, ETH/LDO (staking derivative).
Модель: Spread и Z-score
Для коинтегрированной пары (X, Y) находим hedge ratio β через OLS:
from sklearn.linear_model import LinearRegression
def calculate_hedge_ratio(price_x, price_y, window=60):
# Rolling OLS для динамического hedge ratio
hedge_ratios = []
for i in range(window, len(price_x)):
x = price_x[i-window:i].values.reshape(-1, 1)
y = price_y[i-window:i].values
model = LinearRegression().fit(x, y)
hedge_ratios.append(model.coef_[0])
return hedge_ratios
Spread = Y - β × X
Z-score нормализует спред:
Z-score = (Spread - mean(Spread)) / std(Spread)
Торговые сигналы:
- Z-score > +2: спред аномально широкий → продаём Y, покупаем X (лонг спред)
- Z-score < -2: спред аномально узкий → покупаем Y, продаём X (шорт спред)
- |Z-score| < 0.5: закрываем позицию (возврат к среднему)
Как выбрать между статическим и динамическим хедж-ратио?
Статическое β через OLS просто, но устаревает. Kalman Filter адаптирует hedge ratio в реальном времени, давая в 2-3 раза меньше ложных сигналов. Сравнение методов:
| Параметр |
Rolling OLS |
Kalman Filter |
| Адаптивность |
низкая |
высокая |
| Чувствительность к выбросам |
высокая |
низкая |
| Количество сигналов |
среднее |
высокое |
Пример реализации Kalman Filter:
from pykalman import KalmanFilter
kf = KalmanFilter(
transition_matrices=[1],
observation_matrices=price_x.values.reshape(-1, 1, 1),
initial_state_mean=0,
initial_state_covariance=1,
observation_covariance=1,
transition_covariance=0.05
)
state_means, state_covs = kf.filter(price_y.values)
hedge_ratio_dynamic = state_means.flatten()
Подробнее о фильтре Калмана
Фильтр Калмана — рекурсивный алгоритм, который оценивает состояние системы по зашумленным измерениям. В нашем случае он обновляет hedge ratio на каждом новом тике, взвешивая предыдущую оценку и новое наблюдение. Это особенно полезно для пар, у которых соотношение меняется во времени (например, из-за хардфорков или изменений ликвидности).
Управление рисками спреда
Stop-loss по Z-score: если Z-score расширился до 3+ вместо сужения — это может означать структурный сдвиг. Выходим из позиции.
Half-life of mean reversion: оцениваем через модель AR(1):
from statsmodels.regression.linear_model import OLS
def calculate_half_life(spread):
spread_lag = spread.shift(1).dropna()
spread_diff = spread.diff().dropna()
result = OLS(spread_diff, spread_lag).fit()
half_life = -np.log(2) / result.params[0]
return half_life
Half-life < 5 дней — быстрый mean reversion, подходит для краткосрочной торговли. > 30 дней — медленный, требует более длинных позиций.
Lookback window: период для расчёта mean и std спреда. Оптимизируется через walk-forward.
Мультипарный stat arb: диверсификация и PCA
Вместо торговли парами — портфельный подход с несколькими коинтегрированными парами:
- Диверсификация снижает риск конкретной пары
- Корреляция между парами должна быть минимальной
- PCA для поиска общих факторов
Eigenvector portfolio: из матрицы ковариаций N активов через PCA извлекаем стационарные собственные векторы. Торгуем отклонение от стационарного состояния.
Execution и transaction costs
Stat arb прибылен только если доходность превышает транзакционные издержки. Экономия на slippage может достигать 30% при оптимизации исполнения.
| Статья затрат |
Типичный диапазон |
| Биржевые fees (taker) |
0.04–0.07% |
| Maker fees |
0–0.02% |
| Funding rate (perpetual) |
зависит от рынка |
| Slippage |
0.01–0.1% в зависимости от ликвидности |
| Borrowing cost (short) |
0.01–0.03% в день |
Минимальный Z-score для входа подбирается с учётом costs: если entry при Z=1.5 не покрывает costs с учётом вероятности возврата — используем Z=2.0.
Backtesting
Walk-forward validation: обучение на 6-12 месяцах, тестирование на следующих 1-2 месяцах, повтор со сдвигом. Ключевые метрики: Sharpe Ratio > 1.5, max drawdown < 15%, средняя продолжительность позиции (half-life совпадает с реальным?).
Overfitting check: параметры, оптимизированные на одном периоде, должны работать на другом.
Что входит в работу
- Исследование и выбор коинтегрированных пар
- Разработка алгоритма с Kalman filter или OLS hedge ratio
- Бэктестинг на исторических данных с walk-forward
- Оптимизация параметров и торговых сигналов
- Интеграция с биржей через CCXT
- Мониторинг и поддержка после запуска
Гарантируем качество кода и прозрачность результатов. Мы используем Python (pandas, numpy, statsmodels, sklearn, pykalman), PostgreSQL для хранения данных, Celery для расчётов в реальном времени, Grafana для визуализации. Разворачиваем на AWS/GCP с низкой задержкой.
Стоимость разработки рассчитывается индивидуально, но окупается обычно за несколько месяцев. Свяжитесь с нами, чтобы обсудить ваш проект и получить консультацию.
Источник: Engle & Granger (1987) — Co-Integration and Error Correction: Representation, Estimation, and Testing.
Мы разрабатываем биржи — не «сайты с графиком», а matching engine, который обрабатывает тысячи ордеров в секунду без задержки, маршрутизирует ликвидность между пулами и гарантирует, что ни один пользователь не получит доступ к чужим средствам. Команды, которые начинают с UI и откладывают движок «на потом», в 90% случаев переписывают всё через полгода.
Какие проблемы решает правильная архитектура?
Order Book vs AMM: где ломается большинство проектов
Централизованные биржи (CEX) строятся вокруг order book + matching engine. Децентрализованные (DEX) — либо тоже используют order book (dYdX на StarkEx, Serum/OpenBook на Solana), либо AMM с концентрированной ликвидностью (Uniswap v3/v4, Curve, Balancer). Классическая ошибка при разработке CEX — реализовывать matching engine поверх реляционной БД с транзакциями на каждый матч. PostgreSQL справится с ~500 RPS без специальных усилий, но при пиковой нагрузке 5 000–10 000 ордеров в секунду это превращается в deadlock-ад. Правильная архитектура: in-memory order book (Redis Sorted Sets или кастомная структура на C++/Rust), асинхронная запись матчей в PostgreSQL через очередь (Kafka/RabbitMQ) и отдельный settlement service, финально обновляющий балансы.
Для DEX самая болезненная проблема — sandwich атаки и MEV. Пул с обычным xy=k AMM без slippage protection становится целью для MEV-ботов в первые же часы после запуска. Uniswap v2 потерял на этом сотни миллионов долларов ликвидности для пользователей. Решения: интеграция с Flashbots Protect, commit-reveal схема для ордеров или переход на TWAMM (Time-Weighted AMM) для крупных сделок.
Концентрированная ликвидность и impermanent loss
Uniswap v3 ввёл концентрированную ликвидность — LP выбирают ценовой диапазон, в котором предоставляют ликвидность. Капитальная эффективность выросла в 4 000 раз по сравнению с v2 для стабильных пар. Но реализовать этот механизм правильно — нетривиальная задача. Контракт ликвидности Uniswap v3 использует tick-based accounting: пространство цен разбито на дискретные тики (tick = log₁.0001(price)), каждый тик хранит накопленные fee growth и liquidity delta. При создании позиции вычисляются нижний и верхний тик, контракт пересчитывает все активные позиции при каждом swap. Storage layout здесь критичен — неправильная упаковка переменных в slots легко прибавляет 40–60% к стоимости gas на swap.
Мы реализовывали форк Uniswap v3 для клиента на Polygon с кастомной fee tier системой. Первоначальная версия тратила 180k gas на swap через 2 тика. После slot packing переменных в Tick.Info и инлайнинга нескольких internal вызовов — 112k gas. Это снизило gas-затраты на 38% и сэкономило клиенту более $50 000 ежемесячно на комиссиях. Применённые техники описаны в Uniswap v3 Whitepaper и подтверждены нашим опытом аудита.
Что такое matching engine и почему он критичен?
Production-ready matching engine строится по следующей схеме:
-
Order ingestion layer — WebSocket gateway (Go или Rust), принимает ордера, валидирует подпись, проверяет баланс через Redis, ставит в очередь. Latency на этом уровне должна быть <1ms.
-
Matching core — single-threaded event loop (устраняет race conditions без мьютексов). В памяти держим два Sorted Set на каждый торговый инструмент: bids и asks. FIFO matching для limit ордеров, immediate-or-cancel для маркет. Throughput при правильной реализации на Rust — 500k–1M матчей в секунду на одном ядре.
-
Settlement service — читает матчи из Kafka, атомарно обновляет балансы в PostgreSQL (
UPDATE accounts SET balance = balance - $1 WHERE id = $2 AND balance >= $1). Optimistic locking через версионирование строк.
-
Withdrawal pipeline — отдельный сервис с cold/hot wallet архитектурой. Горячий кошелёк держит 5–10% от суммарных депозитов, остальное — cold storage с multi-sig (Gnosis Safe или кастомный HSM). Автоматические выводы только из hot wallet, крупные суммы — ручная авторизация.
| Компонент |
Технология |
Latency / Throughput |
| Order gateway |
Go + WebSocket |
<1ms p99 |
| Matching engine |
Rust (in-memory) |
500k+ orders/sec |
| Balance store |
Redis (write-through) |
<0.5ms |
| Settlement DB |
PostgreSQL 14+ |
~50k TPS с partitioning |
| Event streaming |
Apache Kafka |
1M+ events/sec |
| Blockchain node |
Geth / Solana validator |
зависит от чейна |
Как мы строим on-chain DEX: смарт-контракты и gas-оптимизация
Для DEX на EVM (Ethereum, Arbitrum, Optimism, Polygon) весь критический путь живёт в Solidity. Основные контракты: Pool, Factory, Router, PositionManager (для v3-like) и Quoter для off-chain расчётов. Типичные ошибки, которые мы видим в аудитах:
Reentrancy через callback. Uniswap v3 использует flash swap с callback (uniswapV3SwapCallback). Если в вашем роутере нет nonReentrant guard и вы не проверяете msg.sender == pool, контракт дренируется через вложенный вызов. Это не гипотетика — несколько форков v3 теряли средства именно так.
Oracle manipulation в AMM. Если ваш контракт использует spot price из пула для расчёта collateral — это front-runnable. Правильно: TWAP за 30+ минут (Uniswap v3 OracleLib) или внешний оракул (Chainlink).
Unbounded loops в liquidity range. Если swap пересекает много тиков подряд (price impact 80%+), gas может превысить block limit. Нужен MAX_TICKS_CROSSED с partial fill и возвратом остатка.
Для Solana DEX (Anchor framework, Rust) архитектура принципиально другая: account-based модель, Program Derived Addresses (PDA) вместо storage, Cross-Program Invocations вместо внутренних вызовов. Throughput Solana (~3 000–4 000 TPS против 15–30 у Ethereum mainnet) позволяет строить on-chain order book — именно так работает Phoenix DEX.
Liquidity bootstrapping и интеграция с агрегаторами
Запустить пул мало — нужно обеспечить ликвидность на старте. Практические механизмы:
-
Liquidity Bootstrapping Pool (LBP) — начальная цена высокая, весовые коэффициенты активов динамически смещаются, создавая давление продаж и равномерное распределение токена. Реализован в Balancer v2.
-
Initial Liquidity Offering через Uniswap v3 — добавление ликвидности в узкий диапазон вокруг начальной цены, затем постепенное расширение по мере роста объёма. Требует active liquidity management или интеграции с Arrakis/Gamma.
-
Интеграция с 1inch, Paraswap, Li.Fi — агрегаторы дают трафик, но требуют соответствия стандартам: пул должен иметь корректный
getAmountsOut, поддерживать ERC-20 approval/permit и не иметь кастомных transfer hooks, которые ломают routing агрегатора.
Процесс разработки
Аналитика и проектирование начинаются с выбора архитектурной модели: CEX с кастодиальным хранением, non-custodial DEX или гибрид (off-chain order book + on-chain settlement, как dYdX v3). Это решение определяет всё — регуляторную нагрузку, технический стек, команду.
Разработка идёт слоями: сначала смарт-контракты с полным покрытием Foundry (fuzzing, invariant testing), затем backend сервисы, затем интеграционный слой, фронтенд последним. Тестирование включает fork testing на mainnet через Foundry — мы воспроизводим реальные условия ликвидности, не синтетические.
Аудит обязателен перед деплоем на mainnet. Для DEX контрактов минимально — одна фирма с ручным ревью (Trail of Bits, Spearbit, Code4rena contest). Для CEX custody — аудит процессов хранения ключей. Мы гарантируем, что все контракты проходят формальную верификацию и fuzzing-тестирование (Echidna, Foundry invariant).
Что входит в работу (deliverables)
По завершении проекта вы получаете:
- Исходный код смарт-контрактов и backend-сервисов под вашу лицензию
- Полную техническую документацию (архитектурные схемы, API-спецификации, инструкции по деплою)
- Доступы к репозиторию и CI/CD pipeline
- Обучение вашей команды работе с кодом (2–3 сессии)
- Гарантию на найденные в процессе эксплуатации баги до 6 месяцев
- Сертификат прохождения стороннего аудита безопасности
Ориентиры по срокам
- DEX (AMM, xy=k) — от 3 до 5 месяцев: контракты + backend + UI
- DEX с концентрированной ликвидностью (v3-like) — от 6 до 10 месяцев
- CEX (matching engine + custody + торговый UI) — от 8 до 14 месяцев
- Интеграция с существующим протоколом — от 4 до 8 недель
Стоимость рассчитывается индивидуально после технического брифинга: выбор чейна, требования к throughput, кастодиальная модель. Наши сертифицированные инженеры с опытом более 10 лет помогут подобрать оптимальную архитектуру и не допустить типичных ошибок.
Типичные грабли при запуске
-
Забывают про price oracle в AMM. Spot price манипулируется flash loan’ом за одну транзакцию. Если ваш lending protocol использует spot price из своего же пула — это баг, а не фича.
-
Горячий кошелёк без лимитов. CEX без суточных лимитов на автоматические выводы — приглашение для атакующего. Компрометация одного ключа должна потерять максимум 10% от суммарных средств.
-
Отсутствие circuit breaker. Резкое падение цены на 40% за 5 минут должно останавливать автоматические ликвидации или выводы до ручного ревью. Без этого cascading liquidation spiral уничтожает весь TVL.
-
Неправильный decimal handling. USDC использует 6 decimals, WBTC — 8, большинство токенов — 18. Смешивание без нормализации даёт либо потерю точности, либо overflow. В Solidity нет float — работаем с fixed-point через FullMath (mulDiv с overflow protection).
Хотите избежать этих проблем? Свяжитесь с нами для консультации — мы подберём архитектуру под ваш проект и назовём точные сроки. Закажите разработку биржи с гарантией качества и последующей поддержкой.