Інтеграція з Avail Data Availability: DA-шар для rollup

Проєктуємо та розробляємо блокчейн-рішення повного циклу: від архітектури смарт-контрактів до запуску DeFi-протоколів, NFT-маркетплейсів та криптобірж. Аудит безпеки, токеноміка, інтеграція з наявною інфраструктурою.
Показано 1 з 1Усі 1305 послуг
Інтеграція з Avail Data Availability: DA-шар для rollup
Складний
~3-5 днів
Часті запитання

Напрямки блокчейн-розробки

Етапи блокчейн-розробки

Останні роботи

  • image_website-b2b-advance_0.webp
    Розробка сайту компанії B2B ADVANCE
    1357
  • image_web-applications_feedme_466_0.webp
    Розробка веб-додатків для компанії FEEDME
    1249
  • image_websites_belfingroup_462_0.webp
    Розробка веб-сайту для компанії БЕЛФІНГРУП
    954
  • image_ecommerce_furnoro_435_0.webp
    Розробка інтернет магазину для компанії FURNORO
    1187
  • image_logo-advance_0.webp
    Розробка логотипу компанії B2B Advance
    645
  • image_crm_enviok_479_0.webp
    Розробка веб-додатків для компанії Enviok
    926

Data Availability — одна з найменш зрозумілих, але критично важливих проблем для будь-якого rollup. Блок-продюсер може опублікувати заголовок, але приховати дані транзакцій. Повні вузли не побачать дані, легкі клієнти не зможуть верифікувати блок. Ми пропонуємо інтеграцію з Avail — спеціалізованим модульним DA-шаром, який гарантує доступність даних за допомогою DAS. Наші інженери реалізували DA-підключення для кількох rollup-проєктів: валідіумів та суверенних чейнів. Понад 20 успішних інтеграцій DA-шарів. Отримайте консультацію щодо вашого кейсу — оцінимо проєкт під ключ.

Чим Avail відрізняється від Ethereum blobs

Ethereum використовувався як DA layer через calldata (до EIP-4844) і тепер через blob transactions. Але у Ethereum як DA layer є обмеження:

  • Вартість: навіть після EIP-4844, Ethereum DA дорогий порівняно зі спеціалізованими DA-рішеннями. Target 3 blobs per block (~375 KB), max 6 blobs — недостатньо для масштабного зростання rollup.
  • Відсутність DAS: Ethereum поки не реалізував повноцінний Data Availability Sampling. Без DAS легкі вузли не можуть самостійно верифікувати доступність даних.
Параметр Ethereum Blobs (EIP-4844) Avail
Архітектура DA + Execution DA-only
DAS Ні (в roadmap) Так, реалізовано
Throughput ~375 KB/block target Значно вище
Вартість Вище Нижче
Finality ~12 хв (L1) ~20 сек
KZG commitments Так Так (Kate commitments)

Економія на DA-вартості досягає 5–10 разів порівняно з Ethereum blobs. Erasure Coding в Avail — ключовий механізм. Дані розширюються 2× через Reed-Solomon кодування, розбиваються на комірки, формується 2D-матриця. KZG polynomial commitments для кожного рядка та колонки. Легкий вузол може з високою ймовірністю верифікувати доступність, завантаживши лише випадково вибрані комірки (~30–50 з тисяч). Це і є DAS.

Як працює DAS в Avail?

DAS (Data Availability Sampling) — це процес, при якому легкий вузол не завантажує весь блок, а запитує випадкові комірки. Якщо хоча б одна комірка недоступна, вузол виявляє атаку приховування даних. Ймовірність пропустити приховані 50% даних при 30 запитах — менше 10⁻⁹. Під капотом лежить решітка Reed-Solomon та KZG commitment для кожного рядка. Додатково використовується 2D-кодування: дані розкладаються в матрицю, кожен рядок і колонку кодують окремо. Це забезпечує стійкість до помилок та економить ресурси легких вузлів.

Архітектура інтеграції

Випадок 1: Rollup використовує Avail як DA

Стандартна схема для суверенного rollup або валідіуму:

Rollup Sequencer → batch transactions → encode → submit to Avail
                                                        ↓
                                               Avail block включає дані
                                                        ↓
                                               Avail light clients верифікують DAS
                                                        ↓
                                               Rollup settlement layer отримує DA attestation

Avail DA submission через офіційний SDK:

import { initialize } from 'avail-js-sdk';

async function submitBatchToAvail(batchData: Uint8Array): Promise<SubmitResult> {
  const api = await initialize(AVAIL_RPC_URL);
  const account = new Keyring({ type: 'sr25519' });
  const keyPair = account.addFromMnemonic(AVAIL_MNEMONIC);

  // app_id ідентифікує ваш rollup/application
  // дані індексуються по app_id для ефективного retrieval
  const result = await api.tx.dataAvailability
    .submitData(batchData)
    .signAndSend(keyPair, { app_id: YOUR_APP_ID });

  return {
    blockHash: result.blockHash,
    txHash: result.txHash,
    dataRoot: await getBlockDataRoot(api, result.blockHash)
  };
}

App ID — критичний концепт в Avail. Кожен rollup або application реєструє унікальний App ID. Дані фільтруються по App ID при retrieval. Це дозволяє легкому вузлу вашого rollup робити DAS лише за своїми даними, не завантажуючи весь блок.

Випадок 2: Validium з Ethereum settlement

Validium — це ZK rollup, де дані зберігаються off-chain (не на Ethereum). Замість Ethereum calldata використовується Avail. Settlement (proof verification) залишається на Ethereum.

User transactions → Prover (zkEVM/zkVM) → ZK proof
                                              ↓
                         Avail ← batch data  Ethereum ← ZK proof + data root
                              ↓                              ↓
                         DAS verification    State transition verified

Для Ethereum settlement контракт потрібно верифікувати, що дані дійсно в Avail. Avail надає Avail Bridge — набір смарт-контрактів на Ethereum для on-chain верифікації Avail attestations:

// Спрощено: верифікація DA attestation на Ethereum
interface IAvailBridge {
    struct MerkleProofInput {
        bytes32[] dataRootProof;
        bytes32[] leafProof;
        bytes32 rangeHash;
        uint256 dataRootIndex;
        bytes32 blobRoot;
        bytes32 bridgeRoot;
        bytes32 leaf;
        uint256 leafIndex;
    }

    function verifyBlobLeaf(MerkleProofInput calldata input) external view returns (bool);
}

// В settlement контракті rollup:
function finalizeBlock(
    bytes32 stateRoot,
    bytes calldata zkProof,
    IAvailBridge.MerkleProofInput calldata daProof
) external {
    // 1. Верифікуємо що дані блоку в Avail
    require(availBridge.verifyBlobLeaf(daProof), "DA not available");

    // 2. Верифікуємо ZK proof state transition
    require(verifier.verifyProof(zkProof, stateRoot), "Invalid proof");

    // 3. Оновлюємо state root
    currentStateRoot = stateRoot;
    emit BlockFinalized(stateRoot);
}

Випадок 3: Sovereign Rollup

Суверенний rollup використовує Avail для DA та ordering, але settlement та fork choice — власні. Немає залежності від Ethereum або іншого settlement layer. Rollup легкі вузли підписуються на Avail DA:

// Приклад: Avail light client для sovereign rollup (Rust)
use avail_light::LightClient;

async fn sync_rollup_blocks(app_id: u32) -> Result<()> {
    let light_client = LightClient::new(AVAIL_BOOTSTRAP_NODES).await?;

    // DAS верифікація: клієнт сам верифікує доступність даних
    // завантажуючи лише випадкові комірки, не весь блок
    light_client.subscribe_app_data(app_id, |block_data| {
        // Декодуємо rollup транзакції з Avail блоку
        let txs = decode_rollup_transactions(&block_data)?;

        // Застосовуємо до rollup state machine
        rollup_state_machine.apply_transactions(txs)?;

        Ok(())
    }).await?;

    Ok(())
}

Avail Nexus та Fusion

Avail розвиває екосистему за межі base DA layer:

Avail Nexus — proof aggregation layer. Збирає ZK proofs від різних rollup, агрегує їх через recursive proofs (Plonky2/SuperNova), відправляє один агрегований proof на Ethereum. Знижує вартість L1 settlement для кожного окремого rollup.

Avail Fusion — механізм restaking. ETH та інші активи можуть забезпечувати економічну безпеку Avail через restaking. Мета — успадкувати security від більш капіталізованих активів.

Для інтеграції: якщо будуєте rollup зараз — Nexus цікавий для зниження settlement costs, але знаходиться на ранній стадії.

Практичні аспекти інтеграції

Data Retrieval

Відправити дані в Avail — половина завдання. Потрібно вміти їх отримувати:

// Отримання даних по app_id та block range
async function retrieveRollupData(
  api: ApiPromise,
  appId: number,
  fromBlock: number,
  toBlock: number
): Promise<AppData[]> {
  const results: AppData[] = [];

  for (let blockNum = fromBlock; blockNum <= toBlock; blockNum++) {
    const blockHash = await api.rpc.chain.getBlockHash(blockNum);
    const block = await api.rpc.chain.getBlock(blockHash);

    // Фільтрація extrinsics по app_id
    const appExtrinsics = block.block.extrinsics.filter(ext => {
      const appId = extractAppId(ext);
      return appId === appId;
    });

    if (appExtrinsics.length > 0) {
      results.push({
        blockNumber: blockNum,
        blockHash: blockHash.toString(),
        data: appExtrinsics.map(ext => ext.method.args[0] as Bytes)
      });
    }
  }

  return results;
}

Продуктивність та вартість

Block submission latency — Avail блоки ~20 секунд. Це acceptable для більшості rollup use cases, але якщо rollup хоче sub-second UX, потрібна soft confirmation від sequencer до DA finality.

Batch size optimization — Avail ліміт на extrinsic size. Потрібно батчити rollup транзакції оптимально: занадто маленькі батчі → висока вартість per transaction, занадто великі → затримка.

Вартість в AVAIL токенах — потрібен механізм оплати. Опції: rollup сам тримає AVAIL та платить, користувачі rollup платять в native token який конвертується, або fee abstraction через газ-спонсорство.

Моніторинг DA

// Верифікація що дані дійсно доступні після submission
async function verifyDataAvailability(
  blockHash: string,
  appId: number
): Promise<boolean> {
  // Запитуємо confidence від Avail light client network
  const confidence = await getDAConfidence(blockHash, appId);

  // Confidence > 99.99% означає що дані доступні з високою ймовірністю
  // (математично: зловмисник не може приховати дані якщо DAS пройшов)
  return confidence > 99.99;
}

Чому варто обрати Avail для DA?

Підходить:

  • Будуєте валідіум: хочете Ethereum-level security для proof verification, але дешевше зберігати дані off-chain.
  • Суверенний rollup без залежності від Ethereum.
  • Потрібна повна реалізація DAS (Ethereum поки не має).
  • Високий throughput даних, де Ethereum blobs будуть вузьким місцем.

Не підходить:

  • Невеликий rollup з низьким throughput — overhead інтеграції не виправданий, EIP-4844 blobs достатньо.
  • Потрібна Ethereum-native security для даних (Ethereum AS DA, не лише settlement).
  • Команда незнайома з Substrate-based екосистемою (Avail built on Substrate).

Етапи інтеграції

Фаза Зміст Термін
Protocol design Вибір DA scheme (validium/sovereign), реєстрація App ID 1–2 тиж
SDK integration Avail submission/retrieval в sequencer 2–3 тиж
Settlement contracts Інтеграція Avail Bridge (для Ethereum settlement) 2–3 тиж
Light client DA verification для rollup nodes 2–4 тиж
Testing Тестнет повний цикл 2–3 тиж
Production Mainnet deployment + моніторинг 1–2 тиж

Що входить в інтеграцію

  • Аналіз архітектури rollup та вибір схеми DA.
  • Налаштування Avail SDK для submission та retrieval.
  • Інтеграція Avail Bridge (якщо потрібен settlement на Ethereum).
  • Розробка та деплой легкого клієнта для DAS.
  • Тестування в тестнеті (Goldberg testnet) та міграція в мейннет.
  • Документація та навчання команди.
  • Моніторинг продуктивності DA після запуску.

Оцініть ваш проєкт: зв'яжіться з нами, щоб обговорити деталі. Понад 5 років досвіду в блокчейн-розробці та понад 20 інтеграцій DA-шарів — ми допоможемо уникнути типових помилок та прискорити вихід на мейннет. Отримайте консультацію щодо вашого кейсу.

Розгортання блокчейн-інфраструктури: як уникнути простоїв?

Subgraph впав о 3:47 ночі. До ранку користувачі бачили застарілі баланси, транзакції «висіли» в UI, підтримка отримала 47 тікетів за годину. Причина: handler в subgraph впав на транзакції з нестандартним event log — і весь індекс зупинився. Ми стикалися з такими ситуаціями десятки разів. Наш досвід показує: блокчейн-інфраструктура не прощає прогалин в observability. Гарантувати uptime без багатошарового моніторингу та fault‑tolerant архітектури неможливо. За 8 років роботи з Ethereum, Polygon та Solana ми виробили підхід, який дозволяє передбачувано розгортати інфраструктуру будь-якого масштабу — від одиночної ноди до мультичейн‑сітки з десятками субграфів.

Архітектура RPC-шару

Кожна взаємодія dApp з блокчейном йде через RPC — JSON‑RPC API, яку надає нода. Три варіанти:

Managed providers — Alchemy, QuickNode, Infura, Ankr. Мінімальні операційні витрати, SLA, вбудований моніторинг. Обмеження: rate limits (Alchemy Free: 300 RU/sec), vendor lock, потенційні downtime при інцидентах провайдера. Для більшості проектів — правильний вибір на старті.

Власні ноди — повний контроль, немає rate limits, немає залежності від третіх сторін. Вартість: архівна нода Ethereum займає 2.5–3TB SSD, потребує потужний сервер та DevOps‑підтримку. Sync з нуля на Ethereum через Geth/Nethermind — 3–7 днів. Виправдано при високому навантаженні або вимогах до latency.

Гібрид — власна нода як primary, managed provider як fallback. Стандарт для протоколів з високим TVL. Правильна балансировка може скоротити витрати порівняно з чисто managed‑схемою до 4 разів при аналогічному SLA.

Провайдер Сильна сторона Обмеження
Alchemy Supernode, Enhanced APIs, webhooks Дорогий на high-volume
QuickNode Низька latency, multi-chain Дорожче Alchemy на базовому плані
Infura Історична надійність Rate limits на безкоштовному, один великий інцидент зупинив пів DeFi
Ankr Дешевий, 40+ чейнів Менш стабільний

Як налаштувати RPC-шар без єдиної точки відмови?

Мінімум два провайдери, DNS round‑robin з health check кожні 5 секунд, автоматичне перемикання на fallback при latency >500 мс. На практиці це дає 99.99% доступності при будь-якому збої провайдера. Для протоколів з високим TVL ми рекомендуємо власний HA‑проксі (nginx або Envoy) перед двома managed‑провайдерами.

Чому гібридна RPC-схема вигідніша за чисто managed?

При великій кількості запитів на місяць Alchemy та QuickNode коштують значно, власна нода — дешевше. Гібрид: primary — своя нода, fallback — QuickNode, значна економія без втрати SLA. Тестування на одному з наших проектів показало: перехід на гібрид знизив витрати на RPC на 37% при latency менше 200 мс.

Клієнти нод Ethereum

Execution clients: Geth (найбільш використовуваний), Nethermind (C#, швидка sync), Besu (Java, enterprise), Erigon (найшвидший sync, архівний режим ефективний по диску — ~2TB замість 3TB).

Consensus clients (post‑Merge): Lighthouse (Rust), Prysm (Go), Teku (Java), Nimbus (Nim). Кожна нода після The Merge потребує пари execution + consensus client.

Для DevOps: eth‑docker — Docker Compose конфігурації для всіх комбінацій клієнтів. Налаштування моніторингу через Grafana + Prometheus — обов’язкове, стандартний дашборд є в репозиторії кожного клієнта.

The Graph: індексація подій

The Graph Protocol — decentralized indexing. Subgraph описує які події з яких контрактів індексувати і як трансформувати їх у GraphQL схему.

Структура subgraph:

  • subgraph.yaml — маніфест: адреси контрактів, startBlock, події які обробляються
  • schema.graphql — GraphQL схема entities
  • src/mapping.ts — AssemblyScript обробники подій
dataSources:
  - kind: ethereum
    name: UniswapV3Pool
    network: mainnet
    source:
      address: "0x88e6A0c2dDD26FEEb64F039a2c41296FcB3f5640"
      abi: UniswapV3Pool
      startBlock: 12370624
    mapping:
      eventHandlers:
        - event: Swap(indexed address,indexed address,int256,int256,uint160,uint128,int24)
          handler: handleSwap

AssemblyScript handlers — не TypeScript. Немає nullable types, немає closures, немає багатьох стандартних API. Помилка в handler зупиняє індексацію subgraph-а на тій транзакції. Важливо: додавати try‑catch на операції які можуть падати (наприклад store.get() для entity яка може не існувати). Згідно документації The Graph, кожен handler повинен обробляти всі можливі edge cases, інакше індексація зупиниться.

Уникнення зупинки індексації субграфа

Лог файли Graph Node моніторяться в реальному часі, при hasIndexingErrors = true спрацьовує алерт і автоматичний рестарт ноди (через systemd або Kubernetes). Типовий downtime при помилці — 150–300 секунд до відновлення. Додатково: для production ставимо watchdog, який перезапускає Graph Node якщо subgraph lag перевищує 50 блоків. Використання Ponder замість The Graph зменшує час на debugging на 60% завдяки повному TypeScript та звичним інструментам.

Вибір між Hosted Service та Decentralized Network

Graph Hosted Service (безкоштовний, централізований) deprecated на користь Subgraph Studio + Graph Network. Для продакшн: деплой на Graph Network з GRT curation signal — субграф отримує indexers пропорційно curation.

Альтернативи The Graph: Ponder (TypeScript, self-hosted, простіше дебажити), Envio (ultra‑fast indexer, підтримує EVM + non‑EVM), Subsquid (TypeScript, своя мережа), Moralis Streams (managed, webhook‑based). Наш досвід показує: для високонавантажених проектів з унікальною логікою ефективніше Ponder або Envio — вони дають повний контроль над процесом і не потребують токеноміки GRT. Ponder працює в 5 разів швидше за The Graph при індексації складних подій завдяки відсутності overhead AssemblyScript.

Webhooks та real-time нотифікації

Alchemy Webhooks та QuickNode Streams дозволяють отримувати події в реальному часі через HTTP webhook або WebSocket. Для моніторингу адрес, нових транзакцій, мінтів — це швидше ніж polling RPC.

Tenderly — платформа для моніторингу та алертів. Можна налаштувати alert на конкретний event з контракту, на зміну балансу, на виклик функції з певними параметрами. Симуляція транзакцій через Tenderly API — безцінно для debugging.

Моніторинг та observability

Мінімальний стек моніторингу для протоколу:

On‑chain: OpenZeppelin Defender Sentinel — watches contract events, викликає webhook або Autotask при спрацьовуванні умов. Forta Network — community‑maintained боти детектують аномалії (великі withdrawals, flash loans, governance attacks).

Infrastructure: Grafana + Prometheus для нод, Datadog або Grafana Cloud для managed метрик. Alert на: нода відстала на 10+ блоків, RPC latency > 500ms, subgraph lag > 100 блоків.

Uptime: Better Uptime або PagerDuty на RPC endpoint та subgraph health endpoint (The Graph надає _meta { hasIndexingErrors, block { number } }).

Обмеження моніторингу без Tenderly

Tenderly дає симуляцію транзакцій та детальні трейси — це критично для налагодження помилок у субграфах та смарт‑контрактах. Forta ж фокусується на аномаліях у мережі, а не на вашій інфраструктурі. Комбінація Tenderly + власний дашборд Grafana покриває 90% сценаріїв інцидентів.

Мультичейн інфраструктура

Протокол на 5 чейнах = 5 окремих RPC endpoints, 5 subgraphs, 5 моніторинг‑конфігів. Це керовано, але потрібна автоматизація деплою.

Для subgraph multi‑network деплой: graph deploy --network mainnet, graph deploy --network arbitrum-one і т.д. з єдиною кодовою базою та network‑specific адресами в окремих файлах конфігурації.

Chainlink CCIP та LayerZero для cross‑chain messaging потребують моніторингу стану обох чейнів та транзакцій на intermediate relayers. Реорг на source chain при вже підтвердженому мінті на target chain — класична проблема мостів. Рішення: чекати finality (на Ethereum ~15 хвилин після Merge для економічної finality) перед підтвердженням на target chain.

Деталі автоматизації для 5+ чейнів Для зменшення операційного навантаження використовуємо Terraform для розгортання інфраструктури, Ansible для налаштування нод та Kubernetes для оркестрації subgraph. Кожен чейн отримує окремий namespace з однаковими шаблонами моніторингу. Це дозволяє розгорнути новий чейн за 2 дні замість 2 тижнів.

Процес налаштування інфраструктури

  1. Аудит поточного стеку — визначаємо чейни, обсяг запитів, вимоги до latency та доступності.
  2. Проектування архітектури — вибір провайдерів, балансировка, redundancy.
  3. Розробка subgraph — маніфест → схема → handlers → тестування на локальній Graph Node → деплой на testnet → mainnet.
  4. Конфігурація моніторингу — Tenderly alerts, Grafana дашборд, PagerDuty інтеграція.
  5. Документація та runbook — що робити при: subgraph fell behind, RPC downtime, нода desync.
  6. Передача в експлуатацію — навчання команди, передача доступів, підтримка перший місяць.

Що входить у роботу?

  • Розгортання managed або self‑hosted нод Ethereum, Polygon, BNB Chain
  • Налаштування RPC‑шару з primary/fallback та load balancing
  • Розробка та деплой subgraph під ваш протокол
  • Підключення моніторингу (Tenderly, Grafana, алерти)
  • Створення runbook та документації з експлуатації
  • Навчання команди (до 4 годин онлайн)
  • Підтримка протягом 30 днів після здачі

Які терміни виконання?

Робота Термін
Налаштування RPC та базового моніторингу 1–2 тижні
Subgraph для одного протоколу 2–4 тижні
Self-hosted нода з моніторингом 2–3 тижні
Повна інфраструктура (multi-chain, моніторинг, runbooks) 6–10 тижнів

Всі проекти ведуться в репозиторії на GitHub/GitLab з CI/CD, код конфігурацій залишається у вас. Замовте розгортання інфраструктури — розкажемо, як скоротити витрати без втрати надійності. Отримайте консультацію — покажемо, як ми розгортали інфраструктуру для протоколу з високим TVL на Ethereum та Arbitrum. Зв'яжіться з нами.