Разработка модулей интеграции с внешними БД для AR

Мы занимаемся разработкой AR-решений более 5 лет и выполнили 30+ проектов по интеграции дополненной реальности с корпоративными системами. Одна из частых задач — подключение AR-приложения к внешним базам данных.

AR-приложение для складского учёта показывает сотруднику информацию о товаре прямо над физической коробкой. Данные тянутся из ERP в реальном времени. Задержка запроса 800 мс — и аннотация появляется уже после того, как сотрудник отвёл взгляд. Это не UX-нюанс — это прямой провал сценария использования. Интеграция AR с внешними базами данных требует другого подхода к архитектуре запросов, чем в обычных мобильных приложениях. Наш опыт показывает, что стандартные решения здесь не работают.

Какие технические вызовы возникают при интеграции AR с БД?

Латентность запросов в AR критичнее, чем в любом другом мобильном контексте. Пользователь наводит камеру на объект и ожидает мгновенного отклика. 300 мс — приемлемо, 800 мс — заметная задержка, 2 секунды — приложение кажется сломанным.

Основные источники задержки:

• Сетевой round-trip до сервера (100–300 мс в 4G, 20–50 мс в WiFi)
• Время обработки запроса на сервере (SQL-запрос без индекса на таблицу в 5 миллионов строк — легко 500 мс)
• Десериализация JSON на клиенте

Решение — предиктивная загрузка и кэширование. В складском AR-приложении при наведении на стеллаж мы знаем, что следующие 30 секунд пользователь будет работать с этой зоной. Prefetch запрашивает данные по всем артикулам зоны одним batch-запросом сразу при распознавании маркера стеллажа, кладёт в локальный кэш. Когда пользователь наводит на конкретную коробку — данные уже готовы. Этот подход даёт выигрыш в 2-3 раза по скорости отклика по сравнению с поштучными запросами.

Офлайн-режим — второй критичный момент. На складах, в промышленных цехах, в медицинских учреждениях с металлическими перегородками сигнал нестабилен. AR-приложение должно работать с кэшированными данными и синхронизировать изменения при восстановлении соединения. Конфликты слияния (пользователь изменил количество в AR, другой пользователь изменил то же поле в ERP) — обрабатываем через timestamps + last-write-wins или через explicit conflict resolution UI.

Архитектура модуля интеграции

Строим на трёх слоях:

Data Access Layer — абстракция над источником данных. IProductRepository с методами GetByBarcode(string code), GetByZone(string zoneId), UpdateQuantity(string id, int delta). Конкретная реализация может быть REST, GraphQL, gRPC или прямое SQLite — слой AR-логики не знает.

Sync Engine — управление кэшем и синхронизацией. SQLite через sqlite-net-pcl на устройстве как локальное хранилище. Фоновый SyncWorker опрашивает сервер каждые N секунд (configurable) или реагирует на push через WebSocket/SignalR. Стратегия кэширования — TTL per entity type: быстроменяющиеся данные (количество на складе) — 30 секунд, справочники (названия, характеристики) — 24 часа.

AR Binding Layer — подключение данных к AR-объектам. В AR Foundation: при ARTrackedObjectsChangedEventArgs.added — запрос данных для распознанного объекта через IProductRepository, заполнение ARAnnotationController полученными данными. При removed — скрытие аннотации, отмена pending запросов через CancellationToken.

Для производительности используем UniTask (или ValueTask в стандартном .NET) вместо стандартных корутин — меньше аллокаций, нативная отмена задач через CancellationToken, правильная обработка исключений в async/await. Microsoft рекомендует использовать HttpClient как singleton для избежания исчерпания сокетов (см. рекомендации Microsoft).

Типичные интеграции в AR-проектах

REST API (наиболее распространён): HttpClient с System.Net.Http, Newtonsoft.Json или System.Text.Json для десериализации. Важно: HttpClient должен быть singleton или pooled — каждый new HttpClient() открывает новый socket pool.

GraphQL: для AR-приложений особенно удобен — запрашиваем только нужные поля, одним запросом получаем связанные данные. graphql-net-client или Strawberry Shake для .NET.

WebSocket / SignalR: для real-time обновлений — например, AR-аннотации на производственной линии, где статус оборудования меняется каждые секунды. SignalR Core на бэкенде, Microsoft.AspNetCore.SignalR.Client на клиенте.

Прямое подключение к БД в AR-приложениях не рекомендуем — это антипаттерн с точки зрения безопасности (учётные данные БД в APK) и масштабируемости.

Как обеспечить мгновенный отклик?

Ключевая техника — асинхронная предзагрузка данных в зоне видимости. Мы используем spatial prefetch: при распознавании маркера зоны (стеллаж, комната) отправляем batch-запрос на все объекты в этой зоне. Это даёт выигрыш в 2–3 раза по сравнению с поштучными запросами. UniTask позволяет отменять устаревшие запросы без аллокаций. Нагрузочное тестирование показывает, что при 1000+ объектах в зоне 98% запросов обрабатываются за <200 мс.

Пошаговый план интеграции

1. Анализ источников данных. Изучаем API или структуру БД, определяем требования к актуальности данных, офлайн-поведению.
2. Проектирование Data Access Layer. Интерфейсы, стратегия кэширования, offline-политика.
3. Разработка Sync Engine. SQLite схема, фоновая синхронизация, conflict resolution.
4. Интеграция с AR Foundation. Привязка данных к tracked objects.
5. Тестирование. Сценарии: плохой сигнал, полный офлайн, конфликты при синхронизации, нагрузочный тест (1000 объектов в зоне видимости).

Стоимость рассчитывается после анализа структуры данных и требований к синхронизации.

Что входит в работу

• Разработка Data Access Layer с поддержкой REST/GraphQL/WebSocket.
• Реализация Sync Engine с кэшированием и разрешением конфликтов.
• Интеграция с AR Foundation (Unity) или Native XR.
• Документация по API и архитектуре.
• Обучение вашей команды работе с модулем.
• Гарантия 6 месяцев на выявленные баги.

Мы гарантируем, что модуль пройдёт нагрузочное тестирование при 1000+ объектов в зоне видимости. По данным Unity, правильное кэширование снижает задержки на 60%.

Если вам нужно интегрировать AR с внешними данными — свяжитесь с нами для оценки проекта. Закажите разработку модуля под ключ — получите готовое решение за 2–12 недель в зависимости от сложности.

public interface IProductRepository
{
    UniTask<Product> GetByBarcode(string code, CancellationToken ct);
    UniTask<IEnumerable<Product>> GetByZone(string zoneId, CancellationToken ct);
    UniTask UpdateQuantity(string id, int delta, CancellationToken ct);
}

VR и AR разработка

Когда мы впервые запускаем проект в VR-гарнитуре, большинство команд сталкивается с одним и тем же: технически всё работает, но в гарнитуре либо укачивает, либо руки «плавают» с задержкой, либо сцена выглядит дёрганой на периферии взгляда. Это не баги в привычном смысле — это следствие того, что VR/AR разработка требует другого подхода к архитектуре рендера, взаимодействию и UX с самого начала проекта. Наш опыт — более 7 лет в геймдеве, 15+ завершённых VR/AR-проектов для Meta Quest, SteamVR, PSVR2, HoloLens.

Платформы и SDK

Работаем со всем актуальным стеком. OpenXR используем как базовый слой везде, где это возможно — он даёт кроссплатформенность между Meta, Valve Index, HP Reverb и другими PC VR-устройствами (OpenXR на Wikipedia). Поверх OpenXR строим на XR Interaction Toolkit (Unity) или VR Expansion Plugin (Unreal).

Как минимизировать укачивание при локомоции в VR?

Locomotion — главный источник motion sickness для неопытных VR-пользователей. Согласно исследованиям, около 70% пользователей испытывают дискомфорт при неправильной настройке движения (Oculus Developer Guidelines). Teleportation — стандартный способ навигации, когда плавное передвижение нежелательно.

Компоненты из XR Interaction Toolkit: TeleportationArea, TeleportationAnchor, TeleportationProvider. Базовая реализация работает «из коробки», но для продакшна дорабатываем её в четыре шага:

1. Настройка XRRayInteractor с изогнутым лучом (Bend Ray) — дуга телепортации выглядит натуральнее прямого луча, лучше считывается пользователями.
2. Добавление валидной зоны приземления — визуальный индикатор меняет цвет при наведении на препятствие (красный/зелёный).
3. Внедрение fade transition — плавное затухание экрана (black fade) перед телепортом снижает дезориентацию.
4. Rotation snapping — после телепорта предлагаем snap-поворот на 45° или 90° вместо плавного, что снижает риск укачивания.

Для проектов, где нужна плавная локомоция (экшн-игры, симуляторы), используем comfort settings: виньетирование при движении, снижение FOV во время ускорения. Настройки доступны пользователю в меню — разные люди имеют разный порог чувствительности.

Как сделать захват объектов в VR физически реалистичным?

Это самая недооценённая часть VR-разработки. Клиенты часто воспринимают её как «просто анимация рук», но на практике — сложная система, где физическая корректность, отзывчивость и комфорт вступают в противоречие.

Grab (захват)

XR Interaction Toolkit предоставляет три типа Interactable для захвата:

• XRGrabInteractable — стандартный захват, объект следует за контроллером через физический joint или direct position/rotation
• XRSimpleInteractable — для объектов без физического перемещения (кнопки, рычаги)
• Кастомные Interactable через наследование от XRBaseInteractable

Attach Transform — часто игнорируемая деталь. У каждого Interactable должен быть правильно настроенный Attach Transform (точка, к которой рука «прилипает»). Без него рукоятка пистолета окажется по центру меша, а не там, где её держат.

Для оружия и инструментов с двуручным захватом — отдельная система TwoHandGrab: ведущая рука определяет позицию, вторая — ориентацию. XR Interaction Toolkit поддерживает это через XRTwoHandGrabInteractable или кастомную логику с двумя Attach Points.

Throw (бросок)

Почему velocity smoothing критично для реалистичного броска? Проблема в том, что Rigidbody.velocity в момент отпускания контроллера отражает мгновенную скорость, которая часто некорректна из-за дискретизации трекинга. Пользователь делает быстрое движение запястьем — а объект летит вдвое медленнее.

Решение: velocity smoothing за последние N кадров (типично 5-10 кадров, ~80-160 мс при 60 Hz) перед отпусканием. XR Interaction Toolkit делает это через VelocityEstimator. Дополнительно применяем velocity scaling multiplier — небольшое умножение скорости (1.2-1.5x) делает броски субъективно более удовлетворительными. Угловую скорость (для объектов, которые должны крутиться в полёте) тоже усредняем аналогичным образом.

AR: Plane Tracking и работа с окружением

AR добавляет другой класс проблем — работу с реальным, непредсказуемым окружением. AR Foundation — кроссплатформенный слой поверх ARKit и ARCore. Большинство базовых функций (plane detection, raycasting, image tracking, face tracking) доступны через единый API.

Plane Detection

ARPlaneManager обнаруживает горизонтальные и вертикальные плоскости. Практические нюансы:

• Инициализация занимает время — пользователь должен осмотреть помещение, пока система строит карту. Нужен явный onboarding с инструкцией «медленно поводите камерой по поверхностям».
• Плоскости нестабильны — их границы и позиция обновляются по мере накопления данных. Объекты, размещённые на плоскости, нужно привязывать через parenting к ARPlane, а не к мировым координатам.
• Слияние плоскостей — два обнаруженных сегмента пола могут слиться в один, что двигает якорь. Для критичных якорей используем ARAnchor вместо прямой привязки к плоскости.

Оптимизация для VR: фреймрейт и комфорт

VR требует стабильного высокого фреймрейта. Около 60% времени разработки в мобильном VR уходит на оптимизацию, а не на функционал — ретрофит в два раза дороже правильной архитектуры с первого спринта.

Single Pass Instanced Rendering

Главная оптимизация рендера в VR. Без неё сцена рендерится дважды (для каждого глаза), что удваивает draw calls. Single Pass Instanced рендерит оба глаза за один проход через instancing: geometry обрабатывается один раз, шейдер получает два view/projection matrix через GPU instancing. Включается в Unity через XR Plug-in Management > Rendering Mode: Single Pass Instanced. Важно: кастомные шейдеры должны поддерживать SPI — стандартные URP/HDRP шейдеры поддерживают, кастомные HLSL требуют правки (UNITY_SETUP_STEREO_EYE_INDEX_POST_VERTEX и связанные макросы). Применение этой техники сокращает количество draw calls на 40-50%.

Foveated Rendering

На Meta Quest доступен Fixed Foveated Rendering (FFR) — снижение разрешения на периферии кадра, где острота восприятия ниже. Настраивается через OVRManager или Meta XR SDK:

OVRManager.fixedFoveatedRenderingLevel = OVRManager.FixedFoveatedRenderingLevel.High;
OVRManager.useDynamicFixedFoveatedRendering = true;

Dynamic FFR автоматически повышает уровень при просадке фреймрейта — удобнее фиксированного в сценах с переменной нагрузкой.

IPD и Comfort Settings

IPD (Inter-Pupillary Distance) — расстояние между зрачками, влияет на восприятие глубины. На программируемом уровне в большинстве устройств доступно только чтение IPD (OVRPlugin.GetSystemDisplayFrequency), физическая настройка — на гарнитуре. Для приложений с точным позиционированием (медицинские симуляторы, тренинги) учитываем IPD в расчётах масштаба сцены.

Haptics

Тактильный фидбек — недооценённый инструмент. Даже простой вибрационный отклик при захвате объекта или попадании значительно повышает ощущение присутствия. В среднем интеграция тактильных паттернов занимает 30–80 часов на проект.

XR Haptics через OpenXR:

var hapticImpulse = new UnityEngine.XR.HapticCapabilities();
InputDevice device = InputDevices.GetDeviceAtXRNode(XRNode.RightHand);
device.SendHapticImpulse(0, amplitude: 0.5f, duration: 0.1f);

Для сложных паттернов (тактильная «текстура» поверхности при прикосновении, нарастающая вибрация при натяжении тетивы лука) используем Meta Haptics Studio — позволяет дизайнить haptic-клипы визуально.

Что входит в разработку VR/AR-приложения

При заказе проекта под ключ мы предоставляем:

• Архитектурный документ с описанием стека, логики рендера и системы взаимодействия
• Рабочий прототип (MVP) для тестирования на целевом устройстве
• Интеграцию необходимых SDK (Meta XR, OpenXR, AR Foundation и др.)
• Оптимизацию под целевые частоты 72/90/120 Hz с профилированием draw calls и FPS
• Тестирование на физическом оборудовании (Quest, SteamVR, HoloLens) с привлечением пользователей
• Полную документацию по сборке, деплою и поддержке
• Обучение команды заказчика (воркшоп по работе с XR Toolkit)
• Гарантийную поддержку в течение 1 месяца после сдачи

Что влияет на стоимость и сроки

VR/AR проекты дороже обычных игр аналогичного объёма. Итерации медленнее — каждую правку нужно тестировать в гарнитуре, эмулятор не передаёт реальный опыт. Motion sickness вынуждает переделывать часть концептуальных решений после первого плейтеста. Оптимизация занимает существенную долю времени — для мобильного VR (Quest) до 60-70% цикла. Для проектов под Quest начинаем оптимизацию с первого спринта. Стоимость интеграции базового SDK (XR Interaction Toolkit) обычно варьируется от 200 000 до 600 000 рублей в зависимости от объёма кастомных Interactable. Средний бюджет полного проекта под Quest составляет от 1 500 000 до 4 000 000 рублей.

Получите консультацию по вашему проекту — оценим задачу, стек и сроки. Закажите разработку VR/AR-приложения под ключ с гарантией стабильного фреймрейта.