Програмування тактильного зв'язку VR-контролерів (Haptics)

Ми інтегруємо та проєктуємо системи тактильної віддачі (https://uk.wikipedia.org/wiki/Тактильна_оборонна_связь) для VR‑контролерів під ключ. Сильний тактильний зворотний зв'язок — це різниця між «тримаю щось» і «відчуваю, що тримаю щось». Правильна інтенсивність та патерн посилюють присутність сильніше за багато графічних покращень. Але типова реалізація використовує лише 10% можливостей контролера. У нас 5+ років досвіду у VR‑розробці (Unity, Unreal, OpenXR) та понад 30 успішних проєктів з haptics‑інтеграцією.

Вартість базової системи haptics (5–10 типів взаємодій) — від $500; розширена (з патернами та TextureHaptics) — від $1500; крос‑платформений шар — від $2000. Економія при замовленні повного пакету — до 20%.

Як працюють haptics на різних контролерах?

Контролери Meta Quest 2/3 та Touch Pro працюють через OVRInput.SetControllerVibration(frequency, amplitude, controller). Параметри: frequency від 0.0 до 1.0 (мапінг приблизно на 160–320 Гц), amplitude від 0.0 до 1.0. Touch Pro додатково підтримує TriggerHaptics через OVRInput.SetControllerHapticsState() — окрема вібрація в тригері.

Valve Index controllers — найбагатші за haptics. Підтримують PCM haptics через SteamVR Skeletal Input API: можна передавати масив семплів довільної форми хвилі. Це дозволяє симулювати конкретні текстури в 10 разів точніше, ніж проста вібрація на Quest. Розробник описує форму вібрації у вигляді float[] буфера.

Pico 4 — стандартні haptics через OpenXR xrApplyHapticFeedback з XrHapticVibration: frequency, amplitude, duration. Без PCM, але з керуванням тривалістю в наносекундах.

Порівняльна таблиця можливостей контролерів:

Які патерни haptics використовуються?

Проста вібрація: OVRInput.SetControllerVibration(0.5f, 0.5f, OVRInput.Controller.RTouch) на 100 мс — база. Працює для захоплення, натискання кнопки, попадання.

Нарастаюча вібрація з корутиною:

IEnumerator HapticRamp(OVRInput.Controller controller, float duration) {
    float elapsed = 0f;
    while (elapsed < duration) {
        float t = elapsed / duration;
        OVRInput.SetControllerVibration(0.3f + t * 0.5f, t, controller);
        elapsed += Time.deltaTime;
        yield return null;
    }
    OVRInput.SetControllerVibration(0f, 0f, controller);
}

Ефект наростаючого дрижання — наприклад, зарядка зброї або вібруючий механізм.

Ударний патерн з затуханням — імітація удару об поверхню. Спочатку короткий високоамплітудний імпульс (80 мс, amplitude 1.0), потім декілька спадаючих відлунь (60 мс → 40 мс зі спадною амплітудою). Відчувається як реальний удар.

Текстурна симуляція: при русі контролера вздовж поверхні — вібрація, частота та амплітуда якої залежать від швидкості руху та типу матеріалу. Шорстка поверхня: випадковий noise в amplitude з частотою оновлення 20 мс. Гладка: низька постійна амплітуда. Реалізується через Update() з перевіркою швидкості через OVRInput.GetLocalControllerVelocity().

Texture haptics на Valve Index дозволяє симулювати матеріал з точністю до 95%, тоді як на Quest точність не перевищує 50%. Це критично для додатків, де потрібна реалістична взаємодія з об'єктами.

Чому важливий крос‑платформений підхід?

Для проєктів через OpenXR (Unity XR Interaction Toolkit) haptics йдуть через XRBaseController.SendHapticImpulse(amplitude, duration). Обмеження — немає прямого доступу до frequency. Для частотного контролю використовуємо UnityEngine.XR.HapticCapabilities та нативні binding (Oculus XR Plugin або OpenXR Plugin з vendor extension).

Важливо: haptics працює лише при активному focus додатка. При втраті фокусу вібрації автоматично зупиняються. Код повинен це враховувати.

Покрокова реалізація наростаючого патерну

1. Створіть корутину HapticRamp з параметрами controller та duration.
2. Ініціалізуйте elapsed = 0f.
3. У циклі збільшуйте elapsed на Time.deltaTime та обчислюйте t = elapsed / duration.
4. Викликайте SetControllerVibration з плавно зростаючими frequency та amplitude.
5. Після завершення циклу скиньте вібрацію на нуль. Цей патерн підходить для імітації зарядки зброї або наростаючого гулу.

Типові помилки та як їх уникнути

• Haptic spam: кожен контакт генерує вібрацію без throttle. Рішення — HapticCooldown з інтервалом 100–200 мс.
• Симетричність за замовчуванням: обидві руки отримують однаковий haptic. Потрібне незалежне керування через OVRInput.Controller.LTouch / RTouch.

Наша команда розробила бібліотеку HapticCooldown, яка автоматично запобігає спаму та керує незалежністю рук. Це знижує навантаження на вібромотори та економить заряд батареї.

Що входить в роботу

Ми гарантуємо якість та сертифіковані рішення. Оцінимо ваш проєкт після аналізу. Зв'яжіться з нами для детального обговорення.

VR та AR розробка

Коли ми вперше запускаємо проєкт у VR-гарнітурі, більшість команд стикається з одним і тим же: технічно все працює, але в гарнітурі або заколисує, або руки «плавають» із затримкою, або сцена виглядає сіпаною на периферії погляду. Це не баги у звичному розумінні — це наслідок того, що VR/AR розробка вимагає іншого підходу до архітектури рендеру, взаємодії та UX з самого початку проєкту. Наш досвід — понад 7 років у геймдеві, 15+ завершених VR/AR-проєктів для Meta Quest, SteamVR, PSVR2, HoloLens.

Платформи та SDK

Працюємо з усім актуальним стеком. OpenXR використовуємо як базовий шар скрізь, де це можливо — він дає кроссплатформеність між Meta, Valve Index, HP Reverb та іншими PC VR-пристроями. Поверх OpenXR будуємо на XR Interaction Toolkit (Unity) або VR Expansion Plugin (Unreal).

Як мінімізувати заколисування при локомоції у VR?

Locomotion — головне джерело motion sickness для недосвідчених VR-користувачів. Згідно з дослідженнями, близько 70% користувачів відчувають дискомфорт при неправильному налаштуванні руху (Oculus Developer Guidelines). Teleportation — стандартний спосіб навігації, коли плавне переміщення небажане.

Компоненти з XR Interaction Toolkit: TeleportationArea, TeleportationAnchor, TeleportationProvider. Базова реалізація працює «з коробки», але для продакшну доопрацьовуємо її в чотири кроки:

1. Налаштування XRRayInteractor з вигнутим променем (Bend Ray) — дуга телепортації виглядає натуральніше прямого променя, краще зчитується користувачами.
2. Додавання валідної зони приземлення — візуальний індикатор змінює колір при наведенні на перешкоду (червоний/зелений).
3. Впровадження fade transition — плавне згасання екрану (black fade) перед телепортом знижує дезорієнтацію.
4. Rotation snapping — після телепорту пропонуємо snap-поворот на 45° або 90° замість плавного, що знижує ризик заколисування.

Для проєктів, де потрібна плавна локомоція (екшн-ігри, симулятори), використовуємо comfort settings: віньєтування при русі, зниження FOV під час прискорення. Налаштування доступні користувачеві в меню — різні люди мають різний поріг чутливості.

Як зробити захоплення об'єктів у VR фізично реалістичним?

Це найнедооціненіша частина VR-розробки. Клієнти часто сприймають її як «просто анімація рук», але на практиці — складна система, де фізична коректність, відгукливість та комфорт вступають у суперечність.

Grab (захоплення)

XR Interaction Toolkit надає три типи Interactable для захоплення:

• XRGrabInteractable — стандартне захоплення, об'єкт слідує за контролером через фізичний joint або direct position/rotation
• XRSimpleInteractable — для об'єктів без фізичного переміщення (кнопки, важелі)
• Кастомні Interactable через наслідування від XRBaseInteractable

Attach Transform — часто ігнорована деталь. У кожного Interactable має бути правильно налаштований Attach Transform (точка, до якої рука «прилипає»). Без нього рукоятка пістолета опиниться по центру меша, а не там, де її тримають.

Для зброї та інструментів з дворучним захопленням — окрема система TwoHandGrab: ведуча рука визначає позицію, друга — орієнтацію. XR Interaction Toolkit підтримує це через XRTwoHandGrabInteractable або кастомну логіку з двома Attach Points.

Throw (кидок)

Чому velocity smoothing критичний для реалістичного кидка? Проблема в тому, що Rigidbody.velocity в момент відпускання контролера відображає миттєву швидкість, яка часто некоректна через дискретизацію трекінгу. Користувач робить швидкий рух зап'ястям — а об'єкт летить вдвічі повільніше.

Рішення: velocity smoothing за останні N кадрів (типово 5-10 кадрів, ~80-160 мс при 60 Гц) перед відпусканням. XR Interaction Toolkit робить це через VelocityEstimator. Додатково застосовуємо velocity scaling multiplier — невелике множення швидкості (1.2-1.5x) робить кидки суб'єктивно більш задовільними. Кутову швидкість (для об'єктів, які мають крутитися в польоті) також усереднюємо аналогічним чином.

AR: Plane Tracking та робота з оточенням

AR додає інший клас проблем — роботу з реальним, непередбачуваним оточенням. AR Foundation — кроссплатформенний шар поверх ARKit та ARCore. Більшість базових функцій (plane detection, raycasting, image tracking, face tracking) доступні через єдиний API.

Plane Detection

ARPlaneManager виявляє горизонтальні та вертикальні площини. Практичні нюанси:

• Ініціалізація займає час — користувач повинен оглянути приміщення, поки система будує карту. Потрібен явний onboarding з інструкцією «повільно водіть камерою по поверхнях».
• Площини нестабільні — їх межі та позиція оновлюються в міру накопичення даних. Об'єкти, розміщені на площині, потрібно прив'язувати через parenting до ARPlane, а не до світових координат.
• Злиття площин — два виявлені сегменти підлоги можуть злитися в один, що рухає якір. Для критичних якорів використовуємо ARAnchor замість прямої прив'язки до площини.

Оптимізація для VR: фреймрейт та комфорт

VR вимагає стабільного високого фреймрейту. Близько 60% часу розробки в мобільному VR йде на оптимізацію, а не на функціонал — ретрофіт у два рази дорожче правильної архітектури з першого спринту.

Single Pass Instanced Rendering

Головна оптимізація рендеру у VR. Без неї сцена рендериться двічі (для кожного ока), що подвоює draw calls. Single Pass Instanced рендерить обидва ока за один прохід через instancing: geometry обробляється один раз, шейдер отримує два view/projection matrix через GPU instancing. Вмикається в Unity через XR Plug-in Management > Rendering Mode: Single Pass Instanced. Важно: кастомні шейдери повинні підтримувати SPI — стандартні URP/HDRP шейдери підтримують, кастомні HLSL вимагають правки (UNITY_SETUP_STEREO_EYE_INDEX_POST_VERTEX та пов'язані макроси). Застосування цієї техніки скорочує кількість draw calls на 40-50%.

Foveated Rendering

На Meta Quest доступний Fixed Foveated Rendering (FFR) — зниження роздільної здатності на периферії кадру, де гострота сприйняття нижча. Налаштовується через OVRManager або Meta XR SDK:

OVRManager.fixedFoveatedRenderingLevel = OVRManager.FixedFoveatedRenderingLevel.High;
OVRManager.useDynamicFixedFoveatedRendering = true;

Dynamic FFR автоматично підвищує рівень при просадці фреймрейту — зручніше фіксованого в сценах зі змінним навантаженням.

IPD та Comfort Settings

IPD (Inter-Pupillary Distance) — відстань між зіницями, впливає на сприйняття глибини. На програмованому рівні в більшості пристроїв доступне лише читання IPD (OVRPlugin.GetSystemDisplayFrequency), фізичне налаштування — на гарнітурі. Для додатків з точним позиціонуванням (медичні симулятори, тренінги) враховуємо IPD у розрахунках масштабу сцени.

Haptics

Тактильний фідбек — недооцінений інструмент. Навіть простий вібраційний відгук при захопленні об'єкта або попаданні значно підвищує відчуття присутності. В середньому інтеграція тактильних патернів займає 30–80 годин на проєкт.

XR Haptics через OpenXR:

var hapticImpulse = new UnityEngine.XR.HapticCapabilities();
InputDevice device = InputDevices.GetDeviceAtXRNode(XRNode.RightHand);
device.SendHapticImpulse(0, amplitude: 0.5f, duration: 0.1f);

Для складних патернів (тактильна «текстура» поверхні при дотику, наростаюча вібрація при натягу тятиви лука) використовуємо Meta Haptics Studio — дозволяє дизайнити haptic-кліпи візуально.

Що входить у розробку VR/AR-додатку

При замовленні проєкту під ключ ми надаємо:

• Архітектурний документ з описом стеку, логіки рендеру та системи взаємодії
• Робочий прототип (MVP) для тестування на цільовому пристрої
• Інтеграцію необхідних SDK (Meta XR, OpenXR, AR Foundation та ін.)
• Оптимізацію під цільові частоти 72/90/120 Гц з профілюванням draw calls та FPS
• Тестування на фізичному обладнанні (Quest, SteamVR, HoloLens) із залученням користувачів
• Повну документацію по збірці, деплою та підтримці
• Навчання команди замовника (воркшоп по роботі з XR Toolkit)
• Гарантійну підтримку протягом 1 місяця після здачі

Що впливає на вартість та терміни

VR/AR проєкти дорожчі за звичайні ігри аналогічного обсягу. Ітерації повільніші — кожну правку потрібно тестувати в гарнітурі, емулятор не передає реальний досвід. Motion sickness змушує переробляти частину концептуальних рішень після першого плейтесту. Оптимізація займає суттєву частку часу — для мобільного VR (Quest) до 60-70% циклу. Для проєктів під Quest починаємо оптимізацію з першого спринту.

Отримайте консультацію по вашому проєкту — оцінимо задачу, стек та терміни. Замовте розробку VR/AR-додатку під ключ з гарантією стабільного фреймрейту.