Налаштування розпізнавання жестів рук в Unity та Unreal для AR

Затримка жестів руйнує занурення, і гравець залишає проєкт. Ми налаштовуємо розпізнавання жестів рук у доповненій реальності під ключ: від однієї механіки до серії ігор. Відгук стає передбачуваним, а керування — природним.
Часті запитання

Гравець кидає гру, коли розпізнавання жестів рук запізнюється

Гравець піднімає руку, щоб узяти предмет, — нічого не відбувається. Повторює жест — спрацьовує із затримкою і не там, де він очікував. Ще кілька спроб, і він закриває AR-гру, так і не дійшовши до першої сцени.

Це найдорожча втрата в проєкті: перше враження не можна переграти. Людина вже вклала увагу, а керування жестами її підвело — і у відгуках з'явиться «не працює», а не «ідея цікава».

Повертати такого гравця через рекламу складніше й дорожче, ніж один раз зробити жест передбачуваним.

Особливо прикро, що на демонстрації все працювало. На реальному пристрої та в чужій кімнаті — інше світло, інший фон, інші руки й відстань до камери, і розпізнавання жестів рук починає помилятися. Утримання гравців падає не через сюжет чи графіку, а через одну нереагуючу механіку.

Ми це закриваємо: налаштовуємо розпізнавання жестів рук під конкретний сценарій AR-гри та обраний ігровий рушій, а перевіряємо на живих людях у різних умовах, а не лише на тестовому стенді. Гравець отримує реакцію з першого разу — і залишається в грі, щоб побачити решту.

Чутливість і набір жестів добираємо так, щоб керування жестами було зрозумілим без підказок і однаково впевнено працювало на різних пристроях аудиторії.

Що отримує бізнес від точного керування жестами

Живі емоції гравців

Людина не вивчає інструкцію і не шукає потрібну кнопку — вона махає рукою, ловить предмет, відштовхує перешкоду. Момент «у мене вийшло» запам'ятовується і переказується друзям, а емоції напряму вирішують, скільки часу людина проведе в грі.

Чим чутливіша реакція на рух, тим вища залученість і тим більше гостей доходить до фіналу сценарію — а отже, і до форми заявки. Так ліди з гри з'являються природно, без нав'язливих закликів.

Природна взаємодія та охоплення

Жест розуміють без пояснень і дитина, і дорослий, який уперше підійшов до екрана: поріг входу падає майже до нуля. Ви не втрачаєте відвідувачів, які відступають перед складним керуванням, і помітно розширюєте охоплення аудиторії — грають навіть ті, хто раніше стояв осторонь.

Впізнаваність бренду та готовність масштабувати

Гості діляться враженнями, відзначають майданчик, приводять друзів — впізнаваність бренду зростає без додаткових вкладень у рекламу.

Коли механіка довела результат, її переносять на інші майданчики та події: розпізнавання жестів рук налаштовується один раз, а дає ефект на кожній новій точці.

Ми робимо реакцію однаково впевненою за різного освітлення, тілобудови й швидкості руху гравця — відвідувач не злиться на техніку, а грає.

Формати послуги: від однієї механіки до серії ігор

Масштаб проєкту визначає все інше: терміни, склад команди й обсяг підтримки після запуску.

Тому ми спочатку розбираємося, де і для кого працюватиме розпізнавання жестів рук, скільки людей пройде через гру за день і що ви очікуєте на виході — разовий спалах уваги чи формат, який працює не один сезон.

Нижче — чотири формати, з яких замовники починають найчастіше. Будь-який можна розширити пізніше: додати нові жести, сцени або перетворити одиночну механіку на серію ігор зі спільним керуванням і впізнаваним стилем.

Формат проєкту Для кого Що дає клієнту
Промо-механіка на одну сцену Бренди, виставки, активації, шоуруми Запуск точно до дати події, живий потік до стенда, гості діляться враженнями в соцмережах
Набір жестів під ваш продукт Компанії зі своїм застосунком, екраном або вітриною Впізнаване керування без громіздкого обладнання в руках — таке запам'ятовують і обговорюють
Сюжетна AR-гра Рітейл, музеї, парки, організатори подій Відвідувачі проходять маршрут до кінця, довше залишаються на майданчику й повертаються за продовженням
Серія ігор зі спільною історією Мережі, франшизи, великі майданчики Єдиний досвід на всіх точках, регулярні оновлення, повторні замовлення на нові серії

Якщо поки не ясно, який формат ваш, — опишіть задачу та майданчик. Запропонуємо два-три варіанти під потрібний масштаб і чесно скажемо, де обсяг робіт надмірний.

Як проходить проєкт: від задачі до запуску та підтримки

Проєкт не перетворюється на «чорну скриньку»: ви заздалегідь бачите план робіт, знаєте, на якому етапі команда і що потрібно від вас. Такий порядок економить тижні — правки в розпізнаванні жестів дешевше вносити до того, як сцени й анімації зібрані.

  1. Обговорюємо задачу. Розбираємо, які жести розпізнавати, у яких сценах і на яких пристроях, що має відчувати гравець в AR-режимі.
  2. Готуємо план робіт. Фіксуємо етапи розробки, терміни, склад команди й точки, де потрібне ваше погодження.
  3. Показуємо робоче демо. Збираємо прототип розпізнавання жестів, щоб ви побачили керування в дії до основного складання й вчасно змінили сценарій.
  4. Реалізуємо та налагоджуємо. Налаштовуємо розпізнавання під різні руки, освітлення й дистанцію — жести спрацьовують передбачувано, а не «через раз».
  5. Тестуємо на живих гравцях. Дивимося, як відвідувачі освоюють керування без підказок, і прибираємо місця, де вони застрягають.
  6. Запускаємо гру. Готуємо складання, публікацію й оновлення — вихід на майданчик проходить без сюрпризів в останній день.
  7. Залишаємося на підтримці. Після запуску супроводжуємо проєкт: додаємо нові жести, реагуємо на нові моделі пристроїв і правки в сценарії.

Працюємо в Unity та Unreal, тому рішення вбудовується в уже обраний рушій, а не ламає архітектуру гри.

Що увійде в постачання: готовий продукт і зрозуміла передача

Постачання — це не архів із файлами й не напівфабрикат, який ще рік доведеться доопрацьовувати. Ви отримуєте працюючий продукт із розпізнаванням жестів рук, який можна поставити на стенд, показати гостям або передати своїй команді. Усе, що для цього потрібно, фіксуємо в списку й приймаємо разом із вами.

  • Готова гра або інтерактивна сцена — запускається на вашому обладнанні й працює без нас: відвідувач підходить, робить жест, отримує реакцію.
  • Погоджений набір жестів — перелік рухів із прив'язаними діями: помах, жест відкритою долонею, стискання пальців та інші під ваш сценарій. Список змінюємо або розширюємо.
  • Склад робіт за етапами — що робили на кожному кроці й що вийшло в результаті, щоб у вашої команди не залишилося білих плям.
  • Документація — проста інструкція із запуску, налаштування та правок: вона адресована співробітникам, а не програмістам.
  • Навчання команди — онлайн-зустрічі, після яких ваші люди самі змінюють тексти, жести та порядок сцен.
  • Передача вихідних матеріалів і прав — проєкт залишається у вас, без прив'язки до нашої команди.
  • Супровід після запуску — обумовлений період підтримки: правки, відповіді на запитання, адаптація під нове обладнання.

Приймання відбувається за списком, а не за відчуттями: ви перевіряєте кожен пункт на своєму стенді й підписуєте результат. Якщо щось поводиться інакше, ніж домовлялися, доопрацьовуємо за свій рахунок — до передачі.

Кейс: як гра з керуванням жестами утримала гравців

Замовник — мережа інтерактивних просторів КіберКвант — запускав AR-гру з керуванням жестами, без контролерів і предметів у руках. Перша версія збирала чергу на вході, але губила людей усередині: жест не зчитувався, герой смикався, гості йшли на другій хвилині. Оператори витрачали зміну на підказки та перезапуски, оборот зони падав.

Ми переробили розпізнавання жестів і логіку реакції: гра почала реагувати на рух одразу, помилкові спрацьовування зникли, а складні жести замінили на інтуїтивні. Людина перестала думати про техніку й почала грати.

Що показали метрики утримання

Через два місяці після перезапуску середня сесія зросла з 45 секунд до 6,5 хвилин, частка покинутих заходів упала з 60% до 12%, а кожен третій відвідувач запускав гру повторно. Точність керування перестала бути темою скарг — оператори більше не втручаються в процес.

Чому замовник повернувся з новим замовленням

Результат оцінили за оборотом зони: пропускна здатність зросла, попит на гру тримався без анонсів і розкладу. Через пів року замовник тиражував сценарій на інші майданчики й замовив другу гру з жестовим керуванням. Для нас це головний показник: рішення працює не на демо, а в щоденному навантаженні.

Що як у нас специфічні вимоги до жестів?

Нестандартний набір жестів — це норма, а не виняток. Готові бібліотеки закривають десяток типових рухів, але щойно сюжет вимагає особливої дії — кидка, повороту предмета, знака-пароля або командного жесту на двох — шаблон закінчується.

Ми збираємо словник жестів під вашу задачу: під ігровий процес, під аудиторію і під майданчик показу, а не навпаки.

Робота починається зі сценарію гри: що гравець робить на екрані, які рухи народжуються самі собою, куди дивиться глядач і ким він є. Із цього ми описуємо жестовий словник — зазвичай кілька ключових рухів, які легко відрізнити один від одного й неможливо переплутати випадково. Так гравець освоює керування без інструкції та підказок великим текстом.

Майданчик показу диктує окремі вимоги. Вітрина на виставці, великий екран у шоурумі й камера телефона — це різні умови за світлом, дистанцією та кількістю людей у кадрі.

Ми налаштовуємо чутливість і зони так, щоб жест спрацьовував із першої спроби в людини, яка бачить гру вперше й стоїть у шумній залі.

Окремо закриваємо особливі вимоги: шульга, дитина, рукавичка або костюм на руках, гра вдвох, жести-«паролі» для сюжетних моментів. Працюємо і з Unity, і з Unreal — обраний набір не доведеться переробляти при зміні майданчика чи формату показу.

Свій жест — це не експеримент на живих відвідувачах. Спершу збираємо робочий прототип, перевіряємо його на реальних людях і лише потім переносимо в гру. Тому ви отримуєте керування, яке помічають і хвалять, а не списують на «камера не зрозуміла».

Часті сумніви замовників перед стартом

Замовники перед стартом ставлять ті самі запитання, і це нормально: розпізнавання жестів рук виглядає крихкою технологією, яку страшно вбудувати в готовий продукт. Нижче — чесні відповіді на три головні побоювання, щоб рішення ухвалювалося без ілюзій.

Що буде, якщо платформа оновиться і керування жестами зламається?

Оновлення платформи — штатна ситуація, а не аварія. Ми ізолюємо логіку гри від змін середовища: коли виходить нова версія, оновлюється лише цей шар, а ігровий процес, меню й прогрес гравця залишаються недоторканими. Випуск сумісного оновлення займає дні, і проєкт не доводиться збирати заново.

Чи зможемо ми підтримувати гру своїми силами?

Так, і це одна з цілей проєкту. Ми передаємо документацію та зрозумілу структуру, а ваша команда вчиться на живому проєкті: де змінювати чутливість, як додати новий жест, на що дивитися при збої. Далі ви самі вирішуєте, що закривати своїми силами, а що віддати нам на підтримку.

Чи можна додати жести пізніше, коли основа вже готова?

Додавання жестів не вимагає переписувати гру. Механіка вбудовується окремим модулем і підключається до тих сцен, де підсилює досвід: знайомство з продуктом, навчання, інтерактивні зони.

Архітектуру проєктуємо так, щоб нові жести з'являлися в міру зростання продукту, без зупинки поточних релізів.

Обговоримо задачу й повернемося з планом робіт

Розкажіть, що має вміти ваша гра, і ми обговоримо задачу по суті: які жести розпізнавати, у яких сценаріях, на яких пристроях грають ваші користувачі. Чим ясніша мета, тим точніше ми запропонуємо рішення — від простого набору команд до складної взаємодії в доповненій реальності.

Розмову ведемо мовою результату: що побачить гравець, як це вплине на утримання та відгуки. Якщо задача поки в загальних рисах — допоможемо сформулювати її разом, щоб у нас з'явилася спільна картина.

Після обговорення ви отримуєте основу для рішення, а не загальні обіцянки:

  • розбір задачі та пріоритетів — що критично, а що можна відкласти;
  • оцінку проєкту: терміни за етапами та обсяг робіт;
  • план робіт із зрозумілими точками контролю;
  • склад команди: хто і чим буде займатися на вашому проєкті;
  • порядок старту проєкту й те, що потрібно від вас на першому кроці;
  • прозору схему роботи: що робимо ми, що залишається на вашому боці;
  • варіанти розвитку — якщо вирішите розширити розпізнавання жестів пізніше.

Опишіть задачу письмом або голосом — як зручніше. Повернемося з оцінкою та планом робіт, без зобов'язувальних умов: рішення ухвалюєте ви, а починаємо ми тоді, коли вам це зручно.

Наші компетенції

Останні роботи

  • Розробка гри для компанії Mortal Motors
    Розробка гри для компанії Mortal Motors
    1709
  • Покрокова стратегія у фентезі сеттингу With Fire And Sword
    Покрокова стратегія у фентезі сеттингу With Fire And Sword
    1181
  • Розробка ігри для компанії Second term
    Розробка ігри для компанії Second term
    808
  • 3D-анімація – тизер для гри phoenix 2.
    3D-анімація – тизер для гри phoenix 2.
    899
  • Навчальна вікторина для дітей «Покупки в магазині»
    Навчальна вікторина для дітей «Покупки в магазині»
    402

Інші послуги студії

VR/AR/MR застосунки на замовлення

Вражайте клієнтів і навчайте команду у віртуальній реальності

Розробка ігор на Unity

Від ідеї до релізу — ігри, які запам'ятовуються

3D-моделювання та анімація

Оживимо ваш продукт в об'ємній графіці та анімації

VR-тренажери промислового обладнання

Тренуємо операторів на техніці без ризику і простою

AR-інструкції для виробництва

Покрокові підказки прямо на обладнанні — без паперу

Safety-тренажери

Відпрацювання НС і техніки безпеки без виходу на об'єкт

VR/AR-тренінги

Навчаємо персонал сервісу, адаптації та soft skills у VR

Навчальні вікторини

Перевірка знань у форматі гри — легко і без стресу

Корпоративні відеоінструкції

Зрозумілі ролики для навчання співробітників і клієнтів

Гейміфікація бізнес-процесів

Мотивуємо команду через ігрові механіки в KPI та HR

Застосунки для інфокіосків

Інтерактивні екрани для магазинів, стендів і офісів

VR/AR-інсталяції

Wow-ефект для брендів на виставках, івентах і в шоу-румах

Віртуальні виставки та музеї

Ваша експозиція доступна з будь-якої точки світу — 24/7

Event-квести та брендовані ігри

Незабутні ігри для конференцій та клієнтських івентів