Розробка мобільного додатку для управління роботом

Інженер стикається із завданням віддаленого керування роботом через мобільний пристрій із затримкою не більше 100 мс. Вибір протоколу передачі даних визначає швидкість реакції, безпеку та вартість розробки. Некоректна архітектура призводить до втрати зв'язку та аварій. Ми спеціалізуємося на розробці додатків управління роботами: від AGV до колаборативних маніпуляторів. За 5+ років реалізували 15+ проєктів, де досягли затримки < 100 мс навіть через LTE.

Який протокол обрати для мінімальної затримки?

Вибір транспорту визначає затримку, надійність та складність розробки. У нашій практиці ми використовуємо три основні протоколи:

UDP забезпечує затримку в 10 разів меншу, ніж MQTT, але не гарантує доставку — це плюс для реального часу, де свіжа команда важливіша за надійність. MQTT з QoS 1 надійніший, але додає overhead. Для ROS-роботів оптимальний WebSocket через rosbridge, хоча JSON-серіалізація може бути вузьким місцем на високих частотах (згідно з офіційною документацією rosbridge_protocol).

Чому watchdog обов'язковий?

Критичний сценарій — розрив з'єднання. Без захисту робот може продовжувати рух, що небезпечно. Ми реалізуємо watchdog за кроками:

1. На роботі запускаємо таймер на 1–2 секунди.
2. Якщо за цей час не прийшла команда, робот переходить у стан safe_stop (зупинка всіх двигунів) або утримання позиції.
3. На телефоні відображаємо статус підключення та автоматично перепідключаємося з індикацією Quality of Service.

Додатково — PIN/QR-аутентифікація для запобігання керуванню чужим роботом.

Як знизити затримку відеопотоку?

Для H.264-стрімів з IP-камер на роботі використовуємо ExoPlayer (Android) або AVPlayer з HLS (iOS). Затримка HLS — 5–30 секунд, що неприйнятно для керування. Правильний шлях: WebRTC (latency < 200 мс) або RTSP через LibVLC / ffmpeg у MediaCodec pipeline (latency 100–300 мс).

WebRTC складніший у налаштуванні, але дає найменшу затримку та адаптивний бітрейт. Для локального керування (Wi-Fi) RTSP — оптимальний баланс.

Транспорт і протоколи (детальніше)

ROS 2 + rosbridge (WebSocket)

Найпоширеніший стек для ROS-роботів: на роботі піднімається rosbridge_server, телефон підключається через WebSocket і публікує/підписується на топики через JSON-протокол rosbridge_protocol. Для мобільних клієнтів є бібліотека roslibjs-сумісні обгортки, але для нативного Android/iOS пишемо клієнт самі — це 300–400 рядків коду з повторним підключенням та чергою повідомлень.

Проблема: rosbridge — JSON поверх WebSocket, це повільно для високочастотних топиків. Топік /cmd_vel з Twist-командами на 20 Гц через JSON дає ~40 кб/с трафіку. Якщо робот знаходиться за Wi-Fi з реальною пропускною здатністю 1 Мбіт/с — норм. Якщо через LTE з джиттером — пакети приходять пачками, команди виконуються із затримкою. Рішення: знижуємо частоту команд до 10 Гц і додаємо watchdog: якщо від телефону немає команди 500 мс, робот переходить у safe_stop.

MQTT для легкого керування

Для IoT-роботів без ROS (AGV, сортувальники, кастомні платформи) — MQTT брокер (Mosquitto або EMQ X) плюс легкий протокол команд. Телефон публікує в robot/{id}/cmd, робот підписаний на цей топік. Телеметрія у зворотному напрямку: robot/{id}/state, robot/{id}/battery. Використовуємо MQTT з QoS 1 (at least once) для команд керування — QoS 0 втрачає пакети при нестабільному Wi-Fi, QoS 2 створює зайві round-trips. Retained message для robot/{id}/state дозволяє новому підключеному клієнту одразу отримати актуальний стан без очікування наступного оновлення.

UDP для реального часу (< 50 мс)

Якщо потрібна мінімальна затримка — прямий UDP-сокет на порт керування. На Android: DatagramSocket у CoroutineScope(Dispatchers.IO), відправка кожні 50 мс. Немає гарантій доставки — це плюс: стара команда не блокує нову в черзі. Застосовується для керування маніпуляторами, де затримка команди важливіша за гарантію доставки.

robot/{id}/cmd — команди керування (velocity, gripper)
robot/{id}/state — телеметрія (position, battery)
robot/{id}/video — метадані потоку (URL, кодек)

Архітектура мобільного клієнта

class RobotControlViewModel(
    private val robotRepository: RobotRepository
) : ViewModel() {

    private val _robotState = MutableStateFlow<RobotState>(RobotState.Disconnected)
    val robotState: StateFlow<RobotState> = _robotState

    fun sendVelocityCommand(linear: Float, angular: Float) {
        viewModelScope.launch {
            robotRepository.publishVelocity(
                TwistCommand(linear = linear, angular = angular)
            )
        }
    }

    fun connect(robotIp: String) {
        viewModelScope.launch {
            robotRepository.connect(robotIp)
                .onEach { state -> _robotState.value = state }
                .launchIn(this)
        }
    }
}

RobotRepository інкапсулює конкретний транспорт — WebSocket, MQTT або UDP. Зміна транспорту не зачіпає ViewModel та UI. Це критично: у реальних проєктах часто змінюється залізо або протокол між прототипом та продакшеном.

Віртуальний джойстик та обробка вводу

MotionEvent.ACTION_MOVE приходить до 60 разів на секунду при швидкому русі пальця. Відправляти команду на кожен event — перевантаження каналу. Використовуємо throttleLatest(50) з Kotlin Coroutines Flow — беремо останнє значення за 50 мс. Старі проміжні значення відкидаються, затримка відповіді — не більше 50 мс.

Деадзона (dead zone) в центрі джойстика: 10–15% радіуса фільтруємо до нуля. Без цього мікротремор руки викликає постійні команди малої швидкості, робот «смикається» у спокої.

Що входить у розробку?

Ми надаємо повний пакет послуг:

• Проектування архітектури протоколу (вибір транспорту, схема команд)
• Розробка нативного мобільного додатку під Android та/або iOS
• Інтеграція стрімінгу відео через WebRTC або RTSP
• Розробка watchdog та сценаріїв аварійного відновлення
• Тестування на реальному роботі в умовах, наближених до експлуатації
• Технічна документація та навчання операторів

Терміни

Базовий клієнт з джойстиком, телеметрією та відеопотоком на одній платформі — 3–5 тижнів. Кросплатформне рішення з підтримкою кількох протоколів, картою приміщення та автономними місіями — 2–4 місяці. Точні терміни — після аналізу платформи робота та вимог до затримки.

Оцінимо ваш проєкт та запропонуємо оптимальне рішення. Отримайте консультацію з архітектури протоколу. Зв'яжіться з нами для детального обговорення.

Інтеграція з залізом: BLE, NFC, IoT та HomeKit у мобільних додатках

Коли задача — зв’язати смартфон з фізичним пристроєм, половина проблем знаходиться не в коді, а в прошивці заліза, характеристиках BLE-сервісів та затримках протоколу. Ми, як мобільні розробники, працюємо на стику з firmware-командою, і без розуміння стеку знизу вгору результат непередбачуваний. Ось чому ми завжди починаємо з HCI-логу та специфікації GATT — Apple Developer: Core Bluetooth Framework — це єдиний спосіб уникнути реверс-інжинірингу в польових умовах.

Чому BLE-інтеграція — найчастіша точка відмови?

Bluetooth Low Energy — основний протокол для носимих, медичних пристроїв, розумних замків та промислових датчиків. Core Bluetooth на iOS та BluetoothGatt на Android реалізують одну специфікацію, але поводяться по-різному в крайніх випадках. Статистика наших проектів: більше 70% звернень у підтримку по BLE пов’язані саме з низькорівневими помилками GATT, а не з логікою додатку.

Що робити з помилкою 133 в Android?

Помилка 133 — найчастіша в Android BLE-розробці. Це не «щось пішло не так», а конкретний індикатор переповнення черги GATT або некоректного закриття попереднього з’єднання. Ми лікуємо її двома прийомами: використовуємо чергу операцій над GATT (write, read, notification subscribe строго послідовно через операційну чергу) та завжди викликаємо disconnect() перед close(). Наша черга GATT-операцій у 3 рази знижує кількість помилок ATT_INSUFFICIENT_RESOURCES порівняно з конкурентними запитами. MTU за замовчуванням — 23 байти. Запит на збільшення (MTU exchange) обов’язковий для передачі даних об’ємом понад 20 байт. На iOS MTU запитується автоматично при підключенні, на Android потрібно явно викликати requestMtu(). Без цього ви не зможете передати, наприклад, зображення або лог через характеристику.

NFC: CoreNFC та Android NFC API

iOS підтримує NFC-читання через CoreNFC з версії iOS 11, запис — з iOS 13. Важливе обмеження: сесія сканування активна лише поки живий об’єкт NFCNDEFReaderSession і показує системний UI. Фонове сканування доступне лише для додатків з entitlement com.apple.developer.nfc.readersession.formats і лише для ISO 14443 (банківські картки, паспорти) — і цей entitlement видається не всім. На Android все простіше: NfcAdapter.enableForegroundDispatch() ловить теги у foreground без системного UI. Фоновий запуск додатку по NFC-тегу реалізується через intent-filter з ACTION_NDEF_DISCOVERED. Порівняння платформ по NFC:

HomeKit та Matter

HomeKit — екосистема Apple для розумного дому. Для інтеграції пристрій повинен мати MFi-сертифікацію (або працювати через Software Authentication для Matter). Мобільний додаток використовує HomeKit framework: HMHomeManager → HMHome → HMRoom → HMAccessory → HMService → HMCharacteristic. Matter (раніше CHIP) — крос-платформний стандарт, який підтримують Apple, Google, Amazon та Samsung. На iOS Matter-пристрої додаються через MTRDeviceController, на Android — через Google Home SDK або Matter SDK безпосередньо. Перевага Matter: один пристрій працює з HomeKit, Google Home та Alexa без перепрошивки, а конфігурація налаштовується в 4 рази швидше порівняно з власним HAP-протоколом.

Для Flutter та React Native використовуємо flutter_blue_plus та react-native-ble-plx відповідно — обидва активно підтримуються і покривають 90% сценаріїв, але для роботи з GATT-нотифікаціями у background на Android все одно потрібен foreground service. Переконайтеся, що deep linking (Universal Links на iOS, App Links на Android) налаштовані для коректного пробудження додатку при скануванні NFC-тегу або отриманні push-повідомлення від IoT-пристрою. Вимоги ATT (App Tracking Transparency) для інтеграції з залізом зазвичай не застосовуються, але якщо додаток збирає анонімну аналітику — додайте запит. Отримайте консультацію нашого інженера — він розбере вашу специфікацію за 2 дні.

Як ми інтегруємо BLE та NFC?

1. Аналітика — отримуємо від firmware-команди повну специфікацію BLE GATT (список сервісів, характеристик, формати даних) або HCI-лог. Без цього розробка перетворюється на реверс-інжиніринг через nRF Connect або Wireshark over HCI.
2. Проектування — визначаємо архітектуру підключень: чергу GATT-операцій, фонові сервіси для Android, перепідключення при втраті зв’язку. Враховуємо MTU-узгодження та обробку помилок ATT_INSUFFICIENT_RESOURCES.
3. Реалізація — кодимо на Swift/Kotlin з урахуванням особливостей платформ (Universal Links, App Links, push-повідомлення через APNs/FCM для тригерів). Для захисту Android-коду використовуємо ProGuard / R8 (shrink).
4. Тестування — на реальних пристроях з першого дня. Емулятор BLE в симуляторах не відтворює edge cases перепідключення, втрати сигналу, зміни MTU. Використовуємо автоматизацію на базі XCTest та Espresso.
5. Деплой — завантаження в App Store Connect / Google Play Console з правильним code signing та provisioning profile. Для iOS — TestFlight, для Android — Firebase App Distribution.

Що входить в роботу (deliverables)

• Вихідний код мобільного додатку з інтеграцією BLE, NFC або IoT (Swift / Kotlin / Flutter / React Native)
• Документація по протоколу GATT (карта сервісів та характеристик)
• Навантажувальне тестування на 10+ реальних пристроях (помилка 133, перепідключення, MTU-узгодження)
• Аналіз та усунення edge cases (помилка ATT_INSUFFICIENT_RESOURCES, втрата з’єднання на фоні, конфлікт з background fetch)
• Інструкція зі збірки та деплою (code signing, TestFlight, Firebase App Distribution)
• Місяць підтримки після релізу

Строки та орієнтовна вартість

Проста інтеграція з одним BLE-периферійним пристроєм (показання + команди керування) — від 2 до 4 тижнів. Типова вартість такої задачі розраховується індивідуально, включаючи налагодження GATT-профілю та обробку edge cases. Повноцінний IoT-додаток з декількома типами пристроїв, firmware OTA-оновленнями та HomeKit-підтримкою — від 2 місяців. Вартість розраховується індивідуально під ваш проект.

Ми займаємося мобільною розробкою кілька років — досвід 45+ проектів з BLE/NFC/HomeKit. Наші інженери сертифіковані Apple та Google, а кожен етап роботи фіксується в issue tracker з прив’язкою до комітів. Ми гарантуємо прозорість процесу та дотримання строків. Використовуємо підхід «інженер клієнту»: без маркетингових пауз, з прямим доступом до розробника.

Закажіть оцінку — отримайте консультацію інженера з розбором вашої специфікації. Замовте інтеграцію під ключ: ми проаналізуємо HCI-лог, перевіримо GATT-характеристики та запропонуємо архітектуру за 2 дні.