Інженер стикається із завданням віддаленого керування роботом через мобільний пристрій із затримкою не більше 100 мс. Вибір протоколу передачі даних визначає швидкість реакції, безпеку та вартість розробки. Некоректна архітектура призводить до втрати зв'язку та аварій. Ми спеціалізуємося на розробці додатків управління роботами: від AGV до колаборативних маніпуляторів. За 5+ років реалізували 15+ проєктів, де досягли затримки < 100 мс навіть через LTE.
Який протокол обрати для мінімальної затримки?
Вибір транспорту визначає затримку, надійність та складність розробки. У нашій практиці ми використовуємо три основні протоколи:
| Протокол | Затримка | Гарантія доставки | Сфера застосування |
|---|---|---|---|
| ROS 2 (WebSocket) | 50–200 мс | Так (TCP) | Роботи з ROS, складна архітектура команд |
| MQTT | 20–100 мс | QoS 1 (at least once) | IoT-роботи, AGV, легке керування |
| UDP | < 10 мс | Ні | Маніпулятори, високочастотні команди |
UDP забезпечує затримку в 10 разів меншу, ніж MQTT, але не гарантує доставку — це плюс для реального часу, де свіжа команда важливіша за надійність. MQTT з QoS 1 надійніший, але додає overhead. Для ROS-роботів оптимальний WebSocket через rosbridge, хоча JSON-серіалізація може бути вузьким місцем на високих частотах (згідно з офіційною документацією rosbridge_protocol).
Чому watchdog обов'язковий?
Критичний сценарій — розрив з'єднання. Без захисту робот може продовжувати рух, що небезпечно. Ми реалізуємо watchdog за кроками:
- На роботі запускаємо таймер на 1–2 секунди.
- Якщо за цей час не прийшла команда, робот переходить у стан safe_stop (зупинка всіх двигунів) або утримання позиції.
- На телефоні відображаємо статус підключення та автоматично перепідключаємося з індикацією Quality of Service.
Додатково — PIN/QR-аутентифікація для запобігання керуванню чужим роботом.
Як знизити затримку відеопотоку?
Для H.264-стрімів з IP-камер на роботі використовуємо ExoPlayer (Android) або AVPlayer з HLS (iOS). Затримка HLS — 5–30 секунд, що неприйнятно для керування. Правильний шлях: WebRTC (latency < 200 мс) або RTSP через LibVLC / ffmpeg у MediaCodec pipeline (latency 100–300 мс).
| Тип | Компоненти | Затримка | Складність |
|---|---|---|---|
| WebRTC | STUN/TURN, сигналінг | < 200 мс | Висока (потрібна інфраструктура) |
| RTSP | VLC, ffmpeg | 100–300 мс | Середня (готові бібліотеки) |
| HLS | AVPlayer, ExoPlayer | 5–30 с | Низька (просте налаштування) |
WebRTC складніший у налаштуванні, але дає найменшу затримку та адаптивний бітрейт. Для локального керування (Wi-Fi) RTSP — оптимальний баланс.
Транспорт і протоколи (детальніше)
ROS 2 + rosbridge (WebSocket)
Найпоширеніший стек для ROS-роботів: на роботі піднімається rosbridge_server, телефон підключається через WebSocket і публікує/підписується на топики через JSON-протокол rosbridge_protocol. Для мобільних клієнтів є бібліотека roslibjs-сумісні обгортки, але для нативного Android/iOS пишемо клієнт самі — це 300–400 рядків коду з повторним підключенням та чергою повідомлень.
Проблема: rosbridge — JSON поверх WebSocket, це повільно для високочастотних топиків. Топік /cmd_vel з Twist-командами на 20 Гц через JSON дає ~40 кб/с трафіку. Якщо робот знаходиться за Wi-Fi з реальною пропускною здатністю 1 Мбіт/с — норм. Якщо через LTE з джиттером — пакети приходять пачками, команди виконуються із затримкою. Рішення: знижуємо частоту команд до 10 Гц і додаємо watchdog: якщо від телефону немає команди 500 мс, робот переходить у safe_stop.
MQTT для легкого керування
Для IoT-роботів без ROS (AGV, сортувальники, кастомні платформи) — MQTT брокер (Mosquitto або EMQ X) плюс легкий протокол команд. Телефон публікує в robot/{id}/cmd, робот підписаний на цей топік. Телеметрія у зворотному напрямку: robot/{id}/state, robot/{id}/battery. Використовуємо MQTT з QoS 1 (at least once) для команд керування — QoS 0 втрачає пакети при нестабільному Wi-Fi, QoS 2 створює зайві round-trips. Retained message для robot/{id}/state дозволяє новому підключеному клієнту одразу отримати актуальний стан без очікування наступного оновлення.
UDP для реального часу (< 50 мс)
Якщо потрібна мінімальна затримка — прямий UDP-сокет на порт керування. На Android: DatagramSocket у CoroutineScope(Dispatchers.IO), відправка кожні 50 мс. Немає гарантій доставки — це плюс: стара команда не блокує нову в черзі. Застосовується для керування маніпуляторами, де затримка команди важливіша за гарантію доставки.
Приклад конфігурації MQTT топіків
robot/{id}/cmd — команди керування (velocity, gripper) robot/{id}/state — телеметрія (position, battery) robot/{id}/video — метадані потоку (URL, кодек) Архітектура мобільного клієнта
class RobotControlViewModel( private val robotRepository: RobotRepository ) : ViewModel() { private val _robotState = MutableStateFlow<RobotState>(RobotState.Disconnected) val robotState: StateFlow<RobotState> = _robotState fun sendVelocityCommand(linear: Float, angular: Float) { viewModelScope.launch { robotRepository.publishVelocity( TwistCommand(linear = linear, angular = angular) ) } } fun connect(robotIp: String) { viewModelScope.launch { robotRepository.connect(robotIp) .onEach { state -> _robotState.value = state } .launchIn(this) } } } RobotRepository інкапсулює конкретний транспорт — WebSocket, MQTT або UDP. Зміна транспорту не зачіпає ViewModel та UI. Це критично: у реальних проєктах часто змінюється залізо або протокол між прототипом та продакшеном.
Віртуальний джойстик та обробка вводу
MotionEvent.ACTION_MOVE приходить до 60 разів на секунду при швидкому русі пальця. Відправляти команду на кожен event — перевантаження каналу. Використовуємо throttleLatest(50) з Kotlin Coroutines Flow — беремо останнє значення за 50 мс. Старі проміжні значення відкидаються, затримка відповіді — не більше 50 мс.
Деадзона (dead zone) в центрі джойстика: 10–15% радіуса фільтруємо до нуля. Без цього мікротремор руки викликає постійні команди малої швидкості, робот «смикається» у спокої.
Що входить у розробку?
Ми надаємо повний пакет послуг:
- Проектування архітектури протоколу (вибір транспорту, схема команд)
- Розробка нативного мобільного додатку під Android та/або iOS
- Інтеграція стрімінгу відео через WebRTC або RTSP
- Розробка watchdog та сценаріїв аварійного відновлення
- Тестування на реальному роботі в умовах, наближених до експлуатації
- Технічна документація та навчання операторів
Терміни
Базовий клієнт з джойстиком, телеметрією та відеопотоком на одній платформі — 3–5 тижнів. Кросплатформне рішення з підтримкою кількох протоколів, картою приміщення та автономними місіями — 2–4 місяці. Точні терміни — після аналізу платформи робота та вимог до затримки.
Оцінимо ваш проєкт та запропонуємо оптимальне рішення. Отримайте консультацію з архітектури протоколу. Зв'яжіться з нами для детального обговорення.