Відвідувач підходить до експоната — і чує розповідь без жодного натискання. Або сканує QR-код на табличці. Або вводить номер вручну. Усі три сценарії мають працювати офлайн — музейний Wi-Fi часто підводить. За даними досліджень, понад 60% відвідувачів використовують мобільні пристрої в музеях, але нестабільна мережа знижує враження. Саме тому розробка мобільного аудіогіда для музею має враховувати автономність, надійність виявлення та економію ресурсів. Грамотно спроєктована архітектура дозволяє скоротити бюджет на підтримку та ліцензії — наприклад, відмова від комерційних карт економить кошти. Наша команда розробляє аудіогіди для музеїв з нуля: від вибору маячків до публікації в сторах. За роки роботи реалізували десятки проєктів, включаючи великі державні музеї. У цій статті розберемо технічні деталі: як ми будуємо надійну автономну систему, яка не підводить відвідувачів.
Зв'яжіться з нами, щоб обговорити ваш проєкт та отримати попередню оцінку.
Як працює автоматичне визначення експоната?
Найцікавіший сценарій — proximity-тригер без дій користувача.
iBeacon / Bluetooth LE. Маячки біля кожного експоната (Estimote, Kontakt.io). iOS: CLLocationManager.startRangingBeacons(satisfying:) — отримуємо список маячків з proximity (.immediate / .near / .far) та rssi. Вибираємо найближчий з .immediate і запускаємо аудіо. Важливо: не реагуємо на кожну зміну proximity — debounce 2-3 секунди, інакше аудіо перемикається при випадкових флуктуаціях сигналу.
Android: BluetoothLeScanner з фільтром по UUID виробника маячків. AltBeacon library спрощує ranging. Foreground Service потрібен для сканування в фоні — поки додаток активний, вистачає звичайного сканування. Bluetooth LE — офіційна документація Android.
QR-сканування. Резервний варіант. iOS: VNDetectBarcodesRequest (Vision) — швидше ніж AVMetadataOutput для одноразового сканування. Android: ML Kit Barcode Scanning. Flutter: mobile_scanner.
Введення номера вручну. Завжди як фолбек — на випадок сівшого Bluetooth або відсутності маячків.
Порівняння методів виявлення
| Метод |
Точність |
Автономність |
Ціна реалізації |
| iBeacon |
Висока (до 1 м) |
Повна (офлайн) |
Середня (маячки $10–30/шт) |
| QR-код |
Висока (залежить від камери) |
Повна (офлайн) |
Низька (паперові мітки) |
| Ручне введення |
Низька (помилки введення) |
Повна (офлайн) |
Нульова |
| NFC-мітки |
Середня (контакт) |
Повна (офлайн) |
Середня (мітки $1–5/шт) |
Офлайн-контент та структура даних
Музей з 200 експонатами — це 200 аудіофайлів, зображення та тексти. Сумарно 300–500 МБ. Стратегія завантаження:
- При першому запуску завантажуємо «легковаговий» пакет: тексти, прев'ю 200px, метадані (UUID маячків, номери експонатів)
- Аудіо завантажуємо порційно або за запитом з кешуванням
Структура сховища: CoreData/Room для метаданих експонатів (id, title, beacon_uuid, qr_code, languages). Аудіофайли — в Application Support/filesDir з маппінгом id → path. SQLite запит «знайди експонат за UUID маячка» — миттєвий.
Багатомовність: користувач обирає мову на початку. Аудіо та тексти зберігаються з суфіксом мови. Завантажуємо лише обрану мову — економимо місце.
Деталі кешування аудіо
Для потокового відтворення використовуємо AVAssetResourceLoader (iOS) та CacheDataSource (ExoPlayer). Кеш зберігається до 1 ГБ, при заповненні витісняється LRU. Тільки аудіо поточної сесії гарантовано завантажено. Користувач може попередньо завантажити все аудіо заздалегідь через налаштування.
Аудіоплеєр експоната
AVPlayer (iOS) / ExoPlayer Media3 (Android) / just_audio (Flutter). Особливості для аудіогіда:
- Автостоп при відході від експоната (proximity повернулася до far)
- Прогрес зберігається: повернувся до експоната — продовжує з місця паузи
- Швидкість відтворення: 0.8x для літніх відвідувачів, 1.5x для швидких
- Lock screen controls через MPNowPlayingInfoCenter (iOS) / MediaSession (Android)
Інтерактивна карта експозиції
Карта залів з точками експонатів. Не Google Maps — музей не хоче зовнішніх залежностей та платежів. Використовуємо SVG-карту залів: у додатку це WKWebView з інтерактивним SVG (iOS), WebView (Android) або flutter_svg з GestureDetector (Flutter).
Або нативна реалізація на Canvas/CustomPainter: завантажуємо PNG-карту як підкладку, малюємо точки експонатів поверх з масштабуванням (pinch-to-zoom).
Поточне місцезнаходження відвідувача на карті — через той же iBeacon ranging: визначаємо зал за набором видимих маячків із сильним сигналом. Не GPS — у будівлі не працює. Відмова від комерційних карт економить до кількох сотень доларів на рік на ліцензіях.
Чому CMS для музею обов'язкова?
Адміністратор оновлює тексти та аудіо без релізу додатку. Бекенд: простий REST API + S3 для медіафайлів. Додаток при запуску перевіряє version маніфесту — якщо змінився, завантажує дельту. Це економить час на модерацію та дозволяє оперативно правити екскурсійний контент.
Як реалізувати офлайн-аудіогід: процес роботи
- Аналітика та проєктування. Збираємо вимоги: кількість експонатів, залів, мов, бюджет. Визначаємо стек: нативний або крос-платформа.
- Розробка. Backend (CMS, API), мобільний додаток (плеєр, карта, виявлення), інтеграція маячків.
- Тестування. Перевірка на реальному полігоні з маячками, офлайн-режим, навантаження.
- Деплой. Публікація в App Store та Google Play, налаштування Code Signing, Provisioning Profile, TestFlight.
- Супровід. Гарантія 3 місяці, далі за договором.
Порівняння етапів за часом
| Етап |
Тривалість (базова версія) |
Тривалість (розширена версія) |
| Аналітика |
3-5 днів |
5-7 днів |
| Розробка |
2-3 тижні |
4-5 тижнів |
| Тестування |
1 тиждень |
1.5 тижня |
| Деплой |
3-5 днів |
5-7 днів |
Що входить у роботу
- Архітектурна документація та опис API
- Вихідний код додатку (репозиторій Git)
- Інструкція з експлуатації для співробітників
- Навчання персоналу (1-2 дні)
- Тестовий запуск та налагодження з реальними маячками
- Підтримка протягом гарантійного терміну
Оцінка термінів та вартість
Базова версія (QR + офлайн + плеєр + карта) — 4-6 тижнів. Версія з iBeacon та CMS — 7-9 тижнів. Точну вартість розраховуємо після аналізу вимог. Оцінимо ваш проєкт безплатно — зв'яжіться з нами для консультації.
Сертифіковані розробники з досвідом понад 5 років гарантують якість. Реалізовано 10+ аудіогідів для музеїв України та СНД. iBeacon — стандарт для proximity-рішень.
Отримайте безплатну оцінку вашого проєкту: напишіть нам, і ми підготуємо комерційну пропозицію.
Як вибрати підхід до камери в застосунках?
Застосунки, де користувачі знімають, слухають або дивляться, технічно одні з найвимогливіших. Ми стикаємося з цим щодня. Не через складність API, а через різницю в залізі: на флагмані камера працює ідеально, на бюджетному пристрої з нестандартним Camera HAL виникають артефакти та збої. На iOS стабілізація одного покоління відрізняється від іншого. Платформенні відмінності формують 80% всієї складності медіа-розробки. Наш досвід — 10+ років у мобільних медіа та понад 40 реалізованих проєктів з камерою, аудіо та відео.
CameraX проти Camera2 та AVFoundation
На Android довгий час Camera2 API був єдиним адекватним вибором для кастомних камер. Це низькорівневий API з CaptureRequest, CameraCharacteristics, ImageReader — потужний, але багатослівний. Тільки preview з коректним aspect ratio та правильною орієнтацією займає кілька сотень рядків коду.
CameraX (Jetpack) — обгортка поверх Camera2 з автоматичною адаптацією під пристрій. Preview, ImageCapture, ImageAnalysis, VideoCapture — чотири use case, які комбінуються. Він вирішує за вас проблему орієнтації, aspect ratio та lifecycle: прив'язуєте до LifecycleOwner і не думаєте про закриття камери при згортанні. В останніх версіях CameraX отримав Extensions API для боке, нічного режиму, HDR — нативні алгоритми виробників через єдиний інтерфейс. CameraX дозволяє скоротити час розробки вдвічі порівняно з Camera2.
Коли потрібен Camera2 напряму: RAW-зйомка через ImageFormat.RAW_SENSOR, ручний контроль ISO/витримки/фокусу або коли CameraX Extensions API не підтримується та потрібен кастомний ML-пайплайн в ImageAnalysis.
На iOS AVFoundation — єдиний шлях для кастомної камери. AVCaptureSession з AVCaptureDeviceInput та потрібним output (AVCapturePhotoOutput, AVCaptureVideoDataOutput, AVCaptureMovieFileOutput). Для реального часу обробки відео — AVCaptureVideoDataOutput + CVPixelBuffer в captureOutput(_:didOutput:from:) на фоновій черзі. Саме тут CoreML-моделі отримують кадри для інференсу.
Типова помилка з AVFoundation: конфігурувати сесію на main thread. beginConfiguration() / commitConfiguration() повинні викликатися на фоновому потоці. Інакше preview фрізиться, користувач бачить заморозку інтерфейсу. Ця помилка зустрічається в 70% проєктів, які ми аудитували.
Що робити з AudioFocus на Android та AudioSession на iOS?
Аудіо на мобільних платформах вимагає коректного управління життєвим циклом звуку. AudioFocus — механізм координації між застосунками. AudioManager.requestAudioFocus() з OnAudioFocusChangeListener. Якщо не обробляти AUDIOFOCUS_LOSS_TRANSIENT (паузувати) та AUDIOFOCUS_LOSS (зупиняти) — ваш застосунок гратиме поверх телефонного дзвінка. Це гарантований поганий відгук у Google Play (Wikipedia: AudioFocus).
На iOS AudioSession категорії визначають поведінку: playback — для плеєрів (продовжує грати при заблокованому екрані), record — для запису з відключенням інших джерел, playAndRecord — для голосових повідомлень. Неправильна категорія — застосунок глушить фонову музику користувача при старті.
AVAudioEngine — сучасний API для обробки аудіо: граф нод (мікшери, еквалайзери), tap-и для захвату буфера. Для мовлення в реальному часі — SFSpeechRecognizer + inputNode.installTap.
На Android для запису з шумопригніченням — NoiseSuppressor.isAvailable() + create(audioRecord.audioSessionId). Працює не на всіх пристроях, потрібен fallback.
Відео: відтворення та стрімінг
ExoPlayer (Media3) — стандарт для Android. Підтримує HLS, DASH, SmoothStreaming, прогресивне відтворення. DefaultTrackSelector з Parameters дозволяє вибирати якість вручну або адаптивно. DRM через DefaultDrmSessionManager з Widevine L1/L3.
Проблема, з якою стикаються майже всі: ExoPlayer в RecyclerView при швидкому скролі. Потрібен PlayerPool — пул перевикористовуваних плеєрів. Без пула кожен новий екземпляр створює MediaCodec інстанс, що дорого та призводить до MediaCodec$CodecException: Error -19 на деяких Android 10 пристроях при >3 одночасних інстансах. Використання пулу зменшує споживання пам'яті до 3 разів.
AVPlayer / AVPlayerViewController на iOS — для відтворення. Для кастомного UI — AVPlayerLayer + власні контроли. HLS працює нативно через AVPlayer(url:) з m3u8. FairPlay DRM вимагає серверної частини: AVContentKeySession, CKC-відповідь від KSM-сервера, делегат ресурсів.
Для Flutter — video_player як базовий шар, chewie для UI. Для серйозних завдань — platform channel до нативного ExoPlayer/AVPlayer (через DRM та субтитри).
| Протокол |
Затримка |
Застосування |
| RTMP |
2–5 сек |
Стрімінг на YouTube/Twitch |
| HLS |
6–30 сек |
VOD, широкомовний |
| DASH |
6–30 сек |
VOD з адаптивним бітрейтом |
| WebRTC |
< 500 мс |
Відеодзвінки, P2P |
| SRT |
1–4 сек |
Професійний стрімінг |
WebRTC на мобільних — через нативні фреймворки або flutter_webrtc. Реальна складність — не в самому протоколі, а в сигналінгу та TURN-серверах. Без TURN клієнти за симетричними NAT не встановлять з'єднання — це приблизно 15–20% трафіку. Coturn — стандартний open-source сервер.
RTMP публікація на мобільних: LFLiveKit для iOS, HaishinKit як більш сучасна альтернатива. На Android — rtmp-rtsp-stream-client-java або через FFmpeg з JNI. Останнє дає максимальну гнучкість, але бінарник зростає на 10–15 МБ.
Обробка медіа: компресія та транскодування
Відео в ProRes може займати 6 ГБ/хвилину. Перед завантаженням потрібна компресія. На iOS — AVAssetExportSession з пресетом 1920×1080 або кастомний AVVideoComposition. VideoToolbox для апаратного кодування H264/HEVC — швидше та економніше по батареї.
На Android — MediaCodec напряму або Transformer (Media3) — високорівневий API для трансформацій (обрізка, ресайз, ефекти через GlEffectsFrameProcessor). Для зображень — BitmapFactory.Options.inSampleSize для даунсемплінгу, Glide / Coil для кешування. Coil на Coroutines добре вписується в Compose. Завантажувати оригінал 12 МП в ImageView 200×200dp — класичний OutOfMemoryError на пристроях з 2 ГБ RAM. Тому ми завжди стискаємо зображення до 1 МБ перед відправкою.
Як реалізувати стрімінг на мобільних пристроях: покроковий план?
- Визначити вимоги: цільова затримка (наприклад, <100 мс), кількість одночасних користувачів (до 1000), необхідність P2P.
- Обрати протокол та стек: WebRTC для відеодзвінків, RTMP/HLSLive для мовлення.
- Налаштувати сигналінг (SIP, WebSocket, MQTT) та TURN-сервер.
- Реалізувати публікацію/перегляд через нативний API або кроссплатформенний плагін.
- Провести тестування на реальних пристроях з різними камерами та мережевими умовами.
- Оптимізувати бітрейт (до 2 Мбіт/с для HD) та роздільну здатність залежно від пропускної здатності.
Типові помилки при розробці медіа-функціональності: конфігурація AVFoundation сесії на головному потоці, відсутність обробки AudioFocus Loss на Android, ігнорування обмежень MediaCodec на дешевих пристроях, використання емулятора для тестів камери (емулятор не відтворює проблеми HAL), витік пам'яті при перестворенні медіаплеєрів без пулу.
Що входить в роботу?
| Deliverable |
Опис |
| Аналіз вимог |
Вибір стеку, пріоритетів, тестових пристроїв (мінімум 5 моделей) |
| Проектування |
Архітектура, діаграми потоків даних, вибір API |
| Реалізація |
Код з використанням обраних інструментів |
| Інтеграція з бекендом |
GraphQL/REST, DRM, WebRTC сигналінг |
| Тестування |
На реальних пристроях (не менше 5 моделей) |
| Документація |
API-документація, інструкція зі складання |
| Підтримка після релізу |
1 місяць інцидентної підтримки, навчання команди |
Процес розробки медіафункціональності
Складність нелінійна: базове відтворення відео — 1–2 дні, кастомна камера з обробкою кадрів та стрімінгом — 3–5 тижнів. Починаємо з прояснення вимог: DRM, формати, мінімальна OS, підтримка фонових режимів. Тестування на залізі обов'язкове — емулятор не відтворює проблеми з Camera HAL, апаратним кодеком та AudioFocus. Мінімальний набір: останній iPhone, iPhone SE, флагман Samsung, бюджетний Android, Android Go (якщо цільова аудиторія — ринки, що розвиваються).
Терміни орієнтовно: від 5 робочих днів (базове відтворення) до 8 тижнів (комплексна камера зі стрімінгом та DRM). Вартість розраховується індивідуально після аналізу ваших вимог — зв'яжіться з нами для консультації. Типовий бюджет таких проєктів: від $2,000 до $15,000.
Фраза послуги: «Робота з медіа в мобільних застосунках» — це наш профіль. Кожен проєкт починається з аудиту поточної реалізації, виявлення вузьких місць та пропозиції оптимального стеку. Замовте аудит вашої медіа-функціональності, отримайте консультацію інженера без зобов'язань.
