Реалізація мультикамерного запису в мобільному застосунку
Одночасний запис із фронтальної та задної камери — функція, яку підтримують не всі пристрої, та саме тут розробники частіше за все виявляють, що API складніше, ніж здається за документацією.
Обмеження по залізу
На iOS AVCaptureMultiCamSession доступна тільки на iPhone XS та новішу (A12+). AVCaptureMultiCamSession.isMultiCamSupported — перше, що перевіряємо. На старіших пристроях — graceful degradation: тільки одна камера або послідовний запис.
На Android мультикамерність через Camera2 API: CameraCharacteristics.LOGICAL_MULTI_CAMERA_SENSOR_TYPE та список фізичних камер через getPhysicalCameraIds(). Одночасний захват з двох фізичних камер доступний з Android 9 (API 28), але реальна підтримка залежить від виробника — Samsung та Pixel працюють стабільно, деякі MediaTek-пристрої мають обмеження.
iOS: AVCaptureMultiCamSession
let session = AVCaptureMultiCamSession()
// Задня камера
let backInput = try AVCaptureDeviceInput(device: backCamera)
let backOutput = AVCaptureMovieFileOutput()
let backConnection = AVCaptureMultiCamSession.Connection(
inputPort: backInput.ports[0], output: backOutput)
// Фронтальна камера
let frontInput = try AVCaptureDeviceInput(device: frontCamera)
let frontOutput = AVCaptureMovieFileOutput()
session.addInputWithNoConnections(backInput)
session.addOutput(backOutput)
session.addInputWithNoConnections(frontInput)
session.addOutput(frontOutput)
session.addConnection(backConnection)
Важливо: hardwareCost та systemPressureCost сесії можуть перевищити допустимий ліміт. Зменшуємо розділення однієї з камер до 720p, якщо hardwareCost > 1.0. Інакше startRunning() завершиться з помилкою без явного повідомлення.
Picture-in-Picture при записі
Два відеопотоки записуються в окремі файли. Для фінального PiP-відео — AVMutableComposition: основний потік на весь екран, другий — масштабуємо через AVMutableVideoCompositionLayerInstruction.setTransform() у кут. AVVideoCompositionInstruction із двома layerInstructions збирає итоговий файл.
Android: Camera2 мультикамера
val cameraManager = getSystemService(CameraManager::class.java)
val multiCameraId = cameraManager.cameraIdList.firstOrNull { id ->
val chars = cameraManager.getCameraCharacteristics(id)
chars.get(REQUEST_AVAILABLE_CAPABILITIES)
?.contains(REQUEST_AVAILABLE_CAPABILITIES_LOGICAL_MULTI_CAMERA) == true
}
Відкриваємо CameraDevice, створюємо CaptureSession із поверхнями обох камер. Для CameraX — CameraSelector із фізичним ID через CameraSelector.Builder().addCameraFilter().
Flutter
Прямий мультикамерний захват через camera (pub.dev) не підтримується повністю. Рішення — MethodChannel + рідна реалізація на Swift/Kotlin, яку передаємо у Flutter через Texture віджет.
Управління ресурсами
AVCaptureMultiCamSession споживає значно більше енергії та пам'яті, ніж одиночна сесія. На iPhone 12 mini session.hardwareCost при двох потоках у 1080/30fps може досягати 0.9–1.0. Перевищення значення 1.0 приведе до того, що startRunning() молчки повернь помилку без виклику делегата. Рішення: зменшуємо розділення однієї з камер до 720p або знижуємо frameRate до 24fps — вибираємо AVCaptureDevice.Format з мінімальним videoSupportedFrameRateRanges.
systemPressureCost — тепловий показник. Підписуємось на AVCaptureSession.systemPressureStateNotification, при level == .critical знижуємо frameRate до 15fps, при level == .shutdown зупиняємо запис — інакше система принудово убьє сесію.
Орієнтири за часом
3–5 днів: реалізація на iOS (основний обсяг) + базова версія на Android. PiP-композиція фінального відео — плюс 1–2 дні.