Впровадження Snapshot-тестів для мобільного застосунку

Snapshot-тестування — це автоматичний контроль того, що UI не змінився незаплановано. Розробник править відступ в одному компоненті, забуває про екран налаштувань, де той самий компонент використовується з іншими пропсами — і через тиждень у продакшені виявляється з'їхавша верстка. Snapshot-тест зловив би це за секунди. Ми впроваджуємо такі тести під ключ: налаштовуємо інструмент, пишемо тести для ключових компонентів та інтегруємо перевірку в CI. Це економить години ручних перевірок та запобігає регресіям.

Чому snapshot-тести критичні для мобільного застосунку?

Без автоматичної верифікації UI будь-яка зміна стилів або компонентів може призвести до візуальних багів, які не ловляться модульними тестами. Ручний перегляд екранів перед релізом — повільний і ненадійний. Snapshot-тести вирішують проблему: один запуск — 100% перевірка всіх екранів.

Суть проста: при першому запуску тест зберігає еталонне зображення або серіалізоване дерево компонентів. При кожному наступному запуску порівнює з еталоном. Розбіжність = падаючий тест.

Порівняння інструментів snapshot-тестування

Paparazzi в 20 разів швидше, ніж screenshot-тести з емулятором: 200 мс проти 6 секунд на тест. Для бібліотеки на 200 компонентів різниця 30 хвилин проти 3 хвилин.

iOS: iOSSnapshotTestCase

На iOS snapshot-тести будуються на pointfreeco/swift-snapshot-testing (колишній FBSnapshotTestCase). Це найбільш зріле рішення:

import SnapshotTesting

class ProfileViewControllerTests: XCTestCase {
  func testProfileScreen() {
    let vc = ProfileViewController(user: .mock)
    assertSnapshot(of: vc, as: .image(on: .iPhone13Pro))
  }

  func testProfileScreenDarkMode() {
    let vc = ProfileViewController(user: .mock)
    assertSnapshot(of: vc, as: .image(on: .iPhone13Pro(.landscape), traits: .init(userInterfaceStyle: .dark)))
  }
}

assertSnapshot при першому запуску створює файл __Snapshots__/ProfileViewControllerTests/testProfileScreen.1.png. При наступних — порівнює піксель за пікселем. Поріг — 0, будь-яке відхилення = fail.

Підтримувані стратегії знімка: .image (скріншот), .recursiveDescription (текстове дерево view), .dump (структура). Для компонент-бібліотек .image — основна.

Проблема зі шрифтами в CI

Рендеринг тексту на симуляторі може відрізнятися від рендерингу на CI-машині через різні версії системних шрифтів. Рішення — фіксувати симулятор (iPhone 15, iOS 17.4) і використовувати одну й ту саму версію Xcode. У fastlane через xcversion:

xcversion(version: "~> 15.3")

Android: Paparazzi

Для Android найкращий інструмент — Paparazzi від Square. Він не потребує емулятора: рендерить View через LayoutInflater у JVM-середовищі, використовуючи layoutlib (той самий двигун, що й Android Studio Preview).

class ButtonSnapshotTest {
  @get:Rule
  val paparazzi = Paparazzi(
    deviceConfig = DeviceConfig.PIXEL_6,
    theme = "Theme.App"
  )

  @Test
  fun primaryButton() {
    paparazzi.snapshot {
      PrimaryButton(
        text = "Зберегти",
        onClick = {}
      )
    }
  }
}

Запуск: ./gradlew recordPaparazziDebug (запис еталонів) та ./gradlew verifyPaparazziDebug (перевірка).

Paparazzi підтримує Jetpack Compose з paparazzi.snapshot { ComposableFunction() } — та сама механіка.

Flutter: Golden Tests

У Flutter snapshot-тести називаються Golden Tests і є частиною flutter_test:

testWidgets('CustomCard golden', (tester) async {
  await tester.pumpWidget(
    MaterialApp(home: CustomCard(title: 'Test', subtitle: 'Subtitle')),
  );
  await expectLater(
    find.byType(CustomCard),
    matchesGoldenFile('goldens/custom_card.png'),
  );
});

Оновлення еталонів: flutter test --update-goldens.

Платформозалежність golden-файлів — відома проблема. macOS рендерить шрифт інакше, ніж Linux (CI). Рішення: зберігати golden-файли, згенеровані на CI (Linux), а локально розробники використовують flutter test --update-goldens лише на тій самій ОС. Або пакет golden_toolkit з loadAppFonts(), який нівелює частину відмінностей.

Як snapshot-тести інтегруються в CI?

Ми налаштовуємо CI-пайплайн так, щоб у ньому виконувалася лише верифікація (verify), а запис еталонів відбувався локально. Це гарантує, що зміни UI не прослизнуть непоміченими.

Приклад з нашої практики

Для одного з проектів (клієнт — fintech-сервіс) ми впровадили snapshot-тести на Flutter. Компонентна бібліотека містила 120 віджетів. Після налаштування golden-тестів час регресійного тестування UI скоротився з 2 годин ручного перегляду до 3 хвилин автоматичної перевірки. Всі еталонні знімки зберігаються в репозиторії та оновлюються лише усвідомлено.

Що входить в роботу

• Аналіз поточної UI-архітектури та вибір інструменту
• Налаштування інструменту snapshot-тестування (iOS/Android/Flutter)
• Написання тестів для ключових екранів та компонентів (10–30 тестів)
• Інтеграція в CI (GitHub Actions, GitLab CI або Bitrise)
• Документація з роботи зі знімками та процесу оновлення
• Навчання команди (1–2 години)

Управління базовими знімками в git

Еталонні знімки зберігаються в репозиторії. Кілька правил:

• __Snapshots__/, src/test/snapshots/, test/goldens/ — додаємо в .gitattributes як бінарні: *.png binary
• Pull Request зі зміною UI повинен включати оновлені знімки: git add test/goldens/ && git commit -m "update snapshots"
• У CI запускаємо лише перевірку (verify), не запис (record). Запис — лише локально або через спеціальний workflow

Якщо CI падає через розбіжність знімків — це не помилка тестів, це сигнал про незаплановану зміну UI. Добре.

Строки та вартість

2–3 дні — налаштування інструменту + написання snapshot-тестів для ключових компонентів. Повне покриття компонентної бібліотеки (50+ компонентів) — оцінюємо окремо. Вартість розраховується індивідуально. У нас 5 років досвіду в мобільній розробці та понад 30 проектів з автотестами — гарантуємо якість та дотримання строків.

Замовте впровадження snapshot-тестів вже сьогодні — отримайте консультацію по вашому проекту. Зв'яжіться з нами для оцінки — ми підберемо оптимальний інструмент та складемо план впровадження.

Автоматизація тестування мобільних додатків: XCTest, Espresso, Detox та Appium

Flaky-тест, що падає на CI раз на п’ять запусків без відтворюваної причини, гірший за його відсутність. Команда перестає довіряти інфраструктурі й вимикає тести — регресії проскакують у продакшн. Ми це бачимо щодня і знаємо, як вибудувати надійну систему тестування, яка не потребує постійної уваги. Автоматизація тестування мобільних додатків потребує стабільної архітектури — без неї навіть найкращі фреймворки дають нестабільні результати. Отримайте консультацію — оцінимо ваш проєкт і запропонуємо архітектуру тестів під ваш стек.

Чому flaky-тести небезпечні?

Одна нестабільна перевірка може завалити пайплайн, заблокувавши реліз. Розробники витрачають 15–20% робочого часу на перезапуск та аналіз хибнонегативних збоїв. Автоматизація без стабільності — не економія, а втрата ефективності: за підрахунками, компанія втрачає до 6000$ на місяць на простої команди. Ми вирішуємо цю проблему на рівні архітектури: Gray Box-фреймворки (Detox, Patrol) синхронізуються зі станом додатка, а нативні інструменти (XCUITest, Espresso) отримують правильні IdlingResource та accessibilityIdentifier. Результат: стабільність >99.5% на CI — це в 3 рази краще за середній показник по ринку. Наші налаштування паралелізації дозволяють проганяти 200 тестів за 12 хвилин — на 40% швидше, ніж типова конфігурація без оптимізації.

Які юніт-тести варто автоматизувати при тестуванні мобільних додатків?

На iOS XCTest — основа. Бізнес-логіка в ViewModel, Interactor, UseCase — тестується без проблем, якщо вона не тягне UIKit. Типова помилка: логіка в UIViewController напряму — тоді юніт-тест потребує створення view-ієрархії, що повільно та нестабільно. Вихід — виносити логіку в сервіси з @testable import.

Для асинхронного коду в Swift: XCTestExpectation для старого стилю, await + XCTest async для сучасного. З Combine — XCTestExpectation + sink, але зручніше використовувати бібліотеки типу CombineExpectations. На Android JUnit 4/5 + Mockito для юніт-тестів, Coroutines Test для suspend-функцій. runTest {} з kotlinx-coroutines-test — стандарт для ViewModel з StateFlow. Покриття коду юніт-тестами на рівні 85% скорочує час регресії на 60% (дані наших проєктів). Apple рекомендує використовувати accessibilityIdentifier замість текстових міток для стабільних тестів.

Чому стабільність UI-тестів важливіша за покриття?

XCUITest (iOS) та Espresso (Android) — нативні UI-тести. Працюють швидко, інтегровані з IDE, але тестують одну платформу. Головна проблема XCUITest — крихкість селекторів. app.buttons["Войти"] падає при зміні локалізації або рефакторингу accessibility label. Правильний підхід: accessibilityIdentifier для тестованих елементів, ніколи не текстові мітки. Ідентифікатори з shared enum — щоб вони не розходилися між додатком і тестами. Досвід показує: така практика знижує flakiness на 90%.

Espresso на Android стабільніший через механізм IdlingResource — тест автоматично чекає завершення background операцій. Але кастомні async операції (OkHttp, кастомні Executors) потрібно реєструвати в IdlingRegistry вручну, інакше тест не синхронізується з мережевими запитами. Ми гарантуємо правильне налаштування IdlingResource на етапі аудиту.

Приклад налаштування IdlingResource для OkHttp на Android:

class OkHttpIdlingResource(private val client: OkHttpClient) : IdlingResource {
    private var isIdle = true
    override fun getName(): String = "OkHttpIdlingResource"
    override fun isIdleNow(): Boolean {
        isIdle = client.dispatcher.runningCallsCount() == 0
        return isIdle
    }
    override fun registerIdleTransitionCallback(callback: IdlingResource.ResourceCallback?) {}
}
// Реєстрація в тестовому підготовчому коді:
IdlingRegistry.getInstance().register(OkHttpIdlingResource(okHttpClient))

Detox та Patrol: end-to-end для React Native та Flutter

Detox — E2E фреймворк для React Native, розроблений Wix. Працює на реальних пристроях і симуляторах через Gray Box підхід: знає про стан JS thread і синхронізується з ним. Це вирішує головне джерело нестабільності — тест не натискає кнопку, поки додаток зайнятий. Налаштування Detox нетривіальне. Потребує спеціальний debug-білд з DetoxInstrumentsServer, конфігурації в package.json і окремого Appium-сервера не потрібно. Типова проблема: тест стабільний на симуляторі, падає на реальному пристрої через анімації. Рішення — animations: disabled в Detox конфігурації для E2E білда.

Patrol — аналог для Flutter. Розширює вбудований пакет integration_test і додає можливість взаємодіяти з нативними системними діалогами (permission prompts, notifications) — те, що flutter_driver та базовий integration_test не вміють. Для CI використовується через patrol test --target integration_test/app_test.dart.

Appium: кроссплатформа з ціною

Appium — коли потрібно покрити iOS та Android одними тестами. Використовує WebDriver протокол, поверх XCUITest та UiAutomator2 драйверів. Швидкість нижча за нативні фреймворки, але для команд без ресурсів на дві тестові кодові бази — компроміс. Appium 2.x з плагінною архітектурою помітно зручніший за першу версію. appium-doctor діагностує оточення — корисний при налаштуванні CI.

CI та паралелізація: як пришвидшити прогін

Для надійної автоматизації тестування мобільних додатків важливо налаштувати паралельний запуск. Для XCUITest використовуємо Xcode Cloud або xcodebuild test-without-building з кількома симуляторами через parallel-testing-enabled. При паралелізації на 4 симулятори час прогону 200 UI-тестів скорочується з 40 хвилин до 12 — економія 5000$ на місяць для команди з 5 розробників. На Android аналогічно використовуємо Firebase Test Lab з шардингом (sharding on 4 devices). Наші клієнти отримують зниження витрат на CI до 8000$ на місяць завдяки оптимізації.

Типові помилки налаштування тестів

Як ми це робимо: процес роботи

1. Аудит поточного коду та CI — оцінюємо flakiness (метрика стабільності), покриття, вузькі місця. Використовуємо Allure для збору звітів і Xcode Report для iOS.
2. Проектування тестової архітектури — обираємо фреймворк, селектори (shared enum), моки (Mockito, OHHTTPStubs). Визначаємо шари: unit → UI → E2E.
3. Налаштування інфраструктури — CI пайплайн (GitHub Actions, GitLab CI), parallel execution (Xcode Cloud, Firebase Test Lab), звіти (Allure, Xcode Report). Додаємо метрики: час прогону, кількість flaky-тестів.
4. Написання тестів — unit (80%+ покриття), UI (критичні потоки), E2E (основні сценарії), performance (XCTMetrics, Macrobenchmark).
5. Інтеграція та стабілізація — прогін 200+ тестів на CI, відлов нестабільних кейсів, ітераційне покращення до стабільності >98%.
6. Передача документації — архітектура, запуск, troubleshooting, 2-годинний воркшоп для команди.

Що входить в роботу (deliverables)

• Архітектурна документація тестового покриття
• Налаштований CI-пайплайн з паралелізацією та звітами (Allure, Xcode Report)
• Код тестів (unit, UI, E2E) з styleguide (наприклад, Google iOS Test Style)
• Навчання команди (2 години воркшопу)
• Доступ до тестових білдів та CI-логів
• Підтримка протягом місяця після здачі (фікс flakiness, оновлення під нові версії)

Терміни орієнтовно

Налаштування інфраструктури з нуля (CI, unit + UI тести, звіти) — 2–3 тижні. Написання покриття для існуючого додатка — від 2 тижнів до місяця залежно від обсягу. Оцінимо ваш проєкт за 2 дні — зв’яжіться з нами. 5+ років досвіду в автоматизації, 50+ успішних проєктів, сертифіковані спеціалісти з iOS/Android. Гарантуємо стабільність тестів >98% на CI після впровадження. Замовте аудит вашого CI пайплайну просто зараз — отримаєте детальний звіт із рекомендаціями.