Многоуровневое кэширование: Browser→CDN→Varnish→Redis→DB

Мы сталкивались с проектами, где каждый запрос к странице превращался в десятки SQL-запросов. Тормозил даже простой блог. После внедрения многоуровневого кэширования время ответа упало с 2000 мс до 80 мс, а нагрузка на базу снизилась на 95%. Клиенты существенно снижают затраты на инфраструктуру после такой оптимизации. Рассказываем, как построить такую систему.

Многоуровневое кэширование — это последовательность слоёв хранения ответов. Каждый слой обслуживает запрос, не передавая его дальше. Чем ближе к пользователю попадание в кэш, тем быстрее ответ. Правильная стратегия снижает нагрузку на базу данных и сервер приложения, а также улучшает Core Web Vitals.

Почему одного уровня недостаточно?

Браузерный кэш экономит трафик, но не помогает при первом визите. CDN ускоряет доставку статики, но для динамических страниц нужен более быстрый слой. Varnish — мощный reverse proxy, но не умеет хранить сложные структуры данных. Redis решает эту задачу, но требует оперативной памяти. Комбинация этих инструментов даёт максимальный эффект: типичный сайт после настройки получает hit rate >80% на CDN и >70% на Varnish.

Рекомендуемые TTL для разных типов контента

Эти TTL нужно корректировать под частоту изменений контента. Для новостного портала HTML лучше кэшировать на 2 минуты, для корпоративного сайта — на час. Мы всегда проводим нагрузочное тестирование, чтобы удостовериться, что hit rate соответствует целевым значениям.

Как настроить браузерное кэширование?

# nginx: заголовки для браузерного кэша
location ~* \.(jpg|jpeg|png|gif|ico|css|js|woff2)$ {
    expires 1y;
    add_header Cache-Control "public, immutable";
}

location ~* \.html$ {
    add_header Cache-Control "public, max-age=0, s-maxage=300";
    add_header Vary "Accept-Encoding, Accept-Language";
}

Директива immutable говорит браузеру не проверять актуальность файла — он гарантированно не изменится. Это даёт мгновенную загрузку при повторных визитах.

Как подключить CDN?

# cloudflare page rules
- pattern: "*.company.com/assets/*"
  settings:
    cache_level: cache_everything
    edge_cache_ttl: 2592000  # 30 дней
    browser_cache_ttl: 31536000  # 1 год

CDN снимает нагрузку с origin и сокращает TTFB для географически удалённых пользователей.

Varnish: тонкая настройка

vcl 4.1;
backend default {
    .host = "app-server";
    .port = "8080";
}
sub vcl_recv {
    if (req.http.Authorization || req.http.Cookie ~ "session") { return (pass); }
    if (req.method != "GET" && req.method != "HEAD") { return (pass); }
    unset req.http.Cookie;
    return (hash);
}
sub vcl_backend_response {
    if (beresp.status == 200 || beresp.status == 301) {
        if (beresp.http.Content-Type ~ "text/html") { set beresp.ttl = 5m; }
        else if (beresp.http.Content-Type ~ "application/json") { set beresp.ttl = 1m; }
        unset beresp.http.Set-Cookie;
    }
    set beresp.grace = 1h;
}
sub vcl_deliver {
    if (obj.hits > 0) { set resp.http.X-Cache = "HIT"; }
    else { set resp.http.X-Cache = "MISS"; }
}

Согласно документации Varnish Cache, grace period позволяет обслуживать устаревший кэш, когда backend недоступен, что повышает доступность. Hash key можно кастомизировать для разделения кэша по языкам или устройствам.

Как решить проблему инвалидации кэша?

Без правильной инвалидации пользователи увидят устаревшие данные. Мы проектируем единую систему: при изменении данных отправляются HTTP PURGE на Varnish, удаляются ключи Redis и очищаются теги CDN. Пример на Python:

def on_product_updated(product_id):
    redis.delete(f"product:{product_id}")
    requests.request('PURGE', f"http://varnish:6081/products/{product_id}")
    # Cloudflare purge by tag
    requests.post(f"https://api.cloudflare.com/client/v4/zones/{zone_id}/purge_cache",
        headers={"Authorization": f"Bearer {token}"},
        json={"tags": [f"product-{product_id}"]})

Типичная ошибка — настройка слишком длинных TTL без механизма инвалидации. Мы рекомендуем использовать теги на CDN и PURGE на Varnish, чтобы гарантировать свежесть данных. В некоторых сценариях мы применяем Edge Functions для мгновенной инвалидации на границе сети.

Мониторинг hit rate по уровням

Используем Prometheus метрики: varnish_main_cache_hit / (varnish_main_cache_hit + varnish_main_cache_miss), redis_keyspace_hits_total / (redis_keyspace_hits_total + redis_keyspace_misses_total). Целевые значения указаны в таблице выше. Регулярный мониторинг позволяет своевременно корректировать TTL и выявлять проблемы с инвалидацией.

Что входит в работу?

1. Аудит текущей архитектуры кэширования — анализируем логи nginx, конфиги Varnish, параметры Redis и структуру CDN.
2. Настройка Browser Cache через nginx или .htaccess.
3. Подключение CDN (Cloudflare, CloudFront) с правилами кэширования.
4. Установка и конфигурация Varnish (4.1+) с правилами grace и hash.
5. Настройка Redis (кластер, персистентность, eviction policy).
6. Создание единой системы инвалидации с PURGE и API.
7. Нагрузочное тестирование и оптимизация TTL.
8. Документация и обучение команды.

Сроки и стоимость

Настройка полного стека — от 4 до 7 рабочих дней. Стоимость рассчитывается индивидуально и зависит от сложности проекта. Клиенты обычно окупают вложения за 2–3 месяца за счёт снижения затрат на серверы и повышения конверсии.

Частая ошибка: неправильная настройка TTL

Многие устанавливают одинаковые TTL для всех типов контента. Это приводит либо к избыточному кэшированию динамических данных, либо к слишком частой инвалидации статики. Мы подбираем TTL на основе частоты обновления контента: статика — на год, HTML — 5 минут, JSON API — 1 минута. После настройки проверяем hit rate и корректируем при необходимости.

Закажите аудит текущего кэширования — мы выявим узкие места и предложим оптимальную стратегию. Получите консультацию по настройке многоуровневого кэширования для вашего проекта.

Почему Core Web Vitals критичны для технического SEO

PageSpeed показывает 34/100 на мобильных. В Search Console — красные метрики по всем страницам категорий. Конкурент с сайтом на 3 года старше стоит выше в выдаче, несмотря на более слабые тексты. Техническая производительность стала прямым ранжирующим фактором — и разрыв между «приемлемо» и «быстро» стоит позиций. Мы решали эту проблему для десятков проектов — от интернет-магазинов до SaaS-платформ — и знаем, какие ошибки съедают ранжирование.

Core Web Vitals: что реально влияет на позиции

Google использует три метрики как сигналы ранжирования (Page Experience): LCP (Largest Contentful Paint), CLS (Cumulative Layout Shift), INP (Interaction to Next Paint, заменил FID с последнего крупного обновления алгоритма).

LCP: почему 8 секунд — это не проблема изображения

LCP измеряет время отрисовки самого большого видимого элемента страницы. Чаще всего — hero image или H1. Пороги: хорошо < 2.5s, плохо > 4s.

Типичный диагноз на реальном проекте: интернет-магазин одежды, LCP 7.8s на мобильных. Элемент — hero image категории, 4.2MB JPEG без srcset, загружается через CSS background-image (не <img>). Проблема здесь двойная: во-первых, браузер не может preload CSS background images через <link rel="preload"> стандартным способом. Во-вторых, 4.2MB на мобильном соединении — это физически медленно.

Решение по шагам:

1. Переносим hero из CSS background в <img> с fetchpriority="high" и loading="eager"
2. Конвертируем в WebP, добавляем srcset: 800w для мобильных, 1400w для десктопа
3. <link rel="preload" as="image" href="hero-800.webp" media="(max-width: 768px)"> в <head>
4. Убираем все render-blocking скрипты выше hero через defer

Итог: LCP 7.8s → 1.9s. Без смены хостинга, без CDN.

Если LCP — не изображение, а текстовый блок: проблема может быть в TTFB (медленный сервер), в render-blocking CSS/JS, или в web fonts с font-display: block.

CLS: смещения, которые раздражают пользователя и Google

CLS измеряет суммарный сдвиг элементов в процессе загрузки. Пороги: хорошо < 0.1, плохо > 0.25. CLS 0.35 — это баннер, который появляется через секунду и сдвигает всё содержимое страницы вниз.

Источники CLS:

• Изображения без заданных размеров. <img src="photo.jpg"> без width и height — браузер не резервирует место, контент прыгает при загрузке. Фикс: явные width/height или aspect-ratio в CSS.
• Рекламные блоки и виджеты. Google Ads, чат-виджеты, cookie consent — всё, что появляется после основного контента. Решение: резервировать место через min-height или загружать до рендера основного контента.
• Web fonts. FOUT (Flash of Unstyled Text) и FOIT (Flash of Invisible Text) могут вызывать переформатирование. font-display: swap с size-adjust (CSS свойство для выравнивания размеров fallback шрифта) минимизирует CLS.
• Динамический контент. Если блок появляется после загрузки (fetch данных, lazy load) — добавляем skeleton placeholder с нужными размерами.

INP: почему интерфейс «зависает» на 500ms

INP измеряет задержку ответа на любое взаимодействие пользователя: клик, тап, ввод. Пороги: хорошо < 200ms, плохо > 500ms. INP 680ms — это когда пользователь нажимает кнопку фильтра, а ничего не происходит полсекунды.

Главная причина высокого INP — заблокированный main thread. JavaScript-бандл 2.1MB парсируется и выполняется синхронно. Пока выполняется, пользовательские события не обрабатываются.

Диагностика через Chrome DevTools → Performance → взаимодействие с подозрительной задержкой → найти Long Tasks (> 50ms). Типичные виновники:

• Непрерывная обработка большого списка без requestIdleCallback или requestAnimationFrame
• Тяжёлые event listeners без debounce/throttle
• Синхронный setState в React, который триггерит полный ре-рендер сложного дерева компонентов
• Third-party scripts: livechat, аналитика, виджеты — они исполняются в том же main thread

Решения: code splitting через динамический import(), перенос тяжёлых вычислений в Web Workers, React.memo + useMemo для предотвращения лишних ре-рендеров, scheduler API для приоритизации задач.

Schema.org: разметка, которую читают роботы

Структурированные данные через JSON-LD — не прямой ранжирующий фактор, но дают rich snippets в выдаче (звёзды рейтингов, цены, дата публикации), что увеличивает CTR на 20–30%.

Типы разметки по сценариям:

• E-commerce: Product с offers (цена, наличие, валюта), aggregateRating (рейтинг из отзывов), brand. BreadcrumbList для навигации. ItemList для страниц категорий.
• Статьи и блог: Article или BlogPosting с author, datePublished, dateModified, image. Organization и WebSite на главной странице — помогают Google связать сайт с брендом.
• Локальный бизнес: LocalBusiness с address, telephone, openingHours, geo. Критично для локального SEO.
• FAQ: FAQPage с mainEntity — вопросы и ответы могут появляться прямо в выдаче как раскрывающийся блок.

Валидация: Google Rich Results Test и Schema Markup Validator. Частая ошибка — указать price без priceCurrency, или ratingValue без reviewCount. Google игнорирует неполную разметку.

Как проводить технический SEO-аудит

Сканируемость. robots.txt блокирует нужные страницы (или наоборот, не блокирует служебные). Canonical URLs настроены неправильно — дублируются страницы с UTM-метками. Sitemap содержит страницы с noindex. Всё это Screaming Frog или Sitebulb покажут за час сканирования.

Core Web Vitals в масштабе. Google Search Console → Core Web Vitals → смотрим не отдельные страницы, а группы URL (шаблон страницы продукта, шаблон категории, блог). Проблема обычно системная — одна ошибка в шаблоне портит сотни страниц.

JavaScript SEO. Google рендерит JavaScript, но с задержкой (иногда дни для полного рендера). Для критичного контента — SSR или SSG обязательны. Проверяем через Search Console → Inspect URL → View Crawled Page: что видит Googlebot.

Internal linking. Орфанные страницы (нет входящих внутренних ссылок) теряют PageRank. Битые ссылки (404) — сигнал качества.

Что входит в работу

• Документация: отчёт с найденными проблемами, roadmap по приоритетам, тайминги для каждого этапа.
• Доступы: настройка мониторинга (SpeedCurve, Sentry Search Console), передача dashboard.
• Обучение: разбор типичных ошибок для вашей команды (1–2 созвона).
• Поддержка: сопровождение в течение месяца после деплоя — проверка метрик, фикс регрессий.

Свяжитесь с нами — мы оценим ваш проект за 2 дня и покажем, сколько позиций можно вернуть за счёт технического SEO. Опыт работы с проектами уровня сотен тысяч посещений в месяц — гарантируем измеримый результат в Core Web Vitals до/после. Закажите аудит в этой форме — получите персональный чек-лист из 15 пунктов.