Кальтер / Блог

Как подготовить переход на CDN без перегрузки origin

Схема cutover для каталога из 10 000 URL: кэш, нагрузка origin, Googlebot и условия остановки.

Материал подготовлен с помощью ИИ; источники проверены редакцией ZASLON. Все примеры и значения, если не указано иное, учебные и не описывают реальные проверки или операции.

Переезд на CDN
Редакционная схема: Переезд на CDN. Условные обозначения; не реальные данные, результат теста или клиента.

При переезде на CDN рост запросов к origin зависит не только от числа регионов. Cache key, заголовки Vary, TTL, очистка и доля промахов меняют то, сколько копий контента CDN запросит заново. Поэтому раскладывай запуск на измеряемые этапы и заранее задай условия остановки; сам факт доставки через CDN не гарантирует обход или индексацию.

Google описывает переезд на CDN через постепенное переключение, наблюдение за origin и аккуратное управление кэшем; это техническая рекомендация, а не обещание поискового результата (публикация Google Search Central). Ниже — собственная схема планирования для гипотетического сайта, не проведённый тест и не настройки конкретного провайдера.

Учебный сценарий: 10 000 URL

Предположим, сайт содержит 10 000 публичных URL и CDN обслуживает три условных региона. Раздели URL на классы: неизменяемые assets, часто меняющиеся страницы, приватные/персональные ответы и редко посещаемый длинный хвост. Не считай, что три региона равны ровно трём origin-запросам на URL: разные cache keys, Vary, cookies, параметры, TTL и eviction могут дать больше или меньше промахов.

Этап Что сделать Что наблюдать Условие остановки
Инвентаризация Снять список hostnames, типов URL, динамических ответов и текущих origin limits Обычные baseline: request rate, latency, 5xx, cacheability Не включать в CDN динамический/приватный ответ, пока его ключ и cache policy не проверены
Пилот Переключить ограниченный hostname или тестовый сегмент по плану отката Cache HIT/MISS, долю запросов в origin, ошибки, latency по классу URL Вернуть предыдущий маршрут при росте 5xx, перегрузке origin или ошибке содержимого
Постепенное расширение Увеличивать долю по заранее выбранным ступеням; фиксировать время и конфигурацию Те же метрики плюс cache key/Vary и ответы на повторный запрос Не расширять следующий сегмент, пока предыдущий не стабилен и не объяснены всплески MISS
Прогрев Начать с наиболее посещаемых и безопасно кешируемых страниц; ограничить concurrency и скорость Очередь, origin capacity, ошибки и эффект на реальных посетителей Пауза прогрева при исчерпании установленного запаса мощности
Завершение Проверить origin bypass, старые пути, purge и rollback Изменения нагрузки после полного окна наблюдения Завершать только при наличии владельца обратного переключения и сохранённой конфигурации

Как управлять прогревом

Сначала определи, что именно прогреваешь: ключ cache URL, комбинацию cookies/языка/устройства или отдельную версию контента. Убери дубли и несущие параметры только по проверенной политике, иначе можно прогреть не ту копию. Для длинного хвоста поставь ограниченную очередь и параллелизм, а не отправляй тысячи одновременных fetch. Начни с малой порции, сравни фактические MISS и нагрузку, затем реши, допустим ли следующий шаг.

В одной таблице веди число URL в очереди, реально обработанные URL, cache HIT/MISS, origin RPS, p95 latency, 5xx, время и версию конфигурации. Назначь владельца наблюдения и порог остановки до запуска; не придумывай универсальные значения — они зависят от лимитов и baseline именно твоего origin.

Googlebot и поисковый результат

Отдельно проверяй доступность CDN и логи подтверждённого Googlebot по документированному методу верификации. Не классифицируй бота по одному User-Agent. Сравнивай запрошенные посадочные страницы и ошибки, а не все запросы CDN: значительная доля трафика может быть обычными пользователями или ресурсами. В Search Console смотри отчёты после обработки, но не считай рост crawl rate доказательством индексации.

До смены маршрута сохрани DNS/CDN настройки, текущие origin endpoints, TTL, план переключения обратно и ответственное лицо. Не меняй DNS автоматически в рамках статьи: конкретный порядок зависит от провайдера и доступов. Если система достигла заранее установленного предела, останови расширение, сохрани метрики, верни предыдущую ступень согласно плану и разберись, какой cache key или класс ответов вызвал нагрузку.

Как отличать поисковые переходы от технических запросов, разобрано в памятке по Referer Google.