Нагрузочное испытание можно принять, если до запуска стороны зафиксировали профиль нагрузки, похожий на ожидаемую работу, тестовую среду, измеряемые показатели и заранее заданные численные пределы, а отчёт показывает результат для каждого критерия. Формулировка «работает быстро» не даёт проверяемого условия приёмки. AWS рекомендует устойчивые нагрузочные испытания, соответствующие рабочей нагрузке, чтобы проверить требования и найти точки отказа; это инженерная рекомендация, а не универсальный SLA для любого проекта. AWS Well-Architected: load test your workload.
Сначала зафиксируй профиль, потом запускай тест
В плане должны быть ответы на вопросы:
- Какие пользовательские операции входят в проверку: поиск, оформление заказа, отчёт, вход или другой критичный сценарий работы?
- Какой профиль имитирует ожидаемый режим: число одновременных пользователей или запросов, доли операций, постепенное наращивание нагрузки (ramp-up), паузы и длительность?
- Какие данные используются и насколько они похожи по объёму и распределению на ожидаемые? Не помещай реальные персональные данные в тестовый набор без отдельного основания и защиты.
- Насколько среда сопоставима с production: конфигурация, сервисы, размеры ресурсов, кэш, база и сетевые зависимости?
- Какие метрики и пороги согласованы до старта: например, задержка p95, пропускная способность, доля ошибок и пределы ресурсов?
- Кто запускает тест, кто наблюдает систему и какие свидетельства попадут в отчёт?
AWS перечисляет как антипаттерны тестирование на конфигурации, не похожей на рабочую, проверку только отдельных компонентов и набора запросов, который не отражает реальное использование. Однако AWS не назначает за стороны значения p95, ошибок или числа одновременных пользователей. Их следует получить из пользовательских требований и закрепить в критериях проекта до прогона.
Учебный пример: CRM-поиск
Допустим, в договорённом плане указаны 50 виртуальных пользователей, плавный выход на нагрузку за 2 минуты и 10 минут измерения на синтетической копии CRM. Для поиска задано: p95 не выше 1,2 секунды, доля ошибок ниже 1%, а заданное количество одновременных пользователей должно удерживаться в течение всего теста. Это придуманные для примера пороги, а не рекомендация AWS или SLA ZASLON.
Отчёт показывает p95 1,5 секунды, ошибки 0,4%, нагрузка удерживалась. Значит, критерий ошибок пройден, критерий времени ответа не пройден, а общий сценарий нельзя пометить как принятый без согласованного решения по провалу. Усреднённое время ответа не отменяет порог p95: распределение задержек важно именно потому, что самые медленные запросы могут ухудшать опыт части пользователей.
| Условие из плана | Результат | Решение |
|---|---|---|
| p95 ≤ 1,2 с | 1,5 с | Не пройдено |
| Ошибки < 1% | 0,4% | Пройдено |
| 50 пользователей удержаны 10 мин | Да | Пройдено |
Что должно быть в отчёте
Попроси точную версию приложения и конфигурацию среды, сценарии и их доли, источник и объём данных, временную шкалу нагрузки, графики метрик, ошибки и ограничения теста. Для каждого порога укажи целевое и измеренное значения, затем отметь: пройдено или не пройдено. Зафиксируй, какие системы были заменены имитациями или исключены: если тест не включал платёжный провайдер или внешнюю CRM, он не доказывает готовность всей цепочки.
Повторный прогон после исправления должен использовать тот же профиль, либо явно объяснить отличие, иначе сравнение будет неоднозначным. Сохраняй исходный отчёт и решай исключения через процедуру договора: подрядчик не должен задним числом менять цель приёмки после просмотра неудобного результата.
Не запускай нагрузку на рабочей системе без отдельного согласованного плана, уведомления владельцев и контроля влияния. Мощный прогон способен затронуть пользователей и сторонние системы; сначала выясни, где тест разрешён. Эта статья не задаёт универсальный уровень обслуживания (SLA): критерии зависят от приложения, бизнес-риска и реального профиля. Общая схема проверки заказной системы по ролям и бизнес-операциям есть в материале о функциональной приёмке.
