Сопоставьте идентификатор артефакта в отчёте CI с версией процесса, который ответил на тестовый запрос. Адрес стенда мог остаться прежним после выкладки. Если запрос попал в старую сборку, успешный тест ничего не говорит о готовности кандидата.

Пропустите через проверку две разные сборки

В условном примере артефакт A обслуживает общий адрес, а B только что развернули рядом. Проверка запрашивает страницу входа и получает HTTP 200 от A. Чтобы обнаружить это на стенде, оставьте обе версии запущенными, направьте пробный запрос на общий адрес и сравните версию ответа с ожидаемой B. При расхождении проверка должна остановиться до выполнения сценариев. Затем повторите её через маршрут кандидата.

Пусть отчёт хранит идентификатор сборки, окружение и фактическую версию ответа. Для контейнера подойдёт неизменяемый digest образа, если сборка и развёртывание отслеживают его. Если приложение сообщает собственную версию, убедитесь, что она вшита при сборке. Значение из общей переменной окружения может совпасть у двух разных артефактов.

НаблюдениеРешение
Ответила предыдущая сборкаПроверить адрес, правила маршрутизации и версию экземпляра
Ответила нужная сборка, но сценарий упалСохранить результат и отложить переключение трафика
Версия меняется от запроса к запросуПроверить, что весь тестовый маршрут закреплён за одним кандидатом
Версия совпала, сценарии прошлиПривязать результаты к этому кандидату для последующей выкладки

Если тест запускает несколько сценариев параллельно, сохраняйте фактическую версию для каждого запроса на входе в сценарий. Так смешанный результат не превратится в отметку о том, что вся проверка прошла на нужной сборке.

Готовность развёртывания и проверка сценария

Успешное развёртывание показывает состояние инфраструктуры. Для проверки приложения выберите короткий маршрут, который затрагивает изменившуюся часть системы. Например, после изменения поиска запросите товар из заранее известного тестового набора и сравните его идентификатор. Успешная загрузка главной страницы при этом может оказаться совершенно бесполезной.

В Kubernetes команда kubectl rollout status по умолчанию отслеживает последний rollout. Если во время ожидания начинается новый, команда переключается на него. Параметр --revision позволяет отслеживать конкретную ревизию. Результат этой команды дополняет проверку приложения через маршрут кандидата.

Повторный запуск после сбоя

Если проверка оборвалась из-за временного сбоя стенда, повторите её с тем же идентификатором кандидата. Когда на стенде уже запущена другая сборка, прежний отчёт нельзя использовать для неё. Откат также фиксируйте как отдельное развёртывание. Даже знакомый артефакт может работать с другой конфигурацией или схемой данных.

Для расследования хватит идентификатора кандидата, адреса тестового маршрута, фактической версии первого ответа и одного упавшего сценария. Сравните их с записью о переключении трафика. Это покажет, была ли проверка проведена для той сборки, которую получили пользователи.

Проверенные источники