STRUCTUREцифровые системыОбсудить проект
НОВОСТЬ · Engineering

Почему интеграционный тест падал только в CI: разбор скрытой зависимости от порядка запуска

Автор технического кейса показал, как случайный порядок выполнения Java-тестов способен обнажить ошибку в подготовке общей базы. Вместо увеличения таймаутов расследование свело редкий сбой к конкретной паре тестовых классов.

Главное

В примере рассматривается сервис заказов на Spring Boot, интеграционные проверки на JUnit 5 и H2 в памяти. Проверка скидки новому покупателю обычно проходила, но иногда возвращала сумму без скидки. Запуск того же теста локально ничего не выявлял. Это важное различие: ошибка проявлялась в ответе API с неправильной суммой, а не в ожидании сервера или сетевом таймауте.

Автор сравнил не только неудачные сборки, но и успешные прогоны. В профиле CI Maven Surefire использовал случайный порядок классов, тогда как локальные проверки обычно запускались отдельно или в устойчивой последовательности. Во всех рассмотренных падениях прямо перед тестом скидки оказывался класс проверки бонусных баллов. Такая зависимость от соседства оказалась полезнее предположений о нестабильном раннере.

Подробности

Ключевой механизм связан с общим состоянием приложения. Spring TestContext способен повторно использовать уже поднятый контекст, а вместе с ним сохраняется тестовая база H2 в памяти. Тест бонусов создавал заказ через HTTP-запрос, но его аннотация Transactional не откатывала работу серверного обработчика. Поэтому запись оставалась, и тот же условный покупатель переставал быть новым для проверки скидки.

Воспроизведение построили на настройке случайного порядка в Maven Surefire. Плагин сохраняет начальное значение генератора, по которому можно повторить последовательность классов в аналогичном окружении. Если версия плагина, набор тестов или порядок обнаружения классов отличаются, одинаковое значение не обязано давать одинаковый результат. Надёжная альтернативная проверка — явно запустить подозрительную пару в установленной последовательности.

Что это меняет

Минимальная правка для последовательного исполнения — готовить чистую базу перед тестом, а не рассчитывать, что предыдущая проверка убрала за собой все записи. В дополнение автор предлагает создавать уникальных покупателей вместо общей фикстуры и, при необходимости, разделять контексты. При параллельном запуске простое глобальное очищение таблиц само способно создавать конфликты, поэтому способ изоляции нужно выбирать под режим выполнения.

После исправления одной зелёной сборки недостаточно: исходная ошибка и раньше встречалась редко. Проверять нужно именно порядок, на котором воспроизводился сбой, затем повторить серию запусков с разными последовательностями. Кейс показывает практическое правило для CI: прежде чем лечить нестабильность ожиданиями и ретраями, сохранить факты о раннере, длительности и соседних тестах, чтобы локализовать воспроизводимую причину.

Первоисточник

Материал подготовлен STRUCTURE по открытой публикации Habr. Текст и иллюстрации первоисточника не воспроизводятся целиком.

Читать исходную новость целиком ↗