У меня есть функциональные тесты для приложения Grails, в которых используются Геб и Спок. Иногда функциональный тест завершается неудачно из-за тайм-аутов или другого спорадического поведения. В предыдущих проектах, использующих TestNG, у меня был бы retryAnalyzer, который просто запускал бы повторную попытку во время выполнения теста, чтобы увидеть, не сработает ли он оба раза (а затем потерпит неудачу по-настоящему).
Как мне заставить Спока повторить неудачный тест?
Я знаю, что этому вопросу уже год, но у нас была та же проблема. Следуя предложению Питера, я создал расширение Spock (https://github.com/anotherchrisberry/spock-retry).
Если у вас есть базовая спецификация (как в нашем случае), вы можете просто добавить к ней аннотацию @RetryOnFailure:
@RetryOnFailure
class BaseFunctionalSpec extends Specification {
// all tests will execute up to two times before failing
}
Или вы можете добавить его к определенной функции:
class SomeSpec extends Specification {
@RetryOnFailure(times=3)
void 'test something that fails sporadically'() {
// will execute test up to three times before failing
}
}
Вам нужно будет написать небольшое правило JUnit (например, что-то вроде https://gist.github.com/897229) или расширение Spock. Вероятно, вам придется жить с некоторыми ограничениями, такими как повторное использование одного и того же экземпляра спецификации и JUnit, просто сообщающий об одном тесте, но, надеюсь, ничего, что полностью исключает подход. (Одна вещь, которая приходит в голову, - это то, что насмешка может не сработать.) В будущей версии Spock повторение теста (или его строительных блоков), вероятно, станет первоклассной концепцией, устраняющей эти ограничения.
