如何让 Spock 重试失败的 Geb 测试？答案

【问题标题】：How can Spock be made to retry failed Geb tests?如何让 Spock 重试失败的 Geb 测试？
【发布时间】：2012-07-13 16:33:43
【问题描述】：

我对使用 Geb 和 Spock 的 Grails 应用程序进行了功能测试。有时，功能测试会因超时或其他零星行为而失败。在以前使用 TestNG 的项目中，我有一个 retryAnalyzer 只是在测试执行期间触发重试，以查看它是否两次都失败（然后真正失败）。

如何让 Spock 重试失败的测试？

【问题讨论】：

标签： grails groovy spock geb

【解决方案1】：

我知道这个问题已经有一年了，但我们一直遇到同样的问题。按照 Peter 的建议，我创建了一个 Spock 扩展 (https://github.com/anotherchrisberry/spock-retry)。

如果你有一个基本规范（我们的例子），你可以给它添加一个@RetryOnFailure注解：

@RetryOnFailure
class BaseFunctionalSpec extends Specification {
    //    all tests will execute up to two times before failing
}

或者，您可以将其添加到特定功能：

class SomeSpec extends Specification {

    @RetryOnFailure(times=3)
    void 'test something that fails sporadically'() {
        // will execute test up to three times before failing
    }
}

【讨论】：

我期待着尝试一下。
这是最好的扩展

【解决方案2】：

您必须编写一点 JUnit 规则（例如 https://gist.github.com/897229 之类的东西）或 Spock 扩展。您可能不得不忍受一些限制，例如重用同一个规范实例，而 JUnit 只报告一个测试，但希望没有什么能完全排除这种方法。（想到的一件事是模拟可能不起作用。）在 Spock 的未来版本中，重复测试（或其构建块）可能会成为一流的概念，消除这些限制。

【讨论】：

我终于走上了 junit 规则路线，并在此处添加了一个类似的类：stackoverflow.com/questions/8295100/…。我在 base.evaluate() 调用周围放置了 println 语句，我可以告诉我我的规则正在运行，但我发现它总是 returns，我从来没有看到抛出一个 Throwable，即使在失败。还有其他方法可以告诉测试失败吗？