如何覆盖 TestNG 通过或失败结果

Question

• 我正在使用 TestNG 运行数据驱动测试

• 我的数据是从外部文件中读取的

• 我有一个重试逻辑，它本质上是同一个类中的不同测试方法，但只重试上一个测试中失败的实体。我正在使用优先级控制它

  Test(dataProvider="customTestDataProvider" , priority = 1)  
  public void testSomething(final ITestContext testContext , final CustomTestDataItem testData) throws CustomTestException{       
      setTestData(testData, testContext);
      performStep1();
      performStep2();
      validateResult();
  }
  
  @Test(dataProvider="customTestDataProvider" , priority = 2) 
  public void testSomethingRetry1(final ITestContext testContext ,final CustomTestDataItem testData) throws CustomTestException{
      testSomething(testContext , testData);
  }
  
  @Test(dataProvider="customTestDataProvider" , priority = 3) 
  public void testSomethingRetry2(final ITestContext testContext ,final CustomTestDataItem testData) throws CustomTestException{
      testSomething(testContext , testData);
  }
  

• customTestDataProvider 知道该方法针对哪个 testData 项失败，因此在 testSomethingRetry1 中只会提供失败的测试数据

• 如果一个测试方法在 testSomething 中失败，它会在 testSomethingRetry1 中重试，但 testNG 认为它失败了，因为它在 testSomething 中失败了

• 所以我需要一个自定义逻辑来确定套件是通过还是失败。如何用我确定的结果覆盖 testNG 结果（通过/失败）？

Answer 1

我建议不要使用重复的测试方法，而是使用org.testng.IRetryAnalyzer，它基本上会再次运行失败的测试。你可以在这里看到一些例子http://seleniumeasy.com/testng-tutorials/execute-only-failed-test-cases-using-iretryanalyzer。

但是，如果您真的想覆盖结果，您可以使用侦听器并实现获得ITestResult 的方法。在此对象中，您可以检查方法类/名称/结果/等。并更改其中一些属性（包括结果）。

http://testng.org/javadocs/org/testng/ITestListener.html http://testng.org/javadocs/org/testng/IInvokedMethodListener.html

或整个测试套件

http://testng.org/javadocs/org/testng/ISuiteListener.html