TestNG測試框架之失敗測試重跑

慕城南風發表於2020-12-19

前言

在案例執行過程中,往往需要對失敗的案例進行重跑,TestNG亦提供相應的實現方案。

示例

當套件中的測試執行失敗時,TestNG都會建立一個名為testng-failed.xml的檔案,該XML檔案包含執行失敗的方法的資訊,允許您快速重現失敗,而不必執行整個測試,如下所示:
編寫測試類:

import org.testng.Assert;
import org.testng.annotations.*;

public class TestNGHelloWorld1 {
    @BeforeTest
    public void bfTest() {
        System.out.println("TestNGHelloWorld1 beforTest!");
    }

    @Test(expectedExceptions = ArithmeticException.class, expectedExceptionsMessageRegExp = ".*zero")
    public void helloWorldTest1() {
        System.out.println("TestNGHelloWorld1 Test1!");
        int c = 1 / 0;
        Assert.assertEquals("1", "1");
    }

    @Test()
    @Parameters(value = "para")
    public void helloWorldTest2(@Optional("Tom")String str) {
        Assert.assertEquals("1", "2");
        System.out.println("TestNGHelloWorld1 Test2! "+ str);

    }

    @AfterTest
    public void AfTest() {
        System.out.println("TestNGHelloWorld1 AfterTest!");
    }
}

執行:

D:\IntelliJ_IDEA_workspace\TestNG>java -classpath "%classpath%;D:\IntelliJ_IDEA_workspace\TestNG\lib" org.testng.TestNG -d tom testng14.xml

執行後,可發現tom目錄下,生成了一個testng-failed.xml檔案。
在這裡插入圖片描述

testng-failed.xml內容如下:

<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE suite SYSTEM "http://testng.org/testng-1.0.dtd">
<suite guice-stage="DEVELOPMENT" name="Failed suite [All Test Suite]">
  <test name="Test(failed)">
    <parameter name="para" value="Tomandy"/>
    <classes>
      <class name="TestNGHelloWorld1">
        <methods>
          <include name="helloWorldTest2" invocation-numbers="0"/>
          <include name="AfTest"/>
          <include name="bfTest"/>
        </methods>
      </class> <!-- TestNGHelloWorld1 -->
    </classes>
  </test> <!-- Test(failed) -->
</suite> <!-- Failed suite [All Test Suite] -->

後續需要重跑失敗案例,只需執行testng-failed.xml即可。但是在持續整合實施過程中,我們更希望的是用例執行失敗後自動重跑,可通過TestNG提供的retryAnalyzer實現,示例如下:
實現IRetryAnalyzer。

import org.testng.IRetryAnalyzer;
import org.testng.ITestResult;

public class MyRetry implements IRetryAnalyzer {

    private int retryCount = 0;
    private static final int maxRetryCount = 3;

    public boolean retry(ITestResult iTestResult) {
        if (retryCount < maxRetryCount) {
            retryCount++;
            return true;
        }
        return false;
    }
}
helloWorldTest2方法新增retryAnalyzer:

import org.testng.Assert;
import org.testng.annotations.*;

public class TestNGHelloWorld1 {
    @BeforeTest
    public void bfTest() {
        System.out.println("TestNGHelloWorld1 beforTest!");
    }

    @Test(expectedExceptions = ArithmeticException.class, expectedExceptionsMessageRegExp = ".*zero")
    public void helloWorldTest1() {
        System.out.println("TestNGHelloWorld1 Test1!");
        int c = 1 / 0;
        Assert.assertEquals("1", "1");
    }

    @Test(retryAnalyzer = MyRetry.class)  //失敗重跑
    @Parameters(value = "para")
    public void helloWorldTest2(@Optional("Tom")String str) {
        Assert.assertEquals("1", "2");
        System.out.println("TestNGHelloWorld1 Test2! "+ str);

    }

    @AfterTest
    public void AfTest() {
        System.out.println("TestNGHelloWorld1 AfterTest!");
    }
}

執行後,可發現helloWorldTest2方法重跑了3遍。
retry

連結:https://www.jianshu.com/p/11febc78a953

相關文章