如何在TestNG中当50%测试方法失败时终止自动化执行？

针对你提出的需求——当LoginTest类里的@Test方法失败率超过50%时，立刻终止后续未执行的测试，我推荐使用TestNG自定义监听器来实现这个逻辑，下面是具体的步骤和代码示例：

实现思路 #

我们通过TestNG提供的IInvokedMethodListener接口，在每个测试方法执行前后做统计和判断：

1. 统计当前测试类的总@Test方法数
2. 每次测试失败后累加失败次数
3. 计算当前失败率，一旦超过设定的50%阈值，就抛出异常终止整个测试套件

步骤1：编写自定义监听器类 #

import org.testng.IInvokedMethod;
import org.testng.IInvokedMethodListener;
import org.testng.ITestResult;
import org.testng.TestListenerAdapter;
import org.testng.annotations.Test;

import java.util.HashMap;
import java.util.Map;

public class FailureRateStopListener extends TestListenerAdapter implements IInvokedMethodListener {
    // 存储每个测试类的失败次数
    private Map<Class<?>, Integer> failedCount = new HashMap<>();
    // 存储每个测试类的总@Test方法数
    private Map<Class<?>, Integer> totalTestMethods = new HashMap<>();
    // 失败率阈值，这里设为50%
    private static final double FAILURE_THRESHOLD = 0.5;

    @Override
    public void beforeInvocation(IInvokedMethod method, ITestResult testResult) {
        Class<?> testClass = testResult.getTestClass().getRealClass();
        // 首次处理该类时，统计总@Test方法数
        if (!totalTestMethods.containsKey(testClass)) {
            int count = (int) java.util.Arrays.stream(testClass.getDeclaredMethods())
                    .filter(m -> m.isAnnotationPresent(Test.class))
                    .count();
            totalTestMethods.put(testClass, count);
            failedCount.put(testClass, 0);
        }
    }

    @Override
    public void afterInvocation(IInvokedMethod method, ITestResult testResult) {
        // 只处理@Test方法的失败情况
        if (method.isTestMethod() && !testResult.isSuccess()) {
            Class<?> testClass = testResult.getTestClass().getRealClass();
            int currentFailed = failedCount.get(testClass) + 1;
            failedCount.put(testClass, currentFailed);

            double rate = (double) currentFailed / totalTestMethods.get(testClass);
            // 检查失败率是否超过阈值
            if (rate >= FAILURE_THRESHOLD) {
                System.out.printf("⚠️ 测试类%s失败率已达%.0f%%，超过50%阈值，终止后续测试！%n",
                        testClass.getSimpleName(), rate * 100);
                // 抛出异常终止测试套件
                throw new RuntimeException("测试失败率超标，强制终止");
            }
        }
    }
}

步骤2：给测试类绑定监听器 #

在你的LoginTest类上添加@Listeners注解，把刚才写的监听器关联进去：

import org.testng.annotations.Listeners;
import org.testng.annotations.Test;

@Listeners(FailureRateStopListener.class)
public class LoginTest {
    @Test
    public void ValidUserName() {
        // 模拟测试失败
        assert false : "ValidUserName 测试失败";
    }

    @Test
    public void InValidUserName() {
        // 模拟测试失败
        assert false : "InValidUserName 测试失败";
    }

    @Test
    public void ValidUserID() {
        // 模拟测试失败
        assert false : "ValidUserID 测试失败";
    }

    @Test
    public void ValidUserIDInvalidPassword() {
        System.out.println("ValidUserIDInvalidPassword 开始执行");
    }

    @Test
    public void EmptyUserNamePassword() {
        System.out.println("EmptyUserNamePassword 开始执行");
    }
}

效果验证 #

当ValidUserName、InValidUserName、ValidUserID这3个方法都失败后，失败率为3/5=60%，超过50%阈值，监听器会立刻抛出异常，终止后续的ValidUserIDInvalidPassword和EmptyUserNamePassword方法执行，控制台会输出终止提示。

额外配置方式（如果用XML运行测试） #

如果你的测试是通过TestNG XML配置文件运行的，也可以在XML里配置监听器，不用在测试类上加注解：

<suite name="LoginTestSuite">
    <listeners>
        <listener class-name="com.your.package.FailureRateStopListener"/>
    </listeners>
    <test name="LoginTests">
        <classes>
            <class name="com.your.package.LoginTest"/>
        </classes>
    </test>
</suite>

你可以根据实际需求调整FAILURE_THRESHOLD的值，比如改成0.3就是30%失败率时终止。

内容的提问来源于stack exchange，提问作者Neerajkumar