如何在Junit 5上重试参数化测试？

Question

我有一个片状的参数化测试，如果在测试运行时实际上说失败之前，我想重试几次。片状有充分的理由（这与并发状况和少量竞赛条件有关，这不会总体上影响该系统），因此我不需要消除片状。

在Junit 4中，我们可以设置规则，在该规则中，我设置了一种“重试规则”，该规则会在失败之前重试测试X次数。但是，在Junit 5中已经消失了，到目前为止，我所看到的唯一解决方案涉及正常的Junit 5测试，而不是参数化测试。在Junit 5中重试参数化测试的最佳方法是什么？

Answer 1

则可以使用Junit-Pioneer库重试的

• 正常测试
• 参数testest

如果您使用的是Maven， ：
您可以在pom.xml中指定此内容

     <dependency>
        <groupId>org.junit-pioneer</groupId>
        <artifactId>junit-pioneer</artifactId>
        <version>1.7.1</version>
        <scope>test</scope>
    </dependency>

，对于参数tatest，您可以在现有的@parameterized -Test注释之上添加额外的@retryingTest（3）注释：

@ParameterizedTest
@MethodSource("foobarSource")
@RetryingTest(3)
void yourFlakyParameterizedTest(){

}

对于正常测试，您可以用@retryingtest替换@test（3） ）

@RetryingTest(3)
void yourFlakyNormalTest() {
}

虽然3是您希望在失败尝试时重试的尝试数量，并且您可以将其更改为指定的其他数字

https://junit-pioneer.org/docs/retrying-test/

Answer 2

看起来您期望使用@parameterizedRepeatEdifeXeftionStestest来自 rerunner-jupiter”> rerunner-jupiter 一个>扩展。尽管扩展名的读数说Java 8是必需的，但是当我在Java 17中进行测试时，核心功能（参数和重复）确实可以正常工作。

依赖性：（gradle）

testImplementation group: 'io.github.artsok', name: 'rerunner-jupiter', version: '2.1.6'

样本测试：

package io.github.devatherock.util;

import io.github.artsok.ParameterizedRepeatedIfExceptionsTest;
import org.junit.jupiter.api.Assertions;
import org.junit.jupiter.params.provider.ValueSource;

import java.util.Arrays;
import java.util.List;

public class TestUtilTest {
    private static int errorCounter = 0;
    private static int resultIndex = 0;
    private static List<Integer> args = Arrays.asList(14, 15, 100, -10);

    @ParameterizedRepeatedIfExceptionsTest(repeats = 3)
    @ValueSource(ints = {14, 15, 100, -10})
    public void testRepeat(int argument) {
        if ((argument == 14 || argument == -10) && errorCounter++ < 2) {
            throw new RuntimeException("Testing repeat");
        }
        errorCounter = 0;
        Assertions.assertEquals(args.get(resultIndex++), argument);
    }
}

该测试的写入是接受4个输入，并且第一个和最后一个输入两次失败。总共将执行测试8次 - 第一个和最后一个输入每次三次，第二个输入和第三个输入。从下面的Gradle进行测试日志：

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[1] SKIPPED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[2] SKIPPED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[3] PASSED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[4] PASSED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[5] PASSED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[6] SKIPPED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[7] SKIPPED

TestUtilTest > testRepeat(int) > io.github.devatherock.util.TestUtilTest.testRepeat(int)[8] PASSED