使用 testng 和 maven 运行不同的测试套件

Question

我使用 TestNg 和 Maven 以及 Surefire 插件来运行我的测试。我有几个不同的组件，我希望能够使用相同的 pom 在不同时间运行。目前，为了做到这一点，我有几个不同的 XML 文件定义了一个测试套件，并且我设置了 pom，这样我就可以执行 mvn test -Dtestfile=/path 并使用该套件。

我想知道是否有一种方法可以将 XML 文件合并到一个文件中，并选择基于测试名称或其他系统的基础？

编辑：我已经用烟雾、理智、回归定义了所有测试，我希望能够为给定组件运行所有回归。如果我运行 TestNG CLI，我可以给出 -testnames comp1、comp2、comp3 等。其中每个组件都在一个 xml 套件中定义，其中包含多个测试 ()。我想知道除了使用 exec:java 插件之外，是否有任何方法可以在 Maven 中执行此操作。

Answer 1

TestNG 通过在测试用例本身或 suite.xml 文件中指定测试类/方法的组来支持测试组。通过使用组，您可以将所有测试放在一个 xml 文件中。请参阅 TestNG 用户指南中的组。

Surefire 插件允许根据组包含或排除测试：

      <plugin>
        <groupId>org.apache.maven.plugins</groupId>
        <artifactId>maven-surefire-plugin</artifactId>
        <version>2.8.1</version>
        <configuration>
          <groups>${testng.groups}</groups>
        </configuration>
      </plugin>

您可以将所有测试放在一个 xml 文件中，然后通过设置要包含在 ${testng.groups} 属性中的一个或多个组来选择要运行的测试，这应该是以逗号分隔的组名称列表。

您可以使用配置文件在 POM 中或在命令行 -Dtestng.groups=[要运行的组] 上定义 ${testng.groups} 属性的值。

Answer 2

您可以做的是定义不同的配置文件

  <profiles>
    <profile>
      <id>t1</id>
      <build>
        <plugins>
        <plugin>
          <groupId>org.apache.maven.plugins</groupId>
          <artifactId>maven-surefire-plugin</artifactId>
          <version>2.8.1</version>
          <configuration>
            <suiteXmlFiles>
              <suiteXmlFile>testng.xml</suiteXmlFile>
            </suiteXmlFiles>
          </configuration>
        </plugin>
      </plugins>
      </build>
     </profile>
   </profiles>

并通过 mvn -Pt1 ... 从命令行调用
或者在配置文件中定义一个属性并在配置中使用该属性。

Answer 3

另请注意，TestNG 允许您将多个套件合并为一个套件，例如，如果您想将 api 和 ui 冒烟测试合并为一个套件：

<!DOCTYPE suite SYSTEM "http://testng.org/testng-1.0.dtd">
<suite name="uber-smoke-suite" verbose="1" parallel="methods" thread-count="1" configfailurepolicy="continue">
  <suite-files>
    <suite-file path="smoke_api.xml" />
    <suite-file path="smoke_ui.xml" />
  </suite-files>
</suite>

这样您也可以创建一个 uber 套件，将所有测试合并为一个套件，但仍然允许如有必要，您可以运行单个套件，例如：

-Dtestfile=smoke
-Dtestfile=smoke_api
-Dtestfile=smoke_ui