TestNG 跳过测试 - 为什么？

Question

我正在使用 testng 和 selenium 测试一个网络应用程序。测试主要包括打开应用程序的几个页面，并针对每个页面执行一些特定的活动。因此，我有一个执行“打开页面”测试的抽象基类，并定义了一个用作该测试的数据提供程序的抽象方法。然后有几个扩展类为数据提供者提供实现，并且除了基类之外还有几个不同的测试。我有一个 testsuite.xml，其中包含所有类，这是我从 eclipse 运行的。

问题是，当我启动测试执行时，testng 在所有对象的基类中运行测试，但系统地跳过扩展类中的所有其他测试。有谁知道为什么？任何信息都将非常感激...

为了完成信息，这里是我使用的一些类和 xml：

基类：

public abstract class BaseWebAppPageTest {

    @Test(dataProvider="getMenuLink")
    public void testOpen(String menulink){
        GenericPageActions.openPage(TestingContext.getSelenium(), menulink);
    }

    protected abstract String[][] getMenuLink();

}

和一些扩展类：

TestLanguages：

public class TestLanguages extends BaseWebAppPageTest{

    @Test(dependsOnMethods={"testOpen"}, dataProvider="getCreateData")
    public void testCreateCorrect(String code, String description, String textDirection, String flag){
        Selenium selenium = TestingContext.getSelenium();
        LanguagesManagementActions.create(selenium, code, description, textDirection, flag);
    Assert.assertTrue(selenium.isTextPresent("Successfully created language"));
    }

    @Test(dependsOnMethods={"testCreateCorrect"}, dataProvider="getCreateData")
    public void testFilter(String code, String description, String textDirection, String flag){
        Selenium selenium = TestingContext.getSelenium();
        LanguagesManagementActions.filterTable(selenium, 2, code, 30000);
    Assert.assertTrue(selenium.getXpathCount("xpath=//span[.='"+code+"']").intValue() == 1);
    }

    @Test(dependsOnMethods={"testCreateCorrect"}, dataProvider="getCreateData")
    public void testModify(String code, String description, String textDirection, String flag){
        Selenium selenium = TestingContext.getSelenium();
        LanguagesManagementActions.modify(TestingContext.getSelenium(), code, description, textDirection, flag);
        Assert.assertTrue(selenium.isTextPresent("Successfully updated language"));
    }

    @Override
    @DataProvider
    protected String[][] getMenuLink() {
        return(TestingContext.getDataReader().getTableArray("openviewpage", "MULTILINGUAL_LANGUAGES"));
    }

    @DataProvider
    protected String[][] getCreateData() {
        return(TestingContext.getDataReader().getTableArray("multilingualcreate", "LANGUAGES"));
    }

}

TestTranslations：

public class TestTranslations extends BaseWebAppPageTest{

@Test(dependsOnMethods={"testOpen"}, dataProvider="getCreateData")
public void createCorrect(String code, String targetLanguage, String translation){
    Selenium selenium = TestingContext.getSelenium();
    TranslationsManagementActions.create(selenium, code, targetLanguage, translation);
    Assert.assertTrue(selenium.isTextPresent("Successfully created translation"));
}

@Test(dependsOnMethods={"createCorrect"}, dataProvider="getCreateData")
public void update(String code, String targetLanguage, String translation){
    Selenium selenium = TestingContext.getSelenium();
    TranslationsManagementActions.update(selenium, code, targetLanguage, translation);
    Assert.assertTrue(selenium.isTextPresent("Successfully updated translation"));
}

@Test(dependsOnMethods={"createCorrect"}, dataProvider="getCreateData")
public void filter(String code, String targetLanguage, String translation){
    Selenium selenium = TestingContext.getSelenium();
    TranslationsManagementActions.filterTable(selenium, 2, code, 30000);
    Assert.assertTrue(selenium.isElementPresent("xpath=//span[.='"+translation+"']"));
}

@Override
@DataProvider
protected String[][] getMenuLink() {
    return(TestingContext.getDataReader().getTableArray("openviewpage", "MULTILINGUAL_TRANSLATIONS"));
}

@DataProvider
protected String[][] getCreateData() {
    return(TestingContext.getDataReader().getTableArray("multilingualcreate", "TRANSLATIONS"));
}

}

最后，TestSuite.xml：

    <?xml version="1.0" encoding="UTF-8"?>
    <!DOCTYPE suite SYSTEM "http://beust.com/testng/testng-1.0.dtd" >
    <suite name="WebAppSuiteTest" parallel="none">
      <parameter name="selenium.host" value="localhost" />
      <parameter name="selenium.port" value="5555" />
      <parameter name="selenium.browser" value="*firefox3 C:\\Documents and Settings\\dgarcia\\Local Settings\\Application Data\\Mozilla Firefox\\firefox.exe" />
      <parameter name="selenium.url" value="http://localhost:8080/standard-webapp-war/home.seam" />
      <parameter name="selenium.timeout" value="1000000" />
      <parameter name="test.data.filepath" value="src\\test\\resources\\datatest_.xls" />

  <test name="standard" preserve-order="true" >
    <classes>
        <class name="com.standard.webapp.common.TestingContext" />      
        <class name="com.standard.webapp.login.TestLogin"/>
        <class name="com.standard.webapp.TestLanguages"/>
        <class name="com.standard.webapp.TestTranslations"/>
        </class>
    </classes>
  </test>
</suite>

---

没有例外，也没有输出中任何跳过这些测试的原因。我不太确定您提到的输出，因此我将在此处粘贴生成的“myWebAppTest.xml”的内容以及测试结果：

<testsuite hostname="SP2L0044" name="com.sicpa.standard.dms.webapp.selenium.common.BaseWebAppPageTest" tests="14" failures="0" timestamp="4 Mar 2011 08:45:57 GMT" time="27.141" errors="0">
  <testcase name="testLoginLoadHome" time="2.188" classname="com.sicpa.standard.dms.webapp.selenium.login.TestLogin"/>
  <testcase name="testCreateCorrect" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestCodes">
    <skipped/>
  </testcase>
  <testcase name="testFilter" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestCodes">
    <skipped/>
  </testcase>
  <testcase name="testUpdate" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestCodes">
    <skipped/>
  </testcase>
  <testcase name="testView" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestCodes">
    <skipped/>
  </testcase>
  <testcase name="testCreateCorrect" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestLanguages">
    <skipped/>
  </testcase>
  <testcase name="testFilter" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestLanguages">
    <skipped/>
  </testcase>
  <testcase name="testModify" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestLanguages">
    <skipped/>
  </testcase>
  <testcase name="createCorrect" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestTranslations">
    <skipped/>
  </testcase>
  <testcase name="filter" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestTranslations">
    <skipped/>
  </testcase>
  <testcase name="update" time="0.0" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestTranslations">
    <skipped/>
  </testcase>
  <testcase name="testOpen" time="2.297" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestLanguages"/>
  <testcase name="testOpen" time="12.61" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestCodes"/>
  <testcase name="testOpen" time="9.469" classname="com.sicpa.standard.dms.webapp.selenium.multilingual.TestTranslations"/>
</testsuite>

Answer 1

TestNG 跳过测试的原因有多种，最常见的原因是您所依赖的方法（例如 testOpen 或 createCorrect）以某种方式失败。

我建议将详细级别设置为 10 并将输出粘贴到此处或 testng-users 邮件列表上。

如果您使用的是 XML 定义，请设置详细级别，如下所示：。详细级别也可以通过代码配置来设置。

TestNG tng = new TestNG();
XmlSuite suite = new XmlSuite();

suite.setVerbose(10);

// other configuration, add tests to run

List<XmlSuite> suites = new ArrayList<XmlSuite>();
suites.add( suite );
tng.setXmlSuites(suites);
tng.run();

Answer 2

DataProvider 方法中可能会抛出错误。

Answer 3

如果您想在扩展类中运行测试，而不管依赖方法的通过/失败，您始终可以为扩展类中的测试添加“alwaysRun = true”，如下所示：

@Test(dependsOnMethods={"testOpen"}, dataProvider="getCreateData", alwaysRun = true)

Answer 4

我过去遇到过这个问题，我发现当我有两个 @BeforeMethod 注释时，一个在 test.class 内，一个在 basetest.class 内。顺便说一句，两者都做了不同的事情，但仍然发生了冲突 - 阻止了测试的执行并最终跳过。
底线：检查您是否没有任何类型的多个@Before、@After。

Answer 5

尽管看起来很愚蠢，但我忘记将 @dataProviderClass 添加到我的测试中。这就是为什么我的测试被跳过的原因。但testng并没有明确告诉我问题出在哪里。在尝试此处的其他答案之前，请务必先检查这些基础知识。

Answer 6

如果您在 testNG 方法中接收参数但在执行时未传递这些参数，则也会跳过测试。
我最近遇到了这个问题，所以请仔细检查。

Answer 7

原因之一是套件类中的优先级，使用带有线程计数的 testng 并行概念将解决您的问题。

像这样使用：
<套件名称=“TestSuite”详细=“1”并行=“测试”线程计数=“10”

Answer 8

造成这种情况的原因可能有多种，但在看到您的代码后，我注意到一件事，只需确保您已正确设置浏览器 exe，例如在 Chrome 上执行测试，您的路径中将需要 chromedriver.exe。

 System.setProperty("webdriver.chrome.driver", System.getProperty("user.dir")+
                "\\src\\main\\resources\\chromedriver.exe");

Answer 9

我有同样的问题，测试被忽略。降级为 TestNG 的稳定版本后，它开始运行测试。

Answer 10

大多数情况下，它会跳过那些依赖于其他测试结果或设置了一些超时或由于配置而导致的测试。

如果您设置了 @afterMethods 或 @afterClass，则值得将它们注释掉一次并重新运行脚本。

您可以做的是为所有测试设置优先级，如果所有测试都依赖于某个测试，则将其保留在适合您的 @beforeMethod 或 @beforeClass 中。