在运行时禁用选定的自动化测试

Question

是否可以在运行时禁用选定的自动化测试？

我正在使用 VSTS 和 rhino 模拟，并进行一些需要安装外部依赖项 (MQ) 的集成测试。并非我团队中的所有开发人员都安装了此软件。

目前，所有需要 MQ 的测试都继承自一个基类，该基类检查是否安装了 MQ，如果未安装，则将测试结果设置为不确定。这是有效的，因为它会停止测试运​​行，但会将测试运行标记为不成功，并且可以隐藏其他失败。

有什么想法吗？

Answer 1

终于解决了这个问题，这就是我所做的。

在我的每个具有 MQ 依赖项的测试类（或方法，如果类中只有少数测试需要 MQ）中，我将以下内容添加到类（或方法） decleration 中，

#if !RunMQTests
    [Ignore]
#endif

这将禁用测试，除非您具有条件比较符号 < code>RunMQTests 已清除，该符号未在项目文件中定义，因此默认情况下禁用测试。

为了启用这些测试，开发人员不必记住他们是否安装了 MQ 并添加或删除条件比较符号，我创建了一个自定义构建任务，该任务将告诉我们是否安装了 MQ。

/// <summary>
/// An MSBuild task that checks to see if MQ is installed on the current machine.
/// </summary>
public class IsMQInstalled : Task
{
    /* Constructors removed for brevity */

    /// <summary>Is MQ installed?</summary>
    [Output]
    public bool Installed { get; set; }

    /// <summary>The method called by MSBuild to run this task.</summary>
    /// <returns>true, task will never report failure</returns>
    public override bool Execute()
    {
        try
        {
            // this will fail with an exception if MQ isn't installed
            new MQQueueManager();
            Installed = true;
        }
        catch { /* MQ is not installed */ }

        return true;
    }
}

然后我们只需要将任务添加到测试项目文件的顶部即可将其连接到构建过程中。

<UsingTask TaskName="IsMQInstalled" AssemblyFile="..\..\References\CustomBuildTasks.dll" />

如果本机安装了 MQ，则在 BeforeBuild 目标中调用新的自定义任务并设置条件比较符号。

<Target Name="BeforeBuild">
  <IsMQInstalled>
    <Output TaskParameter="Installed" PropertyName="MQInstalled" />
  </IsMQInstalled>
  <Message Text="Is MQ installed: $(MQInstalled)" Importance="High" />
  <PropertyGroup Condition="$(MQInstalled)">
    <DefineConstants>$(DefineConstants);RunMQTests</DefineConstants>
  </PropertyGroup>
</Target>

这允许安装了 MQ 的用户运行我们的 MQ 集成测试，同时不会让未安装 MQ 的用户运行测试失败。