如何使用 MSTest/CCNet 警告因外部影响而导致的测试失败

Question

我们的在线服务中有一部分与第三方网络服务集成。因此，我们在 Visual Studio 2010 中使用 MSTest 进行了大量单元测试，以确保我们与第三方的事务产生预期的响应。我们运行 CCNet 来进行持续构建，并且能够准确地完成持续集成的目的，这真是太棒了。在许多情况下，它发现上游层中的签入更改了我们服务端的数据并破坏了集成。

不幸的是，第三方的集成测试主机并不可靠，因为它可能会在没有警告的情况下停机进行维护。因此，每天都会有几次由于这些单元测试因连接问题而失败而导致构建被破坏。这是非常分散注意力的，除了将其标记为可接受的结果路径之外，我们对此无能为力。因此，我们的许多测试如下所示：

var client = new ThirdPartyClient(TestConfig);
var Result = client.DoSomethingOverThere(ourDataToSend);
Assert.IsFalse(Result == BadResult)
Assert.IsTrue((Result == Success) || (Result == Timeout))

我真的很想知道这两个可能结果中的哪一个导致测试通过。 （实际上，我希望有一种方法可以使用 Assert.Inconclusive，而不将其视为损坏的构建）但是有人对如何处理这种情况有任何建议吗？

Answer 1