远程虚拟机上的自动化 UI 测试策略

Question

我正在使用 TeamCity 进行 CI 构建，并且希望设置第二个构建来在 Windows XP 和 Windows 7 虚拟机上运行自动化 UI 测试。

我想象构建工作如下：

1. 编译，运行单元测试等。
2. 使用 WiX
3. 准备 MSI 将 MSI 复制到目标测试机器
4. 远程执行 MSI 的
5. 将测试工具代码复制到远程机器
6. 运行测试
7. 构建完成

自动化 UI 测试是使用 NUnit 编写的，并且将需要直接在测试虚拟机上运行（它们不能远程运行）。重要的是，如果测试失败，它会出现在 TeamCity 构建日志中并且构建失败。我不想在任何一个测试虚拟机上安装 VS 或 TeamCity 构建代理。

看来大部分工作应该可以使用 psexec.exe 来实现。我应该考虑其他替代工具（最好是开源工具）吗？

Answer 1

深吸一口气

我们正在寻找一些方法来帮助我们完成自动化 UI 测试。我们使用 ranorex 来测试 UI，并使用 TeamCity/Msbuild 来执行测试。

我们从未找到任何工具来帮助我们（我一直在关注一些工具，所以会监视这个线程），但这是我们所做的。

1. CI 服务器将安装文件和测试脚本复制到测试主机服务器。
2. 然后，CI 服务器在测试主机服务器上启动自定义应用程序，并提供要启动的 VM 的名称。
3. 然后，测试主机服务器使用 Virtual PC.exe -singlepc -pc vhdname.vhd -launch 启动 VM 软件，并等待其关闭（在运行测试后）。
4. VM 从网络位置获取安装文件和脚本并执行。
5. 运行测试后，它将结果返回到网络位置并自行关闭。
6. 控制权返回给自定义应用程序。
7. 控制权返回到 CI 服务器，该服务器根据结果确定它是通过还是失败（并更新 UI，以便开发人员了解结果）。
8. 结果作为工件收集在 TeamCity 中并在 Svn 中标记。

我想这就是全部了。虽然很复杂，但它确实有效。希望其中有人能帮助你。

Answer 2

Gallio 团队的 Jeff Brown 已谈论一个名为Archimedes 来支持这种要求。听起来很有希望，但我认为到目前为止还没有取得太大进展。

与此同时，Gallio 项目中有一个名为 VM Tool 这可能会做你想做的事。它提供了停止、启动和快照虚拟机的命令，更重要的是，来回复制文件和执行命令。

我想您还考虑过 Powershell 远程处理？