如何检查测试套件在一种环境中运行速度慢得多的原因

Question

我们已经配置了 teamCity，在其上运行我们的构建进行测试。问题是，当我们在 TeamCity 上运行时，有几个测试用例（谈论一个具有 5-15 个测试方法的特定类）几乎需要 45 分钟。

我一直在尝试在本地计算机上测试相同的案例，并且它们不会花费超过 6-7 分钟。

你们能否建议我最佳实践，以帮助我找出这些测试用例的可能原因？现在我将日志语句放在每个带有时间戳的地方。我还有什么可以做的吗？

Answer 1

我想看看这两个环境之间是否有区别以及有什么区别：

• 它是相同的操作系统和文件系统吗？
• 机器的CPU负载是多少？
• 机器的 I/O 负载是多少？
• 系统日志中是否显示某些内容，例如（网络或身份验证）超时可能会导致性能极度下降
• 测试用例是否使用可能与慢速机器所在位置具有不同访问路径的外部资源（例如数据库、网络）？
• TeamCity 在每次测试后是否会生成大量报告，这可能是缓慢的原因？也许这不是实际的测试用例执行，而是在测试之间或测试之后执行的另一个操作。
• TeamCity 环境是否执行任何未在本地执行的设置或拆卸功能？例如建立一个测试数据库或修剪现有的测试数据库？
• 慢速机器是集群构建服务器，必须通过主从服务器之间的线路进行通信吗？测试是在主机上还是在从机上执行？

另外，您是否也在 TeamCity 中本地运行测试用例？

Answer 2

我之前使用过 YJP（yourkit java profiler）来分析应用程序。我认为在他们让你购买许可证之前的前 15 天左右是免费的。