通用单元测试调度

Question

我正在（重新）编写一个执行通用单元测试调度的程序。当前的程序是单线程 Perl 程序，但我愿意将其模块化并并行化测试。我也在考虑用Python重写它。

这是我需要做的：

• 我有一个测试列表，具有以下属性：
  • uri：要测试的 URI（可以是 HTTP/HTTPS/SSH/local）；
  • depends：此测试所依赖的测试/值的关联数组；
  • join：选择此测试中要处理的项目时要添加的数据库连接列表；
  • depends_db：选择在此测试中处理的项目时添加到数据库请求的附加条件。
• 该程序构建一个依赖树，从没有依赖项的测试开始；
• 对于每个测试：
  • 使用条件（依赖测试、关节和depends_db的结果）从数据库中选择项目列表；
  • 项目列表被发送到 URI（使用 POST 或 stdin）；
  • 结果以 YAML 文件形式检索，列出每个测试项目的测试状态和注释；
  • 结果存储在数据库中；
  • 测试返回，允许执行相关测试。
• 该程序生成所执行测试的报告（CSV、DB、graphviz）。

目前该程序的主要用途是针对备份、DNS 等服务测试一组机器。测试可以是： - 备份：托管在备份机器上，通过HTTP调用，检查机器的备份是否顺利； - DNS：托管在本地计算机上，通过 stdin 调用，检查计算机的 FQDN 是否具有有效的 DNS 条目。

这样的工具/模块已经存在吗？实现这一目标的最佳实现是什么（使用 Perl 或 Python）？

Answer 1

这种测试不是单元测试。

如果您决定不遵循 rjh 的建议以保留您已编写的大部分代码，那么请将您的测试转换为使用标准测试工具链。

• 使用 Test::Class 和朋友发出 点击。
• 使用 prove 的 -j 选项或 Test::Aggregate 并行运行测试。
• 使用 Prove 的 -a 选项或 App::Prove::History 记录结果。
• 使用 TAP::Formatter::HTML 进行图形报告。