并行执行测试

Question

我注意到 SBT 正在并行运行我的 specs2 测试。这看起来不错，除了我的一项测试涉及从文件读取和写入，因此会意外失败，例如见下文。

之外，还有更好的选择吗？

1. 除了将所有测试设置为串行运行、
2. 为每个测试使用单独的文件名和拆卸

class WriteAndReadSpec extends Specification{
  val file = new File("testFiles/tmp.txt")

  "WriteAndRead" should {
    "work once" in {
      new FileWriter(file, false).append("Foo").close
      Source.fromFile(file).getLines().toList(0) must_== "Foo"
    }
    "work twice" in {
      new FileWriter(file, false).append("Bar").close
      Source.fromFile(file).getLines().toList(0) must_== "Bar"
    }
  }

  trait TearDown extends After {
    def after = if(file.exists) file.delete
  }
}

Answer 1

除了上面关于 sbt 的内容之外，您还必须知道，specs2 默认情况下会同时运行您的规范的所有示例。

您仍然可以声明，对于给定的规范，示例必须按顺序执行。为此，您只需添加 sequential 到规范的开头：

class WriteAndReadSpec extends Specification{
  val file = new File("testFiles/tmp.txt")

  sequential

  "WriteAndRead" should {
   ...
  }
}

Answer 2

套件的固定测试顺序可能会导致测试用例的相互依赖性和维护负担。

我更愿意在不接触文件系统的情况下进行测试（无论是业务逻辑还是序列化代码），或者如果这是不可避免的（至于测试与文件提要的集成），那么将使用创建临时文件：

// Create temp file.
File temp = File.createTempFile("pattern", ".suffix");
// Delete temp file when program exits.
temp.deleteOnExit();

Answer 3

wiki 链接 他的答案非常好，尽管示例中存在一个小错误，可能会抛出一个错误关闭（不过，作为一个维基，我可以并且确实纠正了它）。这是一个实际上编译并生成预期过滤器的 project/Build.scala ，尽管我实际上并没有通过测试进行尝试。

import sbt._
import Keys._

object B extends Build
{
  lazy val root =
    Project("root", file("."))
      .configs( Serial )
      .settings( inConfig(Serial)(Defaults.testTasks) : _*)
      .settings(
         libraryDependencies ++= specs,
         testOptions in Test := Seq(Tests.Filter(parFilter)),
         testOptions in Serial := Seq(Tests.Filter(serialFilter))
       )
      .settings( parallelExecution in Serial := false : _*)

  def parFilter(name: String): Boolean = !(name startsWith "WriteAndReadSpec")
  def serialFilter(name: String): Boolean = (name startsWith "WriteAndReadSpec")

  lazy val Serial = config("serial") extend(Test)

  lazy val specs = Seq(
        "org.specs2" %% "specs2" % "1.6.1",
        "org.specs2" %% "specs2-scalaz-core" % "6.0.1" % "test"
      )
}

Answer 4

似乎还有第三种选择，即将串行测试分组在一个配置中，并单独运行它们，同时并行运行其余测试。

检查此 wiki，查找“并行执行应用程序” 。

Answer 5

其他答案解释了如何使用使它们顺序运行。

虽然它们是有效的答案，但在我看来，最好更改您的测试以让它们并行运行。（如果可能）

在您的示例中 - 每个测试使用不同的文件。
如果您涉及数据库 - 使用不同的（或随机的）用户（或任何可以的隔离）
ETC ...