autotest 和 rspec 给出不同的答案

Question

我有一个应用程序，正在使用 rspec2 (2.6.4)、水豚和硒进行测试。

当我直接使用 rspec 运行任何请求规范时，测试会通过。

当我使用自动测试运行请求规范时，它们都失败并显示一条消息“找不到 ID= ** 的用户”。

当自动测试自动重新加载第一个请求测试时，它会通过

自动测试，然后重新加载所有测试，当它达到请求测试时，它们都会再次失败

用户由factory-girl创建并使用devise登录，如下所示：

before(:each) do
  @user = Factory(:user)   
  login_as @user
end 

after(:each){
    logout
  }

在规范助手中我有

def login(user)
  post login_path, :login => user.login, :password => 'testing'
end

这些是我安装的相关宝石（组：测试）

  gem "rspec"
  gem "rspec-rails"
  gem  "autotest-rails"
  gem "selenium-webdriver", ">= 0.2.2"
  gem 'capybara', :git => 'git://github.com/jnicklas/capybara.git'
  gem 'launchy'
  gem 'database_cleaner'

这已经让我困惑了一段时间 - 有人有什么想法吗？甚至有关于如何开始查看堆栈跟踪以查看两个调用的不同之处的想法吗？

Answer 1

解决了，有点。这里到底发生了什么仍然是个谜，但这里是问题的真正含义以及我如何解决它的准确总结。自动测试不是罪魁祸首 - 问题是在一批中运行所有测试。运行 rspec spec/**/* 会导致相同的错误。这是一个线索，表明问题与测试之间未能正确清理数据库有关。我正在使用设备，因此最终依赖 Warden 进行基于机架的身份验证。根据 Warden 文档，我调用了 Warden.test_reset！在 after(:suite) 块中。如果我将其移至 after(:all) 块，则无论单独运行、作为请求测试还是在一个块中运行所有测试，测试都会通过相同的测试。

那么我们学到了什么？我认为这个问题（至少对我来说）最终是由 rspec 挂钩的混乱命名引起的。我认为酒店的“套房”房间少于酒店的“所有”房间。但显然，rspec 示例的“套件”比“所有”示例更多。事实上，一套 rspec 示例只是“spec 目录下的所有示例”。在它们全部运行后清理典狱长没有效果。我们需要在每个规范之后清理它们 - 为此需要运行 test_reset！在 after(:all) 块中。

希望这对某人有帮助...