用户在测试过程中断开连接

Question

我在Ruby上使用Rauds应用程序，该应用程序在其部署过程中进行了许多测试（〜3000） 我们使用Capybara和Selenium进行功能测试。 我们最近将CI从Heroku CI迁移到Circleci。 我们运行10个Docker实例来运行我们的测试套件。

对于许多功能测试，我们使用此代码块登录管理用户：

def admin_signs_in
  admin_user = FactoryBot.create(:admin_user, :for_signin)
  sign_in admin_user
  return admin_user
end

但是有时，一个测试不会通过，因为用户被断开并且无法访问测试所需的页面。

测试失败的一个示例： 需要“ rails_helper”，

RSpec.describe "Admin sets client budget to project", js: true do
  let(:client)  { create(:client) }
  let(:project) { create(:project, client: client) }
  let(:timeslots_proposal) { create(:timeslots_proposal_with_client, project: project) }

  before do
    admin_signs_in
    # this path needs an authenticated user
    visit advanced_admin_timeslots_proposal_path(timeslots_proposal)

    within "#client-budget" do
      find(".fa-pen").click
    end
  end

  describe "negative amount" do
    before do
      within "#some_container" do  
        # this block doesn't fail, meaning that at this point, user is authenticated          
        expect(find("#some_field")["placeholder"]).to eq "Enter amount"
        fill_in "some_field", with: "-235.99"
        find('.btn-primary').click
      end
    end

    it "raises an error" do
      # this fails, logs indicate that user is redirected to signin page
      expect(page).to have_content "Amount must be positive"
    end
  end
end

我们尝试使用rspec-retry gem多次尝试这些测试，但是当一次失败一次时，所有试验都会失败。

它可以在我们的套件中的任何测试中发生，我会说它在0.1％的身份验证测试中随机发生。

我怀疑Capybara Cookie的问题，但我不知道该如何解决。

Answer 1

多亏了托马斯·沃尔波尔（Thomas Walpole），我终于找到了这个问题。
首先，显然是从测试运行中获取日志。

我设法将硒驱动程序日志保存在使用我的配置中的测试失败：

config.after(:each) do |example|
  if example.metadata[:js] && example.exception
    File.write("#{path}/driver_logs.txt", Capybara.page.driver.browser.manage.logs.get(:driver).map(&:to_s).join("\n"))
  end
end

我想到问题可能是由于_Session_ID cookie cookie用于存储用户会话。

因此，在我搜索的庞大的2M日志文件中，发现了这一行

"Set-Cookie": "visitor_uuid=1234567890987654321; path=/; SameSite=None\n_session_id=1234567890987654321azertyu; path=/; expires=Sun, 04 Apr 2021 22:00:01 GMT; HttpOnly",

NB：我们在撰写此帖子时在2022年。 Selenium Chrome意识到这一点，所以我的饼干立即到期。

我知道我们使用时间表将当前时间设置为某些日期相关测试，因此我搜索了不良的时间表使用情况。

我发现这条线

before { Timecop.travel(Time.parse("2021-01-05")) }

从未发布。
我将其更改为：

before { Timecop.freeze(Time.parse("2021-01-05")) }
after  { Timecop.return }

所以我的问题是我的测试服务器和测试浏览器有不同的时间。