Rails 并发后台进程

Question

我需要在几天内访问多个 API 并从中提取数据。这是流数据，因此该进程将一直运行。每个进程都会提取数据并将其插入到单独的谷歌融合表中。

因为我想在后台运行这个进程并忘记它们，所以只能监视它们是否失败并且不重新启动。

我查看了 Delayed Job、Resque、Beanstalk 等，我的问题是这些进程是否可以同时运行。我不想对进程进行排队，只是在后台运行它们。

我也看了 Spawn，但不完全明白它是如何工作的。

那么我可以选择哪些选项，有人有任何建议吗？

Answer 1

我会使用 whenever gem 来安排 cron 作业来提取数据。

every 2.hours do 
  YourApi.do_whatever
  SecondApi.do_the_thing
end

Answer 2

也许自定义后台守护进程更适合您，请查看 daemon_generator。但请注意，如果您想同时执行某些操作，则可能需要做一些工作，但仅串行处理操作应该很容易。