分布式视频编码 - Gearman 与 Beanstalkd
我希望构建一个由几十台机器组成的分布式视频编码集群。我以前从未使用过消息队列,但我开始使用的两个队列是 Gearman 和 Beanstalkd。 Beanstalk 似…
Pheanstalk(beanstalk 的 PHP 客户端)- 连接如何工作?
我需要一些帮助来理解 pheanstalk (php beanstalk 客户端)的使用。我有一个 PHP 程序,当表单数据发送到服务器时,该程序在服务器上执行。然后,PHP…
有 Zend_Queue_Adapter_Beanstalkd 吗?
在编写我自己的适配器之前,我正在寻找一个支持 beanstalkd 的现有 Zend_Queue 适配器。 Zend 框架中是否有 Beanstalkd 的开源适配器/实现? 到目前为…
在特定时间运行多个密集型作业的最佳解决方案
我们有一个 Web 应用程序,它使用 IMAP 在用户定义的时间有条件地将消息插入到用户的邮箱中。 这些“作业”中的每一个都存储在 MySQL 数据库中,并带…
基于Java的任务处理服务器
寻找一个小型、轻量级服务器的基本框架,可以有效地从 beanstalk 或 SQS 等中提取作业/消息并处理它们。 Octobot (https://github.com/cscotta/octobo…
使用PHP-FPM来管理队列消费者可以吗?
有一个 beanstalkd 队列,其中每 10 分钟就会充满大量任务,并且尽快处理每个任务是首要任务。任务可能需要几毫秒才能完成,因为有对第三方服务的调用…
如何使用 PHP 设置 Beanstalkd
最近我一直在研究 Beanstalkd 与 PHP 的使用。我已经学到了很多东西,但对服务器上的设置等有一些疑问。 以下是我如何看待它的工作原理: 我在我的 Ub…
如何访问多个Web服务器上的beanstalk队列
我已在一台服务器上安装了 beanstalk。我们有多个要在其上使用 beanstalk 的生产服务器。目前只有 1 个 Web 服务器可以访问 beanstalkd。 如何配置或…
检测哪个工作人员将 TTR 过期的作业返回到队列?
我有多个工作人员使用 beanstalk-client-ruby 处理 beanstalkd 队列中的请求。 出于测试目的,工作人员从队列中获取作业后随机进入无限循环。 Beansta…
Beanstalkc 超时问题
我在 Python 中使用 beanstalkc 作为必须解析 URL 列表的程序的排队过程。因此,我在 beanstalk 中使用超时来避免任何 URL 消耗大量时间。但即使在使…
如何在 Python 中使用 beanstalkc 对 URL 进行排队并执行作业
我有一个名为 spider 的函数,它接受 seed 作为参数。 seed 是我发送给蜘蛛函数的 URL 的名称。现在我的问题是如何在 Python 中使用 beanstalkc 对 UR…
如何使用 php 运行多个 beanstalk Worker
截至目前,我只为我的项目运行一个 beanstalk 工作线程,它处理基于 cron 的作业和实时作业。所以,我想把它分成两个工人。一名工作人员用于跟踪基于 …