当前位置：文江博客话题详情

负载平衡 Web 服务器上的 Cron 任务

发布于 2024-11-17 00:40:13 字数 795 浏览 2 评论 0原文

我正在寻找更好的解决方案来在负载平衡的环境中处理我们的 cron 任务。

当前：

PHP 应用程序在负载均衡器后面的 3 个 CentOS 服务器上运行。
需要定期运行但一次仅在一台计算机上运行的任务。
很好的旧 cron 设置在第一台服务器上运行这些任务。
如果第一个服务器由于某种原因无法运行，就会出现问题。

寻找：

更强大、更去中心化的东西。
对任务进行负载平衡，以便多个任务仅运行一次，但在随机/不同的服务器上运行以分散负载。
防止当第一台服务器出现故障时任务无法运行。
能够使用 Web 界面管理任务并查看汇总报告。
如果出现任何问题，会发出通知。

该解决方案不需要用 PHP 实现，但它会很好，因为它允许我们在需要时轻松调整它。

我发现了两个看起来很有前途的项目。 GNUBatch 和作业调度程序。很可能会进一步测试两者，但我想知道是否有人对上述问题有更好的解决方案。

谢谢。

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

花之痕靓丽 2024-11-24 00:40:13

您可以使用这个使用 Redis 的小型库来创建临时定时锁：

https://github.com/AlexDisler/MutexLock

服务器应该相同并且具有相同的 cron 配置。第一个创建锁的服务器也将执行该任务。其他服务器将看到锁定并退出而不执行任何操作。

例如，在执行计划任务的php文件中：

MutexLock\Lock::init([
  'host'   => $redisHost,
  'port'   => $redisPort
]);

// check if a lock was already created,
// if it was, it means that another server is already executing this task
if (!MutexLock\Lock::set($lockKeyName, $lockTimeInSeconds)) {
  return;
}

// if no lock was created, execute the scheduled task
scheduledTaskThatRunsOnlyOnce();

要以去中心化的方式运行任务并分散负载，请查看： https://github.com/chrisboulton/php-resque
它是 resque 的 ruby 版本的 php 端口，它以完全相同的格式存储数据，因此您可以使用 https ://github.com/resque/resque-web 或 http://resqueboard.kamisama.me/< /a> 监视工人并查看报告

You can use this small library that uses redis to create a temporary timed lock:

https://github.com/AlexDisler/MutexLock

The servers should be identical and have the same cron configuration. The server that will be first to create the lock will also execute the task. The other servers will see the lock and exit without executing anything.

For example, in the php file that executes the scheduled task:

MutexLock\Lock::init([
  'host'   => $redisHost,
  'port'   => $redisPort
]);

// check if a lock was already created,
// if it was, it means that another server is already executing this task
if (!MutexLock\Lock::set($lockKeyName, $lockTimeInSeconds)) {
  return;
}

// if no lock was created, execute the scheduled task
scheduledTaskThatRunsOnlyOnce();

To run the tasks in a de-centralized way and spread the load, take a look at: https://github.com/chrisboulton/php-resque
It's a php port of the ruby version of resque and it stores the data in the same exact format so you can use https://github.com/resque/resque-web or http://resqueboard.kamisama.me/ to monitor the workers and see reports

回复收藏 0 原文