如何在 Apache 下运行的应用程序中保留动态应用程序级统计信息？

Question

我有一个在 apache 下运行的应用程序，我想保留“当前”统计信息。我想让应用程序告诉我这样的事情：

• 每秒的请求数，按请求
• 延迟类型细分，通过 Thrift 向各种后端服务发出请求（按服务和服务器细分）
• 每秒处理的错误数
• 等。

我想要无需任何外部依赖即可执行此操作。但是，我遇到了在 apache 进程之间共享统计信息的问题。显然，我不能只使用全局内存。解决此类问题的好模式是什么？

该应用程序是使用 pylons 用 python 编写的，尽管我怀疑这更多的是“跨进程通信”设计问题，而不是 python 特定的问题。

Answer 1

也许您可以将相关计数器和其他统计信息保存在所有 apache 进程都可以访问的 memcached 中？

Answer 2

我想在没有任何外部的情况下做到这一点
依赖关系。

如果你的 apache 以某种方式死掉了怎么办？（关注点分离？）

我个人正在使用（冗余） Nagios 用于监控硬件本身、服务和应用程序指标。这样我就可以轻松/自动地绘制“每秒请求数/在线用户数”、“每秒 CPU 负载/用户活动 X”等图表，这对很多事情都有帮助。

为 nagios 编写插件非常容易，而且还有数千个任何语言的预制脚本。

Apache监控

我通过nagios插件从apache mod_status页面提取我需要的信息来监控apache。

插件响应示例：

APACHE OK - 0.080 秒。响应时间，繁忙/空闲 18/16，打开 766/800，ReqPerSec 12.4，BytesPerReq 3074，BytesPerSec 38034

应用程序监控

我使用 mod_status 只是作为您的列表的示例我想监控。

对于我们的应用程序，我们有一个非常小的 Nagios 插件框架，因此基本上每个 nagios 检查都是一个小类，它针对缓存或数据库运行检查并将其值返回给 nagios（小而简单的命令行脚本）。

更多示例：

Memcache:
OK - consumption: 82.88% (106.1 MBytes/128.0 MBytes), connections: 2, requests/s: 10.99, hitrate: 95.2% (34601210/36346999), getrate: 50.1% (36346999/72542987)

Application feature #1 usage:
OK - last 5m: 22 last 24h: 655 ever: 26121

Application feature #2 usage:
OK - last 5m: 39 last 24h: 11011

Other applications metrics:
OK - users online: 556

我想说的是：扩展 Nagios 进行应用程序监控非常容易。
我的小框架花了我 3-4 个小时来编写，现在我添加的任何检查只需要几分钟。

Nagios 插件开发指南

Answer 3

使用 pylons.g 对象。它是 Pylons 应用程序的 lib/app_globals.py 文件中 Globals 类的实例。它的状态更改对所有线程都是可见的，因此其中的内容需要是线程安全的。

lib/app_globals.py:

class Globals(object):
    def __init__(self):
        self.requests_served = 0

控制器/status.py:

from pylons import g

class StatusController(BaseController):
    def status(self):
        g.requests_served += 1
        return "Served %d requests." % g.requests_served