Python 的应用程序性能指标

Question

我们正在编写一个 Python Web 应用程序，我们想了解用户正在做什么的大致数据。

举个例子，我们有一堆遗留模式来设置所使用的区域设置； url-参数，使用不同格式的不同cookie，Accpet-Language-headers &c。我们真的很想以某种方式来衡量这一点（但记录它只是太多的数据）。

我尝试过寻找像 Metrics for Node.js 这样的库，但我似乎找不到任何东西对于Python。现在，我认为我们可以使用一堆类似 UNIX 负载的计数器。 （但越多越好，对吧？）

我是否错过了一些明显的库或某处的一些智能技术？

Answer 1

刚刚找到 PyCounters 项目，它看起来就像我开始需要的那样。

Answer 2

名为 Graphite 的 Python 项目与名为 Statsd 可以做你想做的事情。很多时候，人们也使用这些项目来衡量软件性能指标和业务指标。

顺便说一句，有些托管应用程序版本提供了许多与 Graphite 和 Statsd。我公司的产品 Instrumental 将为您进行指标托管前端和图形生成；在Python中，您可以使用 Python statsd 客户端< /a> 与我们的 Statsd 到 Instrumental 代理 一致向我们的服务报告您的指标。

由于接受的答案是进行基于文件的日志记录（默认情况下至少:)），我会注意到传输层在这些不同的事物中很有趣： statsd 服务器（无论是 官方 或 我们的代理）使用 UDP 将您的指标信息发送到服务器。您还可以联系 Graphite 或 Instrumental 直接使用基于线路的 TCP 协议；其他商业服务，例如 librato Metrics 或 Stathat 使用 HTTP 消息获取您的指标。根据您发送的消息的规模，这些工具中的任何一种可能或多或少对您有吸引力。

Answer 3

查看多个日志。

我们有许多单独的日志（单独的句柄、单独的格式），并使用 Python 日志记录将这些事件记录到单独的日志中。

我们有很多类似这样的功能。

def some_feature( ... ):
    customer_log.info( "Requested some_feature" )
    ...
    vendor_x_log.info( "Got foo" )
    ...
    vendor_y_log.info( "Got bar" )

现在我们有了详细的日志。由于日志记录模块可以写入数据库（或执行任何其他看似合适的操作），因此我们可以通过一个简单且易于配置的界面获得所有详细信息。

Answer 4

您可以尝试托管指标服务Metrics At。您可以记录您想要度量的数据，例如 url-parameter、Accpet-Language-headers ...等。然后你可以在Metrics At中输入正则表达式。 Metrics At 将自动提取数据并为您进行度量。

Answer 5

PyCounters 的一种新替代方案是 Scales：
https://github.com/Cue/scales/

它有一些很酷的额外功能，例如启动服务器提供当前统计数据或发送到 Graphite。