注入traces数据中未显示在loki-grafana上

Question

设置： 我正在使用 python-logging-loki 库来手动检测我的代码的日志。我有一个正在运行的 Loki 实例（未使用 promtail，我直接推送到 loki）。 在 Grafana 上，我启动并运行了 Jaeger 和 Loki 作为数据源。对于 Traces，我使用 opentelemetry python 库（也手动检测代码）。

我正在尝试使用 Opentelemetry 日志记录仪器 库，用于在将跟踪数据发送到 Loki 之前自动将跟踪数据注入到我的日志中。 我的问题是，当我运行测试应用程序时，我可以看到在控制台上打印出注入的数据，但在 grafana 上注入的数据没有显示。

我为派生字段配置了 Loki，以使用正则表达式提取trace_id，并且内部链接指向 jaeger。

    # auto inject trace data into logs (Opentelemetry Logging Instrumentation library)
    LoggingInstrumentor().instrument(set_logging_format=True, log_level=logging.DEBUG)

    # manual instrumentation of traces 
    with tracer.start_as_current_span(name="random-name") as span:

        # using python-logging-loki library to construct the logs
        logger.info(msg="testing loki logger", extra={"tags": {"product_number": "ABCD123"}})

在 Grafana 上，日志已成功导出，但跟踪数据未出现，尽管在 Grafana 上的 Loki 中设置了派生字段值

在我的控制台上，但是当我运行测试应用程序时，我可以看到日志消息的打印输出，其中注入了跟踪数据，尽管

2022-04-08 15:17:15,476 DEBUG [urllib3.connectionpool] [connectionpool.py:228] [trace_id=e4fb8555337a28cc639955a36d994ed1 span_id=86425d0bc3cc088c resource.service.name=] - Starting new HTTP connection (1): localhost:3100
2022-04-08 15:17:15,498 DEBUG [urllib3.connectionpool] [connectionpool.py:456] [trace_id=e4fb8555337a28cc639955a36d994ed1 span_id=86425d0bc3cc088c resource.service.name=] - http://localhost:3100 "POST /loki/api/v1/push HTTP/1.1" 204 0
2022-04-08 15:17:15,469 INFO [otlp_handler] [main.py:39] [trace_id=e4fb8555337a28cc639955a36d994ed1 span_id=86425d0bc3cc088c resource.service.name=] - testing loki logger

我不确定我在这里做错了什么！ 只有当我明确地将trace_id写入日志消息时，grafana才会派生这些值。因此，如果我这样写日志：

logger.info(msg="[ trace_id=d4ea420b4fa4e20e7fbb579c80fa4e88 span_id=856ca68d4b52bbd4 ] - testing loki logger", extra={"tags": {"product_number": "ABCD123"}})

上的跟踪

然后在 grafana loki 上，我可以看到记录中的派生字段，并且它正确链接到 jaeger

我做错了什么？ .. 这是使用 otel 记录仪器的正确方法吗？ ..

Answer 1

您可能需要在[和trace_id之间放置一个空间吗？解析时，字段被空间分开，因此在您的日志中，字段名称可能最终以[trace_id。

Answer 2

如果我不得不猜测，我会说您在Grafana中看到的日志条目是创建的，而实际上没有积极的跨度。

不确定情况如何与Python一起使用，但是与JS一起使用。您可以在loghook回调功能中放置一个断点，以确保实际上有一个跨度运行。

您也可以尝试手动获取示踪剂并包装log.info（）在tracer.startactivespan中调用。这是它在打字稿中的工作方式：

import { WinstonInstrumentation } from '@opentelemetry/instrumentation-winston';
import { Span } from '@opentelemetry/api';

// initTracer does all the otel tracer setup stuff and takes an optional param InstrumentationOption[]
initTracer([
  new WinstonInstrumentation({
    logHook: (span: Span) => {
      console.log(span) // <---- Put breakpoint here.
    },
  }),
]);

// manually start a span
trace
  .getTracer('my-service')
  .startActiveSpan('seedRootUser', async (span: Span) => {
    logger.info('This will have the Span\'s span_id and trace_id attached to the log data');
    span.end(); // make sure to call or I won't work!
  });