title: opentelemetry keywords:

  • Apache APISIX
  • API 网关
  • Plugin
  • OpenTelemetry description: opentelemetry 插件可用于根据 OpenTelemetry 协议规范上报 Traces 数据,该插件仅支持二进制编码的 OLTP over HTTP。

描述

opentelemetry 插件可用于根据 OpenTelemetry Specification 协议规范上报 Traces 数据。该插件仅支持二进制编码的 OLTP over HTTP,即请求类型为 application/x-protobuf 的数据上报。

配置

默认情况下,服务名称、租户 ID、collector 和 batch span processor 的配置已预配置在默认配置中。

您可以通过端点 apisix/admin/plugin_metadata/opentelemetry 更改插件的配置,例如:

:::note 您可以从“config.yaml”获取“admin_key”,并使用以下命令保存到环境变量中:

admin_key=$(yq '.deployment.admin.admin_key[0].key' conf/config.yaml | sed 's/"//g')

:::

curl http://127.0.0.1:9180/apisix/admin/plugin_metadata/opentelemetry -H "X-API-KEY: $admin_key" -X PUT -d '
{
    "trace_id_source": "x-request-id",
    "resource": {
      "service.name": "APISIX"
    },
    "collector": {
      "address": "127.0.0.1:4318",
      "request_timeout": 3,
      "request_headers": {
        "Authorization": "token"
      }
    },
    "batch_span_processor": {
      "drop_on_queue_full": false,
      "max_queue_size": 1024,
      "batch_timeout": 2,
      "inactive_timeout": 1,
      "max_export_batch_size": 16
    },
    "set_ngx_var": false
}'

属性

名称类型必选项默认值有效值描述
samplerobject--采样策略。
sampler.namestringalways_off[“always_on”, “always_off”, “trace_id_ratio”, “parent_base”]采样策略。
always_on:全采样;always_off:不采样;trace_id_ratio:基于 trace id 的百分比采样;parent_base:如果存在 tracing 上游,则使用上游的采样决定,否则使用配置的采样策略决策。
sampler.optionsobject--采样策略参数。
sampler.options.fractionnumber0[0, 1]trace_id_ratio:采样策略的百分比。
sampler.options.rootobject--parent_base:采样策略在没有上游 tracing 时,会使用 root 采样策略做决策。
sampler.options.root.namestring-[“always_on”, “always_off”, “trace_id_ratio”]root 采样策略。
sampler.options.root.optionsobject--root 采样策略参数。
sampler.options.root.options.fractionnumber0[0, 1]trace_id_ratio root 采样策略的百分比
additional_attributesarray[string]--追加到 trace span 的额外属性,支持内置 NGINX 或 APISIX 变量
additional_header_prefix_attributesarray[string]--附加到跟踪范围属性的标头或标头前缀。例如,使用 x-my-header"x-my-headers-* 来包含带有前缀 x-my-headers- 的所有标头。

示例

以下示例展示了如何在不同场景下使用 opentelemetry 插件。

启用 opentelemetry 插件

默认情况下,APISIX 中的 opentelemetry 插件是禁用的。要启用它,请将插件添加到配置文件中,如下所示:

plugins:
  - ...
  - opentelemetry

重新加载 APISIX 以使更改生效。

有关 config.yaml 中可以配置的其他选项,请参阅静态配置

将 Traces 上报到 OpenTelemetry

以下示例展示了如何追踪对路由的请求并将 traces 发送到 OpenTelemetry。

在 Docker 启动一个 OpenTelemetry collector 实例:

docker run -d --name otel-collector -p 4318:4318 otel/opentelemetry-collector-contrib

创建一个开启了 opentelemetry 插件的路由:

curl "http://127.0.0.1:9180/apisix/admin/routes" -X PUT \
  -H "X-API-KEY: ${admin_key}" \
  -d '{
    "id": "otel-tracing-route",
    "uri": "/anything",
    "plugins": {
      "opentelemetry": {
        "sampler": {
          "name": "always_on"
        }
      }
    },
    "upstream": {
      "type": "roundrobin",
      "nodes": {
        "httpbin.org": 1
      }
    }
  }'

向路由发送请求:

curl "http://127.0.0.1:9080/anything"

你应该收到一个 HTTP/1.1 200 OK 响应。

在 OpenTelemetry collector 的日志中,你应该看到类似以下的信息:

2024-02-18T17:14:03.825Z info ResourceSpans #0
Resource SchemaURL:
Resource attributes:
    -> telemetry.sdk.language: Str(lua)
    -> telemetry.sdk.name: Str(opentelemetry-lua)
    -> telemetry.sdk.version: Str(0.1.1)
    -> hostname: Str(e34673e24631)
    -> service.name: Str(APISIX)
ScopeSpans #0
ScopeSpans SchemaURL:
InstrumentationScope opentelemetry-lua
Span #0
    Trace ID       : fbd0a38d4ea4a128ff1a688197bc58b0
    Parent ID      :
    ID             : af3dc7642104748a
    Name           : GET /anything
    Kind           : Server
    Start time     : 2024-02-18 17:14:03.763244032 +0000 UTC
    End time       : 2024-02-18 17:14:03.920229888 +0000 UTC
    Status code    : Unset
    Status message :
Attributes:
    -> net.host.name: Str(127.0.0.1)
    -> http.method: Str(GET)
    -> http.scheme: Str(http)
    -> http.target: Str(/anything)
    -> http.user_agent: Str(curl/7.64.1)
    -> apisix.route_id: Str(otel-tracing-route)
    -> apisix.route_name: Empty()
    -> http.route: Str(/anything)
    -> http.status_code: Int(200)
{"kind": "exporter", "data_type": "traces", "name": "debug"}

要可视化这些追踪,你可以将 traces 导出到后端服务,例如 Zipkin 和 Prometheus。有关更多详细信息,请参阅exporters

在日志中使用 trace 变量

以下示例展示了如何配置 opentelemetry 插件以设置以下内置变量,这些变量可以在日志插件或访问日志中使用:

  • opentelemetry_context_traceparent: W3C trace context
  • opentelemetry_trace_id: 当前 span 的 trace_id
  • opentelemetry_span_id: 当前 span 的 span_id

配置插件元数据以将 set_ngx_var 设置为 true:

curl http://127.0.0.1:9180/apisix/admin/plugin_metadata/opentelemetry -H "X-API-KEY: $admin_key" -X PUT -d '
{
    "set_ngx_var": true
}'

如下更新配置文件。你应该自定义访问日志格式以使用 opentelemetry 插件变量,并在 set_ngx_var 字段中设置 opentelemetry 变量。

nginx_config:
  http:
    enable_access_log: true
    access_log_format: '{"time": "$time_iso8601","opentelemetry_context_traceparent": "$opentelemetry_context_traceparent","opentelemetry_trace_id": "$opentelemetry_trace_id","opentelemetry_span_id": "$opentelemetry_span_id","remote_addr": "$remote_addr"}'
    access_log_format_escape: json

重新加载 APISIX 以使配置更改生效。

{"time": "18/Feb/2024:15:09:00 +0000","opentelemetry_context_traceparent": "00-fbd0a38d4ea4a128ff1a688197bc58b0-8f4b9d9970a02629-01","opentelemetry_trace_id": "fbd0a38d4ea4a128ff1a688197bc58b0","opentelemetry_span_id": "af3dc7642104748a","remote_addr": "172.10.0.1"}