如何解决如何区分不同服务的指标
我正在使用 OpenTelemetry 并且有这样的设置:
Golang、docker-compose、3 个服务、1 个独立的开放遥测收集器、1 个 Prometheus。
我将一些系统指标收集到一个独立的开放式遥测收集器。这些指标是从 3 个不同的服务中收集的,并且指标具有相同的名称。然后,Prometheus 从开放遥测收集器中获取数据。问题是我无法区分 Prometheus 中不同服务的指标,因为所有指标都具有相同的“实例”值,这等于 open-telemetry-collector 的主机。
我知道我可以将带有服务名称的标签添加到指标记录,然后通过标签区分指标,但我正在寻找另一种解决方案,因为并非总是可以将标签添加到每个指标。也许,像 http-middleware 这样的东西,但对于指标,或者可能是基础设施级别的东西。
服务是用 Golang 编写的,但我很高兴看到任何其他语言的解决方案。
otel-collector-config:
receivers:
otlp:
protocols:
grpc:
http:
exporters:
prometheus:
endpoint: otel-collector:8889
const_labels:
label1: value1
send_timestamps: true
metric_expiration: 5m
processors:
batch:
service:
pipelines:
metrics:
receivers: [ otlp ]
processors: [ batch ]
exporters: [ prometheus ]
普罗米修斯配置:
scrape_configs:
- job_name: 'otel-collector'
scrape_interval: 5s
static_configs:
- targets: ['otel-collector:8889']
docker-compose:
version: "3.9"
services:
service1:
build:
context: ./service1
network: host
environment:
- TELEMETRY_COLLECTOR_ADDR=otel-collector:55681
ports:
- "8094:8080"
expose:
- "8080"
service2:
build:
context: ./service2
network: host
environment:
- TELEMETRY_COLLECTOR_ADDR=otel-collector:55681
ports:
- "8095:8080"
expose:
- "8080"
service3:
build:
context: ./service3
network: host
environment:
- TELEMETRY_COLLECTOR_ADDR=otel-collector:55681
expose:
- "8080"
ports:
- "8096:8080"
prometheus:
image: prom/prometheus:v2.26.0
volumes:
- ./prometheus.yaml:/etc/prometheus/prometheus.yml
ports:
- "9090:9090"
otel-collector:
image: otel/opentelemetry-collector:0.23.0
command: [ "--config=/etc/otel-collector-config.yaml" ]
expose:
- "55681" # HTTP otel receiver
- "8889" # Prometheus exporter metrics
volumes:
- ./otel-collector-config.yaml:/etc/otel-collector-config.yaml
更新 1。
我发现 exporter-config https://github.com/open-telemetry/opentelemetry-collector/tree/main/exporter/exporterhelper 中添加了一些新参数。其中之一是适合我的:resource_to_telemetry_conversion
。但正如我所见,prometheusexporter
和 prometheusremotewriteexporter
不支持配置中的该字段。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。