首页 > 解决方案 > Strimzi kafka 出口商 kafka_consumergroup_members 指标

问题描述

我使用 Strimzi 操作符在 Kubernetes 上部署了一个带有消费者和生产者客户端的 kafka 集群。我使用了以下 srimzi 部署文件, https://github.com/strimzi/strimzi-kafka-operator/blob/main/examples/metrics/kafka-metrics.yaml

我正在使用 Kafka 导出器来监控与消费者相关的指标(每个主题每秒输入/输出的消息、消费者组的滞后、偏移量等)。但是,我有兴趣将 Prometheus 配置为抓取 kafka_exporter 指标“ kafka_consumergroup_members”,以便稍后在 Grafana 上显示。我应该在 strimzi Prometheus 配置文件(https://github.com/strimzi/strimzi-kafka-operator/blob/main/examples/metrics/prometheus-install/prometheus-rules.yaml)或任何其他配置文件中添加什么额外配置部署文件(例如,https://github.com/strimzi/strimzi-kafka-operator/blob/main/examples/metrics/kafka-metrics.yaml),以便从 kafka_exporter 指标中抓取“kafka_consumergroup_members”。

标签: apache-kafkaprometheusgrafanastrimzi

解决方案


Kafka Exporter 是一个单独的工具,它提供 Kafka 本身未提供的其他指标。它提供的指标是不可配置的 - 您只能限制它将显示指标的主题/消费者组。

因此,Kafka Exporter 支持的所有指标都发布在其指标端点上,并且当 Prometheus 对它们进行转义时,它应该将所有指标都刮掉。因此,如果您的 Prometheus 中有其他 KAfka Exporter 指标,那么您应该也已经有了这个(实际上您需要有一些活跃的消费者组才能显示出来)。


推荐阅读