opsguruhub/prometheus-kafka-consumer-group-exporter

opsguruhub/prometheus-kafka-consumer-group-exporter 镜像说明

镜像概述

本镜像为https://github.com/braedon/prometheus-kafka-consumer-group-exporter%E7%9A%84%E5%88%86%E5%8F%89%E7%89%88%E6%9C%AC%EF%BC%8C%E6%98%AF%E4%B8%80%E4%B8%AAPrometheus%E5%AF%BC%E5%87%BA%E5%99%A8%EF%BC%8C%E7%94%A8%E4%BA%8E%E6%8A%A5%E5%91%8AKafka%E6%89%80%E6%9C%89%E6%B6%88%E8%B4%B9%E8%80%85%E7%BB%84%E5%9C%A8%E6%89%80%E6%9C%89%E4%B8%BB%E9%A2%98%E4%B8%8A%E7%9A%84%E5%BB%B6%E8%BF%9F%E6%83%85%E5%86%B5%EF%BC%8C%E5%90%8C%E6%97%B6%E5%8F%AF%E6%A3%80%E6%9F%A5%E5%88%86%E5%8C%BA%E9%97%B4%E7%9A%84%E8%AF%BB%E5%86%99%E6%98%AF%E5%90%A6%E5%B9%B3%E8%A1%A1%EF%BC%88%E8%BF%99%E6%98%AFKafka broker原生指标未在分区级别暴露的内容）。该分叉解决了原版本的两个问题：支持Kafka 2.x（原版本读取__consumer_offsets主题时会崩溃）、正确处理自定义消费者配置（原版本无法将整数设置正确传递给kafka-python）。

核心功能

1. 收集Kafka所有消费者组的延迟指标，供Prometheus监控。
2. 检查Kafka分区间的读写平衡状态。
3. 支持Kafka 2.x版本及自定义消费者配置。

使用场景

适用于需要监控Kafka集群消费者延迟和分区平衡的场景，可集成到Prometheus监控体系中，帮助运维人员及时发现消费延迟过高或分区负载不均的问题。

配置说明

• HTTP端口固定为9101。
• 需指定Kafka broker地址（-b参数），可选指定消费者配置文件（--consumer-config参数）。

部署示例

Docker Run命令

bash
docker run -p 9101:9101/tcp -w /tmp -v "/opt/prometheus/kafka-client-ssl:/tmp" opsguruhub/prometheus-kafka-consumer-group-exporter -b kafka-0:9093 --consumer-config /tmp/client-ssl.config

注意：导出器内部是__consumer_offsets主题的消费者，每个Kafka集群只需部署一个实例。