palobo/grok_exporter

grok_exporter镜像

从任意非结构化日志数据中导出Prometheus监控指标的工具镜像。

镜像概述

grok_exporter旨在将ELK栈中的Grok日志解析能力移植到Prometheus监控体系，通过Grok模式从日志文件中提取结构化数据并生成Prometheus兼容的指标。

核心功能

1. 解析非结构化日志为结构化数据
2. 基于Grok模式定义自定义指标（计数器、 gauge等）
3. 暴露HTTP端点供Prometheus采集指标
4. 支持本地文件日志输入

使用场景

• 应用服务日志的指标化监控
• 系统日志的关键事件统计
• 自定义业务日志的性能指标提取

配置说明

需提供config.yml配置文件，包含输入日志路径、Grok模式、指标定义及服务端口等。详细配置规则参考https://github.com/fstab/grok_exporter/blob/master/CONFIG.md。

独立运行示例

sh
docker container run --name grok -d \
                     -p 9144:9144 \
                     -v $(pwd)/config.yml:/etc/grok_exporter/config.yml \
                     palobo/grok_exporter

• 9144为默认端口，需与配置文件中定义的端口一致
• 挂载本地配置文件到容器内/etc/grok_exporter/config.yml

Docker Compose集成示例

sh
docker container run --name grok -d \
                     --net prom-network \
                     -v $(pwd)/config.yml:/etc/grok_exporter/config.yml \
                     palobo/grok_exporter

• prom-network为Prometheus/Grafana所在的容器网络，无需暴露外部端口

配置文件示例

yml
global:
    config_version: 2
input:
    type: file
    path: ./example/example.log
    readall: true
grok:
    patterns_dir: ./logstash-patterns-core/patterns
metrics:
    - type: counter
      name: grok_example_lines_total
      help: 带标签的计数器指标示例
      match: '%{DATE} %{TIME} %{USER:user} %{NUMBER}'
      labels:
          user: '{{.user}}'
server:
    port: 9144