kuskoman/logstash-exporter

kuskoman

用于Logstash应用的Prometheus exporter，能够收集并暴露Logstash运行指标（如事件吞吐量、管道状态、插件性能等），支持Prometheus监控与告警集成，帮助用户实时掌握Logstash实例健康状态与性能表现。

1 次收藏下载次数: 0状态：社区镜像维护者：kuskoman仓库类型：镜像最近更新：6 个月前

使用轩辕镜像，把时间还给真正重要的事。点击查看

中文简介版本下载

使用轩辕镜像，把时间还给真正重要的事。点击查看

Logstash Prometheus Exporter 镜像文档

1. 镜像概述与主要用途

本镜像是一个轻量级Prometheus exporter，专为Logstash应用设计。其核心功能是通过Logstash监控API采集运行指标（如事件处理量、管道状态、插件性能、JVM资源使用等），并转换为Prometheus兼容的指标格式，支持Prometheus监控系统抓取与存储，最终结合Grafana等工具实现可视化监控与告警，助力用户保障Logstash日志处理流水线的稳定性与性能。

2. 核心功能与特性

全面的指标覆盖：支持采集Logstash核心指标，包括：
- 事件指标：输入/输出事件计数、处理延迟、丢弃/失败事件数
- 管道指标：管道运行状态、配置重载次数、重启次数
- 插件指标：各插件（input/output/filter）的事件处理量、错误率
- JVM指标：堆内存使用、GC次数、线程数等JVM运行状态指标
Logstash API集成：通过Logstash原生监控API（默认9600端口）获取数据，无需修改Logstash核心配置
Prometheus兼容：输出符合Prometheus规范的指标格式（OpenMetrics），支持PromQL查询与聚合
灵活配置：支持自定义监听端口、指标路径、Logstash连接参数（如TLS、认证）
轻量级设计：基于精简基础镜像构建，资源占用低（典型内存占用<50MB），适合容器化部署

3. 使用场景与适用范围

ELK/Elastic Stack环境：监控Logstash在日志处理流水线中的性能表现
日志处理管理员：实时追踪日志事件吞吐量，排查延迟或数据丢失问题
DevOps工程师：集成Prometheus告警，在Logstash异常（如事件积压、插件错误）时触发通知
多实例部署监控：统一采集多个Logstash节点指标，实现集群级性能分析
容量规划：基于历史指标数据（如峰值事件量）优化Logstash资源配置

4. 使用方法与配置说明

4.1 基本部署（docker run）

bash
docker run -d \
  --name logstash-exporter \
  -p 9198:9198 \  # Exporter默认监听端口
  -e LOGSTASH_HOST=logstash-instance \  # Logstash实例地址（主机名/IP）
  -e LOGSTASH_PORT=9600 \  # Logstash监控API端口（默认9600）
  [镜像名称]:[标签]

4.2 Docker Compose 部署

适用于与Logstash、Prometheus等组件协同部署：

yaml
version: '3.8'
services:
  logstash:
    image: docker.elastic.co/logstash/logstash:8.11.3
    environment:
      - "MONITORING_ENABLED=true"  # 确保Logstash启用监控API
    ports:
      - "9600:9600"  # 暴露监控API端口

  logstash-exporter:
    image: [镜像名称]:[标签]
    depends_on:
      - logstash
    environment:
      - LOGSTASH_HOST=logstash
      - LOGSTASH_PORT=9600
      - EXPORTER_PORT=9198  # 自定义exporter监听端口（可选）
      - METRICS_PATH=/metrics  # 自定义指标暴露路径（可选，默认/metrics）
      - LOG_LEVEL=info  # 日志级别（可选：debug/info/warn/error，默认info）
    ports:
      - "9198:9198"

4.3 Prometheus 抓取配置

在Prometheus配置文件（prometheus.yml）中添加如下job：

yaml
scrape_configs:
  - job_name: 'logstash'
    static_configs:
      - targets: ['logstash-exporter:9198']  # 替换为exporter实际地址:端口
    scrape_interval: 10s  # 建议抓取间隔（根据监控精度需求调整）

5. 配置参数说明

环境变量	描述	默认值	可选值/示例
`LOGSTASH_HOST`	Logstash实例地址	`localhost`	`logstash-node-1`, `192.168.1.100`
`LOGSTASH_PORT`	Logstash监控API端口	`9600`	`9601`（自定义Logstash监控端口）
`EXPORTER_PORT`	Exporter监听端口	`9198`	`9200`（避免端口冲突时修改）
`METRICS_PATH`	Prometheus指标暴露路径	`/metrics`	`/logstash-metrics`
`LOG_LEVEL`	日志输出级别	`info`	`debug`（排障）/`warn`（生产环境）
`LOGSTASH_TLS_ENABLED`	是否启用TLS连接Logstash API	`false`	`true`（Logstash API启用HTTPS时）
`LOGSTASH_TLS_INSECURE`	跳过TLS证书验证（仅测试用）	`false`	`true`
`LOGSTASH_USERNAME`	Logstash API认证用户名（如启用Basic Auth）	空字符串	`logstash-monitor`
`LOGSTASH_PASSWORD`	Logstash API认证密码	空字符串	`secure-password`
`SCRAPE_INTERVAL`	指标采集间隔（秒）	`10`	`5`（高频采集，增加资源消耗）

4.4 验证部署

访问exporter指标端点：http://<exporter-ip>:9198/metrics，确认返回Prometheus格式指标
在Prometheus UI中执行查询（如logstash_pipeline_events_in_total），验证指标是否被抓取
（可选）导入Grafana Logstash监控面板（推荐面板ID：[社区常用Logstash面板ID，如893]）

5. 注意事项

Logstash监控API启用：确保Logstash配置中启用监控API（Logstash 7.x+默认启用，低版本需在logstash.yml中设置monitoring.enabled: true）
网络连通性：exporter容器需能访问Logstash的监控端口（默认9600），避免防火墙或网络策略拦截
认证配置：若Logstash API启用认证（如通过反向代理配置Basic Auth），必须设置LOGSTASH_USERNAME和LOGSTASH_PASSWORD
资源限制：单exporter建议监控不超过10个Logstash实例，超大规模部署建议按节点分组部署多个exporter

查看更多 logstash-exporter 相关镜像 →

轩辕镜像配置手册

探索更多轩辕镜像的使用方法，找到最适合您系统的配置方式

Docker 配置

登录仓库拉取

通过 Docker 登录认证访问私有仓库

专属域名拉取

无需登录使用专属域名

K8s Containerd

Kubernetes 集群配置 Containerd

K3s

K3s 轻量级 Kubernetes 镜像加速

Dev Containers

VS Code Dev Containers 配置

Podman

Podman 容器引擎配置

Singularity/Apptainer

HPC 科学计算容器配置

其他仓库配置

ghcr、Quay、nvcr 等镜像仓库

Harbor 镜像源配置

Harbor Proxy Repository 对接专属域名

Portainer 镜像源配置

Portainer Registries 加速拉取

Nexus 镜像源配置

Nexus3 Docker Proxy 内网缓存

系统配置

Linux

在 Linux 系统配置镜像服务

Windows/Mac

在 Docker Desktop 配置镜像

MacOS OrbStack

MacOS OrbStack 容器配置

Docker Compose

Docker Compose 项目配置

NAS 设备

群晖

Synology 群晖 NAS 配置

飞牛

飞牛 fnOS 系统配置镜像

绿联

绿联 NAS 系统配置镜像

威联通

QNAP 威联通 NAS 配置

极空间

极空间 NAS 系统配置服务

网络设备

爱快路由

爱快 iKuai 路由系统配置

宝塔面板

在宝塔面板一键配置镜像

需要其他帮助？请查看我们的常见问题Docker 镜像访问常见问题解答或提交工单

镜像拉取常见问题

使用与功能问题

配置了专属域名后，docker search 为什么会报错？

docker search 限制

Docker Hub 上有的镜像，为什么在轩辕镜像网站搜不到？

站内搜不到镜像

机器不能直连外网时，怎么用 docker save / load 迁镜像？

离线 save/load

docker pull 拉插件报错（plugin v1+json）怎么办？

插件要用 plugin install

WSL 里 Docker 拉镜像特别慢，怎么排查和优化？

WSL 拉取慢

轩辕镜像安全吗？如何用 digest 校验镜像没被篡改？

安全与 digest

第一次用轩辕镜像拉 Docker 镜像，要怎么登录和配置？

新手拉取配置

错误码与失败问题

docker pull 提示 manifest unknown 怎么办？

manifest unknown

docker pull 提示 no matching manifest 怎么办？

no matching manifest（架构）

镜像已拉取完成，却提示 invalid tar header 或 failed to register layer 怎么办？

invalid tar header（解压）

Docker pull 时 HTTPS / TLS 证书验证失败怎么办？

TLS 证书失败

Docker pull 时 DNS 解析超时或连不上仓库怎么办？

DNS 超时

Docker 拉取出现 410 Gone 怎么办？

410 Gone 排查

出现 402 或「流量用尽」提示怎么办？

402 与流量用尽

Docker 拉取提示 UNAUTHORIZED（401）怎么办？

401 认证失败

遇到 429 Too Many Requests（请求太频繁）怎么办？

429 限流

docker login 提示 Cannot autolaunch D-Bus，还算登录成功吗？

D-Bus 凭证提示

为什么会出现「单层超过 20GB」或 413，无法加速拉取？

413 与超大单层

账号 / 计费 / 权限

轩辕镜像免费版和专业版有什么区别？

免费版与专业版区别

轩辕镜像支持哪些 Docker 镜像仓库？

支持的镜像仓库

镜像拉取失败还会不会扣流量？

失败是否计费

麒麟 V10 / 统信 UOS 提示 KYSEC 权限不够怎么办？

KYSEC 拦截脚本

如何在轩辕镜像申请开具发票？

申请开票

怎么修改轩辕镜像的网站登录和仓库登录密码？

修改登录密码

如何注销轩辕镜像账户？要注意什么？

注销账户

配置与原理类

写了 registry-mirrors，为什么还是走官方或仍然报错？

mirrors 不生效

怎么用 docker tag 去掉镜像名里的轩辕域名前缀？

去掉域名前缀

如何拉取指定 CPU 架构的镜像（如 ARM64、AMD64）？

指定架构拉取

用轩辕镜像拉镜像时快时慢，常见原因有哪些？

拉取速度原因

查看全部问题→

用户好评

来自真实用户的反馈，见证轩辕镜像的优质服务

oldzhang

运维工程师

Linux服务器

"Docker访问体验非常流畅，大镜像也能快速完成下载。"

kuskoman/logstash-exporter

kuskoman

用于Logstash应用的Prometheus exporter，能够收集并暴露Logstash运行指标（如事件吞吐量、管道状态、插件性能等），支持Prometheus监控与告警集成，帮助用户实时掌握Logstash实例健康状态与性能表现。

1 次收藏下载次数: 0状态：社区镜像维护者：kuskoman仓库类型：镜像最近更新：6 个月前

使用轩辕镜像，把时间还给真正重要的事。点击查看

中文简介版本下载

使用轩辕镜像，把时间还给真正重要的事。点击查看

Logstash Prometheus Exporter 镜像文档

1. 镜像概述与主要用途

2. 核心功能与特性

全面的指标覆盖：支持采集Logstash核心指标，包括：
- 事件指标：输入/输出事件计数、处理延迟、丢弃/失败事件数
- 管道指标：管道运行状态、配置重载次数、重启次数
- 插件指标：各插件（input/output/filter）的事件处理量、错误率
- JVM指标：堆内存使用、GC次数、线程数等JVM运行状态指标
Logstash API集成：通过Logstash原生监控API（默认9600端口）获取数据，无需修改Logstash核心配置
Prometheus兼容：输出符合Prometheus规范的指标格式（OpenMetrics），支持PromQL查询与聚合
灵活配置：支持自定义监听端口、指标路径、Logstash连接参数（如TLS、认证）
轻量级设计：基于精简基础镜像构建，资源占用低（典型内存占用<50MB），适合容器化部署

3. 使用场景与适用范围

ELK/Elastic Stack环境：监控Logstash在日志处理流水线中的性能表现
日志处理管理员：实时追踪日志事件吞吐量，排查延迟或数据丢失问题
DevOps工程师：集成Prometheus告警，在Logstash异常（如事件积压、插件错误）时触发通知
多实例部署监控：统一采集多个Logstash节点指标，实现集群级性能分析
容量规划：基于历史指标数据（如峰值事件量）优化Logstash资源配置

4. 使用方法与配置说明

4.1 基本部署（docker run）

bash
docker run -d \
  --name logstash-exporter \
  -p 9198:9198 \  # Exporter默认监听端口
  -e LOGSTASH_HOST=logstash-instance \  # Logstash实例地址（主机名/IP）
  -e LOGSTASH_PORT=9600 \  # Logstash监控API端口（默认9600）
  [镜像名称]:[标签]

4.2 Docker Compose 部署

适用于与Logstash、Prometheus等组件协同部署：

yaml
version: '3.8'
services:
  logstash:
    image: docker.elastic.co/logstash/logstash:8.11.3
    environment:
      - "MONITORING_ENABLED=true"  # 确保Logstash启用监控API
    ports:
      - "9600:9600"  # 暴露监控API端口

  logstash-exporter:
    image: [镜像名称]:[标签]
    depends_on:
      - logstash
    environment:
      - LOGSTASH_HOST=logstash
      - LOGSTASH_PORT=9600
      - EXPORTER_PORT=9198  # 自定义exporter监听端口（可选）
      - METRICS_PATH=/metrics  # 自定义指标暴露路径（可选，默认/metrics）
      - LOG_LEVEL=info  # 日志级别（可选：debug/info/warn/error，默认info）
    ports:
      - "9198:9198"

4.3 Prometheus 抓取配置

在Prometheus配置文件（prometheus.yml）中添加如下job：

yaml
scrape_configs:
  - job_name: 'logstash'
    static_configs:
      - targets: ['logstash-exporter:9198']  # 替换为exporter实际地址:端口
    scrape_interval: 10s  # 建议抓取间隔（根据监控精度需求调整）

5. 配置参数说明

环境变量	描述	默认值	可选值/示例
`LOGSTASH_HOST`	Logstash实例地址	`localhost`	`logstash-node-1`, `192.168.1.100`
`LOGSTASH_PORT`	Logstash监控API端口	`9600`	`9601`（自定义Logstash监控端口）
`EXPORTER_PORT`	Exporter监听端口	`9198`	`9200`（避免端口冲突时修改）
`METRICS_PATH`	Prometheus指标暴露路径	`/metrics`	`/logstash-metrics`
`LOG_LEVEL`	日志输出级别	`info`	`debug`（排障）/`warn`（生产环境）
`LOGSTASH_TLS_ENABLED`	是否启用TLS连接Logstash API	`false`	`true`（Logstash API启用HTTPS时）
`LOGSTASH_TLS_INSECURE`	跳过TLS证书验证（仅测试用）	`false`	`true`
`LOGSTASH_USERNAME`	Logstash API认证用户名（如启用Basic Auth）	空字符串	`logstash-monitor`
`LOGSTASH_PASSWORD`	Logstash API认证密码	空字符串	`secure-password`
`SCRAPE_INTERVAL`	指标采集间隔（秒）	`10`	`5`（高频采集，增加资源消耗）

4.4 验证部署

访问exporter指标端点：http://<exporter-ip>:9198/metrics，确认返回Prometheus格式指标
在Prometheus UI中执行查询（如logstash_pipeline_events_in_total），验证指标是否被抓取
（可选）导入Grafana Logstash监控面板（推荐面板ID：[社区常用Logstash面板ID，如893]）

5. 注意事项

Logstash监控API启用：确保Logstash配置中启用监控API（Logstash 7.x+默认启用，低版本需在logstash.yml中设置monitoring.enabled: true）
网络连通性：exporter容器需能访问Logstash的监控端口（默认9600），避免防火墙或网络策略拦截
认证配置：若Logstash API启用认证（如通过反向代理配置Basic Auth），必须设置LOGSTASH_USERNAME和LOGSTASH_PASSWORD
资源限制：单exporter建议监控不超过10个Logstash实例，超大规模部署建议按节点分组部署多个exporter