rightscale/fluentd

镜像概述

本镜像基于上游Fluentd项目定制，主要实现了https://github.com/fluent/fluentd-docker-image#how-to-build-your-own-image%E4%B8%AD%E7%9A%84%E8%87%AA%E5%AE%9A%E4%B9%89%E6%9E%84%E5%BB%BA%E6%96%B9%E6%B3%95%EF%BC%8C%E5%B9%B6%E8%9E%8D%E5%90%88%E4%BA%86https://github.com/fluent/fluentd-kubernetes-daemonset%E7%9A%84%E6%A0%B8%E5%BF%83%E5%85%83%E7%B4%A0%EF%BC%8C%E4%B8%93%E4%B8%BArs%E5%9C%BA%E6%99%AF%E4%B8%8B%E7%9A%84%E6%97%A5%E5%BF%97%E6%94%B6%E9%9B%86%E4%B8%8E%E5%A4%84%E7%90%86%E9%9C%80%E6%B1%82%E8%AE%BE%E8%AE%A1%E3%80%82

核心功能与特性

• 上游兼容：基于官方Fluentd镜像开发，保留其核心日志采集、过滤与转发能力
• 定制化构建：支持根据rs需求自定义镜像构建流程，灵活集成插件与配置
• Kubernetes适配：融合DaemonSet部署特性，优化容器化环境下的日志收集策略
• 环境适应性：可同时适配Docker单机环境与Kubernetes集群环境的日志处理需求

使用场景与适用范围

适用于rs环境下的容器化应用日志管理，特别适合需要在Docker或Kubernetes集群中实现集中式日志收集、过滤、转换与转发的场景，如微服务架构日志聚合、容器化应用监控等。

使用方法与配置说明

构建自定义镜像

参考fluent/fluentd-docker-image项目的构建方法，结合rs需求进行定制：

bash
# 克隆官方仓库
git clone https://github.com/fluent/fluentd-docker-image.git
cd fluentd-docker-image

# 根据rs需求修改配置（如添加必要插件、调整默认配置）
# 编辑Dockerfile或配置文件

# 构建自定义镜像
docker build -t fluentd-rs:latest .

部署示例

Docker单机部署

bash
# 运行容器，挂载日志目录与自定义配置
docker run -d --name fluentd-rs \
  -v /var/log:/var/log \
  -v /path/to/rs-fluent.conf:/fluentd/etc/fluent.conf \
  -e FLUENTD_CONF=fluent.conf \
  fluentd-rs:latest

Kubernetes DaemonSet部署

基于fluentd-kubernetes-daemonset项目的部署架构，使用定制镜像：

yaml
apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: fluentd-rs
  namespace: kube-system
spec:
  selector:
    matchLabels:
      name: fluentd-rs
  template:
    metadata:
      labels:
        name: fluentd-rs
    spec:
      tolerations:
      - key: node-role.kubernetes.io/master
        effect: NoSchedule
      containers:
      - name: fluentd-rs
        image: fluentd-rs:latest
        resources:
          limits:
            memory: 200Mi
          requests:
            cpu: 100m
            memory: 200Mi
        volumeMounts:
        - name: varlog
          mountPath: /var/log
        - name: varlibdockercontainers
          mountPath: /var/lib/docker/containers
          readOnly: true
        - name: fluentd-config
          mountPath: /fluentd/etc
      volumes:
      - name: varlog
        hostPath:
          path: /var/log
      - name: varlibdockercontainers
        hostPath:
          path: /var/lib/docker/containers
      - name: fluentd-config
        configMap:
          name: fluentd-rs-config

配置说明

核心配置文件为fluent.conf，需根据rs具体需求定义日志采集源、过滤规则与输出目标。配置示例（参考fluentd-kubernetes-daemonset）：

conf
# 输入配置：采集Docker容器日志
<source>
  @type tail
  path /var/log/containers/*.log
  pos_file /var/log/fluentd-containers.log.pos
  tag kube.*
  read_from_head true
  <parse>
    @type json
    time_format %Y-%m-%dT%H:%M:%S.%NZ
  </parse>
</source>

# 过滤配置：处理Kubernetes元数据
<filter kube.**>
  @type kubernetes_metadata
</filter>

# 输出配置：根据rs需求定义（如转发至ELK、S3等）
<match **>
  @type stdout
</match>

详细配置可参考Fluentd官方文档及上述两个上游项目的说明。