redis/rdi-collector-initializer

Redis Data Integration (RDI) 镜像文档

镜像概述和主要用途

Redis Data Integration (RDI) 是一款强大的工具，用于将现有数据库数据近实时同步至Redis。本镜像作为RDI Collector的初始化容器，负责同步流程的初始化配置与执行，无需编写代码即可实现数据加速、无限扩展及数据库成本优化，解决传统数据库性能瓶颈问题。

核心功能和特性

• 近实时数据同步：将源数据库数据近实时同步至Redis，确保数据一致性与时效性。
• 无代码配置：全程无需编写代码，通过配置即可完成同步流程，降低技术门槛。
• 自动化数据处理：内置数据转换与加载逻辑，减轻人工干预负担。
• 性能加速：将慢查询数据迁移至Redis，提升应用数据访问速度。
• 无限扩展支持：依托Redis的分布式架构，支持业务数据量的无限扩展。
• 成本优化：减少对源数据库的高频访问，降低数据库扩容及运维成本。

使用场景和适用范围

适用场景

• 现有数据库存在性能瓶颈，需提升数据访问速度的应用。
• 需要将关系型数据库/NoSQL数据实时同步至Redis的业务场景。
• 高并发、低延迟数据访问需求（如电商商品详情、***交易记录）。

适用范围

• 支持MySQL、PostgreSQL等主流关系型数据库及MongoDB等NoSQL数据库作为数据源。
• 适用于电商、***、IoT、实时分析等对数据响应速度敏感的领域。

使用方法和配置说明

前置条件

• 已部署Redis集群/实例（支持Redis Open Source、Redis Enterprise）。
• 源数据库需开启CDC（Change Data Capture）功能（如MySQL的binlog、PostgreSQL的wal2json）。

Docker Run 命令示例

bash
docker run -d \
  --name rdi-init \
  -e SOURCE_DB_TYPE=mysql \
  -e SOURCE_DB_HOST=source-db.example.com \
  -e SOURCE_DB_PORT=3306 \
  -e SOURCE_DB_USER=dbuser \
  -e SOURCE_DB_PASSWORD=dbpass \
  -e SOURCE_DB_NAME=target_db \
  -e REDIS_HOST=redis.example.com \
  -e REDIS_PORT=6379 \
  -e REDIS_PASSWORD=redispass \
  -e SYNC_INTERVAL=5s \  # 同步间隔（默认5秒）
  redis/rdi-init:latest

Docker Compose 配置示例

yaml
version: '3.8'
services:
  rdi-init:
    image: redis/rdi-init:latest
    container_name: rdi-init
    environment:
      - SOURCE_DB_TYPE=postgresql  # 支持mysql/postgresql/mongodb等
      - SOURCE_DB_HOST=source-db
      - SOURCE_DB_PORT=5432
      - SOURCE_DB_USER=pguser
      - SOURCE_DB_PASSWORD=pgpass
      - SOURCE_DB_NAME=app_db
      - REDIS_HOST=redis
      - REDIS_PORT=6379
      - REDIS_PASSWORD=redispass
      - SYNC_INTERVAL=10s  # 同步间隔，根据业务需求调整
      - TABLE_FILTER=users,orders  # 需同步的表名，逗号分隔（默认全表）
    depends_on:
      - redis
      - source-db

  redis:
    image: redis:7.2-alpine
    ports:
      - "6379:6379"
    environment:
      - REDIS_PASSWORD=redispass

  source-db:
    image: postgres:15-alpine
    ports:
      - "5432:5432"
    environment:
      - POSTGRES_USER=pguser
      - POSTGRES_PASSWORD=pgpass
      - POSTGRES_DB=app_db

配置参数说明

注：完整配置参数及高级功能（如数据转换规则、冲突处理策略）请参考 RDI 官方文档。