rdi-collector-initializer

redis/rdi-collector-initializer Docker Image

RDI Collector的初始化容器,用于在主容器启动前执行初始化任务

下载次数: 0状态:社区镜像维护者:Redis 官方镜像仓库类型:镜像最近更新:

Redis Data Integration (RDI) 镜像文档

镜像概述和主要用途

Redis Data Integration (RDI) 是一款强大的工具,用于将现有数据库数据近实时同步至Redis。本镜像作为RDI Collector的初始化容器,负责同步流程的初始化配置与执行,无需编写代码即可实现数据加速、无限扩展及数据库成本优化,解决传统数据库性能瓶颈问题。

核心功能和特性

  • 近实时数据同步:将源数据库数据近实时同步至Redis,确保数据一致性与时效性。
  • 无代码配置:全程无需编写代码,通过配置即可完成同步流程,降低技术门槛。
  • 自动化数据处理:内置数据转换与加载逻辑,减轻人工干预负担。
  • 性能加速:将慢查询数据迁移至Redis,提升应用数据访问速度。
  • 无限扩展支持:依托Redis的分布式架构,支持业务数据量的无限扩展。
  • 成本优化:减少对源数据库的高频访问,降低数据库扩容及运维成本。

使用场景和适用范围

适用场景

  • 现有数据库存在性能瓶颈,需提升数据访问速度的应用。
  • 需要将关系型数据库/NoSQL数据实时同步至Redis的业务场景。
  • 高并发、低延迟数据访问需求(如电商商品详情、***交易记录)。

适用范围

  • 支持MySQL、PostgreSQL等主流关系型数据库及MongoDB等NoSQL数据库作为数据源。
  • 适用于电商、***、IoT、实时分析等对数据响应速度敏感的领域。

使用方法和配置说明

前置条件

  • 已部署Redis集群/实例(支持Redis Open Source、Redis Enterprise)。
  • 源数据库需开启CDC(Change Data Capture)功能(如MySQL的binlog、PostgreSQL的wal2json)。

Docker Run 命令示例

bash
docker run -d \
  --name rdi-init \
  -e SOURCE_DB_TYPE=mysql \
  -e SOURCE_DB_HOST=source-db.example.com \
  -e SOURCE_DB_PORT=3306 \
  -e SOURCE_DB_USER=dbuser \
  -e SOURCE_DB_PASSWORD=dbpass \
  -e SOURCE_DB_NAME=target_db \
  -e REDIS_HOST=redis.example.com \
  -e REDIS_PORT=6379 \
  -e REDIS_PASSWORD=redispass \
  -e SYNC_INTERVAL=5s \  # 同步间隔(默认5秒)
  redis/rdi-init:latest

Docker Compose 配置示例

yaml
version: '3.8'
services:
  rdi-init:
    image: docker.xuanyuan.run/redis/rdi-init:latest
    container_name: rdi-init
    environment:
      - SOURCE_DB_TYPE=postgresql  # 支持mysql/postgresql/mongodb等
      - SOURCE_DB_HOST=source-db
      - SOURCE_DB_PORT=5432
      - SOURCE_DB_USER=pguser
      - SOURCE_DB_PASSWORD=pgpass
      - SOURCE_DB_NAME=app_db
      - REDIS_HOST=redis
      - REDIS_PORT=6379
      - REDIS_PASSWORD=redispass
      - SYNC_INTERVAL=10s  # 同步间隔,根据业务需求调整
      - TABLE_FILTER=users,orders  # 需同步的表名,逗号分隔(默认全表)
    depends_on:
      - redis
      - source-db

  redis:
    image: docker.xuanyuan.run/redis:7.2-alpine
    ports:
      - "6379:6379"
    environment:
      - REDIS_PASSWORD=redispass

  source-db:
    image: docker.xuanyuan.run/postgres:15-alpine
    ports:
      - "5432:5432"
    environment:
      - POSTGRES_USER=pguser
      - POSTGRES_PASSWORD=pgpass
      - POSTGRES_DB=app_db

配置参数说明

参数名描述可选值/示例是否必填
SOURCE_DB_TYPE源数据库类型mysql/postgresql/mongodb是
SOURCE_DB_HOST源数据库主机地址source-db.example.com是
SOURCE_DB_PORT源数据库端口3306(MySQL)/5432(PostgreSQL)是
SOURCE_DB_USER源数据库访问用户dbuser是
SOURCE_DB_PASSWORD源数据库访问密码dbpass是
SOURCE_DB_NAME源数据库名称app_db是
REDIS_HOSTRedis主机地址redis.example.com是
REDIS_PORTRedis端口6379/6380(TLS)是
REDIS_PASSWORDRedis访问密码(若启用认证)redispass否
SYNC_INTERVAL数据同步间隔5s/1m(默认5s)否
TABLE_FILTER需同步的表名(逗号分隔,默认全表)users,orders否

注:完整配置参数及高级功能(如数据转换规则、冲突处理策略)请参考 https://redis.io/docs/latest/integrate/redis-data-integration/ingest/。

镜像拉取方式

您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本,请访问 标签列表页面。

轩辕镜像加速拉取命令点我查看更多 rdi-collector-initializer 镜像标签

docker pull docker.xuanyuan.run/redis/rdi-collector-initializer:<标签>

DockerHub 原生拉取命令

docker pull redis/rdi-collector-initializer:<标签>
专业版 · 高速稳定拉取镜像
50GB 仅 ¥8/年
高速镜像下载在线技术支持专业版保障服务可用付费会员免广告