RDI Collector的初始化容器,用于在主容器启动前执行初始化任务
Redis Data Integration (RDI) 镜像文档
镜像概述和主要用途
Redis Data Integration (RDI) 是一款强大的工具,用于将现有数据库数据近实时同步至Redis。本镜像作为RDI Collector的初始化容器,负责同步流程的初始化配置与执行,无需编写代码即可实现数据加速、无限扩展及数据库成本优化,解决传统数据库性能瓶颈问题。
核心功能和特性
- 近实时数据同步:将源数据库数据近实时同步至Redis,确保数据一致性与时效性。
- 无代码配置:全程无需编写代码,通过配置即可完成同步流程,降低技术门槛。
- 自动化数据处理:内置数据转换与加载逻辑,减轻人工干预负担。
- 性能加速:将慢查询数据迁移至Redis,提升应用数据访问速度。
- 无限扩展支持:依托Redis的分布式架构,支持业务数据量的无限扩展。
- 成本优化:减少对源数据库的高频访问,降低数据库扩容及运维成本。
使用场景和适用范围
适用场景
- 现有数据库存在性能瓶颈,需提升数据访问速度的应用。
- 需要将关系型数据库/NoSQL数据实时同步至Redis的业务场景。
- 高并发、低延迟数据访问需求(如电商商品详情、***交易记录)。
适用范围
- 支持MySQL、PostgreSQL等主流关系型数据库及MongoDB等NoSQL数据库作为数据源。
- 适用于电商、***、IoT、实时分析等对数据响应速度敏感的领域。
使用方法和配置说明
前置条件
- 已部署Redis集群/实例(支持Redis Open Source、Redis Enterprise)。
- 源数据库需开启CDC(Change Data Capture)功能(如MySQL的binlog、PostgreSQL的wal2json)。
Docker Run 命令示例
bashdocker run -d \ --name rdi-init \ -e SOURCE_DB_TYPE=mysql \ -e SOURCE_DB_HOST=source-db.example.com \ -e SOURCE_DB_PORT=3306 \ -e SOURCE_DB_USER=dbuser \ -e SOURCE_DB_PASSWORD=dbpass \ -e SOURCE_DB_NAME=target_db \ -e REDIS_HOST=redis.example.com \ -e REDIS_PORT=6379 \ -e REDIS_PASSWORD=redispass \ -e SYNC_INTERVAL=5s \ # 同步间隔(默认5秒) redis/rdi-init:latest
Docker Compose 配置示例
yamlversion: '3.8' services: rdi-init: image: docker.xuanyuan.run/redis/rdi-init:latest container_name: rdi-init environment: - SOURCE_DB_TYPE=postgresql # 支持mysql/postgresql/mongodb等 - SOURCE_DB_HOST=source-db - SOURCE_DB_PORT=5432 - SOURCE_DB_USER=pguser - SOURCE_DB_PASSWORD=pgpass - SOURCE_DB_NAME=app_db - REDIS_HOST=redis - REDIS_PORT=6379 - REDIS_PASSWORD=redispass - SYNC_INTERVAL=10s # 同步间隔,根据业务需求调整 - TABLE_FILTER=users,orders # 需同步的表名,逗号分隔(默认全表) depends_on: - redis - source-db redis: image: docker.xuanyuan.run/redis:7.2-alpine ports: - "6379:6379" environment: - REDIS_PASSWORD=redispass source-db: image: docker.xuanyuan.run/postgres:15-alpine ports: - "5432:5432" environment: - POSTGRES_USER=pguser - POSTGRES_PASSWORD=pgpass - POSTGRES_DB=app_db
配置参数说明
| 参数名 | 描述 | 可选值/示例 | 是否必填 |
|---|---|---|---|
SOURCE_DB_TYPE | 源数据库类型 | mysql/postgresql/mongodb | 是 |
SOURCE_DB_HOST | 源数据库主机地址 | source-db.example.com | 是 |
SOURCE_DB_PORT | 源数据库端口 | 3306(MySQL)/5432(PostgreSQL) | 是 |
SOURCE_DB_USER | 源数据库访问用户 | dbuser | 是 |
SOURCE_DB_PASSWORD | 源数据库访问密码 | dbpass | 是 |
SOURCE_DB_NAME | 源数据库名称 | app_db | 是 |
REDIS_HOST | Redis主机地址 | redis.example.com | 是 |
REDIS_PORT | Redis端口 | 6379/6380(TLS) | 是 |
REDIS_PASSWORD | Redis访问密码(若启用认证) | redispass | 否 |
SYNC_INTERVAL | 数据同步间隔 | 5s/1m(默认5s) | 否 |
TABLE_FILTER | 需同步的表名(逗号分隔,默认全表) | users,orders | 否 |
注:完整配置参数及高级功能(如数据转换规则、冲突处理策略)请参考 https://redis.io/docs/latest/integrate/redis-data-integration/ingest/。
redis 命名空间的其他可用镜像:
镜像拉取方式
您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本,请访问 标签列表页面。
轩辕镜像加速拉取命令点我查看更多 rdi-collector-initializer 镜像标签
docker pull docker.xuanyuan.run/redis/rdi-collector-initializer:<标签>
DockerHub 原生拉取命令
docker pull redis/rdi-collector-initializer:<标签>
用户好评
来自真实用户的反馈,见证轩辕镜像的优质服务