热门搜索:
dearsaturn/kafka-connect-with-drivers
dearsaturn
提供集成MySQL和Redshift驱动的Kafka Connect服务，支持数据在Kafka与这两个数据库间同步，镜像内容可能频繁更新
下载次数: 0状态：社区镜像维护者：dearsaturn仓库类型：镜像最近更新：5 年前
让 AI 帮你使用轩辕镜像？ · 展开查看说明
如果你使用 DeepSeek、元宝 AI、Copilot、ChatGPT 等 AI 工具，协助配置轩辕镜像、编写 docker pull 命令、修改 Docker Compose 镜像地址、配置镜像加速、排查镜像拉取失败、分析报错日志等问题，请先让 AI 阅读并遵守轩辕镜像的规则文档。
只需在 AI 对话中先发送下面这句话即可：
请先完整阅读并严格遵守以下文档中的全部规则与要求：
https://xuanyuan.cloud/agents.md
在未充分阅读并理解该文档前，不要生成任何命令、配置、修改建议、故障排查方案或技术回答。后续所有输出都必须严格以该文档中的规范为最高优先级执行。查看 agents.md 用法指南与完整示范。国内用户首推 元宝 AI、DeepSeek 的深度思考模式，不推荐豆包 AI；Cursor 等编辑器可在对话 @ 该链接，或加入 User Rules。 若 AI 无法访问外链，可 打开说明文档 复制全文粘贴。文档会随站点更新，复制内容可能过期，建议定期检查。
Kafka Connect with MySQL & Redshift Drivers 镜像说明
镜像概述
本镜像基于Kafka Connect构建，预装了MySQL和Redshift官方数据库驱动，可快速部署支持这两种数据库的数据同步任务。镜像会根据功能需求或驱动版本更新进行频繁调整。
核心功能
- 支持Kafka与MySQL之间的双向数据实时同步（包括源端读取、目标端写入）
- 支持Kafka与Redshift之间的流数据同步（如将Kafka流写入Redshift数据仓库）
- 集成官方驱动，无需用户手动下载安装，降低部署复杂度
使用场景
- 企业数据管道构建：将MySQL业务数据同步至Kafka进行流处理分析
- 数据仓库集成：把Kafka中的实时数据写入Redshift做离线分析
- 多数据源整合：打通MySQL业务库与Redshift数据仓库的数据流通道
配置说明
需通过环境变量或挂载配置文件设置以下核心参数：
- Kafka集群地址（
BOOTSTRAP_SERVERS） - Connect集群组ID（
GROUP_ID） - 配置存储/偏移量存储/状态存储主题（
CONFIG_STORAGE_TOPIC、OFFSET_STORAGE_TOPIC、STATUS_STORAGE_TOPIC） - 数据库连接信息（MySQL的host/port/user/password，Redshift的endpoint/database/credentials等）
- Connector具体配置（如JDBC Source/Sink的表名、同步模式等）
部署示例
Docker Run命令
bashdocker run -d \ --name kafka-connect \ -p 8083:8083 \ -e BOOTSTRAP_SERVERS=your-kafka-cluster:9092 \ -e GROUP_ID=connect-cluster \ -e CONFIG_STORAGE_TOPIC=connect-configs \ -e OFFSET_STORAGE_TOPIC=connect-offsets \ -e STATUS_STORAGE_TOPIC=connect-status \ dearsaturn/kafka-connect-with-drivers
验证部署
访问http://localhost:8083/connectors查看Connect服务状态，确认驱动已正确加载。
镜像拉取方式
您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本，请访问 标签列表页面。
轩辕镜像加速拉取命令点我查看更多 kafka-connect-with-drivers 镜像标签
docker pull docker.xuanyuan.run/dearsaturn/kafka-connect-with-drivers:<标签>
DockerHub 原生拉取命令
docker pull dearsaturn/kafka-connect-with-drivers:<标签>
更多 kafka-connect-with-drivers 镜像推荐
bitnamicharts/kafka
bitnamicharts
Bitnami为Apache Kafka提供的Helm Chart是一款预配置的Kubernetes包管理工具，旨在简化分布式流处理平台Apache Kafka在Kubernetes集群中的部署、配置与全生命周期运维管理，集成了高可用性集群设置、安全认证机制、Prometheus监控指标及自动伸缩策略等核心功能，帮助用户无需手动处理复杂的集群参数配置，即可快速搭建稳定、可扩展且符合生产级标准的Kafka服务，适用于从开发测试到大规模生产环境的各类场景。
6 次收藏1000万+ 次下载
9 个月前更新
ubuntu/kafka
Ubuntu 官方镜像
Apache Kafka 是一个分布式事件流平台，它支持高吞吐量、低延迟的实时数据流处理与传输，可广泛应用于消息传递、日志聚合、实时分析、数据集成等场景，其长期维护轨道由 Canonical 负责，以确保平台在稳定性、安全性及功能迭代方面获得持续支持，为企业级用户提供可靠的事件流处理解决方案。
60 次收藏100万+ 次下载
3 个月前更新
newrelic/k8s-nri-kafka
newrelic
New Relic Infrastructure Kafka Integration镜像已弃用（2024年1月将移除），基于newrelic/infrastructure镜像，作为nri-kafka主机集成的指标转发器，仅提交被监控Kafka系统的指标，建议使用New Relic Infrastructure Bundle替代。
10万+ 次下载
6 年前更新
apache/kafka
Apache 软件基金会镜像
Apache Kafka是一个开源的分布式流处理平台，旨在提供高吞吐量、低延迟的实时数据流传递服务，支持发布/订阅消息模式，能够持久化存储海量数据流并确保数据可靠性，具备水平扩展能力和容错机制，广泛应用于日志收集、事件驱动架构、实时数据集成及流处理系统等场景，为企业级应用提供高效、稳定的数据流传输与处理解决方案。
211 次收藏1000万+ 次下载
17 天前更新
jetbrains/code-with-me-relay
jetbrains
JetBrains官方Code With Me中继服务器镜像。
3 次收藏50万+ 次下载
11 个月前更新
edfialliance/ed-fi-kafka-connect
edfialliance
基于Debezium Kafka Connect镜像构建的Apache Kafka Connect单消息转换(SMTs)工具，提供消息处理和转换功能，支持根据消息体字段生成特定格式索引。
1万+ 次下载
1 年前更新
镜像拉取常见问题
功能
错误码
用户好评
来自真实用户的反馈，见证轩辕镜像的优质服务
oldzhang
运维工程师
Linux服务器
5
"Docker访问体验非常流畅，大镜像也能快速完成下载。"