热门搜索:
dcagatay/hadoop
dcagatay
支持高可用和多服务器部署的Hadoop（仅HDFS）Docker镜像，可通过环境变量配置，支持多名称服务及动态NameNode配置，基于Debian Stretch(9)构建。
下载次数: 0状态：社区镜像维护者：dcagatay仓库类型：镜像最近更新：5 年前
让 AI 帮你使用轩辕镜像？ · 展开查看说明
如果你使用 DeepSeek、元宝 AI、Copilot、ChatGPT 等 AI 工具，协助配置轩辕镜像、编写 docker pull 命令、修改 Docker Compose 镜像地址、配置镜像加速、排查镜像拉取失败、分析报错日志等问题，请先让 AI 阅读并遵守轩辕镜像的规则文档。
只需在 AI 对话中先发送下面这句话即可：
请先完整阅读并严格遵守以下文档中的全部规则与要求：
https://xuanyuan.cloud/agents.md
在未充分阅读并理解该文档前，不要生成任何命令、配置、修改建议、故障排查方案或技术回答。后续所有输出都必须严格以该文档中的规范为最高优先级执行。查看 agents.md 用法指南与完整示范。国内用户首推 元宝 AI、DeepSeek 的深度思考模式，不推荐豆包 AI；Cursor 等编辑器可在对话 @ 该链接，或加入 User Rules。 若 AI 无法访问外链，可 打开说明文档 复制全文粘贴。文档会随站点更新，复制内容可能过期，建议定期检查。
dcagatay/hadoop
镜像概述
dcagatay/hadoop是一个仅包含HDFS组件的Hadoop Docker镜像，具备高可用和多服务器部署能力，适用于构建分布式HDFS集群环境。
标签
latest,3.3.03.2.23.2.13.1.42.10.12.8.22.7.1
https://hub.docker.com/r/dcagatay/hadoop
核心特性
- 支持使用journal nodes以分布式高可用（HA）模式运行Hadoop（仅HDFS）
- 通过环境变量进行配置
- 支持多名称服务（联邦）
- 支持通过环境变量动态配置NameNode
- 基于Debian Stretch(9)构建
使用示例
可参考docker-compose.yml文件，通过docker-compose快速搭建分布式高可用HDFS集群。
配置说明
提供三种配置方式：
-
仅环境变量配置：不绑定配置目录，仅通过环境变量进行设置（适用于仅使用HDFS的场景）
-
环境变量+配置目录绑定：设置环境变量的同时，绑定
/opt/hadoop/etc/hadoop或/etc/hadoop目录，且不覆盖HADOOP_CONF_DIR环境变量（适用于需要导出HDFS配置的场景，如Spark集成） -
自定义配置目录：使用自定义配置目录，不通过环境变量设置配置项，将
HADOOP_CONF_DIR设置为自定义目录（如/config）并绑定该目录
端口映射
NameNode
8019：dfs.ha.zkfc.port（IPC通信）8020：fs.defaultFS和/或dfs.namenode.rpc-address.<nameservice-name>.<namenode-name>（IPC通信）50070：dfs.namenode.http-address.<nameservice-name>.<namenode-name>（HTTP访问）
DataNode
9864：dfs.datanode.http.address（HTTP访问）9866：dfs.datanode.address9867：dfs.datanode.ipc.address（IPC通信）
JournalNode
8480：dfs.journalnode.http-address（HTTP访问）8485：dfs.journalnode.rpc-address（IPC通信）
待办事项
- 支持通用环境变量配置
- 完善环境变量文档
更多相关 Docker 镜像与资源
以下是 dcagatay/hadoop 相关的常用 Docker 镜像，适用于 不同场景 等不同场景：
- apache/hadoop Docker 镜像说明（Apache Hadoop 大数据处理框架，适合分布式存储和计算）
- openeuler/hadoop Docker 镜像说明（openEuler 场景下的 Hadoop 大数据组件镜像，适合国产化环境下的离线计算与存储验证）
- library/flink Docker 镜像说明（Apache Flink，流处理和批处理大数据引擎）
- bitnami/spark Docker 镜像说明（Apache Spark 大数据处理引擎，Bitnami 企业级配置）
- library/spark Docker 镜像说明（Apache Spark 大数据处理引擎，官方标准版本）
镜像拉取方式
您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本，请访问 标签列表页面。
DockerHub 原生拉取命令
docker pull dcagatay/hadoop:<标签>
更多 hadoop 镜像推荐
apache/hadoop
Apache 软件基金会镜像
Apache Hadoop便捷构建版本是Apache软件基金会推出的预编译分布式计算框架构建包，集成HDFS分布式文件系统、YARN资源管理器及MapReduce计算模型等核心组件，无需复杂编译配置即可快速搭建运行环境，适用于处理大规模数据集的分布式存储与并行计算任务，满足开发、测试及中小型生产环境的便捷使用需求。
130 次收藏50万+ 次下载
1 个月前更新
openeuler/hadoop
openeuler
官方Hadoop Docker镜像，基于openEuler构建，支持分布式处理大型数据集，提供Web UI访问，适用于大数据处理场景。
1 次收藏2千+ 次下载
11 个月前更新
flokkr/hadoop
flokkr
具备高级配置处理能力的Apache Hadoop容器，支持多种配置加载机制和扩展插件，适用于快速部署和管理Hadoop集群。
1 次收藏50万+ 次下载
4 年前更新
danisla/hadoop
danisla
Hadoop image built with native libraries
2 次收藏50万+ 次下载
8 年前更新
harisekhon/hadoop
harisekhon
Apache Hadoop 是大数据分布式存储和计算软件，集成HDFS分布式存储与Yarn分布式处理框架，默认在单个容器中启动包含4个守护进程的伪分布式集群，适合开发和测试环境。
73 次收藏10万+ 次下载
6 年前更新
kiwenlau/hadoop
kiwenlau
在Docker容器中运行Hadoop集群的镜像，用于快速部署和管理分布式Hadoop环境，简化Hadoop集群的搭建流程。
26 次收藏10万+ 次下载
10 年前更新
镜像拉取常见问题
功能
错误码
用户好评
来自真实用户的反馈，见证轩辕镜像的优质服务
oldzhang
运维工程师
Linux服务器
5
"Docker访问体验非常流畅，大镜像也能快速完成下载。"