sspreitzer/hadoop Docker 镜像 - 轩辕镜像 | Docker 镜像高效稳定拉取服务

docker-hadoop 镜像文档

镜像概述

docker-hadoop是一个基于Ubuntu系统构建的Apache Hadoop HDFS（分布式文件系统）Docker镜像，旨在提供便捷的HDFS部署和运行环境，简化Hadoop分布式文件系统的搭建流程。

核心功能和特性

• 基于Ubuntu系统，提供稳定的运行环境
• 集成Apache Hadoop HDFS组件，支持分布式文件存储与管理
• 开箱即用，无需复杂的手动配置
• 可快速部署单节点或分布式HDFS环境

使用场景和适用范围

• Hadoop HDFS开发与测试环境搭建
• 学习和研究Hadoop分布式文件系统
• 小型数据存储与处理场景
• 快速验证HDFS相关应用功能

使用方法和配置说明

基本使用（单节点模式）

通过以下命令启动HDFS单节点容器：

bash
docker run -d --name hadoop-hdfs -p 9870:9870 -p 9000:9000 docker-hadoop

端口说明

• 9870：HDFS NameNode Web UI端口
• 9000：HDFS文件系统交互端口

访问HDFS Web UI

容器启动后，可通过浏览器访问 http://localhost:9870 查看HDFS状态和管理界面。

进入容器操作

bash
docker exec -it hadoop-hdfs /bin/bash

进入容器后，可使用Hadoop命令行工具操作HDFS，例如：

bash
# 创建目录
hdfs dfs -mkdir /user/test
# 上传文件
hdfs dfs -put localfile.txt /user/test/
# 列出目录内容
hdfs dfs -ls /user/test

数据持久化

为避免容器重启导致数据丢失，可通过挂载卷的方式持久化HDFS数据：

bash
docker run -d --name hadoop-hdfs -p 9870:9870 -p 9000:9000 -v /host/path/hdfs-data:/hadoop/hdfs/data docker-hadoop

其中 /host/path/hdfs-data 为宿主机上用于存储HDFS数据的目录。