cloudsuite3/hadoop Docker 镜像 - 轩辕镜像 | Docker 镜像高效稳定拉取服务

Hadoop

镜像概述和主要用途

该镜像为Cloudsuite 3.0提供Hadoop 2.9.2版本支持，用于快速部署Hadoop集群环境，包含主节点（master）和从节点（slave）部署能力，适用于Hadoop分布式计算环境的搭建与测试。

核心功能和特性

• 支持Hadoop 2.9.2版本运行
• 提供主节点（master）和从节点（slave）两种运行模式
• 支持自定义网络隔离，确保集群环境独立性
• 内置示例作业（grep）用于功能验证

使用场景和适用范围

适用于需要快速搭建Hadoop分布式集群进行开发测试、学习研究或小型数据处理任务的场景，尤其适合对Hadoop集群部署流程不熟悉的用户快速上手。

使用方法和配置说明

1. 获取镜像

通过以下命令拉取镜像：

bash
$ docker pull cloudsuite3/hadoop

2. 创建网络

为Hadoop集群创建独立网络以实现隔离：

bash
$ docker network create hadoop-net

3. 启动主节点

运行主节点容器，指定网络、名称和主机名：

bash
$ docker run -d --net hadoop-net --name master --hostname master cloudsuite3/hadoop master

4. 启动从节点

可启动任意数量的从节点，需确保容器名称与主机名一致：

bash
$ docker run -d --net hadoop-net --name slave01 --hostname slave01 cloudsuite3/hadoop slave
$ docker run -d --net hadoop-net --name slave02 --hostname slave02 cloudsuite3/hadoop slave
...

注意：必须设置主机名，且主机名需与容器名称保持一致。若主节点名称/主机名不是"master"，启动从节点时需在"slave"后指定主节点名称作为参数。

5. 运行示例作业

通过以下命令在主节点执行内置的grep示例作业：

bash
$ docker exec master /root/example_benchmark.sh