apache2use/hadoop

Apache Hadoop 2.7.0 Docker镜像

镜像概述和主要用途

本镜像为SequenceIQ发布的Apache Hadoop 2.7.0 Docker镜像，基于之前广受欢迎的Hadoop Docker镜像开发。它提供了便捷的Hadoop分布式计算环境，支持快速部署和测试Hadoop应用，是Docker Registry中下载量领先的Hadoop镜像之一。所有历史Hadoop版本（2.3、2.4.0-2.4.1、2.5.0-2.5.2、2.6.0）可通过GitHub分支或Docker Registry标签获取。

核心功能和特性

• 基于Apache Hadoop 2.7.0稳定版本构建
• 包含64位Hadoop原生库，简化复杂的Hadoop构建过程
• 官方Docker Registry可信自动化构建，确保镜像可靠性
• 内置bootstrap启动脚本，支持快速容器初始化
• 包含MapReduce示例程序，便于功能验证

使用场景和适用范围

• Hadoop应用开发与测试环境搭建
• Hadoop生态系统学习和演示
• 快速验证Hadoop作业逻辑和功能
• 临时Hadoop集群环境部署

使用方法和配置说明

构建镜像

如需从Dockerfile直接构建镜像，执行以下命令：

bash
docker build -t sequenceiq/hadoop-docker:2.7.0 .

拉取镜像

镜像已发布至Docker官方自动化构建仓库，可直接拉取：

bash
docker pull sequenceiq/hadoop-docker:2.7.0

启动容器

使用已构建或拉取的镜像启动容器：

注意：确保主机上SELinux已禁用。如果使用boot2docker，则无需额外操作。

bash
docker run -it sequenceiq/hadoop-docker:2.7.0 /etc/bootstrap.sh -bash

测试Hadoop功能

可运行内置示例验证Hadoop功能：

bash
cd $HADOOP_PREFIX
# 运行MapReduce示例
bin/hadoop jar share/hadoop/mapreduce/hadoop-mapreduce-examples-2.7.0.jar grep input output 'dfs[a-z.]+'

# 查看输出结果
bin/hdfs dfs -cat output/*

Hadoop原生库和构建说明

Hadoop构建过程需依赖多个库及其特定版本（如protobuf），耗时且复杂。本镜像已简化此流程，并提供64位Hadoop原生库，可通过Bintray仓库获取。

自动化构建

Dockerfile已发布至官方https://registry.hub.docker.com/u/sequenceiq/hadoop-docker/%EF%BC%8C%E6%94%AF%E6%8C%81%E5%85%A8%E6%B5%81%E7%A8%8B%E8%87%AA%E5%8A%A8%E5%8C%96%E6%9E%84%E5%BB%BA%E5%92%8C%E9%83%A8%E7%BD%B2%E3%80%82