flokkr/hadoop-hdfs-namenode

flokkr/hadoop-hdfs-namenode 镜像说明

镜像概述

本镜像基于Apache Hadoop构建，提供HDFS（Hadoop分布式文件系统）的namenode组件容器化部署能力。Namenode是HDFS集群的核心节点，负责管理文件系统的元数据（如目录结构、文件与块的映射关系等），支持灵活的配置定制，适用于各类大数据存储场景。

核心功能

1. 元数据管理：维护HDFS集群的文件目录结构、块位置信息及访问权限。
2. 高级配置：支持通过环境变量、挂载配置文件等方式调整namenode参数（如存储路径、 replication因子、端口等）。
3. 集群兼容：与Hadoop生态系统的datanode、resourcemanager等组件无缝集成，可快速搭建完整的HDFS集群。

使用场景

1. 大数据集群搭建：作为分布式存储集群的核心节点，支撑企业级大数据处理平台。
2. 开发测试环境：快速部署本地HDFS测试环境，用于Hadoop相关应用的开发与调试。
3. 数据存储服务：为数据分析、机器学习等场景提供高可靠的分布式存储支持。

配置说明

• 环境变量配置：通过设置HDFS_NAMENODE_STORAGE指定元数据存储路径，HDFS_REPLICATION设置默认副本数等。
• 配置文件挂载：将自定义的hdfs-site.xml或core-site.xml挂载到容器的/etc/hadoop/conf目录，覆盖默认配置。

部署示例

Docker Run命令

bash
docker run -d \
  --name hadoop-namenode \
  -p 9870:9870 \  # Web UI端口
  -e HDFS_NAMENODE_STORAGE=/data/namenode \
  -v ./namenode_data:/data/namenode \
  flokkr/hadoop-hdfs-namenode

Docker Compose示例

yaml
version: '3.8'
services:
  namenode:
    image: docker.xuanyuan.run/flokkr/hadoop-hdfs-namenode
    ports:
      - "9870:9870"
    environment:
      - HDFS_REPLICATION=2
    volumes:
      - namenode_data:/data/namenode
volumes:
  namenode_data:

访问http://localhost:9870即可查看HDFS Web UI，监控集群状态。 ===END===