flokkr/hadoop-hdfs-datanode

flokkr/hadoop-hdfs-datanode 镜像说明

镜像概述

本镜像提供Apache Hadoop生态中的HDFS（分布式文件系统）数据节点（Datanode）容器化部署方案，集成高级配置处理能力，可快速融入Hadoop集群，实现分布式数据存储功能。

核心功能

1. 运行HDFS数据节点服务，负责存储实际数据块并与NameNode交互
2. 支持通过环境变量或挂载配置文件灵活调整节点参数
3. 兼容标准Hadoop集群架构，可与NameNode、ResourceManager等组件协同工作

使用场景

1. 搭建企业级分布式大数据存储集群
2. 构建数据湖平台的底层存储层
3. 大数据分析任务中的数据存储节点部署

配置说明

• 通过环境变量设置关键参数：如HDFS_NAMENODE_RPC_ADDRESS（指定NameNode RPC地址）、HDFS_DATANODE_DATA_DIR（设置数据存储目录）
• 可挂载自定义hdfs-site.xml等配置文件覆盖默认配置

部署示例

Docker Run命令

bash
docker run -d \
  --name hdfs-datanode \
  --network hadoop-cluster \
  -e HDFS_NAMENODE_RPC_ADDRESS=namenode:9000 \
  -v /host/data:/hadoop/data \
  flokkr/hadoop-hdfs-datanode

Docker Compose片段

yaml
services:
  datanode:
    image: flokkr/hadoop-hdfs-datanode
    networks:
      - hadoop-net
    environment:
      - HDFS_NAMENODE_RPC_ADDRESS=namenode:9000
    volumes:
      - datanode-data:/hadoop/data

networks:
  hadoop-net:

volumes:
  datanode-data: