newnius/hive

Apache Hive Docker镜像使用文档

镜像概述

该镜像用于在Docker环境中运行Apache Hive，需配合已有的Hadoop集群和MySQL服务器使用，提供便捷的Hive部署方案，适用于开发、测试及轻量级生产环境。

前提条件

• 已部署Hadoop集群，其主节点主机名为hadoop-master
• 已部署MySQL服务器，主机名为mysql
• 可在conf/hive-site.xml中配置Hadoop和MySQL相关参数

核心功能

• 快速部署Apache Hive服务
• 支持与外部Hadoop集群集成
• 基于MySQL存储Hive元数据
• 支持自定义配置文件挂载

使用方法

启动Hive节点

通过Docker Swarm部署Hive服务：

bash
docker service create \
    --name hive \
    --hostname hive \
    --network swarm-net \
    --replicas 1 \
    --detach=true \
    --mount type=bind,source=/etc/localtime,target=/etc/localtime \
    newnius/hive:2.1.1

初始化与测试

1. 在HDFS创建Hive所需目录

bash
$HADOOP_HOME/bin/hdfs dfs -mkdir /tmp
$HADOOP_HOME/bin/hdfs dfs -mkdir -p /user/hive/warehouse
$HADOOP_HOME/bin/hdfs dfs -chmod g+w /tmp
$HADOOP_HOME/bin/hdfs dfs -chmod g+w /user/hive/warehouse

2. 初始化元数据存储

bash
schematool --dbType mysql --initSchema

3. 启动元数据服务

bash
nohup hive --service metastore &

4. 验证安装

启动Hive Shell并执行测试命令：

hive
hive
CREATE TABLE pokes (foo INT, bar STRING);

若表创建成功，则安装验证通过。

自定义配置

如需持久化数据或修改配置文件，可挂载本地配置目录：

bash
docker service create \
    --name hive \
    --hostname hive \
    --network swarm-net \
    --replicas 1 \
    --detach=true \
    --mount type=bind,source=/etc/localtime,target=/etc/localtime \
    --mount type=bind,source=/data/hive/config,target=/config/hive \
    newnius/hive:2.1.1

说明：/data/hive/config为本地配置目录，存放需替换的Hive配置文件（无需放置所有文件，仅需修改的文件），容器会自动应用这些配置。

适用场景

• Hive开发环境快速搭建
• 大数据分析测试环境部署
• 与现有Hadoop集群集成的轻量级Hive服务