tairangroup/hive

Hive环境镜像

镜像概述

本镜像基于tairangroup/hadoop:latest构建，提供完整的Hive运行环境，集成Hadoop 2.7.x和Hive 2.3.x，同时包含SSH服务，便于远程访问和管理。适用于Hive数据仓库开发、测试及相关数据处理任务。

核心功能与特性

• SSH服务：内置SSH服务端与客户端，端口22，默认用户root，密码123456
• Hadoop版本：2.7.x
• Hive版本：2.3.x

使用场景

• Hive数据仓库开发与测试
• HiveQL查询语句验证
• Hadoop+Hive环境快速部署
• 数据导入、查询及分析任务

使用方法

前提条件

需先启动MySQL容器作为Hive元数据库。

启动MySQL容器

bash
docker run --name dmp_mysql -e MYSQL_ROOT_PASSWORD=123456 -d mysql

启动Hive容器

bash
docker run --name hive -h hive -P -e KEEP=true --link dmp_mysql:mysql -d gudaoxuri/hive

操作示例

Hive安装路径：/opt/hive/

1. 创建测试数据文件：

   bash
   cat>test_person.txt<<EOF
   tom 20
   jack    24
   nestor  29
   EOF
   

2. 上传文件至HDFS：

   bash
   hdfs dfs -mkdir /tmp/hivetest/
   hdfs dfs -put ./test_person.txt /tmp/hivetest/
   

3. 使用Hive CLI创建表并查询：

   bash
   hive
   CREATE EXTERNAL TABLE test_person(name STRING,age INT)ROW FORMAT DELIMITED FIELDS TERMINATED BY '\t' LOCATION '/tmp/hivetest';
   select * from test_person;
   

4. 使用Beeline通过JDBC连接Hive：

   bash
   beeline -u jdbc:hive2://localhost:10000
   select * from test_person;
   

环境变量配置

暴露端口