ukwa/zeppelin

Apache Zeppelin Docker镜像文档

镜像概述

这是一个为Apache Zeppelin构建的Docker镜像，专为UKWA研究场景部署，提供交互式数据分析能力，并支持本地Spark上下文和集群模式运行。

核心功能和特性

• 交互式分析：默认启动Zeppelin UI，支持通过Web界面进行交互式数据分析
• Spark集成：内置本地Spark上下文，可直接进行Spark相关数据分析
• 集群模式：支持Spark集群部署，包含主节点和工作节点
• 可扩展性：支持动态扩展工作节点数量
• 数据持久化：可挂载本地目录作为笔记本存储，实现数据持久化

使用场景

• UKWA研究中的交互式数据分析任务
• 需要快速部署Spark集群进行分布式数据处理的场景
• 需要持久化保存分析笔记本的研究工作流

使用方法

1. 默认模式（本地Spark上下文）

启动Zeppelin容器，默认运行带有本地Spark上下文的交互式分析界面：

bash
docker run -p 8888:8888 -d tssp/apache-zeppelin

启动后，可通过 http://localhost:8888 访问Zeppelin UI。

2. 集群模式

通过Docker Compose启动Spark集群模式，包含Zeppelin、Spark主节点和1个工作节点（1核1GB内存）：

bash
docker-compose up

集群监控可通过Spark主节点Web UI访问：http://localhost:8080

扩展工作节点

如需增加工作节点数量，可使用scale命令：

bash
docker-compose scale worker-node=5

3. 持久化笔记本目录

挂载本地目录作为笔记本存储，实现数据持久化：

bash
docker run -p 8888:8888 -d -v $(pwd)/notebook:/opt/apache-zeppelin/notebook tssp/apache-zeppelin

其中：

• $(pwd)/notebook 是本地主机目录
• /opt/apache-zeppelin/notebook 是容器内的笔记本目录

关于数据卷挂载的更多信息，请参考Docker官方文档

前提条件

使用前需安装Docker Engine和Docker Compose：

• Docker Engine：参考安装指南
• Docker Compose：参考安装指南

构建Docker容器

如需自行构建镜像，执行以下命令：

bash
docker build -t tssp/apache-zeppelin .