tpzhou/kylin Docker 镜像 - 轩辕镜像 | Docker 镜像高效稳定拉取服务

Kylin集群Kubernetes部署指南

本文档介绍如何使用Kubernetes StatefulSet控制器运行Kylin集群。下图展示了Kylin集群模式部署的典型场景：

!Kylin服务器模式

构建或拉取Docker镜像

若无需本地构建，可直接从Docker Hub拉取镜像：

bash
docker pull apachekylin/apache-kylin:3.0.0-cdh57

提示：若处于隔离网络或网络速度较慢，建议自行准备二进制包并执行以下命令构建：

bash
docker build -t "apache-kylin:${KYLIN_VERSION}-cdh57" --build-arg APACHE_MIRRORS=http://127.0.0.1:8000 .

准备Hadoop配置

将所有配置文件放置在"conf"目录下：

bash
kylin.properties
applicationContext.xml  # 如需将cacheManager设置为Memcached
hbase-site.xml
hive-site.xml
hdfs-site.xml
core-site.xml
mapred-site.xml
yarn-site.xml

若使用Kerberos认证的Hadoop集群，还需准备以下文件：

bash
krb5.conf
kylin.keytab

创建ConfigMaps和Secret

建议为Kylin创建独立的Kubernetes命名空间：

bash
kubectl create namespace kylin

执行以下Shell脚本创建所需的ConfigMaps：

bash
./kylin-configmap.sh
./kylin-secret.sh

创建Service和StatefulSet

确保命名空间中存在以下资源：

bash
kubectl get configmaps,secret -n kylin

NAME                      DATA   AGE
configmap/hadoop-config   4      89d
configmap/hbase-config    1      89d
configmap/hive-config     1      89d
configmap/krb5-config     1      89d
configmap/kylin-config    1      89d
configmap/kylin-context   1      45d

NAME                         TYPE                                  DATA   AGE
secret/kylin-keytab          Opaque                                1      89d

接下来，创建无头服务以提供StatefulSet成员的稳定DNS条目（如kylin-0.kylin、kylin-1.kylin、kylin-2.kylin等）：

bash
kubectl apply -f kylin-service.yaml

最后，创建StatefulSet并开始使用：

bash
kubectl apply -f kylin-job-statefulset.yaml
kubectl apply -f kylin-query-statefulset.yaml

若一切顺利，所有3个Pod应显示为Running状态：

bash
kubectl get statefulset,pod,service -n kylin

NAME                           READY   AGE
statefulset.apps/kylin-job     1/1     36d
statefulset.apps/kylin-query   3/3     36d

NAME                READY   STATUS    RESTARTS   AGE
pod/kylin-job-0     1/1     Running   0          13m
pod/kylin-query-0   1/1     Running   0          40h
pod/kylin-query-1   1/1     Running   0          40h

NAME                  TYPE        CLUSTER-IP       EXTERNAL-IP   PORT(S)    AGE
service/kylin         ClusterIP   None             <none>        7070/TCP   58d
service/kylin-job     ClusterIP   xx.xxx.xx.xx     <none>        7070/TCP   89d
service/kylin-query   ClusterIP   xx.xxx.xxx.xxx   <none>        7070/TCP   89d