mariadb/columnstore

!MariaDB

Columnstore Docker项目

概述

MariaDB ColumnStore是一款列存储引擎，采用大规模并行分布式数据架构。它通过将InfiniDB移植到MariaDB构建而成，并以GPL许可证发布。

ColumnStore专为大数据扩展设计，可处理PB级数据，具备线性可扩展性，能为分析查询提供实时响应的卓越性能。它利用列存储的I/O优势、数据压缩、即时投影以及水平和垂直分区技术，在分析大型数据集时提供出色性能。

前置要求

开始前请安装以下软件包：

• Docker

单节点Docker运行说明

docker run -d -p 3307:3306 --shm-size=512m -e PM1=mcs1 --hostname=mcs1 --name mcs1 mariadb/columnstore

docker exec -it mcs1 provision mcs1

Waiting for PM1 To Be Initialized .. done
Adding PM(s) To Cluster ... done
Restarting Cluster ... done
Validating ColumnStore Engine ... done

运行变量

集群Docker Compose说明

git clone https://github.com/mariadb-corporation/mariadb-columnstore-docker

cd mariadb-columnstore-docker

cp .env_example .env

• 编辑 .env 文件设置自定义配置

docker compose up -d

docker exec -it mcs1 provision mcs1 mcs2 mcs3

Waiting for PM1 To Be Initialized .... done
Adding PM(s) To Cluster ... done
Restarting Cluster ... done
Validating ColumnStore Engine ... done

自定义构建说明（可选）

git clone https://github.com/mariadb-corporation/mariadb-columnstore-docker

cd mariadb-columnstore-docker

cp .env_example .env

cp .secrets_example .secrets

• 编辑 .env 文件设置自定义配置
• 编辑 .secrets 文件添加您的企业令牌

./build

访问方式

数据库访问

mysql -h 127.0.0.1 -P 3307 -u admin -p

默认密码为：C0lumnStore!

MaxScale 1 GUI访问

• URL: http://127.0.0.1:8989
• 用户名: admin
• 密码: mariadb

MaxScale 2 GUI访问

• URL: http://127.0.0.1:8990
• 用户名: admin
• 密码: mariadb

术语表

• PM: 性能模块（Performance Module）
• PM1: 主数据库节点（Primary Database Node）
• PM2: 辅助数据库节点（Secondary Database Node）
• PM3: 第三数据库节点（Tertiary Database Node）
• MX1: 主MaxScale节点（Primary MaxScale Node）
• MX2: 辅助MaxScale节点（Secondary MaxScale Node）

CLI指令

设置API密钥：

mcs cluster set api-key --key <api_key>

获取状态：

mcs cluster status

启动集群：

mcs cluster start

停止集群：

mcs cluster stop

添加节点：

mcs cluster node add --node <node>

移除节点：

mcs cluster node remove --node <node>

设置只读模式：

mcs cluster set mode --mode readonly

设置读写模式：

mcs cluster set mode --mode readwrite

日志信息

日志存储在 /var/log/mariadb/columnstore

也可通过以下命令查看：

docker logs mcs1

简单备份脚本示例

#!/bin/bash
rm -rf /backup
mkdir -p /backup/{mysql,columnstore}
mariadb-backup --user=root --backup --rsync --target-dir=/backup/mysql
mcs cluster set mode --mode readonly
rsync -av /var/lib/columnstore/ /backup/columnstore/
mcs cluster set mode --mode readwrite