slingdata/sling

Sling CLI Docker镜像

镜像概述和主要用途

本Docker镜像提供Sling CLI的即用型安装，Sling是一款现代化数据移动与转换平台，旨在简化各类数据源与目标之间的数据操作，支持在数据库、数据仓库和文件存储系统间进行高效数据传输。

核心功能和特性

• 数据移动：在不同存储系统和数据库之间传输数据
• 灵活连接：支持多种数据库和文件存储系统
• 转换能力：传输过程中内置数据转换功能
• 多种操作模式：全量刷新、增量和快照复制

使用场景和适用范围

适用于需要在不同数据存储系统间进行数据迁移、同步和转换的场景，包括：

• CSV文件加载到数据库表
• 跨数据库数据复制（如从源数据库到目标数据库）
• 自动化数据管道构建
• 数据仓库数据集成

详细的使用方法和配置说明

基本用法

bash
docker run --rm slingdata/sling:latest --help

数据移动示例

bash
# 将CSV文件加载到数据库表
cat data.csv | docker run -i --rm slingdata/sling:latest run --tgt-conn MY_PG --tgt-object my_schema.my_table

# 从一个数据库复制到另一个数据库
docker run -i --rm -e SRC_DB -e TGT_DB slingdata/sling:latest run \
  --src-conn SRC_DB \
  --src-stream public.users \
  --tgt-conn TGT_DB \
  --tgt-object analytics.users

管理连接

使用环境变量配置连接：

bash
docker run -i --rm \
  -e SLING_CLI_TOKEN='xxxxxxxxx' \
  -e MY_PG='postgresql://user:password@host:5432/db1' \
  slingdata/sling:latest conns list

持久化配置

要持久化连接配置，可挂载卷：

bash
docker run -i --rm \
  -e SLING_CLI_TOKEN='xxxxxxxxx' \
  -v $HOME/.sling:/home/sling/.sling \
  slingdata/sling:latest conns list

配置方法

使用环境变量

bash
docker run -i --rm \
  -e SLING_CLI_TOKEN='xxxxxxxxx' \
  -e MY_PG='postgresql://user:password@host:5432/db1' \
  -e MY_SNOWFLAKE='{type: snowflake, host: "account.snowflakecomputing.com", user: "user", database: "db1", password: "pass", role: "role"}' \
  slingdata/sling:latest run --src-conn MY_PG --src-stream "SELECT * FROM users" --tgt-conn MY_SNOWFLAKE --tgt-object DB.SCHEMA.TABLE

卷挂载配置

bash
docker run -i --rm \
  -e SLING_CLI_TOKEN='xxxxxxxxx' \
  -v $HOME/.sling:/home/sling/.sling \
  slingdata/sling:latest run --config path/to/config.yaml

安全注意事项

• 镜像以非root用户sling运行
• 使用环境变量存储敏感信息
• 生产环境部署时建议使用密钥管理系统

更多详细文档，请访问Sling文档。