keitaro/ckan-datapusher

CKAN Datapusher

镜像概述和主要用途

CKAN Datapusher是用于自动将数据添加到CKAN DataStore的Docker镜像。所有镜像基于Alpine Linux构建，仅包含启动CKAN实例所需的必要扩展。通过多阶段构建方法生成精简的生产级Docker镜像，确保包含正确的库和配置，在构建阶段生成Python二进制wheels并在主阶段安装。

核心功能和特性

• 轻量级基础：基于Alpine Linux，最小化镜像体积
• 生产级构建：采用多阶段构建，确保镜像精简且配置正确
• 自动数据导入：自动将资源数据添加到CKAN DataStore
• 灵活配置：通过环境变量调整数据处理参数
• 资源URL重写：支持重写上传到CKAN文件存储的资源URL，适应Docker环境

使用场景和适用范围

适用于需要自动将资源数据导入CKAN DataStore的场景，特别适合在Docker或Kubernetes环境中部署的CKAN实例。可与https://github.com/keitaroinc/docker-ckan%E9%85%8D%E5%90%88%E4%BD%BF%E7%94%A8%EF%BC%8C%E4%B9%9F%E5%8F%AF%E9%80%9A%E8%BF%87https://github.com/keitaroinc/ckan-helm%E5%9C%A8Kubernetes%E4%B8%8A%E8%BF%90%E8%A1%8C%E3%80%82

使用方法和配置说明

环境变量配置

以下配置选项可通过运行时设置环境变量实现：

Docker运行示例

bash
docker run -d \
  -e MAX_CONTENT_LENGTH=20971520 \
  -e DOWNLOAD_TIMEOUT=60 \
  -e SSL_VERIFY=False \
  --name ckan-datapusher \
  keitaro/ckan-datapusher

Docker Compose使用

可通过https://github.com/keitaroinc/docker-ckan%E8%BF%90%E8%A1%8CCKAN%E5%8F%8ADatapusher%EF%BC%8C%E5%85%B7%E4%BD%93%E9%85%8D%E7%BD%AE%E5%8F%82%E8%80%83%E9%A1%B9%E7%9B%AE%E4%BB%93%E5%BA%93%E3%80%82

Kubernetes部署

如需在Kubernetes上运行CKAN，可查看https://github.com/keitaroinc/ckan-helm%E3%80%82

Dockerfile位置

镜像Dockerfile位于https://github.com/keitaroinc/docker-ckan/tree/master/images/datapusher%E3%80%82