gaorlov/aurora-bootstrap

Aurora数据导出工具镜像

概述

该Docker镜像提供从Amazon Aurora数据库导出数据并转换为CSV和JSON格式的功能，旨在简化数据备份、迁移及分析前的数据提取流程。支持Aurora MySQL和PostgreSQL兼容版本，通过简单配置即可实现数据批量导出。

核心功能与特性

• 多格式支持：同时导出数据为CSV和JSON格式，满足不同场景需求
• Aurora兼容：支持Aurora MySQL和PostgreSQL兼容版本数据库
• 灵活配置：通过环境变量自定义数据库连接、导出表/查询、输出路径等
• 轻量高效：基于精简基础镜像构建，资源占用低，导出性能优化

使用场景

• 数据库定期备份，生成结构化数据文件
• 数据分析前的数据提取，为BI工具或数据仓库提供数据源
• 跨系统数据迁移，将Aurora数据导出为通用格式供其他系统使用
• 开发测试环境数据准备，快速获取生产环境子集数据

使用方法

基本使用（Docker Run）

bash
docker run -d \
  -e DB_HOST=your-aurora-instance.xxxxxx.us-west-2.rds.amazonaws.com \
  -e DB_PORT=3306 \
  -e DB_USER=admin \
  -e DB_PASSWORD=your-password \
  -e DB_NAME=target-db \
  -e EXPORT_TABLES=users,orders \
  -e OUTPUT_FORMAT=csv,json \
  -v /local/output:/app/output \
  aurora-exporter:latest

环境变量配置

Docker Compose配置示例

yaml
version: '3'
services:
  aurora-exporter:
    image: aurora-exporter:latest
    environment:
      - DB_HOST=your-aurora-instance.xxxxxx.us-west-2.rds.amazonaws.com
      - DB_PORT=5432
      - DB_USER=postgres
      - DB_PASSWORD=your-password
      - DB_NAME=target-db
      - EXPORT_QUERY=SELECT * FROM products WHERE price > 100
      - OUTPUT_FORMAT=json
      - BATCH_SIZE=2000
    volumes:
      - ./exports:/app/output
    restart: on-failure

输出说明

导出文件将保存在挂载的本地目录中，文件命名格式为：{table_name}_{timestamp}.{format}（使用EXPORT_TABLES时）或query_result_{timestamp}.{format}（使用EXPORT_QUERY时）。