dwpdigital/ucfs-claimant-api-load-data

UCFS Claimant API数据加载协调容器

镜像概述

该Docker镜像为基于Python的容器，专门用于UCFS Claimant API服务的数据加载流程协调。其核心功能是实现从Amazon S3存储服务到Amazon RDS数据库之间的数据传输与加载，为UCFS Claimant API服务提供可靠的数据供给支持。

核心功能和特性

• 数据加载协调：自动化处理从S3到RDS的数据传输流程，包括数据读取、格式转换和数据库写入
• S3集成：支持从指定S3存储桶读取数据文件，兼容常见数据格式（如CSV、JSON）
• RDS适配：与Amazon RDS数据库无缝对接，支持标准SQL数据写入操作
• 服务专用：针对UCFS Claimant API服务的数据需求优化，确保数据加载的及时性和准确性

使用场景和适用范围

• UCFS Claimant API服务的数据初始化与更新
• 需要定期从S3批量加载数据到RDS的业务场景
• UCFS Claimant相关业务数据的迁移与同步

使用方法和配置说明

环境变量配置

使用该镜像需配置以下环境变量：

Docker运行示例

bash
docker run -d \
  --name ucfs-claimant-data-loader \
  -e S3_BUCKET=ucfs-claimant-data \
  -e S3_KEY=claimant_data/2023-10/claims.csv \
  -e RDS_HOST=ucfs-claimant-db.xxxxxx.us-east-1.rds.amazonaws.com \
  -e RDS_PORT=5432 \
  -e RDS_DB=ucfs_claimant_db \
  -e RDS_USER=db_user \
  -e RDS_PASSWORD=secure_password \
  [镜像名称]:[标签]

Docker Compose配置示例

yaml
version: '3'
services:
  data-loader:
    image: docker.xuanyuan.run/[镜像名称]:[标签]
    container_name: ucfs-claimant-data-loader
    environment:
      - S3_BUCKET=ucfs-claimant-data
      - S3_KEY=claimant_data/2023-10/claims.csv
      - RDS_HOST=ucfs-claimant-db.xxxxxx.us-east-1.rds.amazonaws.com
      - RDS_PORT=5432
      - RDS_DB=ucfs_claimant_db
      - RDS_USER=db_user
      - RDS_PASSWORD=secure_password
    restart: on-failure

使用注意事项

• 确保容器具有访问S3和RDS的网络权限
• 数据文件格式需符合UCFS Claimant API服务的数据规范
• 敏感信息（如数据库密码）建议通过安全方式注入，避免明文配置