insightsoftware/dundas-bi-edc

Dundas BI EDC Connector 镜像文档

1. 镜像概述

Dundas BI EDC Connector 镜像提供了Dundas BI商业智能平台与企业数据目录(Enterprise Data Catalog, EDC)系统的集成能力。通过该连接器，组织可实现Dundas BI中的数据资产（如报表、数据源、数据集）与EDC系统的自动同步，支持数据发现、元数据管理及端到端数据 lineage 追踪，强化数据治理流程。

2. 核心功能与特性

2.1 核心功能

• 数据资产自动发现：扫描并同步Dundas BI中的数据对象（报表、数据源、计算字段等）至EDC系统。
• 数据 Lineage 追踪：记录数据从源头系统到Dundas BI报表的完整流转路径，支持正向/反向 lineage 查询。
• 元数据同步：同步数据对象的描述、所有者、数据类型等元数据至EDC，保持数据资产信息一致性。
• 状态监控：提供连接器运行状态及同步任务日志，支持故障排查与性能优化。

2.2 特性

• 跨EDC兼容性：支持主流EDC平台（如Informatica EDC、Alation、Collibra等）。
• 配置驱动：通过环境变量或配置文件灵活定义集成规则，适应不同EDC系统接口差异。
• 轻量级部署：基于Docker容器化部署，简化安装与版本管理。

3. 使用场景

3.1 企业BI数据治理

在企业BI架构中，通过该连接器将Dundas BI数据资产纳入EDC统一管理，提升数据透明度与可管理性。

3.2 数据合规与审计

满足GDPR、SOX等合规要求，通过数据 lineage 追踪能力证明数据处理的合规性。

3.3 跨系统数据资产管理

在包含多个数据源和BI工具的复杂环境中，统一管理Dundas BI数据资产，实现与其他系统（如数据仓库、ETL工具）的资产联动。

4. 使用方法与配置

4.1 基本部署（Docker Run）

bash
docker run -d \
  --name dundas-bi-edc-connector \
  -e EDC_SERVER_URL="https://edc.example.com/api" \
  -e EDC_AUTH_USER="edc-admin" \
  -e EDC_AUTH_PASSWORD="secure-password" \
  -e DUNDAS_BI_URL="https://bi.example.com" \
  -e DUNDAS_BI_API_KEY="your-dundas-api-key" \
  -e SYNC_INTERVAL="3600" \  # 同步间隔（秒），默认3600
  dundas/bi-edc-connector:latest

4.2 环境变量配置

4.3 高级配置（挂载配置文件）

对于复杂配置（如自定义数据资产过滤规则、lineage 深度设置），可通过挂载配置文件实现：

bash
docker run -d \
  --name dundas-bi-edc-connector \
  -v /path/to/config:/app/config \  # 挂载本地配置目录
  -e CONFIG_FILE_PATH="/app/config/custom-config.yaml" \
  dundas/bi-edc-connector:latest

配置文件（custom-config.yaml）示例：

yaml
sync:
  include_dashboards: true
  include_data_sources: true
  exclude_temporary_datasets: true
lineage:
  depth: 5  # lineage追踪深度（默认3）
  include_transformations: true

5. 注意事项

• 确保Dundas BI API密钥具有足够权限（至少包含“查看数据源”“查看报表”权限）。
• EDC系统需启用API访问，并配置允许连接器IP的访问权限。
• 生产环境中建议使用Docker Secrets或环境变量管理敏感信息（如密码、API密钥）。
• 根据数据量调整同步间隔，避免对Dundas BI或EDC系统造成性能压力。