sfiligoi/prp-osg-pool

prp-osg-wn-gpu 镜像文档

1. 镜像概述

prp-osg-wn-gpu是专为PRP（特定研究项目或组织）设计的Docker镜像，基于Open Science Grid（OSG）框架和HTCondor工作流管理系统构建，定位为GPU加速计算节点（Worker Node），用于组建分布式计算池，实现PRP项目中计算资源的高效管理、任务调度及GPU加速计算支持。

2. 核心功能与特性

• OSG HTCondor集成：内置OSG兼容的HTCondor工作流管理系统，支持分布式任务提交、调度与执行监控
• GPU加速支持：针对GPU计算优化，可识别并利用宿主GPU资源，适用于GPU加速的科学计算任务
• 计算池节点功能：作为计算池Worker Node，无缝接入PRP项目的分布式计算资源集群
• 轻量级部署：Docker容器化封装，简化部署流程，降低与现有计算环境的集成难度

3. 使用场景与适用范围

• PRP项目中依赖大规模分布式计算的科学研究任务
• 需要GPU加速的计算场景（如粒子物理数据分析、高性能计算模拟、机器学习模型训练等）
• 构建基于OSG框架的分布式计算资源池，实现跨节点计算任务协同

4. 使用方法与配置说明

4.1 基本部署（Docker Run）

bash
docker run -d \
  --name prp-osg-wn-gpu-node \
  --gpus all \  # 挂载所有GPU设备（需Docker支持GPU）
  -v /path/to/prp-config:/etc/prp \  # 挂载PRP项目配置文件
  -v /path/to/condor-config:/etc/condor \  # 挂载HTCondor配置文件
  --network=host \  # 建议使用host网络以确保节点间通信
  prp-osg-wn-gpu

4.2 关键配置说明

4.2.1 环境变量

4.2.2 挂载目录

• /etc/prp：PRP项目特定配置目录，包含节点认证信息、任务队列配置等
• /etc/condor：HTCondor服务配置目录，可自定义任务调度策略、资源限制等
• /var/lib/condor：HTCondor运行时数据目录，建议持久化挂载以保留任务状态

4.3 容器状态检查

部署后可通过以下命令验证节点状态：

bash
# 查看容器日志
docker logs prp-osg-wn-gpu-node

# 检查HTCondor服务状态
docker exec -it prp-osg-wn-gpu-node condor_status

# 验证GPU识别情况
docker exec -it prp-osg-wn-gpu-node nvidia-smi  # 需宿主安装nvidia驱动

5. 注意事项

• 需确保宿主环境已安装NVIDIA Container Toolkit以支持GPU资源挂载
• 节点网络需能访问PRP项目的中心管理节点及HTCondor collector服务
• 生产环境中建议通过Docker Compose或Kubernetes进行编排，实现多节点集群管理