1094956080/master-condor

基于HTCondor的分布式处理套件镜像（KIT-HTCONDOCKER）

镜像概述

本镜像基于Ubuntu 16.04构建，集成HTCondor分布式计算框架、Rscript运行环境及PHP/HTML5/CSS3开发的Web管理平台。作为分布式系统的master节点，支持用户通过友好的Web界面完成节点管理（添加worker节点）、任务监控、任务创建与执行等操作。本项目为昆迪纳大学系统与计算机工程专业学生的学位项目，受组织知识产权规范保护。

核心功能

• 作为HTCondor集群的master节点，提供集群管理能力
• 集成Web管理平台，支持节点状态监控、任务调度与执行
• 包含Rscript运行环境，支持数据处理类任务
• 提供节点配置脚本，简化集群部署与管理流程

使用场景

• 大规模并行计算任务（如科学计算、数据分析）
• 分布式集群的节点管理与任务调度
• 教育或研究场景下的分布式计算实践

配置说明

1. 需根据实际需求修改condor_config.local文件进行个性化配置
2. 宿主系统的hosts文件需包含所有集群节点的hostname及对应IP地址
3. 若使用host网络模式，容器hostname需与宿主系统hostname保持一致

部署示例

提供初始化脚本init_Kit_HTconDocker.sh简化部署流程，脚本内容及使用方式如下：

脚本内容

bash
#!/bin/bash 
if [ ! $1 ]
then 
echo "必须指定容器类型 [ master | submit | execute ]";
else
if [ ! $2 ]
then
echo "必须指定版本参数 [ 1.0 | 2.0 | ... | 5.4 ]，请查看DockerHub获取最新版本"
else
if [ ! $3 ]
then
echo "必须指定网络类型 [ host | subnet-public-port | subnet ]"
else
	if [ $1 = 'master' ] || [ $1 = 'submit' ] || [ $1 = 'execute' ]
	then
	HOSTNAME=$(cat /etc/hostname);
	NAME=$1"-condor";
	CONTENEDOR="1094956080/"$NAME":"$2;
	CONTENEDOREXISTE=$(docker ps -a | grep "master-condor:5.4");
		if [ ${#CONTENEDOREXISTE} -gt 0 ]
		then
		echo "已存在该类型[$1]和版本[$2]的容器"
		else
			echo "即将安装容器：$1，版本：$2";
			if [ $3 = 'host' ]
			then
				docker run -it --net host --hostname $HOSTNAME --name $NAME $CONTENEDOR
			elif [ $3 = 'subnet-public-port' ]
			then
				docker run -it -p 9600-10000:9600-10000 -p 80:80 --hostname $HOSTNAME --name $NAME $CONTENEDOR
			elif [ $3 = 'subnet' ]
			then
				docker run -it --hostname $HOSTNAME --name $NAME $CONTENEDOR
			else
			echo "网络类型参数无效，请选择 [ host | subnet-public-port | subnet ]"
			fi
		fi
	else
	echo "错误 - 容器类型只能是 [ master | submit | execute ]";
	fi
fi
fi
fi

脚本使用步骤

1. 指定容器类型（master/submit/execute）
2. 指定镜像版本（如5.4，需参考DockerHub最新版本）
3. 指定网络模式（host/subnet-public-port/subnet）

执行示例

bash
$ ./init_Kit_HTconDocker.sh master 5.4 host

网络模式说明

• host：容器使用宿主网络，需注意端口冲突（如宿主80端口已占用则容器80端口无法使用）
• subnet-public-port：容器部署在私有子网，开放80端口及9600-***端口（HTCondor所需端口池）
• subnet：容器部署在私有子网，无端口暴露，适合集群内节点通信的测试场景