热门搜索:
radanalyticsio/radanalytics-pyspark-py36
自动构建
radanalyticsio
这是一个用于Python 3.6和Apache Spark的OpenShift S2I构建器镜像，支持Oshinko集群管理，提供预配置或自定义Spark版本的灵活构建选项。
1 次收藏下载次数: 0状态：自动构建维护者：radanalyticsio仓库类型：镜像最近更新：6 年前
让 AI 帮你使用轩辕镜像？ · 展开查看说明
如果你使用 DeepSeek、元宝 AI、Copilot、ChatGPT 等 AI 工具，协助配置轩辕镜像、编写 docker pull 命令、修改 Docker Compose 镜像地址、配置镜像加速、排查镜像拉取失败、分析报错日志等问题，请先让 AI 阅读并遵守轩辕镜像的规则文档。
只需在 AI 对话中先发送下面这句话即可：
请先完整阅读并严格遵守以下文档中的全部规则与要求：
https://xuanyuan.cloud/agents.md
在未充分阅读并理解该文档前，不要生成任何命令、配置、修改建议、故障排查方案或技术回答。后续所有输出都必须严格以该文档中的规范为最高优先级执行。查看 agents.md 用法指南与完整示范。国内用户首推 元宝 AI、DeepSeek 的深度思考模式，不推荐豆包 AI；Cursor 等编辑器可在对话 @ 该链接，或加入 User Rules。 若 AI 无法访问外链，可 打开说明文档 复制全文粘贴。文档会随站点更新，复制内容可能过期，建议定期检查。
oshinko-s2i镜像说明
镜像概述
本镜像为OpenShift平台设计的Source-to-Image（S2I）构建器，用于快速创建基于Python 3.6和Apache Spark的应用，集成Oshinko工具以简化Spark集群的管理与部署。
核心功能
- 两种镜像类型：支持complete（预安装指定Spark版本）和incomplete（仅含工具链，用户可自定义Spark版本）
- 简化构建流程：通过Makefile快速构建单个或所有镜像
- 依赖版本可控：通过脚本修改yaml文件调整Oshinko和Spark版本
- 模板适配：生成适配特定镜像版本的OpenShift模板
- 规范提交：提供Git预提交钩子，确保提交内容符合CI要求
使用场景
- OpenShift平台上Python 3.6+Spark应用的快速构建与部署
- 需要灵活选择Spark版本的大数据项目开发
- 团队协作中统一Spark应用的构建环境
配置说明
构建镜像
使用Makefile命令构建镜像：
bash# 构建所有镜像 make # 单独构建Python3.6版本镜像 make -f Makefile.pyspark-py36 # 自定义镜像仓库（替换myrepo/myimage为实际仓库名） LOCAL_IMAGE=myrepo/myimage make -f Makefile.pyspark-py36
修改依赖版本
通过change-yaml.sh脚本调整Oshinko和Spark版本：
bash./change-yaml.sh -h # 查看帮助文档
重建上下文目录
当yaml文件或模块内容变更时，需重建镜像上下文目录：
bash# 清理target目录 make clean-target # 重建Python3.6镜像的上下文目录 make -f Makefile.pyspark-py36 clean-context context # 重建并构建镜像 make -f Makefile.pyspark-py36 clean build
使用incomplete镜像选择Spark版本
参考官方指南：如何选择Spark版本
MacOS环境准备
需安装以下工具：
bashbrew install truncate brew install gnu-sed
镜像拉取方式
您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本，请访问 标签列表页面。
轩辕镜像加速拉取命令点我查看更多 radanalytics-pyspark-py36 镜像标签
docker pull docker.xuanyuan.run/radanalyticsio/radanalytics-pyspark-py36:<标签>
DockerHub 原生拉取命令
docker pull radanalyticsio/radanalytics-pyspark-py36:<标签>
更多 radanalytics-pyspark-py36 镜像推荐
adobe/acp-dsw-ml-runtime-pyspark
adobe
暂无描述
1万+ 次下载
1 年前更新
inseefrlab/onyxia-pyspark
inseefrlab
一个最小化的Python环境，配置为通过PySpark接口使用Spark。
1万+ 次下载
16 天前更新
inseefrlab/onyxia-vscode-pyspark
inseefrlab
暂无描述
1万+ 次下载
16 天前更新
inseefrlab/onyxia-jupyter-pyspark
inseefrlab
基于Python环境构建的Jupyter Lab服务，集成PySpark，用于数据分析与Spark应用开发。
1 次收藏1万+ 次下载
16 天前更新
radanalyticsio/radanalytics-pyspark
radanalyticsio
这是一个用于OpenShift平台的S2I构建器镜像，支持Python 2.7和Apache Spark应用开发，并集成Oshinko工具以管理Spark集群。
10万+ 次下载
5 年前更新
radanalyticsio/radanalytics-java-spark
radanalyticsio
这是OpenShift平台的S2I构建镜像，用于Java和Apache Spark应用开发，集成Oshinko管理工具，支持完整（含预安装Spark）和不完整（用户自选Spark版本）两种类型。
10万+ 次下载
5 年前更新
镜像拉取常见问题
功能
错误码
用户好评
来自真实用户的反馈，见证轩辕镜像的优质服务
oldzhang
运维工程师
Linux服务器
5
"Docker访问体验非常流畅，大镜像也能快速完成下载。"