热门搜索:
apache/systemds
Apache SystemDS 是一款开源的端到端数据科学与机器学习系统，支持大规模数据预处理、模型训练及推理，具备自动优化和混合执行模式，适用于从原型开发到生产部署的全流程。
Apache SystemDS Docker镜像文档
概述
Apache SystemDS是一款开源的端到端数据科学与机器学习系统，旨在简化大规模数据处理和机器学习工作流。该系统支持从数据预处理、特征工程到模型训练、评估及推理的全流程，并通过自动优化技术实现从单机原型到分布式生产环境的无缝扩展。
主要特性
- 多阶段优化：自动将高级脚本转换为高效执行计划，支持内存、磁盘及分布式计算的混合执行
- 混合执行模式：结合本地单机执行与分布式集群执行（基于Spark、Hadoop），平衡性能与资源效率
- 丰富算法库：内置数十种机器学习算法（如线性回归、随机森林、深度学习模型）及数据预处理操作
- 多语言接口：支持Java API、Python API及自定义脚本，适配不同开发习惯
- 可扩展性：允许用户自定义函数和操作符，扩展系统功能
使用场景
- 大规模数据预处理：处理TB级结构化/非结构化数据，执行清洗、转换、特征提取等操作
- 机器学习模型开发：快速原型设计与验证，支持从小规模样本到大规模数据集的平滑过渡
- 生产级部署：与现有数据基础设施（Hadoop/Spark集群）集成，支持高并发、低延迟的推理服务
- 学术研究：作为机器学习算法验证与性能基准测试的实验平台
Docker部署示例
1. 拉取镜像
bashdocker pull apache/systemds:latest
2. 运行容器
bashdocker run -it --name systemds-container apache/systemds:latest /bin/bash
3. 基本使用示例
在容器内执行简单数据处理脚本：
bash# 运行内置示例脚本（线性回归训练） cd /systemds/examples ./run-example.sh LinearRegressionExample
4. 挂载本地数据与脚本
bashdocker run -it -v /本地路径:/data apache/systemds:latest /bin/bash # 在容器内访问本地数据：/data/your_script.dml
镜像拉取方式
您可以使用以下命令拉取该镜像。请将 <标签> 替换为具体的标签版本。如需查看所有可用标签版本，请访问 标签列表页面。
DockerHub 原生拉取命令
docker pull apache/systemds:<标签>
更多 systemds 镜像推荐
apache/airflow
Apache 软件基金会镜像
Apache Airflow是一个开源的工作流编排平台，旨在通过编程方式（主要使用Python）定义、调度和监控复杂工作流，它以有向无环图（DAG）形式管理任务依赖关系，支持灵活的调度策略（如基于时间、事件或依赖），提供直观的Web界面用于任务状态监控与管理，具备高度可扩展性，可集成多种数据处理工具、云服务及外部系统，广泛应用于数据管道构建、ETL流程自动化、机器学习工作流编排等场景，帮助用户高效管理和执行复杂的任务流程。
626 次收藏10亿+ 次下载
4 天前更新
apache/superset
Apache 软件基金会镜像
Apache Superset是一款开源的数据可视化与数据探索平台，它支持连接多种数据源，允许用户通过直观界面创建交互式仪表盘、图表及报告，无需复杂编程即可进行数据查询与分析，适用于从非技术人员到数据工程师的各类用户，帮助团队高效洞察数据价值，是企业级数据驱动决策的强大工具。
322 次收藏5亿+ 次下载
4 天前更新
apache/tika
Apache 软件基金会镜像
Apache Tika Server的容器镜像，提供内容检测、元数据及文本提取的HTTP服务，便于便捷部署和集成到应用系统中。
54 次收藏1000万+ 次下载
1 个月前更新
apache/kafka
Apache 软件基金会镜像
Apache Kafka是一个开源的分布式流处理平台，旨在提供高吞吐量、低延迟的实时数据流传递服务，支持发布/订阅消息模式，能够持久化存储海量数据流并确保数据可靠性，具备水平扩展能力和容错机制，广泛应用于日志收集、事件驱动架构、实时数据集成及流处理系统等场景，为企业级应用提供高效、稳定的数据流传输与处理解决方案。
206 次收藏1000万+ 次下载
7 天前更新
apache/spark
Apache 软件基金会镜像
Apache Spark是由Apache软件基金会开发的开源分布式计算系统，专为大数据处理设计，支持批处理、流处理、机器学习和图计算等多种数据处理模式，通过基于内存的计算引擎显著提升处理速度，具备高效、易用且可扩展的特性，广泛应用于数据科学与大数据分析领域，为用户提供快速、灵活的大数据处理解决方案。
98 次收藏1000万+ 次下载
2 个月前更新
apache/apisix
Apache 软件基金会镜像
Apache APISIX是一款动态、实时、高性能的云原生API网关，提供负载均衡、动态上游、金丝雀发布、熔断、认证、可观测性等丰富流量管理功能，适用于处理传统南北向流量及服务间东西向流量。
103 次收藏1000万+ 次下载
4 天前更新
轩辕镜像配置手册
探索更多轩辕镜像的使用方法，找到最适合您系统的配置方式
Docker 配置
登录仓库拉取
通过 Docker 登录认证访问私有仓库
专属域名拉取
无需登录使用专属域名
K8s Containerd
Kubernetes 集群配置 Containerd
K3s
K3s 轻量级 Kubernetes 镜像加速
Dev Containers
VS Code Dev Containers 配置
Podman
Podman 容器引擎配置
Singularity/Apptainer
HPC 科学计算容器配置
其他仓库配置
ghcr、Quay、nvcr 等镜像仓库
Harbor 镜像源配置
Harbor Proxy Repository 对接专属域名
Portainer 镜像源配置
Portainer Registries 加速拉取
Nexus 镜像源配置
Nexus3 Docker Proxy 内网缓存
系统配置
需要其他帮助？请查看我们的 常见问题Docker 镜像访问常见问题解答 或 提交工单
镜像拉取常见问题
使用与功能问题
配置了专属域名后，docker search 为什么会报错？
docker search 限制
Docker Hub 上有的镜像，为什么在轩辕镜像网站搜不到？
站内搜不到镜像
机器不能直连外网时，怎么用 docker save / load 迁镜像？
离线 save/load
docker pull 拉插件报错（plugin v1+json）怎么办？
插件要用 plugin install
WSL 里 Docker 拉镜像特别慢，怎么排查和优化？
WSL 拉取慢
轩辕镜像安全吗？如何用 digest 校验镜像没被篡改？
安全与 digest
第一次用轩辕镜像拉 Docker 镜像，要怎么登录和配置？
新手拉取配置
轩辕镜像合规吗？轩辕镜像的合规是怎么做的？
镜像合规机制
错误码与失败问题
docker pull 提示 manifest unknown 怎么办？
manifest unknown
docker pull 提示 no matching manifest 怎么办？
no matching manifest（架构）
镜像已拉取完成，却提示 invalid tar header 或 failed to register layer 怎么办？
invalid tar header（解压）
Docker pull 时 HTTPS / TLS 证书验证失败怎么办？
TLS 证书失败
Docker pull 时 DNS 解析超时或连不上仓库怎么办？
DNS 超时
docker 无法连接轩辕镜像域名怎么办？
域名连通性排查
Docker 拉取出现 410 Gone 怎么办？
410 Gone 排查
出现 402 或「流量用尽」提示怎么办？
402 与流量用尽
Docker 拉取提示 UNAUTHORIZED（401）怎么办？
401 认证失败
遇到 429 Too Many Requests（请求太频繁）怎么办？
429 限流
docker login 提示 Cannot autolaunch D-Bus，还算登录成功吗？
D-Bus 凭证提示
为什么会出现「单层超过 20GB」或 413，无法加速拉取？
413 与超大单层
账号 / 计费 / 权限
用户好评
来自真实用户的反馈，见证轩辕镜像的优质服务
oldzhang
运维工程师
Linux服务器
5
"Docker访问体验非常流畅，大镜像也能快速完成下载。"