热门搜索:
架构筛选
vllm/vllm-router
vLLM 高性能推理与服务镜像
暂无描述
4千+ 次下载14 天前更新
vllm/vllm-openai
vLLM 高性能推理与服务镜像
vllm/vllm-openai：vLLM 高性能大模型推理框架的官方 Docker 镜像，封装 OpenAI API 兼容的推理服务；支持 PagedAttention 与连续批处理，吞吐量可达传统引擎 10-24 倍；支持 50+ 开源模型与量化方案，适用开源模型部署、OpenAI 应用本地化与高并发生产场景。
271 次收藏1000万+ 次下载14 天前更新
vllm/vllm-tpu
vLLM 高性能推理与服务镜像
vLLM框架在TPU上运行的Docker镜像仓库
3 次收藏5万+ 次下载14 天前更新
vllm/vllm-omni
vLLM 高性能推理与服务镜像
暂无描述
7 次收藏1万+ 次下载28 天前更新
vllm/vllm-openai-rocm
vLLM 高性能推理与服务镜像
暂无描述
3 次收藏1万+ 次下载14 天前更新
vllm/vllm-openai-cpu
vLLM 高性能推理与服务镜像
暂无描述
8.4千+ 次下载24 天前更新
vllm/vllm-omni-rocm
vLLM 高性能推理与服务镜像
暂无描述
1 次收藏1.5千+ 次下载28 天前更新
rocm/vllm-ci
rocm
该仓库用于托管vllm项目持续集成（CI）流程所需的镜像，旨在为vllm-ci相关的自动化构建、测试及部署环节提供稳定的镜像存储与管理支持，确保CI流程高效、可靠地运行，满足vllm项目在开发迭代过程中对集成环境的镜像需求，助力项目快速验证代码变更、保障软件质量。
5 次收藏100万+ 次下载13 天前更新
rocm/vllm-dev
rocm
rocm/vllm-dev是基于AMD ROCm平台的高性能大语言模型开发镜像，集成vllm框架与AMD GPU加速能力，专为开发者打造大语言模型部署、推理优化及二次开发环境。镜像预配置PyTorch、HIP等核心依赖，支持低延迟、高吞吐量的LLM推理，可快速进行模型加载、性能调优与多实例部署测试，助力开发者高效构建和调试大语言模型应用，充分发挥AMD GPU在AI计算中的算力优势。
18 次收藏10万+ 次下载13 天前更新
rocm/vllm
rocm
这是为AMD图形处理器（GPU）量身打造的、基于ROCm开源平台深度优化的vLLM Docker容器，其中vLLM作为高性能大语言模型服务库，可提供高效推理与服务能力，Docker容器则保障了部署的便捷性与环境一致性，整体方案旨在为AMD GPU用户提供兼顾性能与易用性的优化大语言模型运行环境。
24 次收藏10万+ 次下载1 个月前更新
ai/kimi-k2-vllm
Docker AI 官方镜像
Kimi K2 Thinking是最新开源思考模型，作为能逐步推理并动态调用工具的思考代理，具备深度多步推理能力，支持200-300次连续工具调用，原生INT4量化实现低延迟和低GPU内存占用，上下文窗口达256k。
1 次收藏1万+ 次下载4 个月前更新
intel/vllm
intel
暂无描述
6 次收藏1万+ 次下载1 个月前更新
ai/gpt-oss-vllm
Docker AI 官方镜像
OpenAI的开源权重模型，专为强大的推理能力和代理任务设计，适用于多用途开发场景。
1 次收藏1万+ 次下载6 个月前更新
itzg/mc-router
itzg
根据请求的服务器地址，将我的世界客户端连接路由到后端服务器。
20 次收藏100万+ 次下载22 天前更新
ai/qwen3-vllm
Docker AI 官方镜像
Qwen3是最新一代Qwen大语言模型，专为顶级编码、数学、推理和语言任务设计，支持密集型和混合专家模型架构，提供动态推理模式切换，适用于多语言多领域应用。
1万+ 次下载6 个月前更新
cloudnativelabs/kube-router-git
cloudnativelabs
kube-router的开发镜像，包含主分支构建、PR构建及分支构建。
1 次收藏100万+ 次下载18 天前更新
selenium/router
selenium
用于分布式测试的Selenium Grid路由模式镜像，可高效路由测试请求至各节点，实现多环境并行测试管理。
5 次收藏100万+ 次下载14 天前更新
ai/gemma3-vllm
Docker AI 官方镜像
Google’s latest Gemma, small yet strong for chat and generation
1 次收藏1万+ 次下载6 个月前更新
ai/glm-4.7-flash-vllm
Docker AI 官方镜像
GLM-4.7-Flash是顶级的30B-A3B混合专家模型，平衡了强大性能与高效部署，为轻量级部署提供兼顾性能与效率的新选择。
1 次收藏1万+ 次下载3 个月前更新
ai/qwen3-coder-next-vllm
Docker AI 官方镜像
高级编码代理模型，拥有800亿参数（30亿激活MoE），专为编码代理和本地开发环境设计，具备高效代码生成、调试及工具调用能力，支持多种IDE平台集成。
1 次收藏1万+ 次下载2 个月前更新
intel/llm-scaler-vllm
intel
暂无描述
1 次收藏1万+ 次下载1 个月前更新
ddev/ddev-traefik-router
ddev
DDEV的ddev-traefik-router是基于Traefik的包装器，为DDEV本地开发环境提供反向代理与请求路由功能。
100万+ 次下载2 个月前更新
ai/deepseek-v3.2-vllm
Docker AI 官方镜像
DeepSeek-V3.2通过DeepSeek稀疏注意力(DSA)、可扩展强化学习框架和大规模智能体任务合成管道提升计算效率与推理能力，荣获2025年国际数学奥林匹克(IMO)和国际信息学奥林匹克(IOI)金牌。
10 次收藏1万+ 次下载4 个月前更新
openeuler/vllm-cpu
openeuler
官方vLLM Ascend Docker镜像，基于openEuler构建，提供快速高效的LLM推理和服务能力，支持PagedAttention内存管理、连续批处理、多种量化技术及优化内核，适用于高性能语言模型部署。
4 次收藏1万+ 次下载24 天前更新
ai/smollm2-vllm
Docker AI 官方镜像
SmolLM 2是为速度、边缘设备和本地开发构建的小型LLM系列，提供135M、360M、1.7B参数版本，以Safetensors格式打包并采用vLLM导向布局，便于通过Docker Hub分发。
9.7千+ 次下载6 个月前更新
intel/oact-mpsrouter
intel
Open AMT云工具包中的管理存在服务器路由器组件，用于路由远程管理通信，支持基于Intel AMT技术的设备远程管理。
2 次收藏5万+ 次下载17 天前更新
percona/percona-mysql-router
percona
暂无描述
1万+ 次下载1 个月前更新
ai/all-minilm-l6-v2-vllm
Docker AI 官方镜像
all-MiniLM-L6-v2是一个sentence-transformers模型，可将句子和段落映射到384维密集向量空间，适用于聚类或语义搜索等任务。
1 次收藏2.6千+ 次下载6 个月前更新
ai/qwen3-reranker-vllm
Docker AI 官方镜像
多语言重排序模型，用于文本检索，可跨119种语言对文档相关性进行评分，基于Qwen3系列基础模型，具备多语言能力、长文本理解和推理技能。
3 次收藏1万+ 次下载5 个月前更新
onlyoffice/docspace-router
onlyoffice
暂无描述
1万+ 次下载4 个月前更新
onlyoffice/4testing-docspace-router
onlyoffice
暂无描述
10万+ 次下载1 个月前更新
ddev/ddev-router
ddev
DDEV的已弃用镜像ddev-nginx-proxy-router，基于jwilder/nginx-proxy项目，包含针对DDEV的Nginx配置模板覆盖，提供Nginx反向代理功能，在DDEV v1.20+中已被traefik路由器替代，通常不单独使用。
1万+ 次下载2 年前更新
intel/nvr-event-router
intel
GenAI驱动的智能NVR通过智能边缘分析将传统录像机转变为智能系统，实现实时检测、事件总结和可行动洞察，优化带宽与存储并加速关键事件响应。
2.1千+ 次下载19 天前更新
ai/qwen3-embedding-vllm
Docker AI 官方镜像
Qwen3 Embedding是Qwen系列最新专有模型，专为文本嵌入和排序任务设计，提供0.6B、4B和8B多种尺寸，具备出色的多语言能力、长文本理解和推理技能，适用于文本检索、代码检索、分类、聚类等任务。
1 次收藏1万+ 次下载5 个月前更新
ai/ministral3-vllm
Docker AI 官方镜像
Ministral 3是紧凑高效的多模态语言模型，支持视觉和文本输入，性能接近24B模型，专为边缘部署和本地推理优化，适用于资源受限环境。
4 次收藏1万+ 次下载4 个月前更新
bitnami/kserve-router
Bitnami Secure Images（VMware Tanzu）
Bitnami kserve-router 安全镜像
2.2千+ 次下载8 个月前更新
openeuler/vllm-ascend
openeuler
官方vLLM Ascend Docker镜像，基于openEuler构建，是社区维护的硬件插件，用于在Ascend NPU上无缝运行vLLM，支持Transformer、MoE、Embedding、多模态等多种开源模型，遵循硬件可插拔接口规范。
3 次收藏7.3千+ 次下载5 个月前更新
apache/traffic_router_builder
Apache 软件基金会镜像
Apache Traffic Control的Traffic Router组件镜像，用于通过DNS和HTTP 302将客户端重定向到CDN上最近的可用缓存节点，是构建大规模开源CDN的核心流量路由组件。
2 次收藏10万+ 次下载5 个月前更新
airbyte/source-twilio-taskrouter
airbyte
暂无描述
1万+ 次下载11 个月前更新
eclipse/hono-service-command-router
eclipse
暂无描述
1万+ 次下载1 年前更新
intel/device-mgmt-toolkit-mps-router
intel
暂无描述
1.4千+ 次下载17 天前更新
rancher/harvester-eventrouter
rancher
暂无描述
5万+ 次下载14 天前更新
openeuler/llm-vllm
openeuler
暂无描述
238 次下载1 年前更新
ai/functiongemma-vllm
Docker AI 官方镜像
FunctionGemma是一个270M参数的开放模型，基于Gemma 3构建，专为纯文本函数调用训练，可微调为高效、离线运行的专用代理，适用于资源受限设备。
1 次收藏5.5千+ 次下载3 个月前更新
eclipse/hono-service-command-router-native
eclipse
暂无描述
4.7千+ 次下载1 年前更新
openeuler/kserve-router
openeuler
暂无描述
327 次下载8 个月前更新
ai/embeddinggemma-vllm
Docker AI 官方镜像
Embedding Gemma是Google DeepMind推出的最先进文本嵌入模型，基于Gemma架构创建高质量文本向量表示，能捕捉语义含义，适用于检索增强生成（RAG）、语义搜索及相似性任务，为嵌入类应用提供强大基础。
3千+ 次下载6 个月前更新
hashicorp/rollouts-plugin-trafficrouter-consul
hashicorp
暂无描述
3.8千+ 次下载1 年前更新
eclipse/hono-service-command-router-infinispan
eclipse
暂无描述
4.5千+ 次下载1 年前更新
librespace/satnogs-router
librespace
SatNOGS Router软件，负责路由SatNOGS项目收集的卫星观测产物。
90 次下载2 年前更新
eclipse/hono-service-command-router-infinispan-native
eclipse
暂无描述
450 次下载1 年前更新
cyolosec/router
cyolosec
暂无描述
1000万+ 次下载13 天前更新
mysql/mysql-router
MySQL 官方镜像
MySQL Router提供应用程序与后端MySQL服务器之间的透明路由。
29 次收藏1000万+ 次下载3 年前更新
runpod/worker-v1-vllm
runpod
暂无描述
4 次收藏50万+ 次下载17 天前更新
vastai/vllm
vastai
暂无描述
2 次收藏5万+ 次下载16 天前更新
rocmvllm/vllm-openai
rocmvllm
暂无描述
1 次收藏178 次下载1 年前更新
dustynv/vllm
dustynv
NVIDIA Jetson 平台优化的大语言模型推理服务框架
5 次收藏5万+ 次下载9 个月前更新
sammytheshark/kube-router
sammytheshark
暂无描述
10万+ 次下载20 天前更新
novitalabs/vllm-openai
novitalabs
暂无描述
10万+ 次下载20 天前更新
opcrouter/runtime
opcrouter
创新、简单且高效的通信中间件
6 次收藏5万+ 次下载18 天前更新
ascendai/vllm-ascend
ascendai
暂无描述
10万+ 次下载13 天前更新
第 1 页
与「vllm-router」相关的博客与命名空间
相关博客
MinerU Docker 部署指南：PDF 结构化解析服务实践
MinerU 是一款面向开发者与科研用户的容器化应用，专为 vLLM 后端服务设计，提供高效的文档解析与处理能力。通过 Docker 容器化部署 MinerU，可以简化安装流程、确保环境一致性，并便于在不同环境中快速迁移和扩展。 本指南将详细介绍 MinerU 的 Docker 容器化部署方案，包括环境准备、镜像拉取、容器部署、功能测试及生产环境配置建议，旨在帮助用户快速搭建稳定可靠的 MinerU 服务。
MinerU,PDF,人工智能,vLLM2025/12/30
VLLM Docker 容器化部署指南：在 NVIDIA Jetson 平台高效运行大语言模型推理服务
VLLM是一个高效的开源大语言模型（LLM）推理服务框架，通过创新的PagedAttention技术实现高吞吐量和低延迟的推理性能。本文介绍的`dustynv/vllm`镜像是针对NVIDIA Jetson平台优化的容器化版本，由[dustynv/jetson-containers](https://github.com/dustynv/jetson-containers)项目构建，专为边缘计算场景设计，支持在资源受限的嵌入式设备上部署高性能LLM推理服务。
Docker,VLLM2025/12/2
vllm-openai Docker 部署全手册
从个人开发者测试开源大模型，到企业搭建私有推理服务，vllm-openai 都是高效且低成本的选择。本教程将从核心概念讲起，逐步覆盖 Docker 环境准备、镜像拉取、多场景部署、结果验证及问题排查，无论你是初学者还是高级工程师，都能照着步骤完成部署。
Docker,vllm-openai2025/10/9
verl Docker 容器化部署手册
无论你是刚接触大模型工具的初学者，还是需要高效管理训练任务的高级工程师，本教程都将带你一步步完成 verlai/verl 镜像的 Docker 部署——从工具认知、环境搭建到多场景部署实践，每个步骤均配备完整命令与详细说明，确保照着做就能成。
Docker,verl2025/10/8