intel/vdms-dataprep
intel
基于VDMS和LangChain集成的多模态数据准备微服务，用于高效摄取、管理图像、文本、音频等数据，将其转换为嵌入向量并与元数据存储在VDMS中，同时将源视频文件存储在Minio对象存储。
下载次数: 0状态：社区镜像维护者：intel仓库类型：镜像最近更新：4 天前
基于Visual Data Management System (VDMS) 的数据准备微服务
概述和主要用途
本微服务基于https://github.com/IntelLabs/vdms%EF%BC%88Visual Data Management System）构建，通过VDMS LangChain集成实现多模态数据（如图像、文本、音频）的高效摄取与管理。其核心功能是将多模态数据转换为嵌入向量，并与元数据一同存储在VDMS中，同时将源视频文件直接存储在Minio对象存储中。
核心功能和特性
- 多模态数据支持：兼容图像、文本、音频等多种数据类型
- LangChain集成：利用VDMS LangChain集成实现高效数据处理流程
- 嵌入向量生成：自动将多模态数据转换为嵌入向量，便于后续检索与分析
- 元数据管理：与嵌入向量关联存储数据元信息，支持高效查询
- Minio存储集成：源视频文件直接存储在Minio对象存储，确保数据可靠管理
使用场景和适用范围
适用于需要处理和管理多模态数据的应用场景，包括但不限于：
- 视频内容检索与分析系统
- 多模态数据知识库构建
- 智能媒体资产管理平台
- 基于内容的多媒体检索服务
使用方法和配置说明
Docker Compose部署
关于部署的更多详细信息，请参考https://github.com/open-edge-platform/edge-ai-libraries/blob/main/microservices/visual-data-preparation-for-retrieval/vdms/docs/user-guide/get-started.md%E3%80%82
支持版本
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#current-release
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#current-release
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#current-release
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#current-release
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#current-release
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#previous-releases
- https://github.com/open-edge-platform/edge-ai-libraries/blob/main/sample-applications/video-search-and-summarization/docs/user-guide/release-notes.md#previous-releases
许可证协议
Copyright (C) 2025 Intel Corporation.
本软件基于Apache License 2.0许可协议发布（以下简称"许可证"）；未经许可证允许，不得使用本文件。您可以在以下地址获取许可证副本：[***]
***信息
Intel、Intel标志和Xeon是Intel Corporation在美国和/或其他国家的商标。
*其他名称和品牌可能是其各自所有者的财产。
intel/dataprep-visualdata-milvus
intel
视觉数据准备微服务，用于预处理图像和视频等视觉数据，提取特征嵌入并存储到向量数据库中，支持高效检索，利用CLIP模型实现大规模数据集的高级搜索能力。
1.5千+ 次下载
5 天前更新
openeuler/dataprep
openeuler
暂无描述
371 次下载
7 个月前更新
openeuler/dataprep-multimodal-vdms
openeuler
暂无描述
55 次下载
11 个月前更新
openeuler/dataprep-redis
openeuler
暂无描述
333 次下载
11 个月前更新
openeuler/retriever-vdms
openeuler
暂无描述
57 次下载
11 个月前更新
intellabs/vdms
intellabs
用于视觉数据和元数据高效访问的存储解决方案，针对英特尔技术优化，通过图存储元数据和视觉计算库管理图像/视频等数据，支持多节点扩展和并发请求处理。
1 次收藏1万+ 次下载
5 个月前更新
轩辕镜像配置手册
探索更多轩辕镜像的使用方法，找到最适合您系统的配置方式
Docker 配置
登录仓库拉取
通过 Docker 登录认证访问私有仓库
专属域名拉取
无需登录使用专属域名
K8s Containerd
Kubernetes 集群配置 Containerd
K3s
K3s 轻量级 Kubernetes 镜像加速
Dev Containers
VS Code Dev Containers 配置
Podman
Podman 容器引擎配置
Singularity/Apptainer
HPC 科学计算容器配置
其他仓库配置
ghcr、Quay、nvcr 等镜像仓库
Harbor 镜像源配置
Harbor Proxy Repository 对接专属域名
Portainer 镜像源配置
Portainer Registries 加速拉取
Nexus 镜像源配置
Nexus3 Docker Proxy 内网缓存
系统配置
需要其他帮助？请查看我们的 常见问题Docker 镜像访问常见问题解答 或 提交工单
镜像拉取常见问题
使用与功能问题
错误码与失败问题
docker pull 提示 manifest unknown 怎么办？
manifest unknown
docker pull 提示 no matching manifest 怎么办？
no matching manifest（架构）
镜像已拉取完成，却提示 invalid tar header 或 failed to register layer 怎么办？
invalid tar header（解压）
Docker pull 时 HTTPS / TLS 证书验证失败怎么办？
TLS 证书失败
Docker pull 时 DNS 解析超时或连不上仓库怎么办？
DNS 超时
Docker 拉取出现 410 Gone 怎么办？
410 Gone 排查
出现 402 或「流量用尽」提示怎么办？
402 与流量用尽
Docker 拉取提示 UNAUTHORIZED（401）怎么办？
401 认证失败
遇到 429 Too Many Requests（请求太频繁）怎么办？
429 限流
docker login 提示 Cannot autolaunch D-Bus，还算登录成功吗？
D-Bus 凭证提示
为什么会出现「单层超过 20GB」或 413，无法加速拉取？
413 与超大单层
账号 / 计费 / 权限
用户好评
来自真实用户的反馈，见证轩辕镜像的优质服务
oldzhang
运维工程师
Linux服务器
5
"Docker访问体验非常流畅，大镜像也能快速完成下载。"