openeuler/translation Docker 镜像 - 轩辕镜像 | Docker 镜像高效稳定拉取服务

OPEA Docker镜像文档

镜像概述

OPEA Docker镜像是基于openEuler构建的官方镜像，由openEuler CloudNative SIG维护。OPEA是一个开放平台项目，旨在创建开放、多提供商、健壮且可组合的生成式AI解决方案，整合生态系统中的创新成果。该镜像仓库可免费使用，无每用户速率限制。

核心功能与特性

• 可组合构建块框架：提供用于最先进生成式AI系统的详细构建块框架，包括LLM、数据存储和提示引擎
• 架构蓝图：包含检索增强型生成式AI组件栈结构和端到端工作流的架构蓝图
• 四步评估体系：围绕性能、功能、可信度和企业级就绪性对生成式AI系统进行分级评估
• 多硬件支持：可在Intel Gaudi2、Intel Xeon可扩展处理器和Nvidia GPU上部署

支持的标签及对应Dockerfile链接

每个翻译Docker镜像的标签由Translation版本和基础镜像版本组成，具体如下：

使用方法

翻译服务可在Intel Gaudi2、Intel Xeon可扩展处理器和Nvidia GPU上轻松部署，快速启动部署步骤如下：

1. 设置环境变量

按照以下步骤设置部署翻译服务所需的环境变量：

1. 设置必要的环境变量：

   bash
   # 示例：host_ip="192.168.1.1"
   export host_ip="外部公网IP"
   # 示例：no_proxy="localhost, 127.0.0.1, 192.168.1.1"
   export no_proxy="你的无需代理地址"
   export HUGGINGFACEHUB_API_TOKEN="你的Huggingface API令牌"
   

2. 若处于代理环境，还需设置代理相关环境变量：

   bash
   export http_proxy="你的HTTP代理"
   export https_proxy="你的HTTPS代理"
   

3. 设置其他环境变量：

   获取 set_env.sh：set_env.sh

   bash
   # 在Xeon上执行
   source set_env.sh
   

2. 运行Docker Compose

选择与你的硬件匹配的compose.yaml文件。

CPU示例：

获取 compose.yml：compose.yml

bash
docker compose -f compose.yml up -d

将自动从Docker Hub下载镜像：

bash
docker pull openeuler/translation:latest
docker pull openeuler/translation-ui:latest

3. 使用翻译服务

bash
curl [***]{host_ip}:8888/v1/translation -H "Content-Type: application/json" -d '{
     "language_from": "Chinese","language_to": "English","source_language": "我爱机器翻译。"}'

获取帮助

• openEuler CloudNative SIG
• openEuler 社区

更多信息

• 访问 opea.dev 了解更多关于OPEA的信息
• 浏览 opea-project.github.io 获取OPEA技术文档