mingcsiro/termai-preprocess

mingcsiro/termai-preprocess 镜像说明

镜像概述

该镜像封装了一个FastAPI微服务，专注于实现确定性的文本预处理逻辑与智能输入分类能力，可快速集成到各类文本处理相关的应用系统中，支持高效的RESTful API交互。

核心功能

• 确定性文本预处理：对输入文本执行标准化操作（如去除特殊字符、统一大小写、空格处理等）
• 智能输入分类：基于预设规则或轻量模型对输入文本进行分类（如内容类型识别、语言检测等）
• 高效API接口：通过FastAPI提供高性能的接口服务，支持自动生成API文档

使用场景

• 文本数据清洗与标准化处理
• 输入内容的快速分类与过滤
• 微服务架构下的文本处理模块集成
• 数据预处理流水线的组件化部署

配置说明

• 可通过环境变量 PREPROCESS_RULES 指定预处理规则（如 remove_special_chars=true,lowercase=true）
• 分类模型参数可通过 CLASSIFICATION_MODEL 环境变量切换预设模型

部署示例

Docker Run 命令

bash
docker run -d -p 8000:8000 \
  -e PREPROCESS_RULES="remove_special_chars=true,lowercase=true" \
  docker.xuanyuan.run/mingcsiro/termai-preprocess

访问API文档

部署后，访问 http://localhost:8000/docs 可查看自动生成的Swagger API文档，测试接口功能。