轩辕镜像
轩辕镜像专业版
个人中心搜索镜像
交易
充值流量我的订单
工具
工单支持镜像收录Run 助手IP 归属地密码生成Npm 源Pip 源
帮助
常见问题我要吐槽
其他
关于我们网站地图

官方QQ群: 13763429

轩辕镜像
镜像详情
coco/aggregate-concept-transformer
官方博客使用教程热门镜像工单支持
本站面向开发者与科研用户,提供开源镜像的搜索和下载加速服务。
所有镜像均来源于原始开源仓库,本站不存储、不修改、不传播任何镜像内容。
轩辕镜像 - 国内开发者首选的专业 Docker 镜像下载加速服务平台 - 官方QQ群:13763429 👈点击免费获得技术支持。
本站面向开发者与科研用户,提供开源镜像的搜索和下载加速服务。所有镜像均来源于原始开源仓库,本站不存储、不修改、不传播任何镜像内容。

本站支持搜索的镜像仓库:Docker Hub、gcr.io、ghcr.io、quay.io、k8s.gcr.io、registry.gcr.io、elastic.co、mcr.microsoft.com

aggregate-concept-transformer Docker 镜像下载 - 轩辕镜像

aggregate-concept-transformer 镜像详细信息和使用指南

aggregate-concept-transformer 镜像标签列表和版本信息

aggregate-concept-transformer 镜像拉取命令和加速下载

aggregate-concept-transformer 镜像使用说明和配置指南

Docker 镜像加速服务 - 轩辕镜像平台

国内开发者首选的 Docker 镜像加速平台

极速拉取 Docker 镜像服务

相关 Docker 镜像推荐

热门 Docker 镜像下载

aggregate-concept-transformer
coco/aggregate-concept-transformer
自动构建

aggregate-concept-transformer 镜像详细信息

aggregate-concept-transformer 镜像标签列表

aggregate-concept-transformer 镜像使用说明

aggregate-concept-transformer 镜像拉取命令

Docker 镜像加速服务

轩辕镜像平台优势

镜像下载指南

相关 Docker 镜像推荐

该服务通过SQS接收Amazon S3桶中源概念更新的通知,整合相关UUID的概念,构建整合JSON模型并发送到Neo4j和Elasticsearch,调用varnish-purger清除缓存,最后发送更新通知到Kinesis流并移除队列消息。
0 次下载activecoco镜像
🚀轩辕镜像专业版更稳定💎一键安装 Docker 配置镜像源
中文简介版本下载
🚀轩辕镜像专业版更稳定💎一键安装 Docker 配置镜像源

aggregate-concept-transformer 镜像详细说明

aggregate-concept-transformer 使用指南

aggregate-concept-transformer 配置说明

aggregate-concept-transformer 官方文档

Aggregate Concept Transformer (aggregate-concept-transformer)

镜像概述与主要用途

Aggregate Concept Transformer是一个在UPP(Unified Publishing Platform)中整合和协调概念的服务。它通过SQS接收Amazon S3桶中源概念更新的通知,获取相关UUID的概念,构建整合的JSON模型并同步到Neo4j和Elasticsearch,调用缓存清除工具,发送更新通知到Kinesis流,并完成队列消息的处理。

核心功能与特性

  • 接收更新通知:通过SQS接收Amazon S3桶中源概念更新的通知
  • 整合概念数据:获取与更新概念相关的所有UUID,从S3请求每个概念数据,构建整合的JSON模型
  • 多系统同步:将更新后的概念JSON发送到Neo4j(图数据库)和Elasticsearch(搜索引擎)
  • 缓存管理:在Neo4j成功写入概念后,调用varnish-purger清除对应概念的缓存
  • 事件通知:向Kinesis流发送所有更新概念的通知
  • 消息处理:处理完成后从SQS队列移除消息
  • 概念整合逻辑:合并次要概念(目前来自TME),主概念(Smartlogic概念)覆盖次要概念字段,别名合并去重

使用场景与适用范围

适用于需要实时处理和整合分布式存储(S3)中的概念数据,并同步到图数据库、搜索引擎及缓存系统的场景,特别适用于UPP中的概念数据管理与同步,确保概念数据在多系统间的一致性和时效性。

使用方法与配置说明

配置参数

该服务支持通过命令行选项或环境变量进行配置,主要参数如下:

命令行选项默认值环境变量描述
--app-system-code"aggregate-concept-transformer"$APP_SYSTEM_CODE应用的系统代码
--app-name"Aggregate Concept Transformer"$APP_NAME应用名称
--port"8080"$APP_PORT监听端口
--bucketRegion"eu-west-1"$BUCKET_REGIONS3桶所在的AWS区域
--sqsRegion""$SQS_REGIONSQS队列所在的AWS区域
--bucketName""$BUCKET_NAME读取概念的S3桶名称
--queueUrl""$QUEUE_URLSQS队列的URL
--messagesToProcess10$MAX_MESSAGES并发从队列读取和处理的最大消息数
--visibilityTimeout30$VISIBILITY_TIMEOUT消息初始响应后被后续请求忽略的时长(秒)
--waitTime20$WAIT_TIME等待队列消息的时长(秒),如有消息到达则提前返回
--neo4jWriterAddress"http://localhost:8080/"$NEO_WRITER_ADDRESSNeo4j概念写入器的地址
--varnishPurgerAddress"http://localhost:8080/"$VARNISH_PURGER_ADDRESSVarnish缓存清除应用的地址
--concordancesReaderAddress"http://localhost:8080/"$CONCORDANCES_RW_ADDRESS概念协调器的地址
--elasticsearchWriterAddress"http://localhost:8080/"$ES_WRITER_ADDRESSElasticsearch概念写入器的地址
--crossAccountRoleARN$CROSS_ACCOUNT_ARN跨账户角色的ARN
--kinesisStreamName""$KINESIS_STREAM_NAMEAWS Kinesis流名称
--kinesisRegion"eu-west-1"$KINESIS_REGIONKinesis流所在的AWS区域
--requestLoggingOntrue$REQUEST_LOGGING_ON是否记录HTTP请求
--logLevel"info"$LOG_LEVEL应用日志级别

AWS凭证配置

需正确配置AWS凭证,支持两种方式:

  1. 凭证文件:~/.aws/credentials
    [default]
    aws_access_key_id = AKID***
    aws_secret_access_key = MY-SECRET-KEY
    
  2. 环境变量:
    AWS_ACCESS_KEY_ID=AKID***
    AWS_SECRET_ACCESS_KEY=MY-SECRET-KEY
    

运行示例

Docker镜像可从Docker Hub获取:coco/aggregate-concept-transformer

使用Docker运行示例:

docker run -d \
  --name aggregate-concept-transformer \
  -p 8080:8080 \
  -e APP_PORT=8080 \
  -e BUCKET_REGION=eu-west-1 \
  -e SQS_REGION=eu-west-1 \
  -e BUCKET_NAME=my-concept-bucket \
  -e QUEUE_URL=[***] \
  -e NEO_WRITER_ADDRESS=[***] \
  -e ELASTICSEARCH_WRITER_ADDRESS=[***] \
  -e VARNISH_PURGER_ADDRESS=[***] \
  -e KINESIS_STREAM_NAME=my-kinesis-stream \
  -e AWS_ACCESS_KEY_ID=AKID*** \
  -e AWS_SECRET_ACCESS_KEY=MY-SECRET-KEY \
  coco/aggregate-concept-transformer

管理端点

  • 健康检查:http://localhost:8080/__health
  • 就绪检查:http://localhost:8080/__gtg(Good to go)
  • 构建信息:http://localhost:8080/__build-info

构建与部署

  • Docker镜像:合并到master分支后由Docker Hub自动构建,镜像地址:coco/aggregate-concept-transformer
  • CI/CD:由CircleCI提供持续集成,项目地址:aggregate-concept-transformer
  • 测试覆盖率:由Coveralls提供代码测试覆盖率报告,地址:aggregate-concept-transformer

文档资源

  • API文档:API Doc
  • 运行手册:Runbook
  • 应急指南:Panic Guide
查看更多 aggregate-concept-transformer 相关镜像 →
semitechnologies/transformers-inference logo
semitechnologies/transformers-inference
by Weaviate
认证
暂无描述
500K+ pulls
上次更新:5 天前
sslhep/servicex_func_adl_uproot_transformer logo
sslhep/servicex_func_adl_uproot_transformer
by University of Chicago
暂无描述
1M+ pulls
上次更新:1 个月前

常见问题

轩辕镜像免费版与专业版有什么区别?

免费版仅支持 Docker Hub 加速,不承诺可用性和速度;专业版支持更多镜像源,保证可用性和稳定速度,提供优先客服响应。

轩辕镜像免费版与专业版有分别支持哪些镜像?

免费版仅支持 docker.io;专业版支持 docker.io、gcr.io、ghcr.io、registry.k8s.io、nvcr.io、quay.io、mcr.microsoft.com、docker.elastic.co 等。

流量耗尽错误提示

当返回 402 Payment Required 错误时,表示流量已耗尽,需要充值流量包以恢复服务。

410 错误问题

通常由 Docker 版本过低导致,需要升级到 20.x 或更高版本以支持 V2 协议。

manifest unknown 错误

先检查 Docker 版本,版本过低则升级;版本正常则验证镜像信息是否正确。

镜像拉取成功后,如何去掉轩辕镜像域名前缀?

使用 docker tag 命令为镜像打上新标签,去掉域名前缀,使镜像名称更简洁。

查看全部问题→

轩辕镜像下载加速使用手册

探索更多轩辕镜像的使用方法,找到最适合您系统的配置方式

🔐

登录方式进行 Docker 镜像下载加速教程

通过 Docker 登录方式配置轩辕镜像加速服务,包含7个详细步骤

🐧

Linux Docker 镜像下载加速教程

在 Linux 系统上配置轩辕镜像源,支持主流发行版

🖥️

Windows/Mac Docker 镜像下载加速教程

在 Docker Desktop 中配置轩辕镜像加速,适用于桌面系统

📦

Docker Compose 镜像下载加速教程

在 Docker Compose 中使用轩辕镜像加速,支持容器编排

📋

K8s containerd 镜像下载加速教程

在 k8s 中配置 containerd 使用轩辕镜像加速

🔧

宝塔面板 Docker 镜像下载加速教程

在宝塔面板中配置轩辕镜像加速,提升服务器管理效率

💾

群晖 NAS Docker 镜像下载加速教程

在 Synology 群晖NAS系统中配置轩辕镜像加速

🐂

飞牛fnOS Docker 镜像下载加速教程

在飞牛fnOS系统中配置轩辕镜像加速

📱

极空间 NAS Docker 镜像下载加速教程

在极空间NAS中配置轩辕镜像加速

⚡

爱快路由 ikuai Docker 镜像下载加速教程

在爱快ikuai系统中配置轩辕镜像加速

🔗

绿联 NAS Docker 镜像下载加速教程

在绿联NAS系统中配置轩辕镜像加速

🌐

威联通 NAS Docker 镜像下载加速教程

在威联通NAS系统中配置轩辕镜像加速

📦

Podman Docker 镜像下载加速教程

在 Podman 中配置轩辕镜像加速,支持多系统

📚

ghcr、Quay、nvcr、k8s、gcr 等仓库下载镜像加速教程

配置轩辕镜像加速9大主流镜像仓库,包含详细配置步骤

🚀

专属域名方式进行 Docker 镜像下载加速教程

无需登录即可使用轩辕镜像加速服务,更加便捷高效

需要其他帮助?请查看我们的 常见问题 或 官方QQ群: 13763429

商务:17300950906
|©2024-2025 源码跳动
商务合作电话:17300950906|Copyright © 2024-2025 杭州源码跳动科技有限公司. All rights reserved.