razorpay/sqs-autoscaler-controller

SQS Autoscaler Controller

概述

SQS Autoscaler Controller是一个Kubernetes控制器，用于根据Amazon SQS队列的消息数量自动调整Deployments的Pod数量，实现基于队列负载的动态扩缩容，优化资源利用率。

核心功能与特性

• 队列驱动扩缩容：根据SQS队列消息数量自动调整Deployment的Pod数量
• 灵活配置：支持设置最小Pod数（minPods）和最大Pod数（maxPods）
• 自定义扩缩规则：可配置扩缩容触发阈值（threshold）和每次扩缩的Pod数量（amount）
• Kubernetes原生集成：通过自定义资源（Custom Resource）进行配置管理

使用场景

适用于需要根据异步任务队列（如SQS）负载动态调整计算资源的应用场景，例如：

• 消息处理服务
• 异步任务处理系统
• 需要应对流量波动的后台服务

使用方法与配置说明

1. 创建SqsAutoScaler自定义资源

创建YAML配置文件（如scaler.yaml），定义扩缩容规则：

yaml
apiVersion: aws.uswitch.com/v1
kind: SqsAutoScaler
metadata:
  name: testing-scaler  # 自定义资源名称
  namespace: myns       # 命名空间
spec:
  deployment: testapp   # 目标Deployment名称
  maxPods: 20           # 最大Pod数量
  minPods: 1            # 最小Pod数量
  queue: https://sqs.eu-west-1.amazonaws.com/1234567890/some-queue  # SQS队列URL
  scaleDown:
    amount: 2           # 每次缩容的Pod数量
    threshold: 10       # 缩容触发阈值（队列消息数低于此值时触发）
  scaleUp:
    amount: 5           # 每次扩容的Pod数量
    threshold: 100      # 扩容触发阈值（队列消息数高于此值时触发）

2. 应用配置

使用kubectl命令应用配置：

bash
kubectl apply -f scaler.yaml

3. 查看SqsAutoScaler资源

bash
kubectl get sqsautoscalers -n myns

配置参数说明