atlassian/escalator

Escalator

镜像概述和主要用途

Escalator是一个为Kubernetes优化的批处理或作业型水平自动扩缩器。它专为大型批处理或作业型工作负载设计，这些工作负载在集群需要缩容时无法被强制排空和移动——Escalator会确保节点上的Pod完成后再终止节点。同时，它针对快速扩展集群进行了优化，以确保Pod不会处于待处理状态。

核心功能和特性

• 计算请求和容量以确定是扩容、缩容还是保持当前规模
• 等待节点上的非守护进程集（non-daemonset）Pod完成后再终止节点
• 设计用于选定的自动扩展组，允许默认的https://github.com/kubernetes/autoscaler%E7%BB%A7%E7%BB%AD%E6%89%A9%E5%B1%95%E5%9F%BA%E4%BA%8E%E6%9C%8D%E5%8A%A1%E7%9A%84%E5%B7%A5%E4%BD%9C%E8%B4%9F%E8%BD%BD
• 自动优先终止最旧的节点
• 支持"松弛空间"（slack space），以确保在计划Pod激增时提供额外空间
• 不终止或考虑被封锁（cordoned）的节点——允许被封锁的节点保留用于调试
• 支持不同的云提供商——目前仅支持AWS
• 提供扩展和利用率指标
• 领导者选举，因此可以在集群内运行高可用（HA）部署
• 基本支持节点组中多种不同类型的实例

使用场景和适用范围

Escalator适用于以下场景：

• 运行大型批处理或作业型工作负载的Kubernetes集群
• 工作负载无法被强制排空，必须在节点终止前完成
• 需要快速扩容以避免Pod长时间处于待处理状态
• 需要与默认Kubernetes自动扩缩器配合使用，后者继续处理基于服务的工作负载
• 部署在AWS云环境中（目前仅支持AWS）

该自动扩缩器的需求源于处理非常大的批处理工作负载时的实践经验，默认自动扩缩器无法足够快地扩展集群，且这些工作负载不能被默认自动扩缩器强制排空，必须在节点终止前完成。

使用方法和配置说明

前提要求

• Kubernetes 版本1.24+。Escalator已在1.24+及更新版本上测试和部署，旧版本可能存在导致其无法正常运行的bug或问题。
• Go 版本1.20+（用于构建）
• 依赖项及其锁定版本可在go.mod和go.sum中找到

构建Docker镜像

bash
# 构建Docker镜像
docker build -t atlassian/escalator .

集群内部署

完整部署文档请参见部署文档。

创建RBAC配置

bash
kubectl create -f docs/deployment/escalator-rbac.yaml

创建配置映射

修改配置文件以适应您的需求，然后创建：

bash
kubectl create -f docs/deployment/escalator-cm.yaml

创建部署

bash
kubectl create -f docs/deployment/escalator-deployment.yaml

本地运行（集群外）

bash
go run cmd/main.go --kubeconfig=~/.kube/config --nodegroups=nodegroups_config.yaml

配置说明

详细配置说明请参见配置文档。配置主要通过节点组配置文件（nodegroups_config.yaml）和配置映射进行，包括设置松弛空间、节点组选择、云提供商配置等关键参数。

测试

bash
# 运行所有测试
make test

# 测试特定包（例如controller包）
go test ./pkg/controller

文档和设计

完整文档和设计请参见Docs。

许可证

Copyright (c) 2018 Atlassian and others. Apache 2.0 licensed, see LICENSE file.