第25章 基于 KEDA ScaledObjects 的 Canary 分析实践
Canary 分析结合 KEDA ScaledObjects
本指南介绍如何在使用 Flagger 进行 Canary 分析期间,利用 KEDA ScaledObjects 对工作负载进行自动扩缩容。本教程以 Kubernetes provider 配合 Blue/Green 部署策略为例,但你也可以将任何部署策略与任何支持的 provider 组合使用。
前置要求
Flagger 需要 Kubernetes v1.16 或更高版本。本教程需要 KEDA 2.7.1 或更高版本。
安装 KEDA:
helm repo add kedacore https://kedacore.github.io/charts
kubectl create namespace keda
helm install keda kedacore/keda --namespace keda
安装 Flagger:
helm repo add flagger https://flagger.app
kubectl create namespace flagger
helm upgrade -i flagger flagger/flagger \
--namespace flagger \
--set prometheus.install=true \
--set meshProvider=kubernetes
Flagger 接受一个 Kubernetes Deployment 和一个指向该 Deployment 的 KEDA ScaledObject。随后它会创建一系列对象(Kubernetes Deployment、ClusterIP Service 以及另一个指向新建 Deployment 的 KEDA ScaledObject)。这些对象在 mesh 内部暴露应用,并驱动 Canary 分析和 Blue/Green 晋升过程。
创建测试命名空间:
创建名为 podinfo 的 Deployment:
部署负载测试服务,以便在分析期间产生流量:
创建一个 ScaledObject,目标为 podinfo Deployment,并指定 Prometheus 作为触发器:
为 podinfo Deployment 创建 Canary 自定义资源:
将上述资源保存为 podinfo-canary.yaml,然后应用它:
几秒后,Flagger 会创建 Canary 对象:
我们使用 .spec.autoscalerRef 来指代 Canary Deployment 的 ScaledObject。Flagger 将利用此引用生成一个新的 ScaledObject,用于对 Primary Deployment 进行扩缩容。默认情况下,Flagger 会尝试猜测 Primary ScaledObject 应使用的查询语句,方法是将所有触发器中对 .spec.targetRef.Name 和 {.spec.targetRef.Name}-canary 的引用替换为 {.spec.targetRef.Name}-primary。例如,如果你的 ScaledObject 中定义的触发器查询为 sum(rate(http_requests_total{ app="podinfo" }[30s])) 或 sum(rate(http_requests_total{ app="podinfo-primary" }[30s])),那么生成的 Primary ScaledObject 将具有相同的触发器,但查询定义为 sum(rate(http_requests_total{ app="podinfo-primary" }[30s]))。
如果生成的查询不满足你的需求,你可以使用 .spec.autoscalerRef.primaryScalerQueries 显式指定用于 Primary Deployment 自动扩缩容的查询,该字段允许你为每个触发器单独定义查询。请注意,你的 ScaledObject 中 .spec.triggers[@].name 不能为空,因为 Flagger 需要该名称来唯一标识每个触发器。
如果需要让 Canary 和 Primary Deployment 的 ScaledObject 使用不同的扩缩容副本配置,可以使用 .spec.autoscalerRef.primaryScalerReplicas 来覆盖生成的 Primary ScaledObject 中的这些值。
Bootstrap 完成后,podinfo Deployment 会被缩容到 0 副本,发往 podinfo.test 的流量会被路由到 Primary Pods。为了让 podinfo Deployment 保持在 0 副本状态并暂停自动扩缩容,Flagger 会在你的 ScaledObject 中添加一个注解:autoscaling.keda.sh/paused-replicas: 0。在 Canary 分析期间,该注解会被移除,以启用 podinfo Deployment 的自动扩缩容。地址 podinfo-canary.test 可直接指向 Canary Pods。当 Canary 分析开始时,Flagger 会在将流量路由到 Canary 之前调用 pre-rollout webhooks。Blue/Green 部署将执行五次迭代,每 15 秒验证一次 HTTP 指标和 rollout hooks。
自动 Blue/Green 晋升
通过更新容器镜像触发部署:
Flagger 检测到 Deployment 修订版发生变更,随即启动新的 rollout:
注意,如果在 Canary 分析过程中对 Deployment 应用了新的变更,Flagger 会重启分析。
你可以使用以下命令监控所有 canaries:
你可以使用以下命令监控 Deployment 的扩缩容情况:
你可以使用以下命令监控 Flagger 如何编辑 ScaledObject 的注解:
上一篇:Canary 分析结合 Prometheus Operator
下一篇:零停机部署
最后更新于 2 年前