第23章 使用 Flagger 实现 Kubernetes 蓝绿部署自动化
第 23 章:蓝绿部署
本指南介绍如何使用 Flagger 和 Kubernetes 实现蓝绿部署的自动化。
对于未部署在服务网格上的应用,Flagger 可以利用 Kubernetes L4 网络编排蓝绿风格的部署。如果使用服务网格,蓝绿部署的使用方式请参阅 此处。
Flagger 蓝绿部署阶段
前置条件
Flagger 需要 Kubernetes 集群版本为 1.16 或更高。
安装 Flagger 和 Prometheus 附加组件:
如果您的集群中已有正在运行的 Prometheus 实例,可以使用以下命令将 Flagger 指向 ClusterIP 服务:
可选地,您可以启用 Slack 通知:
引导
Flagger 接收一个 Kubernetes deployment,可选包括一个水平 Pod 自动缩放器(HPA),随后创建一系列对象(Kubernetes deployment 和 ClusterIP 服务)。这些对象在集群内部暴露应用程序,并驱动金丝雀分析和蓝绿晋升。
创建一个测试命名空间:
创建一个 deployment 和一个水平 Pod 自动缩放器:
部署负载测试服务,用于在分析期间生成流量:
创建一个金丝雀自定义资源:
上述配置将运行五分钟的 分析。
将上述资源保存为 podinfo-canary.yaml 并应用:
几秒钟后,Flagger 将创建金丝雀对象:
蓝绿场景
- 在引导阶段,Flagger 会创建三个 ClusterIP 服务(app-primary、app-canary、app)和一个名为 app-primary 的影子 deployment,代表蓝色版本
- 检测到新版本时,Flagger 会扩展绿色版本并运行一致性测试(测试应指向 app-canary ClusterIP 服务以到达绿色版本)
- 如果一致性测试通过,Flagger 将开始负载测试并通过自定义 Prometheus 查询进行验证
- 如果负载测试分析成功,Flagger 会将新版本晋升为 app-primary,并缩减绿色版本
自动蓝绿晋升
通过更新容器镜像来触发部署:
Flagger 检测到 deployment 修订版发生变化,并启动新的滚动更新:
请注意,如果在金丝雀分析期间对 deployment 应用新更改,Flagger 将重启分析。
可以使用以下命令监控所有金丝雀实例:
自动回滚
在分析过程中,您可以生成 HTTP 500 错误和高延迟来测试 Flagger 的回滚功能。
进入负载测试 Pod:
生成 HTTP 500 错误:
生成延迟:
当失败的检查次数达到分析阈值时,绿色版本将被缩减为零,且滚动更新标记为失败。
自定义指标
可以通过 Prometheus 查询扩展分析功能。由于演示应用已接入 Prometheus,您可以创建自定义检查,利用 HTTP 请求时长直方图来验证金丝雀(绿色版本)。
创建一个指标模板并将其应用于集群:
编辑金丝雀分析并添加以下指标:
上述配置通过检查 HTTP 404 请求每秒比率是否低于总流量的 5% 来验证金丝雀(绿色版本)。如果 404 比率达到 5% 的阈值,滚动更新将回滚。
通过更新容器镜像来触发部署:
生成 404 错误:
查看 Flagger 日志:
如果已配置告警,Flagger 将发送通知,说明金丝雀失败的原因。
使用 Helm 进行一致性测试
Flagger 附带一个测试服务,当配置为预滚动 webhook 时,可以运行 Helm 测试。
使用 tiller 服务账户在 kube-system 命名空间中部署 Helm 测试运行器:
部署完成后,Helm 测试器 API 将在 http://flagger-helmtester.kube-system/ 可用。
为您的 Chart 添加 Helm 测试预滚动挂钩:
当金丝雀分析开始时,Flagger 将调用预滚动 webhooks。如果 Helm 测试失败,Flagger 将重试,直到达到分析阈值并将金丝雀回滚为止。
如需深入了解分析过程,请阅读使用文档。
上一节:Apache APISIX 金丝雀部署 | 下一节:使用 Prometheus Operator 进行金丝雀分析
Last updated 1 year ago