第18章 使用 Gloo 实现金丝雀部署
第18章 Gloo 金丝雀部署
本指南演示如何使用 Gloo Edge ingress 控制器和 Flagger 来自动化金丝雀发布和 A/B 测试。
Flagger Gloo Ingress 控制器
先决条件
Flagger 需要 Kubernetes 集群版本为 v1.16 或更高,以及 Gloo Edge ingress 版本为 1.6.0 或更高。本指南基于 Flagger 1.6.0 或更高版本编写。旧版 Flagger 使用 Gloo UpstreamGroups 处理金丝雀部署,而新版 Flagger 使用 Gloo RouteTables 来处理金丝雀部署及 A/B 测试。
使用 Helm v3 安装 Gloo:
在与 Gloo 相同的命名空间中安装 Flagger 和 Prometheus 插件:
引导(Bootstrap)
Flagger 接收一个 Kubernetes Deployment,可选地接受一个水平 Pod 自动扩缩容器(HPA),随后创建一系列对象(包括 Kubernetes deployments、ClusterIP services、Gloo route tables 和 upstreams)。这些对象负责将应用暴露在集群外部,并驱动金丝雀分析和晋级过程。
创建一个测试命名空间:
创建一个 deployment 和一个水平 Pod 自动扩缩容器:
部署负载测试服务以在金丝雀分析期间生成流量:
创建一个 virtual service 定义,引用将由 Flagger 生成的 route table(请将 app.example.com 替换为您自己的域名):
将上述资源保存为 podinfo-virtualservice.yaml 并应用:
创建一个 canary 自定义资源(请将 app.example.com 替换为您自己的域名):
注意:当使用 upstreamRef 时,以下字段会从原始 upstream 复制过来:Labels、SslConfig、CircuitBreakers、ConnectionConfig、UseHttp2、InitialStreamWindowSize。
将上述资源保存为 podinfo-canary.yaml 并应用:
几秒钟后,Flagger 将创建金丝雀对象:
引导完成后,Flagger 将把金丝雀状态设为 initialized:
自动金丝雀晋级
Flagger 实现了一个控制循环,在衡量关键绩效指标(如 HTTP 请求成功率、请求平均持续时间和 Pod 健康状况)的同时,逐渐将流量切换到金丝雀版本。根据对这些 KPI 的分析结果,金丝雀版本会被晋级或中止,分析结果会发布到 Slack。
Flagger 金丝雀阶段
通过更新容器镜像来触发金丝雀部署:
Flagger 检测到 deployment 修订版发生变化,并启动新的发布流程:
请注意,如果在金丝雀分析期间对 deployment 应用了新变更,Flagger 将重新分析。
你可以使用以下命令监控所有金丝雀部署:
自动回滚
在金丝雀分析期间,你可以生成 HTTP 500 错误和高延迟,以测试 Flagger 是否暂停并回滚故障版本。
触发另一个金丝雀部署:
生成 HTTP 500 错误:
生成高延迟:
当失败检查次数达到金丝雀分析阈值时,流量将路由回主要版本,金丝雀版本缩容至零,且发布标记为失败。
自定义指标
可以通过 Prometheus 查询扩展金丝雀分析。演示应用已集成 Prometheus,你可以创建一个自定义检查,利用 HTTP 请求持续时间直方图来验证金丝雀版本。
创建一个指标模板并应用于集群:
编辑金丝雀分析,添加以下指标:
上述配置通过检查 HTTP 404 req/sec 百分比是否低于总流量的 5% 来验证金丝雀版本。如果 404 率达到 5% 阈值,则视为金丝雀失败。
通过更新容器镜像触发金丝雀部署:
生成 404 错误:
监控 Flagger 日志:
如果配置了警报,Flagger 将发送通知,说明金丝雀失败的原因。
A/B 测试
除了加权路由外,Flagger 还可以配置根据 HTTP 匹配条件将流量路由到金丝雀版本。在 A/B 测试场景中,你将使用 HTTP 头或 cookies 来针对特定用户群体。这对于需要会话粘性的前端应用特别有用。
Flagger A/B 测试阶段
编辑金丝雀分析,移除 max/step 权重,并添加 match 条件和 iterations:
上述配置将运行十分钟的分析,针对带有 X-Canary: insider 头的用户。
通过更新容器镜像触发金丝雀部署:
Flagger 检测到 deployment 修订版发生变化,并启动 A/B 测试:
Web 浏览器 user agent 头允许基于设备或操作系统进行用户细分。例如,如果你希望将所有移动用户路由到金丝雀实例:
或者如果你想仅针对 Android 用户:
或者特定浏览器版本:
如需深入了解分析过程,请阅读使用文档。
上一篇:Contour 金丝雀部署 | 下一篇:NGINX 金丝雀部署
最后更新于 3 年前