进阶 docs.flagger.app 2026-11-21 03:00:57 · 1 阅读

第26章 零停机部署

零停机部署

在高流量生产环境中,若希望最大限度降低滚动更新与缩容的影响,以下是你需要考虑的几个方面。

部署策略 限制滚动更新期间不可用 Pod 的数量: apiVersion: apps/v1 kind: Deployment spec: progressDeadlineSeconds: 120 strategy: type: RollingUpdate rollingUpdate: maxUnavailable: 0 Deployment 默认的进度截止时间是 10 分钟。建议你调整此数值,使部署过程在失败时能更快中断。

存活探针 应用需暴露一个 HTTP 端点,供 Kubernetes 调用,以判断应用是否进入了无法自愈的故障状态,需要重启。 livenessProbe: exec: command: - wget - --quiet - --tries=1 - --timeout=4 - --spider - http://localhost:8080/healthz timeoutSeconds: 5 initialDelaySeconds: 5 如果启用了 mTLS,存活探针和就绪探针必须使用 exec 方式,因为 kubelet 不属于服务网格的一部分,无法访问 TLS 证书。

就绪探针 应用需暴露一个 HTTP 端点,供 Kubernetes 调用,以判断应用是否已准备好接收流量。

若应用依赖外部服务,应在允许 Kubernetes 将流量路由到该应用实例前,先确认这些服务可用。注意,Envoy sidecar 的启动速度可能慢于应用本身,因此在应用启动初期,对外部连接的尝试应至少持续重试几秒钟。

优雅停机 在 Pod 被终止前,Kubernetes 会向所有容器发送 SIGTERM 信号,并等待一段指定时间(默认 30 秒),让容器能正常退出。若应用未处理 SIGTERM 信号,或未能在宽限期内退出,Kubernetes 将强制终止容器,应用正在处理的未决请求将会失败。

应用容器应配置 preStop 钩子来延迟容器关闭。这能确保在服务网格将流量引流完毕、并将该 Pod 从其他所有 Envoy sidecar 中移除之前,应用才停止服务。

延迟 Envoy 关闭 即使应用响应了 SIGTERM 并试图在关闭前完成未决请求,也不代表响应一定能传回调用方。如果 Envoy sidecar 先于应用关闭,调用方将收到 503 错误。

为缓解此问题,可以在 Istio 代理中添加 preStop 钩子,等待主应用退出后再让 Envoy 关闭。

你需要基于上述脚本自行构建包含此逻辑的 Envoy Docker 镜像,并在 Istio 注入 webhook 中添加 preStop 指令。

感谢 Stono 提供关于最大限度减少 503 错误的宝贵建议。

资源请求与限制 对于生产系统,为所有工作负载设置 CPU 和内存的请求值/限制值是强制步骤。没有限制,节点可能因内存耗尽或 CPU 过载而导致无法响应。若未设置 CPU 和内存请求值,Kubernetes 调度器将无法决定将 Pod 放置在哪些节点上。

注意:若未设置资源请求值,水平 Pod 自动伸缩器(HPA)无法判断何时进行扩缩容。

自动伸缩 生产环境应能在不影响服务质量的情况下应对流量峰值。这可以通过 Kubernetes 的自动伸缩功能实现。Kubernetes 的自动伸缩有两个维度:负责节点扩缩容的集群自动伸缩器(Cluster Autoscaler),以及自动调整 Deployment 中 Pod 数量的水平 Pod 自动伸缩器(HPA)。

上述 HPA 配置可确保应用在 Pod 达到 CPU 或内存限制前即完成扩容。

Ingress 重试 为减轻缩容操作的影响,可以利用 Envoy 的重试能力。

当 HPA 缩容应用时,用户可能会遇到 503 错误。上述配置将使 Envoy 对因网关错误而失败的 HTTP 请求进行重试。

上一篇:使用 KEDA ScaledObjects 进行金丝雀分析 下一篇:开发指南 最后更新于 3 年前

评论 (0)