罗罗编程学习记录
本页内容 展开查看

08.4.1.2 多环境发布与回滚

所属:全栈开发面试题库 / 08 云原生与 DevOps / 08.4 CI/CD 与可观测性 / 08.4.1 CI/CD 与可观测性

说明:发布策略与 YAML 片段为通用范式;具体平台(K8s Deployment、Ingress、服务网格等)字段以官方文档为准。

08.4.1.2-001 环境一般怎么分层?

一句话结论

常见分层为开发(dev)→ 测试(test/qa)→ 预发(staging)→ 生产(prod),逐层靠近真实环境,制品逐级晋升,越接近生产门禁越严。

概念解释

  • dev:开发自测。
  • test:功能/集成验证。
  • staging:近生产配置与数据快照。
  • prod:对外服务。

原理流程

  1. 同一制品在各环境晋升。
  2. 每层门禁通过才进入下一层。
  3. 生产发布需额外审批/策略。

代码 / 图示

dev ─→ test ─→ staging ─→ prod
门禁逐步加强;配置随环境切换,制品不变

常见误区

  • 误区:staging 只是另一个测试环境;正解:staging 应尽量贴近生产拓扑与配置,用于上线前验证。
  • 误区:所有环境连同一数据库;正解:环境数据应隔离,避免测试操作影响生产数据。

追问

  • Q:环境差异怎么管理? A:配置外置按环境加载,制品不变(见 08.4.1.1-003)。
  • Q:生产数据能进测试环境吗? A:需脱敏处理,避免敏感数据泄露。

08.4.1.2-002 发布前有哪些前置门禁?

一句话结论

前置门禁包括制品版本确认、测试与扫描结果通过、变更审批、配置与数据库迁移就绪、监控回滚方案确认;任一不满足不进入生产发布。

概念解释

  • 质量:测试/扫描达标。
  • 审批:变更授权。
  • 就绪:配置/迁移/监控/回滚准备。

原理流程

  1. 核对制品与质量记录。
  2. 完成审批与变更登记。
  3. 确认迁移、监控、回滚就绪后发布。

代码 / 图示

制品+测试+扫描通过 → 审批 → 配置/迁移就绪 → 监控/回滚确认 → 发布

常见误区

  • 误区:门禁只是走形式;正解:门禁是拦截高风险变更的控制点。
  • 误区:小改动可以跳过审批;正解:例外需登记并由授权人确认,不能默认豁免。

追问

  • Q:紧急热修复怎么过门禁? A:走简化但留痕的紧急流程,事后补齐评审与验证记录。
  • Q:门禁卡住发布怎么办? A:先解决阻断项,不在未确认风险下强行上线。

08.4.1.2-003 滚动发布(rolling update)是怎样的?

一句话结论

逐步用新版本替换旧版本实例,按最大不可用/最大扩容控制批次,新旧版本短暂共存;K8s Deployment 默认采用滚动更新策略。

概念解释

  • 逐步:分批替换 Pod。
  • 共存:新旧版本短暂并行。
  • 约束:maxUnavailable/maxSurge 控制批次。

原理流程

  1. 新副本逐步启动就绪。
  2. 旧副本逐步终止。
  3. 全部替换完成。

代码 / 示例

# K8s Deployment 滚动策略范式
strategy:
  type: RollingUpdate
  rollingUpdate:
    maxSurge: 1        # 超出期望副本数最多新增数量
    maxUnavailable: 0  # 滚动期间允许不可用数量

常见误区

  • 误区:滚动发布零风险;正解:新旧版本共存期间需兼容通信与数据格式,否则可能出问题。
  • 误区:滚动更新可以随时中断无损;正解:中途可能处于混合版本状态,需评估兼容性。

追问

  • Q:maxUnavailable=0 含义? A:滚动期间不减少可用副本,靠 maxSurge 先起新实例再摘旧实例。
  • Q:滚动卡住常见原因? A:新实例探针未就绪、资源不足或配置错误,观察 rollout 状态与事件。

08.4.1.2-004 蓝绿发布是怎样的?

一句话结论

同时维护新旧两套环境(蓝/绿),新版本在绿环境验证通过后一次性切流量到绿,旧蓝环境保留用于快速回滚;切换期间两套并行。

概念解释

  • 双环境:新旧各一套完整部署。
  • 切流:入口一次性切换。
  • 回滚:切回旧环境。

原理流程

  1. 部署新版本到备用环境。
  2. 验证通过后入口切流。
  3. 异常则切回旧环境。

代码 / 图示

蓝(旧版本) 承接流量 → 绿(新版本) 部署+验证
切流:流量 → 绿;异常 → 切回蓝

常见误区

  • 误区:蓝绿发布节省资源;正解:两套环境并行占用双倍资源,成本高于滚动。
  • 误区:蓝绿可以解决数据库不兼容问题;正解:两套环境共享数据库时,数据 schema 兼容问题依然存在。

追问

  • Q:蓝绿适合什么场景? A:要求快速整体切回、环境隔离要求高的发布。
  • Q:切流后旧环境何时下线? A:观察稳定后再回收,保留回滚窗口。

08.4.1.2-005 金丝雀(灰度)发布是怎样的?

一句话结论

先把少量流量切到新版本观察指标,无异常再逐步放大比例直至全量;用小流量验证降低大范围故障风险,可随时按比例回退。

概念解释

  • 小流量:先覆盖少量用户/实例。
  • 观察:错误率/延迟/业务指标。
  • 逐步:比例阶梯放大。

原理流程

  1. 新版本部署少量实例。
  2. 引流小比例并观察指标。
  3. 达标逐步放大,异常则缩小/回退。

代码 / 图示

新版本 5% 流量 → 观察指标 → 25% → 50% → 100%
任一步异常 → 流量切回旧版本

常见误区

  • 误区:金丝雀只是少起几个 Pod;正解:关键是按流量比例与观测指标逐步放量,而非单纯实例数。
  • 误区:灰度流量无业务差异;正解:需关注灰度样本是否覆盖关键业务路径。

追问

  • Q:灰度按什么维度切分? A:可按实例比例、用户分组、地域或请求头,按流量治理能力实现。
  • Q:灰度期间数据库写入怎么兼容? A:新旧版本共用库时 schema 与写入逻辑必须向后兼容。

08.4.1.2-006 灰度流量按哪些维度切分?

一句话结论

常见维度:实例/副本比例、用户标签或分组、地域/机房、请求头或 Cookie、业务流量类型;选择维度取决于业务可识别性与回退粒度要求。

概念解释

  • 比例:按权重分流。
  • 用户:特定人群先行。
  • 地域:按机房/地区灰度。

原理流程

  1. 选择可识别的分流维度。
  2. 入口/网关按规则路由到新旧版本。
  3. 观察各维度指标后调整比例。

代码 / 对照

维度 示例 适用
副本比例 1 个新副本 实例级灰度
用户分组 内部用户/白名单 定向验证
地域 单机房先行 区域级发布
请求头 灰度标识 精确路由

常见误区

  • 误区:所有灰度都按用户 Cookie;正解:无状态入口或内网调用可能按实例/标签分流。
  • 误区:灰度维度可以混用不记录;正解:分流规则需明确记录,便于复盘与回退定位。

追问

  • Q:服务网格如何支持灰度? A:按流量规则在网格层路由新旧版本,具体能力以网格产品为准。
  • Q:灰度样本不足怎么办? A:小流量阶段延长观察或扩大到代表性分组,避免结论失真。

08.4.1.2-007 审批与人工卡点在发布流程中起什么作用?

一句话结论

人工卡点在高风险环境(尤其生产)变更前要求授权确认,把技术门禁与组织责任结合;卡点记录审批人、时间与版本,便于审计追溯。

概念解释

  • 卡点:流程中断等待确认。
  • 授权:有权限人审批。
  • 留痕:审批记录可审计。

原理流程

  1. 技术门禁通过后暂停。
  2. 审批人核对变更内容与风险。
  3. 批准后继续发布,拒绝则中止。

代码 / 图示

测试/扫描通过 → [人工审批卡点] → 生产发布
记录:版本、变更说明、审批人、时间

常见误区

  • 误区:审批卡点可以由发布人自己批;正解:职责分离,审批人与执行人应按规范区分。
  • 误区:卡点越多越安全;正解:卡点过多拖慢交付,应按风险等级设置。

追问

  • Q:紧急发布如何处理卡点? A:保留快速审批通道,事后补全记录,不取消授权。
  • Q:审批看什么? A:变更范围、版本、风险与回滚方案。

08.4.1.2-008 回滚为什么优先回退镜像版本,而不是重新构建?

一句话结论

回滚是把部署切回已验证的历史不可变制品,速度快、结果确定;重新构建会引入新依赖与不确定因素,不适合作为紧急回滚手段。

概念解释

  • 制品回退:切回历史版本镜像。
  • 已验证:历史版本经过测试。
  • 快速:无需重新编译构建。

原理流程

  1. 定位上一稳定版本制品。
  2. 部署系统切回该版本。
  3. 验证服务恢复后再排查根因。

代码 / 图示

prod v1.4.2 异常 → 回滚到 v1.4.1(已验证制品)
不现场重新构建;根因另走修复流程

常见误区

  • 误区:回滚=重新编译旧代码;正解:优先部署历史制品,构建链路不参与紧急回退。
  • 误区:回滚后问题就结束;正解:回滚只是止损,仍需根因分析与修复。

追问

  • Q:回滚版本如何确定? A:从部署记录取最近稳定版本及其制品 digest。
  • Q:应用代码回退但数据库已变更怎么办? A:受 DB 迁移兼容性约束(见 08.4.1.2-009)。

08.4.1.2-009 数据库迁移与回滚为什么要兼容设计?

一句话结论

应用回滚可以切旧版本,但数据库 schema/数据已变不可逆;迁移需遵循向后兼容、分步演进,保证新旧版本共存期间数据格式可被双方读写。

概念解释

  • 不可逆:数据变更难以整体回退。
  • 兼容:新旧版本都能读写当前 schema。
  • 分步:扩字段 → 双写/迁移 → 清理。

原理流程

  1. 先做兼容式 schema 变更(加字段/可空列)。
  2. 应用版本过渡。
  3. 稳定后再清理旧结构。

代码 / 图示

兼容迁移:加列(可空) → 新版本写入 → 双读双写过渡 → 删除旧列
破坏性变更(改列类型/删列)需评估回滚代价

常见误区

  • 误区:数据库可以像镜像一样一键回退;正解:已提交的数据变更无法简单撤销。
  • 误区:先改库再发应用;正解:兼容顺序应先保证 schema 对旧版本可读,再推进应用切换。

追问

  • Q:什么是 expand-contract 模式? A:先扩展 schema 兼容新旧,再收缩清理旧结构,降低迁移风险。
  • Q:迁移脚本失败怎么办? A:在低峰执行、备份先行、脚本可重入,失败按预案处理(具体策略按数据库类型)。

08.4.1.2-010 配置与制品如何分离?

一句话结论

制品只含通用程序与默认配置,环境特定值通过环境变量、配置文件或配置中心在部署时注入;同一制品在不同环境不重新构建。

概念解释

  • 制品:程序与通用默认值。
  • 配置:环境差异外置。
  • 注入:部署阶段加载。

原理流程

  1. 构建不含环境密钥/地址。
  2. 部署时按环境注入配置。
  3. 配置变更单独发布,不动制品。

代码 / 图示

镜像/制品:程序代码 + 默认配置
环境配置:dev/staging/prod 变量或配置中心
部署:拉同一制品 + 注入对应配置

常见误区

  • 误区:把生产地址写死进镜像;正解:环境特定配置外置,避免镜像跨环境不可用。
  • 误区:配置变更也要重新构建制品;正解:配置独立发布,制品保持不可变。

追问

  • Q:配置变更需要门禁吗? A:需要,配置错误同样会导致故障,关键配置变更应评审与审计。
  • Q:敏感配置怎么放? A:走 Secret/配置中心加密存储,不进镜像与源码。

08.4.1.2-011 GitOps 是什么基本思路?

一句话结论

GitOps 把集群期望状态记录在 Git 仓库,由集群侧 Operator 持续同步仓库配置到实际状态;变更通过提交 Git 完成,具备版本记录、审计与自动收敛能力。

概念解释

  • 期望状态:Git 中声明配置。
  • 同步:Agent 拉取并对齐集群。
  • 审计:Git 历史即变更记录。

原理流程

  1. 制品版本更新写入 Git 配置。
  2. 合并后同步组件检测差异。
  3. 把集群状态对齐到 Git 声明。

代码 / 图示

镜像新版本 → 更新 Git 仓库(清单) → 同步 Agent → 集群应用新版本
回滚 = Git 回退提交 → 同步回旧版本

常见误区

  • 误区:GitOps 就是用 Git 存部署脚本;正解:核心是声明式期望状态 + 集群侧持续收敛。
  • 误区:GitOps 取代 CI;正解:CI 仍负责构建制品,GitOps 管集群部署状态。

追问

  • Q:GitOps 回滚怎么做? A:回退 Git 提交或恢复历史版本清单,由同步组件应用。
  • Q:直连集群推送与 GitOps 区别? A:GitOps 以 Git 为唯一变更来源,变更有记录且可审计。

08.4.1.2-012 发布窗口与变更冻结如何安排?

一句话结论

高风险变更安排在约定发布窗口,业务高峰/节假日设置冻结期;窗口与冻结规则按业务风险制定,紧急修复走例外流程并留痕。

概念解释

  • 窗口:允许变更的时段。
  • 冻结:禁止非紧急变更。
  • 例外:紧急修复审批放行。

原理流程

  1. 按业务日历确定窗口。
  2. 常规变更在窗口内执行。
  3. 冻结期仅紧急变更经审批例外。

代码 / 图示

常规发布 → 发布窗口
高峰/节假日 → 变更冻结
紧急故障修复 → 例外审批 + 事后记录

常见误区

  • 误区:冻结期什么都不能动;正解:阻断故障扩散的紧急修复可例外,但需授权留痕。
  • 误区:窗口内可以堆积大量变更;正解:窗口变更仍需控制批量,避免风险叠加。

追问

  • Q:为什么避免高峰发布? A:高峰故障影响面大、回滚成本高,窗口选择降低业务冲击。
  • Q:冻结期前要准备什么? A:冻结前完成计划内变更,冻结期间冻结非必要改动。

08.4.1.2-013 特性开关(feature flag)解决什么问题?

一句话结论

开关把代码上线与功能启用解耦:代码可随版本发布到线上,通过开关控制功能对哪些用户生效;可快速关闭功能而不必回滚整个版本。

概念解释

  • 解耦:部署与启用分开。
  • 灰度:按用户/比例开功能。
  • 急停:开关关闭止损。

原理流程

  1. 代码带开关上线,默认关闭。
  2. 逐步打开灰度验证。
  3. 异常时关闭开关,无需回滚制品。

代码 / 图示

代码已发布,feature=new-checkout 开关=off
灰度 → on(白名单) → on(全量)
异常 → 关闭开关,功能下线,版本保留

常见误区

  • 误区:开关可以无限期保留;正解:稳定后应清理死开关,避免分支逻辑堆积。
  • 误区:开关替代灰度发布策略;正解:开关是功能级控制,流量发布策略仍需部署侧配合。

追问

  • Q:开关配置存哪里? A:配置中心/远程开关服务,可动态更新,具体实现按方案。
  • Q:开关本身故障怎么办? A:需评估开关读取失败的默认行为(安全默认值)。

08.4.1.2-014 多服务发布顺序怎么协调?

一句话结论

有依赖的服务按兼容顺序发布:先向后兼容的下游/接口提供方,再上游调用方;接口变更需保持兼容期,避免上下游版本错配导致调用失败。

概念解释

  • 兼容顺序:先提供方后调用方。
  • 兼容期:新旧接口并存。
  • 错配:版本组合不兼容。

原理流程

  1. 梳理服务依赖关系。
  2. 先发布兼容的下游。
  3. 再发布上游,观察调用指标。

代码 / 图示

接口新增字段(兼容) → 下游先上 → 上游再上
破坏性接口变更 → 需版本并存/网关过渡

常见误区

  • 误区:所有服务同一时间一起发;正解:有依赖的服务需按顺序与兼容窗口推进。
  • 误区:上游可以先于下游用新接口;正解:下游未就绪会导致调用失败。

追问

  • Q:契约测试起什么作用? A:在发布前验证上下游接口兼容,减少错配风险。
  • Q:分布式事务相关变更怎么发? A:需单独评估数据一致性与回滚策略,不能简单套用普通发布。

08.4.1.2-015 回滚的触发条件有哪些?

一句话结论

触发条件包括错误率/延迟超阈值、关键业务指标下跌、探针持续失败、发布后健康检查不通过;达到预设判据即自动或人工回滚,不等完全故障。

概念解释

  • 指标:错误率、延迟、饱和度。
  • 业务:核心交易指标。
  • 判据:预设阈值自动触发。

原理流程

  1. 发布后持续观测关键指标。
  2. 超阈值判定异常。
  3. 按预案回滚或缩小灰度。

代码 / 对照

信号 触发方向
错误率 突增超阈值
延迟 P99 超基线
探针/可用性 持续不健康
业务指标 核心指标下跌

常见误区

  • 误区:回滚等用户投诉后再做;正解:应基于监控指标在早期触发止损。
  • 误区:所有异常都回滚;正解:先区分环境/外部依赖问题,避免误回滚掩盖其他根因。

追问

  • Q:自动回滚条件怎么定? A:基于历史基线设阈值与持续时间,避免瞬时抖动误触发。
  • Q:回滚后还观察什么? A:确认指标恢复基线,保留现场供根因分析。

08.4.1.2-016 发布后要做哪些验证?

一句话结论

发布后做冒烟验证:关键链路请求成功、探针健康、核心业务指标正常、日志/追踪无新增错误;验证通过再继续放量或观察收尾。

概念解释

  • 冒烟:最小关键路径。
  • 健康:探针与实例状态。
  • 指标:业务与技术指标核对。

原理流程

  1. 发布后跑关键接口/页面冒烟。
  2. 核对实例健康与错误/延迟指标。
  3. 检查日志与追踪异常。

代码 / 图示

发布 → 冒烟请求 → 探针/指标核对 → 日志/追踪检查
通过 → 继续放量;异常 → 回滚/回退

常见误区

  • 误区:实例启动成功就算发布完成;正解:需业务验证与观测指标确认。
  • 误区:冒烟只测健康检查接口;正解:应覆盖核心业务路径。

追问

  • Q:验证自动化怎么做? A:流水线/部署后自动跑冒烟用例并核对指标。
  • Q:灰度阶段验证什么? A:小流量下错误率、延迟与业务转化,再决定放量。

08.4.1.2-017 回滚失败时有什么兜底手段?

一句话结论

回滚失败时兜底包括:保留旧版本环境/实例、开关关闭异常功能、流量摘除异常实例、保留数据与现场待人工处置;提前准备兜底方案避免回滚路径失效。

概念解释

  • 保留旧版:蓝绿/未回收实例。
  • 开关:功能级急停。
  • 摘流:流量切走异常实例。

原理流程

  1. 镜像回退失败。
  2. 切备用环境/旧实例或关开关。
  3. 摘流止血后人工处置。

代码 / 图示

回滚失败 → 旧环境/实例保留? → 切流/关开关/摘实例
→ 保现场 → 人工恢复方案

常见误区

  • 误区:回滚一定能成功;正解:配置/数据/依赖问题可能导致旧版本也起不来,需准备兜底。
  • 误区:兜底方案临场想;正解:高危发布前应确认回滚与兜底路径可行。

追问

  • Q:为什么回滚前要保留旧版本资源? A:给回退与兜底留空间,全量替换后无旧环境可切。
  • Q:数据层回滚不了怎么办? A:以兼容迁移与备份为前提,最坏情况按数据恢复预案处置。

08.4.1.2-018 发布策略怎么按业务风险选择?

一句话结论

低风险改动可用滚动;要求快速整体切回用蓝绿;不确定新版本表现用金丝雀逐步放量;关键是策略与监控、回滚预案配套,而不是单独选发布方式。

概念解释

  • 风险:变更影响面与不确定性。
  • 策略:滚动/蓝绿/灰度。
  • 配套:观测与回滚保障。

原理流程

  1. 评估变更风险与兼容度。
  2. 匹配发布策略。
  3. 配套监控阈值与回滚预案。

代码 / 对照

场景 倾向策略
常规小版本、兼容良好 滚动发布
需整体切换与快速回退 蓝绿发布
新版本不确定性高 金丝雀灰度
功能级可控 特性开关配合

常见误区

  • 误区:金丝雀是最安全的万能方案;正解:灰度也需流量样本与观测支撑,资源与周期成本更高。
  • 误区:选了策略就万事大吉;正解:监控、门禁与回滚预案才是风险控制关键。

追问

  • Q:策略选择要考虑资源成本吗? A:要,蓝绿/灰度占用额外实例与流量治理成本。
  • Q:新旧版本兼容不确认时先发什么? A:先做兼容验证,未确认兼容前不推进全量发布。