罗罗编程学习记录
本页内容 展开查看

11.1.1.4 异步与一致性方案

所属:全栈开发面试题库 / 11 跨领域综合场景题 / 11.1 全链路设计 / 11.1.1 全链路设计

11.1.1.4-001 同步调用和异步调用怎么选型?

一句话结论

需要立即拿到结果、强一致或短链路确认时用同步;耗时旁路动作、削峰填谷、跨服务解耦与最终一致场景用异步;同步链路只保留必须等待的环节,其余旁路异步化。

概念解释

  • 同步:调用方阻塞等待返回,链路简单但耦合与耗时叠加。
  • 异步:发消息后立即返回,消费方后续处理,削峰解耦但有一致性窗口。
  • 判断:结果是否必须本次请求返回。

原理流程

  1. 列出链路各环节是否依赖本次结果。
  2. 必须等待的环节走同步。
  3. 旁路动作改消息异步。
  4. 异步环节配重试、幂等与监控。

代码或图示

同步:校验 → 落库 → 支付确认(必须本次成功)
异步:订单成功 → MQ → 积分/通知/统计(稍后完成)

常见误区

  • 所有下游都同步调用:RT 叠加、故障级联。
  • 关键确认也异步化:用户拿不到明确结果,体验与风险不可控。

追问

  • 异步怎么告知用户结果?答:状态轮询、推送通知或结果回调,结合业务选择。
  • 异步故障怎么发现?答:监控消息积压、消费成功率与业务状态超时。

11.1.1.4-002 消息队列在链路中承担什么角色?

一句话结论

MQ 承担异步解耦、削峰填谷、异步通知与事件流转;把突发流量缓冲到队列,消费方按能力处理,同时隔离上下游故障;但引入最终一致、顺序与积压等需要治理的问题。

概念解释

  • 解耦:生产方不认识消费方。
  • 削峰:队列缓冲瞬时流量。
  • 事件:业务状态变更广播给多方。

原理流程

  1. 识别需要异步缓冲与广播的环节。
  2. 主题/队列按业务域划分。
  3. 生产投递、消费处理并监控积压。
  4. 失败重试与死信兜底。

代码或图示

订单服务 → MQ(订单主题)→ 积分服务 / 通知服务 / 统计服务
高峰写入缓冲 → 消费方按自身 TPS 拉取

常见误区

  • 用 MQ 当 RPC 同步调用:违背异步初衷,增加复杂度。
  • 主题粒度混乱:多业务混杂,难以治理。

追问

  • MQ 怎么削峰?答:生产速率高于消费能力时消息在队列堆积,消费匀速处理,保护下游。
  • 队列积压有上限吗?答:有,需监控积压量与消费速率,超限扩容或限流生产。

11.1.1.4-003 最终一致性怎么理解?

一句话结论

最终一致性指数据不保证时刻一致,但经过短暂异步窗口后收敛到一致状态;通过消息、重试、幂等与对账保证收敛,容忍短暂不一致的场景(通知、统计、积分)适用,错账交易不适用。

概念解释

  • 一致性窗口:异步传播与处理的短暂时间。
  • 收敛:无新变更后各方状态一致。
  • 手段:可靠投递、幂等、补偿、对账。

原理流程

  1. 明确业务可容忍的不一致窗口。
  2. 事件驱动后续状态更新。
  3. 失败重试与补偿推动收敛。
  4. 对账发现并修复残留差异。

代码或图示

T0 主库提交 → T1 消息投递 → T2 消费方更新
窗口内:各方短暂不一致
收敛后:订单/积分/通知状态一致

常见误区

  • 把最终一致用于资金扣减:错账风险不可接受,核心账务需强一致。
  • 只发消息不做对账:消息丢失或消费失败后状态永久不一致。

追问

  • 最终一致怎么验证收敛?答:定时对账比对源与目标,差异告警补偿;监控状态超时未收敛。
  • 一致性窗口多长算合理?答:按业务容忍度定,秒级到分钟级不等,关键链路尽量缩短。

11.1.1.4-004 本地消息表(Outbox)怎么保证不丢消息?

一句话结论

本地消息表把业务数据与待发消息在同一本地事务写入,事务提交后异步投递消息队列;避免“先写库再发 MQ”中途失败丢消息,投递成功后标记消息状态,失败重试。

概念解释

  • 同事务:业务记录与消息记录原子写入。
  • 投递:后台任务扫描待发消息投递 MQ。
  • 标记:投递成功更新状态,失败重试。

原理流程

  1. 业务事务内写主记录与 Outbox 消息行。
  2. 事务提交后调度器扫描待发消息。
  3. 投递 MQ 成功则标记完成。
  4. 失败按退避重试,超限告警。

代码或图示

本地事务:写订单 + 写 outbox(状态=待发)
后台任务:扫描待发 → 投递 MQ → 标记已发
失败:重试退避;死信/人工介入

常见误区

  • 事务提交后直接发 MQ 无持久化:进程崩溃消息丢失。
  • 消息表无清理:已发消息长期堆积。

追问

  • Outbox 和事务消息区别?答:本地消息表应用侧实现、依赖数据库;事务消息由 MQ 中间件提供半消息机制,具体能力按中间件版本确认。
  • 消息重复投递怎么办?答:消费端幂等,消息表记录投递状态防重。

11.1.1.4-005 消息可靠投递覆盖哪些环节?

一句话结论

可靠投递覆盖生产确认、消息持久化、消费确认与失败重试:生产方收到 broker 确认,消息落盘,消费方处理成功再 ack;各环节失败可重试与追踪,避免消息静默丢失。

概念解释

  • 生产:发送确认与重试。
  • 存储:消息持久化副本。
  • 消费:处理成功才确认,失败重投。

原理流程

  1. 生产方等待投递确认,失败重试。
  2. broker 持久化并复制消息。
  3. 消费方处理完成后 ack。
  4. 未 ack 消息重投,超限进死信。

代码或图示

生产 → 确认写入 → 持久化副本 → 推送消费
消费处理成功 → ack;失败/nack → 重投
多次失败 → 死信队列 → 人工/补偿处理

常见误区

  • 发完即忘不确认:消息可能未到达 broker。
  • 消费未处理完就 ack:崩溃后消息丢失。

追问

  • 消息会重复吗?答:会,重试与重投可能重复投递,消费端必须幂等。
  • 怎么追踪消息链路?答:消息带业务标识与 traceId,生产/消费日志可串联。

11.1.1.4-006 消费端怎么做幂等?

一句话结论

幂等保证重复消费同一消息结果一致:用业务唯一键/消息 ID 去重,结合状态机与唯一约束;消费前检查是否已处理,已处理直接返回成功,避免重复扣款、重复发通知。

概念解释

  • 去重键:消息 ID 或业务唯一标识。
  • 状态约束:状态迁移防重复进入。
  • 记录:已处理消息落库或去重表。

原理流程

  1. 消息携带唯一业务标识。
  2. 消费前查去重记录/状态。
  3. 已处理直接 ack 返回。
  4. 未处理执行业务并记录去重。

代码或图示

消费消息(orderNo, event)
→ 查去重表/订单状态
→ 已处理:ack 跳过
→ 未处理:执行业务 + 记录去重 + ack

常见误区

  • 幂等只靠数据库唯一约束:跨表组合操作需业务状态判断配合。
  • 去重记录不清理:长期占用存储。

追问

  • 幂等和事务怎么配合?答:业务写入与去重记录同事务提交,避免处理成功但去重未记录。
  • 重复消息延迟到达怎么办?答:按业务状态判断,已终态则忽略重复事件。

11.1.1.4-007 消息顺序性怎么保证?

一句话结论

需要顺序的消息按同一业务键(订单号/用户 ID)路由到同一队列/分区,单分区内有序消费;并发消费按键串行,跨键不保证全局顺序;顺序消费失败需阻塞后续消息。

概念解释

  • 顺序范围:同一业务实体内有序。
  • 路由:相同键落同一分区。
  • 消费:分区内单线程或按键串行。

原理流程

  1. 确定需要顺序的业务实体。
  2. 消息按实体键哈希路由分区。
  3. 分区内顺序消费,失败阻塞重试。
  4. 跨实体消息不要求全局有序。

代码或图示

orderNo=A → 分区 1(创建 → 支付 → 发货 顺序消费)
orderNo=B → 分区 2
分区内单线程消费;处理失败不跳过后续消息

常见误区

  • 要求全局顺序:牺牲并发吞吐,通常无必要。
  • 多分区并发消费同键消息:顺序被打乱。

追问

  • 顺序消费卡住怎么办?答:失败重试到上限后进死信,避免阻塞整分区;异常消息隔离后恢复后续。
  • 顺序和并发怎么平衡?答:按业务键分区,键内有序、键间并发。

11.1.1.4-008 消息积压怎么处理?

一句话结论

积压先看生产速率与消费速率差、消费是否异常(慢处理、依赖故障、死循环);临时扩容消费者、批量消费、跳过非核心消息;长期优化消费逻辑与下游能力,监控积压量与滞留时间。

概念解释

  • 成因:生产快于消费、消费故障、下游慢。
  • 临时:扩消费者、提批量、限流生产。
  • 长期:优化消费逻辑与依赖容量。

原理流程

  1. 监控积压量与消费速率趋势。
  2. 排查消费报错与下游依赖。
  3. 临时扩容/批量/降级非核心消息。
  4. 根治消费性能与下游瓶颈。

代码或图示

积压上升 → 查消费日志/报错 → 查下游 RT/限流
临时:扩消费者实例 → 批量拉取 → 非核心消息延后
根治:慢 SQL/慢调用优化 → 提升消费 TPS

常见误区

  • 盲目加消费者:下游数据库/接口成为新瓶颈。
  • 积压不告警:长时间滞留影响业务状态收敛。

追问

  • 消费很慢怎么定位?答:看消费耗时分布、慢 SQL、下游调用 RT 与线程池状态。
  • 积压消息过期了怎么办?答:按业务决定丢弃、补偿或重放,过期策略预先约定。

11.1.1.4-009 分布式事务方案有哪些?怎么对比?

一句话结论

常见方案:2PC 强一致但阻塞耦合,TCC 两阶段补偿侵入性强,Saga 长流程拆分补偿,本地消息表/Outbox 最终一致落地简单;按一致性要求、流程长度与团队能力选择,互联网多数链路用最终一致 + 补偿对账。

概念解释

  • 2PC:协调者统一提交/回滚,同步阻塞。
  • TCC:Try 预留、Confirm 确认、Cancel 释放。
  • Saga:一系列本地事务 + 逆向补偿。
  • 消息最终一致:Outbox + 幂等消费。

原理流程

  1. 判断链路是否必须强一致。
  2. 短强一致评估 TCC/事务消息。
  3. 长流程用 Saga 补偿。
  4. 旁路场景用本地消息表最终一致。

代码或图示

2PC:prepare → commit/rollback(阻塞、协调者单点)
TCC:Try 预留 → Confirm / Cancel 补偿
Saga:T1 → T2 → T3;失败反向 C2 → C1
Outbox:本地事务 + 消息 + 幂等消费 + 对账

常见误区

  • 跨服务追求 2PC 强一致:性能与可用性代价高,耦合中间件。
  • Saga 补偿不考虑幂等与空补偿:补偿重复或乱序出问题。

追问

  • TCC 空回滚/悬挂怎么处理?答:记录 Try 状态,未 Try 直接 Cancel 判空回滚,防悬挂需控制资源预留顺序。
  • Saga 适合什么场景?答:跨多个服务的长业务流程,每步有本地事务与可逆向补偿。

11.1.1.4-010 补偿事务怎么设计?

一句话结论

补偿为已执行步骤设计逆向操作(取消预占、释放库存、冲正记录),补偿必须幂等、可重试、处理空补偿与乱序;补偿失败进入人工介入,配合对账保证最终收敛。

概念解释

  • 逆向操作:回滚前一步已产生的效果。
  • 幂等:重复补偿结果一致。
  • 边界:空补偿、悬挂、乱序。

原理流程

  1. 正向步骤记录可补偿状态。
  2. 失败触发逆向补偿。
  3. 补偿幂等执行,失败重试。
  4. 超限告警,对账兜底。

代码或图示

正向:扣库存 → 扣款 → 发货
补偿:取消发货 → 退款 → 释放库存
补偿记录:步骤状态 + 补偿状态,防重复/空补偿

常见误区

  • 补偿操作不可重复执行:重复补偿产生二次冲正。
  • 补偿无超时监控:失败后长期悬挂。

追问

  • 补偿和回滚区别?答:本地事务回滚是数据库原子撤销;分布式补偿是业务逆向操作,可能部分已对外不可撤销。
  • 不可撤销步骤怎么办?答:事前识别,调整流程顺序或人工兜底,不假设都能逆向。

11.1.1.4-011 对账机制怎么设计?

一句话结论

对账定时比对源系统与目标系统数据(订单、账务、库存),按业务唯一键核对状态与金额,差异分类处理:补发、冲正、告警人工;对账是最终一致的兜底防线,需覆盖漏单、重复、状态不一致。

概念解释

  • 比对:键、状态、金额/数量一致性。
  • 差异分类:漏消费、重复、状态滞后、错账。
  • 处置:自动补偿 + 人工复核。

原理流程

  1. 定对账范围与唯一键。
  2. 定时拉取双方数据比对。
  3. 差异生成补偿任务。
  4. 复核残留差异并出报表。

代码或图示

定时任务 → 拉取订单/支付/积分记录
→ 按 orderNo 比对状态、金额
→ 差异分类:漏单补发 / 重复去重 / 状态滞后补偿
→ 残留差异告警人工处理

常见误区

  • 只对账总额:明细错配可能总额抵消,需按明细键核对。
  • 对账差异无闭环:发现问题不处理等于没对账。

追问

  • 对账周期怎么定?答:资金类高频实时/准实时,业务状态按天批量对账。
  • 对账数据量大怎么处理?答:分批按时间/键扫描,增量比对,避免全量拉取。

11.1.1.4-012 异步链路超时与兜底怎么设?

一句话结论

异步环节设超时、重试退避与积压上限;关键业务给状态超时监控,长时间未收敛触发补偿或告警;非核心旁路失败可降级延后,核心确认链路不能静默失败。

概念解释

  • 超时:下游调用与消息处理时限。
  • 重试:指数退避 + 次数上限。
  • 兜底:状态超时补偿、人工介入。

原理流程

  1. 各异步环节设超时与重试策略。
  2. 监控业务状态停留时长。
  3. 超时未收敛触发补偿/告警。
  4. 非核心动作降级延后执行。

代码或图示

消息消费:超时 → 退避重试 N 次 → 死信
订单状态:超过阈值未支付/未发货 → 告警 + 补偿
旁路通知:失败延后重发,不阻塞主流程

常见误区

  • 重试无上限:故障时放大下游压力。
  • 无状态超时监控:消息丢失后业务长期悬挂无人知。

追问

  • 重试为什么要退避?答:避免故障期间密集重试加剧下游雪崩,指数退避给恢复时间。
  • 异步结果怎么告知用户?答:状态轮询/推送,超时未完成明确提示并转人工。

11.1.1.4-013 事件驱动的解耦边界怎么划?

一句话结论

事件驱动按业务域划分主题与事件,事件只携带状态变更事实,不包含其他方决策逻辑;订阅方自主决定如何响应,避免事件接口被多方需求绑架导致膨胀。

概念解释

  • 主题:业务域事件流。
  • 事件:发生了什么事实。
  • 边界:生产方不感知消费方用途。

原理流程

  1. 按领域划事件主题。
  2. 定义事件 schema 与版本。
  3. 生产方发布事实事件。
  4. 订阅方独立消费与扩展。

代码或图示

订单主题:OrderCreated / OrderPaid / OrderShipped
事件体:orderNo、userId、金额、时间戳
消费方:积分服务、通知服务各自订阅,互不影响

常见误区

  • 事件体塞入消费方特有字段:事件被局部需求污染。
  • 生产方知道消费方处理细节:解耦被破坏。

追问

  • 事件需要回查吗?答:关键事件可溯源到业务记录,消息持久化保留周期按合规要求。
  • 事件 schema 怎么演进?答:字段只增不删、可选字段兼容读取,破坏性变更走新主题/版本。

11.1.1.4-014 延迟消息与定时任务怎么用?

一句话结论

延迟消息用于超时未支付取消、定时确认等延时触发场景;定时任务用于批量对账、归档、统计;两者注意幂等、并发控制与执行错过后的补偿,避免重复执行与堆积。

概念解释

  • 延迟消息:指定延迟时间投递。
  • 定时任务:周期或定点执行。
  • 防护:幂等、分片、错过补偿。

原理流程

  1. 场景判断用延迟消息还是周期任务。
  2. 任务执行幂等,避免重复副作用。
  3. 分片并发控制,错过可补跑。
  4. 监控执行成功与积压。

代码或图示

下单 → 延迟消息 30 分钟 → 检查未支付则取消
定时任务:每日对账 / 归档 / 统计聚合
任务记录:业务键 + 执行状态,防重复

常见误区

  • 定时任务多实例并发重复跑:需分布式锁或分片。
  • 延迟消息到期无兜底:消息丢失后超时动作不执行。

追问

  • 延迟消息堆积怎么处理?答:监控到期延迟,扩容消费,超时任务补偿扫描。
  • 定时任务错过执行怎么办?答:记录上次成功时间,启动时补跑遗漏周期,按幂等执行。

11.1.1.4-015 异步链路怎么控制并发与资源?

一句话结论

异步消费按下游容量控制并发度,线程池/消费者数设上限;批量消费平衡吞吐与单条延迟;防止慢消费占满线程,下游故障时限流隔离,资源水位纳入监控。

概念解释

  • 并发度:消费者/线程池大小。
  • 批量:一次拉取多条处理。
  • 隔离:故障消费者不拖垮全局。

原理流程

  1. 按下游能力定消费并发上限。
  2. 批量拉取提升吞吐。
  3. 线程池隔离不同主题消费。
  4. 监控线程池队列与拒绝策略。

代码或图示

主题 A 消费者池(独立)
主题 B 消费者池(独立)
批量拉取 N 条 → 批量处理 → ack
下游慢:限流 + 隔离,不占满全局线程

常见误区

  • 消费线程无上限:慢下游拖垮应用线程。
  • 不同主题共用线程池:一个慢主题阻塞全部消费。

追问

  • 消费并发怎么调?答:先压测单消费者 TPS,结合下游容量定实例与线程数。
  • 批量失败怎么处理?答:整批失败重投,或逐条标识成功/失败,避免全批重放。

11.1.1.4-016 一致性级别怎么按业务选?

一句话结论

资金、库存、权益等错账不可接受的环节用强一致;状态通知、统计、积分累计等可短暂滞后用最终一致;读己之写场景在短窗口内读主或等待同步;按业务错误成本选级别,不为全部链路追求强一致。

概念解释

  • 强一致:写入后任何读取立即看到最新值。
  • 最终一致:异步窗口后收敛。
  • 读己之写:用户写完立即读自己的数据。

原理流程

  1. 识别各环节错误成本。
  2. 高错账风险选强一致。
  3. 低风险旁路选最终一致。
  4. 写后读场景按策略读主/等待。

代码或图示

扣款/扣库存 → 强一致(本地事务/约束)
通知/统计/积分 → 最终一致
下单后立即看订单 → 读主库或等待复制

常见误区

  • 全部链路强一致:吞吐与可用性代价过高。
  • 核心账务走最终一致:出现错账难追回。

追问

  • 强一致一定用分布式事务吗?答:优先单库本地事务与约束;跨服务强一致才评估 TCC/事务消息。
  • 最终一致怎么向业务承诺?答:明确收敛窗口与兜底对账,SLA 中写明可接受滞后。

11.1.1.4-017 消息 Schema 怎么管理与兼容?

一句话结论

消息 schema 版本化管理,字段只增可选、不删不改类型,消费方按兼容规则读取;破坏性变更通过新主题/新版本过渡,生产者与消费者独立演进,避免老消费者读新消息报错。

概念解释

  • 兼容:新消息老消费者可读,老消息新消费者可读。
  • 版本:主题/字段带版本标识。
  • 演进:可选字段新增,废弃字段先停用再删。

原理流程

  1. 定义消息结构与字段约定。
  2. 新增字段设可选与默认值。
  3. 破坏性变更走新版本。
  4. 消费者忽略未知字段。

代码或图示

兼容新增:加可选字段 + 默认值
禁止:改字段类型、改语义、删除必填字段
演进:order.event.v1 → v2 过渡期双发

常见误区

  • 消息结构随临时需求乱改:历史消费者反序列化失败。
  • 消费者对未知字段报错:应忽略未识别字段。

追问

  • schema 存哪?答:代码契约类/注册表/契约仓库,随版本管理并评审。
  • 字段废弃流程?答:先停止生产写入,观察消费无依赖,再从 schema 移除。

11.1.1.4-018 下单到通知的跨服务链路怎么设计?

一句话结论

下单链路:校验与落库在本地事务完成,库存预扣与订单创建同事务或约束保证;支付成功发领域事件,库存扣减、积分、通知等旁路异步消费,各环节幂等、可对账;用户侧先得到下单结果,后续状态异步收敛并通知。

概念解释

  • 主链路:校验 → 建单 → 预扣库存 → 支付确认。
  • 旁路:积分、通知、统计异步处理。
  • 一致性:本地事务 + 事件 + 幂等 + 对账。

原理流程

  1. 入口校验幂等与参数权限。
  2. 本地事务写订单、预扣库存(唯一约束/条件更新)。
  3. 支付确认后发订单事件。
  4. 积分/通知/统计异步消费,失败重试,定时对账。

代码或图示

用户 → 下单接口
  → 校验/幂等 → 事务:订单 + 预扣库存
  → 支付(同步确认)
  → 事件:OrderPaid
      → 积分服务(幂等消费)
      → 通知服务(短信/推送)
      → 统计服务
  → 对账:订单/支付/积分状态核对

常见误区

  • 下单同步串联通知积分:主链路 RT 长、故障级联。
  • 库存预扣无超时释放:未支付长期占库存。

追问

  • 支付失败库存怎么处理?答:取消订单释放预扣,事件驱动回补库存。
  • 重复下单怎么防?答:业务唯一键 + 幂等标识,重复请求返回同一订单。