罗罗编程学习记录
本页内容 展开查看

05.5.1.4 主从、哨兵与 Cluster 集群

所属:全栈开发面试题库 / 05 数据库与存储 / 05.5 NoSQL 与专用存储 / 05.5.1 Redis 与 KV 存储

覆盖范围

  • 主从复制:全量/增量同步、backlog、读写分离与延迟
  • Sentinel:监控、选举、故障转移与客户端发现
  • Cluster:槽位分片、Gossip、故障转移、扩缩容与多键限制
  • 脑裂与多数派、副本持久化、Lua 槽位约束、方案选型

高频题速览

编号 题目 难度 频率
05.5.1.4-001 全量/增量复制 进阶 ★★★★☆
05.5.1.4-003 主从延迟 进阶 ★★★★☆
05.5.1.4-004 Sentinel 职责 进阶 ★★★★☆
05.5.1.4-007 16384 槽位与 hash tag 高级 ★★★★★
05.5.1.4-008 Gossip 与故障转移 高级 ★★★☆☆
05.5.1.4-010 多键操作限制 进阶 ★★★★☆
05.5.1.4-013 脑裂与多数派 高级 ★★★★☆
05.5.1.4-017 哨兵 vs Cluster 选型 进阶 ★★★★☆

三层复制架构

主从(Replication):主写从读,异步复制
哨兵(Sentinel):在主从之上做监控、选主、故障转移
Cluster:数据按槽位分片到多主节点,每主带副本,水平扩展

05.5.1.4-001 主从复制的全量与增量是怎么进行的?

频率 ★★★★☆ | 难度 进阶

一句话结论

副本首次或断连较久做全量同步(主进程 RDB 快照 + 缓冲发给副本);断连短用 PSYNC 从复制 backlog 增量续传。

概念解释

  • 全量同步:主 fork 生成 RDB,发送给副本加载,期间写命令存缓冲后补发。
  • 增量同步:PSYNC 携带复制偏移量,主在 backlog 中找偏移之后的命令补发。
  • backlog:主节点环形缓冲,记录最近写命令与偏移。

原理流程

副本连接 → PSYNC <replid> <offset>
backlog 有该偏移 → 增量补发
无偏移/新主 → 全量:RDB + 缓冲命令

代码 / 命令

redis-cli INFO replication
redis-cli ROLE

常见误区

  • 误区:副本断线重连总能增量续传。正解:偏移已被 backlog 覆盖则只能全量。
  • 误区:全量同步不影响主库。正解:fork 快照与缓冲发送有 CPU/内存/网络开销。

追问

  • 问:backlog 大小怎么配?答:repl-backlog-size,按断线窗口内写入量估算。
  • 问:复制偏移量在哪看?答:INFO replication 的 master_repl_offset 与副本 slave_repl_offset。

05.5.1.4-002 主从拓扑与读写分离怎么安排?

频率 ★★★☆☆ | 难度 进阶

一句话结论

一主多从:主负责写,从承担读请求;复制异步,读到的数据可能滞后于主。

概念解释

  • 拓扑:一主多从,从可再挂从(级联)。
  • 读写分离:写路由主,读路由从。
  • 一致性代价:异步复制下从库有延迟。

原理流程

写 → 主 → 异步复制到从
读 → 按路由策略打从库(或主库)

代码 / 命令

redis-cli REPLICAOF <master-host> <port>
redis-cli INFO replication

常见误区

  • 误区:读从库能读到刚写入主库的数据。正解:异步延迟窗口内从库可能未更新。
  • 误区:从库越多复制越快。正解:主库向每个从推送,从多增加主库 IO/网络压力。

追问

  • 问:写后立即读打哪?答:强一致读打主,或容忍延迟再读从。
  • 问:级联复制好处?答:减轻主库复制压力,代价是末端延迟更大。

05.5.1.4-003 主从延迟由什么造成?怎么监控?

频率 ★★★★☆ | 难度 进阶

一句话结论

延迟来自主库写入压力、网络传输、副本单线程回放与慢命令;监控主从偏移差与复制滞后时间。

概念解释

  • 来源:主库并发写、网络 RTT、副本回放队列堆积、副本上慢命令阻塞。
  • 指标:主从复制偏移差、lag(哨兵/副本信息)。
  • 影响:读写分离读到旧值。

原理流程

主写 → backlog → 网络 → 副本回放
队列堆积/回放慢 → 偏移差扩大 → 延迟上升

代码 / 命令

redis-cli INFO replication
# 观察 master_repl_offset 与 slave_repl_offset 差值、lag

常见误区

  • 误区:延迟只由网络带宽决定。正解:副本回放能力与慢命令同样关键。
  • 误区:偏移差为 0 就完全无延迟。正解:偏移差反映队列,瞬时延迟还需结合时间戳判断。

追问

  • 问:大 key/慢命令怎么放大延迟?答:阻塞副本回放线程,后续命令排队。
  • 问:降低延迟手段?答:避免大 key、优化网络、监控回放队列、必要时扩副本。

05.5.1.4-004 Sentinel(哨兵)负责什么?

频率 ★★★★☆ | 难度 进阶

一句话结论

哨兵独立进程集群监控主从、判定主观/客观下线、选举领头哨兵、执行故障转移并通知客户端。

概念解释

  • 监控:心跳检测主从健康。
  • 判定:SDOWN 主观下线,多数哨兵确认后 ODOWN 客观下线。
  • 转移:选出新主,让其他从复制新主,通知客户端新地址。

原理流程

心跳失败 → 主观下线 → 哨兵间投票确认 → 客观下线
选举领头哨兵 → 选最优从提升为主 → 重配从与客户端

代码 / 命令

redis-cli -p 26379 SENTINEL masters
redis-cli -p 26379 SENTINEL master <name>

常见误区

  • 误区:哨兵就是一个监控进程。正解:哨兵自身是多节点仲裁集群,单哨兵无高可用意义。
  • 误区:哨兵直接参与数据复制。正解:它只做控制面决策,不转发业务流量。

追问

  • 问:哨兵怎么发现主从?答:配置主节点地址,自动发现其副本并持续监控。
  • 问:故障转移后旧主恢复怎么办?答:重配为新主的副本,不再自动回切(见 05.5.1.4-012)。

05.5.1.4-005 哨兵选举与 quorum 是什么?

频率 ★★★☆☆ | 难度 高级

一句话结论

客观下线需达到 quorum 个哨兵同意;领头哨兵选举采用 Raft 类多数派机制,由获得多数授权的哨兵执行转移。

概念解释

  • quorum:判定主客观下线所需的哨兵票数。
  • 领头选举:哨兵间互选,获多数支持成为执行者。
  • 故障转移授权:配置 failover-* 相关阈值控制节奏。

原理流程

主观下线 → 询问其他哨兵 → 达 quorum → 客观下线
选举领头 → 多数授权 → 执行提升副本

代码 / 命令

redis-cli -p 26379 SENTINEL config-get mymaster quorum

常见误区

  • 误区:quorum 等于哨兵总数。正解:quorum 是判定阈值,选举另需多数派。
  • 误区:两个哨兵就能可靠仲裁。正解:哨兵节点应奇数部署,多数派才能避免平票。

追问

  • 问:哨兵集群最少几个节点?答:建议 3 个及以上奇数节点,容忍单点故障。
  • 问:网络分区下哨兵怎么决策?答:多数派所在一侧才可完成转移。

05.5.1.4-006 客户端怎么发现当前主节点?

频率 ★★☆☆☆ | 难度 进阶

一句话结论

客户端连接哨兵查询主节点地址,订阅主节点切换通知;故障转移后哨兵推送新主地址,客户端重连。

概念解释

  • 查询:SENTINEL get-master-addr-by-name。
  • 订阅:监听 +switch-master 事件。
  • 路由:库内部维护当前主从连接。

原理流程

启动 → 问哨兵主地址 → 连主/从
主切换 → 哨兵推送事件 → 客户端刷新连接

代码 / 命令

redis-cli -p 26379 SENTINEL get-master-addr-by-name mymaster

常见误区

  • 误区:客户端把哨兵当代理转发命令。正解:哨兵只提供地址与事件,命令直连数据节点。
  • 误区:切换后旧连接自动无缝变新主。正解:客户端需按通知重连新主。

追问

  • 问:客户端缓存主地址过期怎么办?答:定期向哨兵刷新 + 订阅事件兜底。
  • 问:多哨兵返回不一致地址?答:以多数派与最新 +switch-master 为准。

05.5.1.4-007 Cluster 为什么是 16384 个槽位?hash tag 是什么?

频率 ★★★★★ | 难度 高级

一句话结论

Cluster 把 key 空间划分为 16384 个槽(slot),CRC16(key) mod 16384 定位节点;{tag} 让指定 key 落到同一槽以支持多键操作。

概念解释

  • 槽位:哈希槽分片,槽分配到主节点。
  • 路由:HASH_SLOT = CRC16(key) mod 16384。
  • hash tag:key 中 {...} 内部分参与哈希,如 user:{1001}:name 与 user:{1001}:addr 同槽。

原理流程

key → 取 {tag} 内容(或整 key)→ CRC16 → mod 16384 → 槽 → 节点

代码 / 命令

redis-cli CLUSTER KEYSLOT user:{1001}:name
redis-cli CLUSTER NODES

常见误区

  • 误区:槽位数量等于节点数。正解:16384 槽固定,按节点分片分配,可迁移。
  • 误区:多 key 只要前缀相同就同槽。正解:必须用 {hash tag} 指定参与哈希的部分。

追问

  • 问:为什么是 16384 而不是 2^32?答:心跳包携带槽位图,控制体积与节点规模权衡(官方设计取舍)。
  • 问:不带 tag 的相关 key 能做事务吗?答:跨槽 key 不能在同一事务/Lua 中处理。

05.5.1.4-008 Cluster 怎么通过 Gossip 做故障探测与转移?

频率 ★★★☆☆ | 难度 高级

一句话结论

节点间 Gossip 互发心跳交换状态;主节点投票判定故障副本/主节点,多数派同意后提升副本为新主。

概念解释

  • Gossip:节点定期互相 PING/PONG 携带集群状态。
  • 失败标记:节点 A 标记节点 P 疑似下线,传播给其他节点。
  • 投票:主节点间投票,多数同意后故障转移。

原理流程

心跳超时 → 标记 PFAIL → Gossip 传播 → 收集主节点投票
达多数 → 选副本提升 → 更新槽归属 → 集群恢复

代码 / 命令

redis-cli CLUSTER NODES
redis-cli CLUSTER INFO

常见误区

  • 误区:Cluster 靠外部哨兵监控故障。正解:集群内部主节点投票完成故障转移。
  • 误区:单个节点认为对方下线就转移。正解:需多数主节点投票同意。

追问

  • 问:副本什么时候优先被提升?答:按复制数据新程度与优先级等规则选最优副本。
  • 问:Gossip 状态多久收敛?答:取决于心跳周期与故障检测超时配置。

05.5.1.4-009 集群扩缩容与槽位迁移怎么做?

频率 ★★★☆☆ | 难度 高级

一句话结论

扩容加节点后把槽从旧节点迁移到新节点,逐槽迁移 key;缩容先把槽迁出再下线节点;客户端按槽路由重定向。

概念解释

  • 迁移单位:槽,槽内 key 逐个搬移。
  • 流程:标记槽迁移中 → 源节点 MOVESLOTS/逐 key MIGRATE → 目标接管。
  • 重定向:迁移期间访问未搬走 key 由源节点处理,已搬走返回 MOVED/ASK。

原理流程

新节点加入 → 分配槽 → 槽内 key 迁移 → 源删目标存 → 更新集群槽表

代码 / 命令

redis-cli CLUSTER NODES
redis-cli MIGRATE <host> <port> <key> <db> <timeout>
# 槽迁移通常由集群管理工具编排

常见误区

  • 误区:加节点后数据自动平均分散。正解:需显式迁移槽与 key。
  • 误区:迁移大 key 不影响在线服务。正解:大 key 阻塞迁移,应先拆分。

追问

  • 问:MOVED 与 ASK 区别?答:MOVED 槽已永久归属;ASK 临时指引本次访问迁移中 key。
  • 问:扩容后槽不均怎么调整?答:重新规划槽分配,再做均衡迁移。

05.5.1.4-010 Cluster 对多键操作有什么限制?

频率 ★★★★☆ | 难度 进阶

一句话结论

跨槽的多键命令、事务与 Lua 不能直接执行;相关 key 必须通过 hash tag 落到同一槽。

概念解释

  • 限制命令:MGET/MSET、多键 DEL、事务 MULTI/EXEC、Lua 涉及多 key。
  • 约束:所有 key 必须在同一 slot。
  • 解决:设计 hash tag 聚合相关 key。

原理流程

命令多 key → 计算各 key 槽
同槽:执行;跨槽:报错 CROSSSLOT

代码 / 命令

# 同 hash tag → 同槽,可多键
redis-cli MSET "user:{1}:name" "ann" "user:{1}:age" "30"

常见误区

  • 误区:Cluster 下 MGET 任意 key 都能用。正解:跨槽返回 CROSSSLOT,需客户端分片多次或同 tag 设计。
  • 误区:Lua 可以操作不同槽 key。正解:脚本内所有 key 必须同槽。

追问

  • 问:客户端怎么处理跨槽读?答:按槽拆分命令,分别访问对应节点再归并。
  • 问:设计期怎么规避?答:按业务实体用 tag 聚合,如 order:{oid}:items。

05.5.1.4-011 客户端分片与服务端分片有什么区别?

频率 ★★☆☆☆ | 难度 进阶

一句话结论

客户端分片由客户端按哈希选节点;服务端分片(Cluster)由集群维护槽表与迁移,客户端跟随重定向。

概念解释

  • 客户端分片:本地哈希规则选节点,扩缩容需迁移数据、客户端改规则。
  • 服务端分片:Cluster 维护槽→节点映射,在线迁移,客户端处理 MOVED/ASK。
  • 代理分片:中间层路由,客户端无感知。

原理流程

客户端分片:client hash → 直连节点
Cluster:client 查槽表 → 节点 → 重定向刷新槽表

代码 / 命令

redis-cli CLUSTER SLOTS

常见误区

  • 误区:客户端分片就是 Redis Cluster。正解:Cluster 是服务端槽位协议;客户端分片是独立方案。
  • 误区:服务端分片零迁移成本。正解:槽迁移仍有数据搬运与网络开销。

追问

  • 问:代理分片优缺点?答:客户端简单,代理层成为开销与单点,需集群化。
  • 问:扩缩容哪种方案最省事?答:服务端 Cluster 支持在线槽迁移,客户端分片需重哈希。

05.5.1.4-012 故障转移后旧主恢复会自动回切吗?

频率 ★★☆☆☆ | 难度 进阶

一句话结论

默认不会自动把旧主切回;旧主恢复后被重配为新主的副本,避免来回切换,是否回切由运维策略决定。

概念解释

  • 角色固化:新主提升后,旧主以副本身份加入。
  • 手动回切:确认旧主稳定后可再执行故障转移切回。
  • 目的:防止抖动节点反复抢主。

原理流程

旧主宕机 → 副本提升新主
旧主恢复 → REPLICAOF 新主 → 同步追赶

代码 / 命令

redis-cli ROLE
redis-cli INFO replication

常见误区

  • 误区:旧主一恢复就自动夺回主角色。正解:默认不回切,避免脑裂与反复切换。
  • 误区:回切无风险。正解:回切又是一次转移,需在低峰并确认数据同步。

追问

  • 问:什么情况下手动回切?答:旧主硬件/网络修复、规格更高,计划内切换。
  • 问:回切流程要点?答:确认复制追平 → 触发转移 → 客户端刷新主地址。

05.5.1.4-013 什么是脑裂?多数派怎么防止双主?

频率 ★★★★☆ | 难度 高级

一句话结论

网络分区时旧主仍接收写、另一侧选出新主,形成双主;多数派投票要求一方失去多数派无法完成转移/拒绝服务,降低脑裂风险。

概念解释

  • 脑裂:同一集群出现两个可写主。
  • 多数派:选举与决策需多数节点同意,少数派一侧无法成为合法主。
  • 保护:主节点在丢失多数派副本/投票时可拒绝写入(集群配置相关)。

原理流程

分区:A 侧多数派选出新主;B 侧旧主孤立
B 侧失去多数派 → 不能完成合法转移/按配置拒绝写

代码 / 命令

redis-cli CLUSTER INFO

常见误区

  • 误区:只要有哨兵/集群就不会脑裂。正解:网络分区下旧主可能短暂可写,需多数派与写入保护配合。
  • 误区:脑裂后两边数据自动合并。正解:分裂期间写冲突需按恢复流程处理。

追问

  • 问:怎么配置孤立主拒绝写入?答:cluster-require-full-coverage 等配置与版本核对(待确认)。
  • 问:脑裂后恢复注意什么?答:确认哪侧为合法主,丢弃/合并分裂期写入。

05.5.1.4-014 用哪些命令核对复制与集群状态?

频率 ★★☆☆☆ | 难度 进阶

一句话结论

主从用 INFO replication、ROLE;Cluster 用 CLUSTER INFO、CLUSTER NODES、CLUSTER SLOTS 核对角色、槽位与在线状态。

概念解释

  • 复制:角色、偏移、lag。
  • 集群:槽覆盖、节点状态、cluster_state。
  • 节点视图:CLUSTER NODES 看各节点主从与槽分配。

原理流程

INFO replication → 复制关系与延迟
CLUSTER INFO → 集群健康与槽覆盖
CLUSTER NODES → 节点角色/槽/状态

代码 / 命令

redis-cli ROLE
redis-cli INFO replication
redis-cli CLUSTER INFO
redis-cli CLUSTER NODES

常见误区

  • 误区:cluster_state:ok 说明所有副本健康。正解:ok 只表示槽覆盖与主节点在线,副本滞后需另查。
  • 误区:ROLE 在集群外不可用。正解:单主从与集群节点均可查角色。

追问

  • 问:cluster_state:fail 常见原因?答:槽未覆盖、主节点不可达或多数派失效。
  • 问:怎么看某 key 落哪个节点?答:CLUSTER KEYSLOT 得槽,再从 CLUSTER NODES 找节点。

05.5.1.4-015 副本需要持久化吗?

频率 ★★☆☆☆ | 难度 进阶

一句话结论

副本是否开持久化按可靠性权衡:开持久化可在副本重启后快速恢复并避免全量同步;纯缓存副本可关闭以省资源,但故障恢复依赖重建。

概念解释

  • 开持久化副本:本地有 RDB/AOF,重启不依赖主库全量。
  • 关持久化副本:省磁盘/IO,重启需重新全量同步。
  • 风险:主与副本同时无持久化,故障时基线丢失。

原理流程

副本重启 → 有持久化:本地加载/增量追;无持久化:全量从主同步

代码 / 命令

redis-cli CONFIG GET appendonly
redis-cli CONFIG GET save

常见误区

  • 误区:副本一定不需要持久化。正解:高可靠部署建议副本保留持久化,避免主从同时故障丢基线。
  • 误区:关闭副本持久化能提升复制速度。正解:主要省磁盘 IO,复制延迟另由队列与回放决定。

追问

  • 问:无持久化副本崩溃后发生什么?答:重新全量同步,主库 fork 快照,压力上升。
  • 问:怎么安排持久化策略?答:主库必须持久化;副本按恢复目标与资源决定。

05.5.1.4-016 Cluster 下 Lua 脚本有什么槽位约束?

频率 ★★☆☆☆ | 难度 高级

一句话结论

Cluster 中 Lua 脚本涉及的所有 key 必须落在同一槽位,否则报 CROSSSLOT;脚本内不能跨槽访问。

概念解释

  • 同槽约束:脚本入参 key 经计算必须同 slot。
  • hash tag:用 tag 聚合 key 满足约束。
  • 原子范围:脚本在所属节点串行执行。

原理流程

EVAL script keys... → 校验 key 槽位
同槽:节点执行;跨槽:拒绝

代码 / 命令

redis-cli EVAL "redis.call('HSET',KEYS[1],'a',1); redis.call('HSET',KEYS[2],'b',2)" 2 "u:{1}:p" "u:{1}:q"

常见误区

  • 误区:Lua 可以在集群各节点间协调多 key。正解:脚本绑定单节点,跨槽不支持。
  • 误区:脚本内可以用不同前缀拼 key 绕过。正解:最终访问的 key 仍需同槽校验。

追问

  • 问:跨实体原子操作用什么替代?答:应用层补偿/分布式事务,或按 tag 聚合设计。
  • 问:Lua 大脚本在集群有何风险?答:单节点阻塞,时长与单节点负载相关。

05.5.1.4-017 Sentinel 与 Cluster 怎么选型?

频率 ★★★★☆ | 难度 进阶

一句话结论

数据量不大、需高可用读写分离用哨兵主从;数据量大、需水平分片扩展用 Cluster;小容量纯缓存两者均可,按运维成熟度选择。

概念解释

维度 Sentinel 主从 Cluster
数据扩展 单机容量,垂直扩 多主分片水平扩
高可用 哨兵仲裁转移 内部投票转移
多键/事务 单节点无槽限制 需同槽 hash tag
运维复杂度 较低 较高

原理流程

容量 < 单机上限 + 高可用 → 哨兵
容量增长/分片需求 → Cluster

代码 / 命令

redis-cli INFO server
redis-cli CLUSTER INFO 2>/dev/null

常见误区

  • 误区:Cluster 一定比哨兵性能高。正解:Cluster 解决容量与水平扩展,单点延迟未必更低。
  • 误区:哨兵集群能分片存大数据。正解:数据都在主库,副本只是冗余与读扩展。

追问

  • 问:Cluster 副本能做读扩展吗?答:可以读副本,但需处理复制延迟与槽路由。
  • 问:从哨兵迁 Cluster 注意什么?答:分片 key 设计、多键约束、客户端槽表支持。

05.5.1.4-018 集群故障转移相关命令有哪些?

频率 ★★☆☆☆ | 难度 进阶

一句话结论

手动转移用 CLUSTER FAILOVER;查看拓扑 CLUSTER NODES/INFO/SLOTS;哨兵侧用 SENTINEL failover 主动切换。

概念解释

  • 手动转移:计划内把主切到副本。
  • 状态查看:节点、槽位、健康。
  • 哨兵触发:SENTINEL failover <name>。

原理流程

计划内 → FAILOVER → 副本提升 → 槽/角色更新
查看 → NODES/SLOTS 核对结果

代码 / 命令

redis-cli CLUSTER FAILOVER
redis-cli CLUSTER NODES
redis-cli -p 26379 SENTINEL failover mymaster

常见误区

  • 误区:FAILOVER 等同强制宕机切换。正解:它是受控转移,优先平滑提升副本。
  • 误区:手动转移后客户端无需更新。正解:客户端需按新拓扑刷新连接。

追问

  • 问:转移前要确认什么?答:副本数据追平、节点健康、网络正常。
  • 问:转移失败怎么排查?答:查节点投票、复制偏移、CLUSTER NODES 状态与日志。

参考来源