罗罗编程学习记录
本页内容 展开查看

04.2.1.5 cluster 多进程与端口共享

所属:全栈开发面试题库 / 04 后端语言与运行时 / 04.2 Node.js / 04.2.1 运行时与事件循环

04.2.1.5-001 cluster 解决什么问题?

一句话结论

cluster 通过 fork 多个工作进程共享同一端口,利用多核 CPU 并行处理请求,弥补单线程 JS 只能占用一个核的限制。

概念解释

单个 Node 进程主线程跑在一个核上。cluster 让主进程派生多个工作进程,每个进程独立事件循环与内存,共同监听端口接收连接。

原理流程

  1. 主进程判断 cluster.isPrimary。
  2. 主进程 fork 多个 worker 进程。
  3. 各 worker 共享监听端口,独立处理请求。

代码或图示

const cluster = require('cluster');
const os = require('os');
if (cluster.isPrimary) {
  for (let i = 0; i < os.cpus().length; i++) cluster.fork();
} else {
  require('./server');
}

常见误区

  • cluster 是多线程:它是多进程,各有独立 V8 与堆。
  • 进程数越多越好:受核数、内存与上下文切换约束,需压测确定。

追问

  • 与 worker_threads 怎么选?答:多核并行与故障隔离用多进程;同进程内卸载重计算用 Worker。
  • cluster 基于什么模块?答:内置 node:cluster 模块,配合派生工作进程实现多进程。

04.2.1.5-002 多个进程如何监听同一个端口?

一句话结论

底层通过共享/复用端口机制(如 SO_REUSEPORT 及句柄传递),主进程监听后把 server 句柄分发给工作进程,连接由内核在各进程间分配。

概念解释

多个进程不各自 bind 同一端口产生冲突,而是共享监听句柄。新连接到来时内核按调度策略分给其中一个工作进程。

原理流程

  1. 主进程创建 server 并监听。
  2. 句柄经 IPC 分发给 worker。
  3. 内核把新连接均衡到共享端口的进程。

代码或图示

主进程创建监听句柄 ──分发──> Worker1 / Worker2 / Worker3
内核按策略分配新连接

常见误区

  • 每个 worker 自己 listen(port) 抢端口:cluster 走句柄共享,避免端口冲突。
  • 端口共享意味着共享内存:进程内存仍各自独立。

追问

  • 待确认:不同平台端口复用行为细节,以当前版本与操作系统文档为准。
  • 句柄怎么共享?答:主进程监听并把 server 句柄经 IPC 传给 worker,worker 在共享句柄上 accept,而非各自 bind 同一端口。

04.2.1.5-003 主进程和工作进程各自职责是什么?

一句话结论

主进程负责派生、监控、重启 worker 与进程间协调;工作进程执行业务 HTTP 服务、处理请求与连接。

概念解释

主进程一般不跑业务请求,避免监控逻辑被业务阻塞。worker 崩溃后主进程负责拉起新进程,维持可用实例数。

原理流程

  1. 主进程启动并按核数 fork worker。
  2. worker 加载业务服务并监听共享端口。
  3. 主进程监听 exit/online 事件,异常退出时重启。

代码或图示

Primary:派生 / 监控 / 重启 / 协调
Worker:业务服务 / 请求处理 / 连接响应

常见误区

  • 在主进程里也启动完整 HTTP 服务:职责重复,主进程应保持轻量。
  • worker 自行管理重启:生命周期由主进程统一控制。

追问

  • 主进程挂了会怎样?答:工作进程失去监管,通常需配合进程管理器(PM2/系统服务)兜底。
  • 主进程能做什么?答:监控、重启、配置广播、日志聚合等协调工作,不处理业务请求。

04.2.1.5-004 工作进程崩溃后主进程如何重启?

一句话结论

监听 worker 的 exit 事件,判断退出原因后重新 fork;避免崩溃循环,必要时限制重启频率并上报告警。

概念解释

直接无条件重启会在致命 bug 下形成崩溃-重启循环。应区分主动退出与异常退出,加退避与次数限制。

原理流程

  1. worker 退出触发 exit 事件。
  2. 主进程记录退出码与信号。
  3. 按策略延迟 fork 新 worker,超限则告警。

代码或图示

cluster.on('exit', (worker, code, signal) => {
  if (code !== 0) cluster.fork();
});

常见误区

  • 崩溃后立即无限重启:缺少退避会放大故障、占满 CPU。
  • 不区分正常退出与异常退出:主动退出也被反复拉起。

追问

  • 重启策略放哪一层?答:cluster 内做快速恢复;外层用 PM2/系统服务做进程守护。
  • 如何判断异常退出?答:监听 worker 的 'exit' 事件,结合 code 与 signal 区分主动退出与崩溃,再决定是否重启。

04.2.1.5-005 工作进程数量怎么定?

一句话结论

CPU 密集型通常按可用核数设置;IO 密集型可结合内存与压测调整;实例总数还要受单机内存、端口与部署规模约束。

概念解释

每个进程复制一份运行时与堆,进程数翻倍内存占用。核数决定并行上限,内存决定可容纳进程数,最终以压测吞吐和延迟为准。

原理流程

  1. 读取可用核数与单进程内存占用。
  2. 设初始 worker 数并压测。
  3. 对比吞吐、延迟、内存后定数量。

代码或图示

核数(并行上限) + 单进程内存(容纳上限) → 压测 → 定 worker 数

常见误区

  • 一律等于物理核数:IO 等待型与内存占用不同,取值应实测。
  • 忽略多实例部署:容器/多机环境下按可分配资源计算。

追问

  • 待确认:容器内 CPU 限额读取可能与宿主机核数不同,需按部署环境核对。
  • IO 密集型怎么定 worker 数?答:IO 等待多、CPU 占用低时按内存与连接容量评估,不必拘泥核数,压测取最优吞吐。

04.2.1.5-006 cluster 的负载分配策略有哪些?

一句话结论

常见为轮询(round-robin)与操作系统级调度;具体默认策略随平台和版本不同,连接分配由内核/主进程完成。

概念解释

策略决定新连接落到哪个 worker。轮询按顺序分配;OS 调度依赖内核端口复用行为。长连接下分配粒度是连接而非请求。

原理流程

  1. 新连接到达共享端口。
  2. 按调度策略选择 worker。
  3. 连接在该 worker 上处理直到结束。

代码或图示

新连接 → round-robin 轮转 / OS 调度 → 指定 Worker

常见误区

  • 每个 HTTP 请求重新分配一次 worker:长连接绑定在一个 worker 上直到断开。
  • 策略可在业务代码里随意切换:受运行时与平台限制。

追问

  • 待确认:当前版本默认调度策略,以官方文档与平台行为为准。
  • 常见负载策略有哪两类?答:轮询(round-robin)与操作系统级负载共享;默认与平台相关,以官方文档为准。

04.2.1.5-007 cluster 与 PM2 的关系是什么?

一句话结论

PM2 是生产进程管理器,内部可启用 cluster 模式管理多进程,提供守护、重启、日志、负载均衡;裸 cluster 只提供进程派生与共享端口能力。

概念解释

cluster 是 Node 内置模块;PM2 在其上封装运维能力:崩溃重启、内存阈值重启、日志聚合、零停机重载。生产常用 PM2 cluster 模式。

原理流程

  1. PM2 启动应用并按配置 fork 多进程。
  2. 管理进程监控 worker 状态。
  3. 异常退出自动重启,日志与指标统一收集。

代码或图示

pm2 start app.js -i max

常见误区

  • 以为 PM2 是 Node 内置模块:它是独立工具,依赖 Node 运行。
  • 裸 cluster 具备完整运维监控:缺少守护、日志聚合与重载能力。

追问

  • 零停机重载怎么做?答:PM2 reload 逐个替换 worker,旧进程处理完存量连接后退出。
  • PM2 底层用什么?答:生产集群常由 PM2 的 cluster 模式派生多进程,并补充守护、日志、重载与监控。

04.2.1.5-008 多进程下会话状态存在哪里?

一句话结论

进程内存不共享,本地会话/缓存无法跨进程直接访问;应存入 Redis 等外部共享存储,或用粘性会话把同一客户端固定到同一进程。

概念解释

每个 worker 独立堆,登录态存内存会在下次请求落到别的进程时丢失。需要共享状态就外置,或通过负载层做粘性绑定。

原理流程

  1. 客户端请求落到某 worker。
  2. 本地内存状态仅该进程可见。
  3. 跨进程共享 → 外部存储;避免漂移 → 粘性会话。

代码或图示

共享状态:Redis / 数据库
会话粘性:按标识哈希固定到同一 Worker

常见误区

  • 把会话挂全局对象就能多进程共享:各进程全局对象独立。
  • 粘性会话解决所有状态问题:进程重启后状态仍会丢失。

追问

  • 分布式 Session 关键点?答:过期策略、序列化格式、多实例读写一致性。
  • 粘性会话做什么?答:把同一用户路由到同一 worker 配合本地会话缓存;跨进程状态仍要外部存储。

04.2.1.5-009 主进程与工作进程如何通信?

一句话结论

通过 IPC 通道收发消息,process.on('message') 监听,process.send() 发送;消息结构化克隆,大对象有拷贝成本。

概念解释

进程间不共享堆,数据经 IPC 序列化传递。主进程可向 worker 下发配置、通知重启;worker 上报状态与心跳。

原理流程

  1. 一方 send(message)。
  2. 内核 IPC 通道投递。
  3. 另一方 message 事件接收并处理。

代码或图示

// 主进程
worker.send({ type: 'config', value });
// worker
process.on('message', (msg) => { /* */ });

常见误区

  • 进程间能直接读写对方变量:必须经消息传递。
  • 频繁 IPC 无成本:消息序列化与通道开销随频率增长。

追问

  • 心跳怎么实现?答:worker 定时上报,主进程超时未收到标记异常并重启。
  • 消息怎么收发?答:主进程用 worker.send(),worker 用 process.send(),双方监听 'message' 事件。

04.2.1.5-010 多进程部署会复制哪些资源?

一句话结论

每个进程独立复制 V8 运行时、堆内存、模块加载与连接缓冲;静态文件、外部连接池(如数据库连接)也按进程各自建立。

概念解释

进程隔离带来内存与连接翻倍。每个 worker 各自持有数据库连接池时,总连接数 = 进程数 × 单进程池大小,需控制上限。

原理流程

  1. fork 后独立地址空间加载应用。
  2. 各自初始化缓存、连接池、定时器。
  3. 共享数据只能走外部存储或消息。

代码或图示

每进程:运行时 + 堆 + 模块 + 连接池 + 缓冲

常见误区

  • 多进程共享一份数据库连接池:每个进程独立建池。
  • 进程数增加不影响 DB 连接数:连接数随进程数线性增长。

追问

  • 连接池怎么配?答:按总连接上限反推单进程池大小,避免打爆数据库。
  • 哪些资源按进程复制?答:内存、模块状态、连接池、线程池、本地缓存都按进程独立一份。

04.2.1.5-011 多进程如何做优雅退出?

一句话结论

收到退出信号后,停止接收新连接,等待在途请求处理完成,再关闭连接池与定时器并退出;主进程逐个替换 worker 实现零停机。

概念解释

直接 process.exit() 丢弃在途请求与缓冲。优雅退出需要标记关闭状态、等待 drain、释放外部资源,最后退出。

原理流程

  1. 监听 SIGTERM/SIGINT。
  2. server 停止接收新连接,通知健康检查摘流。
  3. 等待存量请求与连接关闭,释放资源后退出。

代码或图示

process.on('SIGTERM', () => {
  server.close(() => process.exit(0));
});

常见误区

  • 退出时不关数据库连接:连接被强制释放,可能占用到超时。
  • 不设退出超时:卡住的在途连接拖住发布流程。

追问

  • 超时未退出怎么办?答:设强制退出兜底,并记录残留连接原因。
  • 退出流程怎么设计?答:先停接新请求 → 关闭监听与连接池 → 等待在途请求完成或超时 → 退出并兜底强制终止。

04.2.1.5-012 为什么需要进程级健康检查?

一句话结论

worker 可能假死(事件循环卡住但进程未退出),需要健康探针或心跳判断是否可接流量,超时无响应则重启替换。

概念解释

进程存在不代表可服务:主线程阻塞、死锁、依赖不可用都会导致假死。主进程心跳或外部探针检测真实可用性。

原理流程

  1. worker 定时上报心跳或响应探针。
  2. 主进程/负载层判断超时阈值。
  3. 假死进程标记并重启,摘流避免新请求进入。

代码或图示

Worker 心跳/探针 → 主进程判定 → 超时摘流 → 重启替换

常见误区

  • 进程未退出就是健康:假死状态仍会被分配连接。
  • 只依赖退出事件监控:卡死进程不会触发 exit。

追问

  • 探针放哪一层?答:进程内心跳给主进程;外部 HTTP 探针给负载均衡/编排平台。
  • 假死怎么发现?答:进程未退出但事件循环卡死、不响应心跳;超时未上报即判定不健康并摘流重启。

04.2.1.5-013 cluster 与 worker_threads 的选型边界?

一句话结论

需要多核并行、进程隔离、独立内存上限选 cluster/多进程;同进程内卸载单次重计算、共享大量内存数据选 Worker。

概念解释

进程隔离强但复制成本高;线程轻量但隔离弱。两者可叠加:多进程对外并行,进程内用 Worker 处理重计算。

原理流程

  1. 先确定隔离级别与资源复制成本。
  2. CPU 卸载在进程内用 Worker。
  3. 多核服务用多进程,按实际负载组合。

代码或图示

多进程 cluster:隔离强 / 内存连接复制 / 多核并行
Worker 线程:轻量 / 同进程 / 适合重计算卸载

常见误区

  • 用 Worker 替代 cluster 利用多核:Worker 虽并行,但故障隔离与端口共享仍需进程层方案。
  • 所有场景都开多进程:小服务单进程配合容器多实例也可。

追问

  • 容器环境怎么扩并行?答:可单进程 + 多副本,由编排平台调度到多核。
  • 什么情况用多进程?答:需要多核利用、进程级故障隔离、端口共享与独立崩溃恢复时用 cluster;纯同进程重计算用 Worker。

04.2.1.5-014 单实例与多副本部署怎么权衡?

一句话结论

单机多进程利用本机多核;多副本跨机器/容器水平扩展。两者可叠加:每副本内 cluster 多进程,整体靠负载均衡分发。

概念解释

cluster 解决单机多核,多副本解决容量与容错。进程数受单机资源限制,横向扩容靠增加副本而不是无限加进程。

原理流程

  1. 按单机资源定副本内进程数。
  2. 容量不足增加副本实例。
  3. 负载均衡在副本间分发流量。

代码或图示

副本 A(cluster 多进程)─┐
副本 B(cluster 多进程)─┼─> 负载均衡
副本 C(cluster 多进程)─┘

常见误区

  • 单机把进程数开到远超核数:上下文切换与内存压力反增。
  • 用多进程替代水平扩容:单机资源有上限。

追问

  • 待确认:编排环境 CPU/内存限额,以部署平台实际配置为准。
  • 容器内怎么扩并行?答:单进程 + 多副本由编排平台调度到不同节点或核,比单机超开多进程更可控。

04.2.1.5-015 主进程如何广播配置或事件给所有 worker?

一句话结论

主进程遍历 cluster.workers 逐个 send 消息;worker 收到后更新本地配置,广播状态变更(如热更新开关)。

概念解释

进程间无共享状态,配置变更需逐进程下发。worker 可回 ACK 确认生效,主进程等待全部确认后视为发布完成。

原理流程

  1. 主进程获取新配置。
  2. 遍历 worker 发送配置消息。
  3. 各 worker 应用并回 ACK,主进程统计确认数。

代码或图示

for (const id in cluster.workers) {
  cluster.workers[id].send({ type: 'config', config });
}

常见误区

  • 改一份全局配置所有进程生效:必须逐进程下发。
  • 不确认 worker 是否应用:部分进程配置不一致导致行为分叉。

追问

  • 配置不一致怎么发现?答:各进程上报当前配置版本号,主进程比对。
  • 配置广播怎么做?答:主进程遍历 worker 逐个 send 配置,worker 应用后回 ack,主进程比对版本号确认一致。

04.2.1.5-016 为什么静态缓存放在多进程下命中率会下降?

一句话结论

缓存按进程隔离,同一资源可能在不同 worker 各缓存一份;冷数据被重复加载,整体缓存容量被复制稀释。

概念解释

本地内存缓存不共享,请求分散到各进程后缓存无法互通。热点数据重复驻留,冷启动各进程各自加载一遍。

原理流程

  1. 请求按连接落到不同 worker。
  2. 各 worker 独立填充本地缓存。
  3. 跨进程重复缓存,命中率与内存效率下降。

代码或图示

热点资源 → 进程 A 缓存一份 / 进程 B 缓存一份(互不可见)

常见误区

  • 本地缓存越大越好:多进程下总缓存被切分且重复。
  • 多进程共享 LRU:必须用外部缓存(Redis)实现共享。

追问

  • 多进程缓存策略?答:小而稳定的配置本地缓存;频繁变化的热点用外部缓存。
  • 为什么命中率下降?答:请求被分散到不同进程,同一热点可能落在另一进程;本地缓存被进程数切分且重复持有。

04.2.1.5-017 重启/发布时如何避免请求中断?

一句话结论

滚动替换:主进程一次只替换一个 worker,新进程就绪后再换下一个;旧进程等待在途连接 drain 后退出,配合负载均衡摘流。

概念解释

整批重启会中断存量请求。逐个替换保证任一时刻有健康进程接流量,旧进程处理完已有连接再退出。

原理流程

  1. 启动新 worker 等待 online 事件。
  2. 通知旧 worker 停止接新连接并 drain。
  3. 旧进程退出后继续替换下一个。

代码或图示

起新 → 就绪 → 旧进程摘流 drain → 退出 → 换下一个

常见误区

  • 先全部杀掉再启动:存在无可用实例的空窗。
  • 旧进程立即退出:在途请求被切断。

追问

  • 发布期间健康检查怎么配合?答:未就绪副本不接流量,摘流后再终止旧进程。
  • 滚动发布怎么做?答:先起新副本就绪摘流,再逐个摘流旧副本,旧进程处理完存量连接后退出,保持任一时刻有可用实例。

04.2.1.5-018 排查多进程问题时要看哪些维度?

一句话结论

按进程维度看 CPU、内存、事件循环延迟、请求量、错误率、连接数与重启次数;对比各 worker 是否倾斜或反复崩溃。

概念解释

多进程问题可能只出现在个别 worker。按进程聚合指标才能发现连接倾斜、内存泄漏进程、崩溃循环等单点问题。

原理流程

  1. 指标按 worker id 分组。
  2. 对比 CPU/内存/延迟分布。
  3. 结合退出事件与日志定位异常进程。

代码或图示

按 Worker 维度:CPU · 内存 · 事件循环延迟 · 连接数 · 错误率 · 重启次数

常见误区

  • 只看整机汇总指标:个别进程异常被平均值掩盖。
  • 忽略重启次数:反复重启进程本身就是故障信号。

追问

  • 待确认:当前版本暴露的进程级指标接口,结合运行时与监控工具核对。
  • 重点看哪些进程级指标?答:各 worker 内存/CPU、重启次数、退出码、在途连接数、IPC 错误,避免被整机平均值掩盖。
  • 待确认:当前版本暴露的进程级指标接口,结合运行时与监控工具核对。