08.1.2.3 cgroup 资源限制与 v2
所属:全栈开发面试题库 / 08 云原生与 DevOps / 08.1 容器化 / 08.1.2 容器运行时与隔离
08.1.2.3-001 为什么需要 cgroup?不做限制会怎样?
一句话结论
cgroup(控制组)把进程分组并对 CPU、内存、IO、进程数等做计量与限额;没有它,单个容器可能耗尽宿主资源,拖垮同节点其他容器。
概念解释
- 计量:统计每组资源用量。
- 限制:设定上限与保障值。
- 归属:进程按 cgroup 层级组织,便于驱逐与统计。
原理流程
- 容器进程加入对应 cgroup。
- 各 controller 按配置计量/限制。
- 超限后按 controller 策略节流、杀死或拒绝。
代码 / 图示
无 cgroup:容器 A 吃光 CPU/内存 → 节点整体受影响
有 cgroup:容器 A 被限额 → 超额部分被节流/OOM,其他容器受保护
常见误区
- 误区:namespace 已经限制了资源用量;正解:视图隔离不限制用量,限额是 cgroup 职责。
- 误区:设置限额后资源就闲置不用;正解:未达上限时容器可使用空闲资源,限额是上限而非预留独占。
追问
- Q:cgroup 与 K8s requests/limits 什么关系? A:requests/limits 是编排层声明,最终映射到节点 cgroup 配置(见 08.2.1.6)。
- Q:cgroup 能限制磁盘容量吗? A:文件系统配额与 cgroup IO 限制是不同机制,磁盘容量通常由存储配额管理。
08.1.2.3-002 cgroup v1 的层级结构是怎样的?
一句话结论
v1 按 controller 分多棵独立层级树,每个控制器(CPU、内存、IO 等)有自己的目录树,进程可挂到不同层级的不同分组中。
概念解释
- 每类资源一个 hierarchy。
- 控制器之间配置分散,规则不一致。
- 历史上不同发行版长期使用 v1。
原理流程
- 为 CPU、内存等分别挂载层级。
- 进程按分组写入各层级。
- 各 controller 独立读取限额配置。
代码 / 图示
/sys/fs/cgroup/cpu/... ← CPU 层级
/sys/fs/cgroup/memory/... ← 内存层级
/sys/fs/cgroup/blkio/... ← IO 层级
常见误区
- 误区:v1 只有一棵全局树;正解:v1 是多棵按 controller 划分的层级。
- 误区:v1 配置可以跨控制器统一继承;正解:各层级独立,父子关系在不同树中分别维护。
追问
- Q:v1 主要痛点是什么? A:层级分散、语义不一致、部分控制器行为难组合,推动 v2 统一。
- Q:老系统还在用 v1 吗? A:部分旧发行版默认 v1,新系统多转向 v2,具体以节点内核与发行版为准。
08.1.2.3-003 cgroup v2 的统一层级是什么模型?
一句话结论
v2 采用单棵统一层级树,所有控制器挂在同一棵树上,子组继承父组配置,语义一致、管理更简单。
概念解释
- 统一 hierarchy:一棵 cgroup 树承载全部控制器。
- 控制器按组启用与配置。
- 嵌套分组对应父子资源关系。
原理流程
- 挂载统一 cgroup v2 树。
- 为容器创建叶子分组。
- 在分组目录下写入各 controller 配置。
- 进程加入分组受统一约束。
代码 / 图示
/sys/fs/cgroup/
├─ workload.slice/
│ └─ container-abc/
│ ├─ cpu.max
│ ├─ memory.max
│ └─ io.max
常见误区
- 误区:v2 只是 v1 改了目录名;正解:层级模型、控制器接口与继承语义都有重构。
- 误区:v2 上 v1 工具配置直接可用;正解:接口文件与参数名有变化,需按 v2 语义调整。
追问
- Q:如何判断节点是 v1 还是 v2? A:查看
/sys/fs/cgroup挂载结构与控制器组织方式,具体命令随环境而定。 - Q:v2 支持哪些控制器? A:CPU、内存、IO、pids 等核心控制器,完整清单以内核与发行版文档为准。
08.1.2.3-004 CPU requests/limits 在 cgroup 层面对应什么?
一句话结论
CPU limit 对应 CPU 带宽配额(quota/period),超过后被节流;CPU request 主要用于调度预留与权重分配,不直接等于硬限额。
概念解释
- period:调度周期,quota:周期内可用时间。
- limit:quota/period 换算出的 CPU 上限。
- request:调度依据与 CPU 权重参考。
原理流程
- 编排层读取 CPU request/limit。
- 节点运行时写入 cgroup CPU 配置。
- 超出配额的进程在周期内被节流,下个周期恢复。
代码 / 示例
CPU limit = 1.0 → 每周期最多用满 1 个 CPU 时间片
CPU request = 0.5 → 调度预留与权重参考
常见误区
- 误区:CPU limit 到了就杀进程;正解:CPU 超限是节流(throttle),不是 OOMKill。
- 误区:CPU request 是独占保障;正解:未被使用的 CPU 时间可被其他容器借用,request 主要用于调度与权重。
追问
- Q:CPU 节流在监控上怎么体现? A:查看容器 CPU throttling 指标(如被限流时长/次数),具体指标名随监控栈而定。
- Q:limit 设为 2 核是什么含义? A:最多使用 2 个 CPU 的带宽,不等于绑定 2 个物理核。
08.1.2.3-005 CPU 节流(throttling)是怎么产生的?
一句话结论
当容器在一个周期内用满 CPU quota,剩余时间片内进程被挂起,直到下一周期恢复,这就是 CPU 节流;表现为延迟毛刺而非进程退出。
概念解释
- 成因:limit 低于应用实际峰值需求。
- 现象:CPU 使用率未打满但延迟升高、请求排队。
- 小周期 + 低配额更容易出现毛刺。
原理流程
- 周期内进程消耗完 quota。
- 调度器暂停该 cgroup 任务。
- 下一周期配额恢复,任务继续运行。
代码 / 图示
周期 T:配额用完 → 节流等待 → 下一周期恢复
表现:延迟 P99 抖动,进程不退出
常见误区
- 误区:CPU 使用率低就没有节流;正解:使用率统计可能掩盖周期内被挂起的时间片。
- 误区:提高 limit 一定消除节流;正解:需结合应用峰值与线程模型,确认是配额不足还是并发设计问题。
追问
- Q:如何判断是否发生节流? A:查看 cgroup CPU 统计中的 throttled 次数与时间,结合延迟曲线分析。
- Q:线程多但 CPU 配额小会怎样? A:多线程争抢有限配额,上下文切换与节流叠加,延迟放大。
08.1.2.3-006 内存超限为什么是 OOMKill 而不是节流?
一句话结论
内存无法像 CPU 时间片那样“暂停后补用”,内存超限后内核 OOM Killer 直接杀掉 cgroup 内进程;内存 limit 是硬上限。
概念解释
- CPU:可延后执行,故节流。
- 内存:占用必须立即回收,无法超借。
- 超出 memory.max 的分配触发 cgroup OOM 处理。
原理流程
- 进程持续分配内存逼近 limit。
- 内核回收缓存页仍不足。
- cgroup OOM 选择进程杀死,释放内存。
代码 / 对照
| 资源 | 超限行为 | 进程结局 |
|---|---|---|
| CPU | 节流,等待下一周期 | 继续运行 |
| 内存 | 触发 OOMKill | 被杀死重启 |
常见误区
- 误区:内存超 limit 也会被“限流”慢慢压;正解:内存超限直接杀进程,不做节流。
- 误区:容器内存占用只算 RSS;正解:统计还包含缓存页、部分内核分配,口径需看 cgroup 指标。
追问
- Q:OOMKill 后容器会怎样? A:按重启策略重建,状态记录为 OOMKilled(见 08.2.1.6 与 08.2.2.6)。
- Q:如何避免频繁 OOMKill? A:按压测内存峰值设 limit,排查内存泄漏与缓存无界增长。
08.1.2.3-007 内存统计包含哪些部分?
一句话结论
cgroup 内存统计通常包含用户态 RSS、页缓存、slab 等内核占用的综合口径;不同字段区分驻留内存与可回收缓存,排查时需按字段含义判读。
概念解释
- RSS:进程匿名内存驻留。
- 页缓存:文件读写缓存,可回收。
- slab:内核对象缓存。
- 统计字段含义以内核 cgroup 文档为准。
原理流程
- 内核按 cgroup 汇总各类型内存占用。
- 可回收缓存优先回收。
- 仍不足时进入 OOM 流程。
代码 / 图示
memory 用量 = 匿名内存(RSS) + 页缓存 + slab + 其他内核占用
可回收:页缓存优先;不可回收:匿名常驻部分
常见误区
- 误区:
free看到的内存就是 cgroup 限额口径;正解:容器内free可能读宿主视角,应以 cgroup 内存文件为准。 - 误区:页缓存占用高一定是内存泄漏;正解:缓存可回收,需结合匿名内存增长曲线判断。
追问
- Q:应用怎么读取自己的内存上限? A:读取 cgroup 内存限制文件(v1/v2 路径不同),部分语言运行时需专门适配。
- Q:缓存页会被算进 OOM 触发依据吗? A:会先尝试回收缓存,回收不足再 OOM,具体策略以内核实现为准。
08.1.2.3-008 IO controller 限制什么?
一句话结论
IO controller 限制 cgroup 块设备读写带宽与 IOPS,防止单个容器磁盘 IO 抢占影响其他容器。
概念解释
- 限制对象:块设备读写速率/操作数。
- 不限制文件系统逻辑容量。
- 与存储后端性能共同决定实际 IO 表现。
原理流程
- 为容器 cgroup 配置 IO 上限。
- 块设备层按分组限流。
- 超限时 IO 排队等待。
代码 / 示例
io.max:按设备设定 read/write 带宽与 IOPS 上限(v2 接口)
常见误区
- 误区:IO 限额能限制磁盘使用容量;正解:容量配额是文件系统/存储层职责。
- 误区:网络 IO 也由 IO controller 管;正解:块设备 IO 与网络带宽是不同控制器/机制。
追问
- Q:磁盘 IO 打满先看什么? A:节点磁盘利用率、IOPS/带宽与各 cgroup IO 统计,定位占用最高的容器。
- Q:云端网络盘 IO 限额在哪层? A:可能在云盘规格与节点 cgroup 多层共同约束。
08.1.2.3-009 pids controller 解决什么问题?
一句话结论
pids controller 限制 cgroup 内最大进程/线程数,防止进程爆炸(fork 风暴、线程泄漏)耗尽宿主 PID 与表项资源。
概念解释
- 限制对象:任务(进程/线程)数量。
- 超出后拒绝再 fork/创建线程。
- 与内存、CPU 限额互补。
原理流程
- 配置 pids.max。
- 内核统计组内任务数。
- 达到上限后新任务创建失败。
代码 / 示例
pids.max = 256 → 组内进程+线程总数不超过 256
常见误区
- 误区:pids 限制只算进程数不算线程;正解:任务数包含线程。
- 误区:进程数爆了会 OOMKill;正解:达到 pids 上限是拒绝创建新任务,已有进程继续运行。
追问
- Q:应用线程数失控有哪些表现? A:创建线程失败、进程数持续上涨、上下文切换加剧,需结合线程池治理。
- Q:K8s 有对应进程数限制吗? A:可通过节点/运行时配置映射到 pids cgroup,编排层常见限额仍以 CPU/内存为主。
08.1.2.3-010 cgroup v1 与 v2 主要差异有哪些?
一句话结论
v2 统一层级、控制器接口一致、子组继承语义清晰;v1 多树分散、接口按控制器各异;迁移需核对控制器支持与工具兼容。
概念解释
- 层级:v1 多 hierarchy,v2 单树。
- 接口:v2 以统一文件接口配置各控制器。
- 兼容:旧监控/工具可能只识别 v1 路径。
原理流程
- 确认节点内核与发行版默认版本。
- 核对容器运行时与监控工具支持。
- 按 v2 接口迁移限额配置。
代码 / 对照
| 维度 | v1 | v2 |
|---|---|---|
| 层级 | 每控制器一棵树 | 统一一棵树 |
| 配置接口 | 分散、各异 | 统一文件接口 |
| 继承 | 各树独立 | 子组继承父组 |
| 工具兼容 | 旧工具多 | 新工具逐步适配 |
常见误区
- 误区:升级到 v2 后所有旧配置自动生效;正解:接口路径与参数有变化,需迁移验证。
- 误区:v2 完全取消了控制器概念;正解:控制器仍存在,只是统一到一棵树管理。
追问
- Q:运行时如何选择 cgroup 版本? A:跟随节点内核与系统配置,容器运行时按节点能力使用对应版本。
- Q:混合 v1/v2 节点要注意什么? A:监控指标口径与限额配置需分别兼容,避免误判。
08.1.2.3-011 主流发行版对 v2 的支持现状如何?
一句话结论
较新的 Linux 发行版与内核版本默认采用 cgroup v2;具体节点默认版本需以实际内核与系统配置为准,面试中不应臆断某发行版版本号。
概念解释
- 支持程度随内核版本与发行版演进。
- 老节点可能仍运行 v1 或混合模式。
- 排障时先确认节点实际挂载版本。
原理流程
- 查看节点 cgroup 挂载结构。
- 确认运行时与监控适配情况。
- 按版本解读限额与统计文件。
代码 / 图示
待确认:具体发行版/内核的默认 cgroup 版本,以节点实际检查结果为准
常见误区
- 误区:所有现代服务器默认都是 v2;正解:需实际检查,老节点与定制内核可能不同。
- 误区:K8s 版本直接决定 cgroup 版本;正解:cgroup 版本由宿主内核/系统决定,K8s 与运行时做适配。
追问
- Q:检查命令有哪些? A:查看
/sys/fs/cgroup挂载类型与目录结构,具体输出随版本不同。 - Q:v1 节点能跑 v2 配置的集群吗? A:需运行时兼容,混合节点要统一验证限额与指标行为。
08.1.2.3-012 systemd 与 cgroup 是什么关系?
一句话结论
systemd 用 cgroup 跟踪并管理服务进程组,为每个服务维护 cgroup 切片;容器运行时在宿主上通常也以 systemd 管理的服务形式接入 cgroup 层级。
概念解释
- systemd 以 slice/scope/service 组织 cgroup。
- 容器进程归属于运行时服务对应的 cgroup 路径。
- 资源限额可由 systemd 单元或容器运行时写入。
原理流程
- systemd 启动运行时服务并创建 cgroup。
- 运行时为容器创建子分组。
- 限额配置写入对应 cgroup 目录。
代码 / 图示
systemd slice → 运行时服务 scope → 容器 cgroup 子组
常见误区
- 误区:容器绕过 systemd 直接管 cgroup;正解:宿主侧进程归属仍受 systemd 层级组织。
- 误区:改 systemd 服务限额会自动同步到容器;正解:需明确限额由哪一层写入,避免互相覆盖。
追问
- Q:运行时 cgroup driver 是什么? A:容器运行时对接 cgroup 的方式(如 systemd/cgroupfs),需与节点配置一致,否则限额归属异常。
- Q:driver 不一致会怎样? A:可能出现限额不生效或分组归属混乱,排障时需核对运行时配置。
08.1.2.3-013 CPU 与内存超限行为如何对照?
一句话结论
CPU 超限被节流、进程继续;内存超限触发 OOMKill、进程被终止;pids 超限拒绝新建任务;IO 超限排队限速。
概念解释
- 不同 controller 超限策略不同。
- 排障时先按现象判断属于哪类超限。
- 重启行为由编排重启策略配合。
原理流程
- 观察现象:延迟毛刺/退出/创建失败/IO 慢。
- 对照 controller 超限行为。
- 读取 cgroup 统计确认。
代码 / 对照
| 控制器 | 超限行为 | 进程结局 |
|---|---|---|
| CPU | 节流等待 | 继续运行 |
| 内存 | OOM 回收不足则 Kill | 被终止 |
| pids | 拒绝新建任务 | 已有进程继续 |
| IO | 排队限速 | 继续运行 |
常见误区
- 误区:所有资源超限都会杀进程;正解:只有内存(及特定策略)以杀死方式处理。
- 误区:IO 慢一定是 IO 限额;正解:也可能是后端存储性能或网络问题,需分层定位。
追问
- Q:容器状态 OOMKilled 说明什么? A:内存 cgroup 触发 OOMKill,需查内存峰值与泄漏。
- Q:进程能 fork 但起不来线程? A:检查 pids 上限与线程泄漏。
08.1.2.3-014 cgroup 不会限制哪些内容?
一句话结论
cgroup 不隔离视图(namespace 职责)、不限制磁盘容量配额、不替代网络带宽的全部管控;这些分别由其他机制负责。
概念解释
- 视图可见性:namespace。
- 磁盘容量:文件系统配额/存储后端。
- 网络带宽:网络控制器/插件/QoS 机制。
- cgroup 聚焦进程组资源计量与限额。
原理流程
- 明确问题属于视图、容量、带宽还是用量。
- 对应到 namespace、存储配额、网络机制或 cgroup。
- 多层配置共同生效。
代码 / 对照
| 需求 | 负责机制 |
|---|---|
| 看不到其他进程 | namespace |
| 限制磁盘占用容量 | 存储/文件系统配额 |
| 限制网络带宽 | 网络 QoS/插件 |
| 限制 CPU/内存/IO/pids | cgroup |
常见误区
- 误区:设了内存 limit 就限制了磁盘文件占用;正解:写文件占的是磁盘容量,不归内存 cgroup 管。
- 误区:cgroup 能隔离网络端口;正解:端口视图在 NET namespace,带宽限制是另一层。
追问
- Q:磁盘写满属于哪类问题? A:存储容量与节点磁盘压力问题,需看磁盘配额、卷大小与日志增长。
- Q:网络带宽超限怎么治理? A:网络插件/QoS 规则与服务限流结合处理。
08.1.2.3-015 节点超卖与 cgroup 限制是什么关系?
一句话结论
超卖指节点分配的 requests 总量超过可分配资源;cgroup limit 是单容器硬上限,二者共同决定节点稳定性,超卖过多会在峰值时互相影响。
概念解释
- requests:调度预留口径,决定能否调度上节点。
- limits:运行硬上限。
- 超卖:requests 之和大于节点容量,依赖平均利用率低。
原理流程
- 调度按 requests 分配副本到节点。
- 运行时按 limits 限制单容器。
- 峰值时多容器同时逼近上限,出现节流/OOM 或节点压力。
代码 / 图示
requests 合计 > 节点可分配 → 超卖
单容器 limit 兜底 → 超限节流/OOM
整体峰值叠加 → 节点资源紧张
常见误区
- 误区:设了 limit 就不会超卖;正解:limit 只保护单容器,节点容量规划看 requests 总量。
- 误区:超卖一定有害;正解:低利用率业务适度超卖可提升密度,关键是预留峰值余量。
追问
- Q:如何判断节点是否过度超卖? A:看节点 requests 分配率与实际峰值利用率、节流/OOM 事件。
- Q:CPU 与内存超卖策略一样吗? A:CPU 可短时借用节流,内存不可超借,内存超卖风险更高。
08.1.2.3-016 OOMKill 会选择哪个进程?
一句话结论
cgroup OOM 优先杀掉组内占用内存高、优先级低的进程;QoS class 会影响跨 cgroup 的选择顺序(详见 08.2.1.6)。
概念解释
- 组内 OOM:先杀本 cgroup 内最重的进程。
- 全局 OOM:按优先级与 oom_score 等选择。
- K8s QoS 影响节点内存压力下的驱逐顺序。
原理流程
- 内存不足进入 OOM 流程。
- 内核按评分选择被杀进程。
- 释放内存后其他进程继续。
代码 / 图示
内存不足 → 计算 oom 评分 → 杀评分最高进程 → 释放内存
常见误区
- 误区:OOMKill 一定杀占用内存最大的;正解:评分还考虑优先级、调整值等因素,需结合现场判断。
- 误区:被杀的就是有内存泄漏的进程;正解:也可能是同节点其他高占用容器被波及。
追问
- Q:如何避免关键进程被优先杀? A:合理设置资源保证级别与优先级,避免关键容器处于最差 QoS。
- Q:容器被 OOM 后看什么字段? A:
lastState中的 reason/OOMKilled 与内存退出状态(见排障章节)。
08.1.2.3-017 容器内如何观察自己的 cgroup 限制?
一句话结论
cgroup 配置与统计挂在容器内 /sys/fs/cgroup 下(按 v1/v2 路径不同),应用或排障工具可读取限额与用量字段。
概念解释
- v2:统一目录下各控制器文件。
- v1:按控制器分目录。
- 容器内看到的是自身 cgroup 视图。
原理流程
- 进入容器查看
/sys/fs/cgroup结构。 - 读取内存/CPU 限额与统计字段。
- 与编排声明的 requests/limits 对照。
代码 / 示例
v2:/sys/fs/cgroup/memory.max、cpu.max
v1:/sys/fs/cgroup/memory/.../memory.limit_in_bytes 等
常见误区
- 误区:容器内
free/top显示的就是 cgroup 限额;正解:这些工具可能读宿主视角,需以 cgroup 文件为准。 - 误区:能看到宿主所有 cgroup;正解:容器内只暴露自身相关分组视图。
追问
- Q:JVM 为什么要识别容器内存限制? A:否则按宿主内存算堆大小,容易超过 cgroup limit 被 OOMKill;新版本运行时已做容器感知(历史问题概述)。
- Q:读不到 cgroup 文件怎么办? A:检查挂载是否被限制、运行时 cgroup driver 与节点版本。
08.1.2.3-018 CPU/内存限额调优有哪些要点?
一句话结论
限额基于压测峰值与余量设定:CPU 留节流缓冲,内存留峰值与碎片余量;过小导致节流/OOM,过大导致调度不上与超卖风险。
概念解释
- CPU:参考 P95/P99 利用率,避免长期贴近 limit。
- 内存:按峰值驻留 + 余量设置 limit。
- requests 按常态基线,limit 按峰值上限。
原理流程
- 压测得到常态与峰值资源曲线。
- 设定 requests(基线)与 limits(峰值)。
- 上线后观察节流、OOM 与利用率,迭代调整。
代码 / 图示
压测曲线 → 常态基线定 request → 峰值 + 余量定 limit → 上线观测 → 回调
常见误区
- 误区:limit 等于压测峰值就够了;正解:碎片、突发与缓存需要余量。
- 误区:requests 设大一点更安全;正解:过大导致调度不上、节点利用率低,过小导致超卖。
追问
- Q:怎么判断 CPU limit 是否合适? A:看节流指标与 P99 延迟,持续节流说明配额不足。
- Q:内存 limit 频繁 OOM 怎么办? A:先查泄漏/无界缓存,再决定提高 limit 还是优化内存使用。