罗罗编程学习记录
本页内容 展开查看

09.13.3 火焰图与热点定位

所属:全栈开发面试题库 / 09 高阶架构:高并发与分布式 / 09.13 压测与调优实战

覆盖范围

  • 火焰图原理与阅读
  • CPU 火焰图
  • 锁与 IO 火焰图
  • perf 与 async-profiler
  • 热点定位流程

高频题速览

编号 题目 难度 频率
09.13.3-001 火焰图怎么看 进阶 ★★★★☆
09.13.3-002 CPU 火焰图怎么定位热点 进阶 ★★★★☆
09.13.3-003 锁火焰图怎么看 高级 ★★★☆☆
09.13.3-004 IO 火焰图怎么看 高级 ★★★☆☆
09.13.3-005 perf 怎么用 进阶 ★★★☆☆
09.13.3-006 async-profiler 是什么 进阶 ★★★☆☆
09.13.3-007 火焰图和顶视对比 基础 ★★★☆☆
09.13.3-008 热点定位流程 进阶 ★★★☆☆
09.13.3-009 火焰图采样多久合适 基础 ★★☆☆☆
09.13.3-010 差量火焰图 高级 ★★☆☆☆

09.13.3-001 火焰图怎么看?

一句话结论

火焰图横轴是采样占比(宽 = CPU 时间占比),纵轴是调用栈(上是调用方,下是被调用方);最宽的函数是热点;从下往上看,找最宽的平顶;火焰图是采样 CPU profile 的可视化。

概念解释

  • 横轴:采样占比,宽 = 占比大。
  • 纵轴:调用栈,下层调上层。
  • 热点:最宽的函数。

原理流程

火焰图:
  底部:main()
  上层:被调用的函数
  最宽:热点函数

代码或图示

阅读:
  找最宽的平顶
  → 该函数 CPU 占比大
  → 从该函数往下看调用栈

常见误区

  • 误区:纵轴宽是热点。横轴宽才是热点(占比),纵轴是调用栈深度。
  • 误区:火焰图从上往下看。从下往上看调用栈,找最宽的平顶。

追问

  • 问:火焰图怎么生成?答:perf record → perf script → FlameGraph,或 async-profiler。
  • 问:火焰图颜色?答:颜色无意义,宽是重点。

09.13.3-002 CPU 火焰图怎么定位热点?

一句话结论

CPU 火焰图定位热点:1. 采样 10~30 秒;2. 找最宽的平顶函数;3. 看该函数调用栈;4. 判断是计算密集(循环)还是 IO 等待(系统调用);5. 优化热点函数(减少循环、优化算法、缓存)。

概念解释

  • 采样:perf 采样 CPU。
  • 热点:最宽函数。
  • 优化:减少热点函数 CPU 时间。

原理流程

1. perf record -g -p <pid> -- sleep 10
2. 生成火焰图
3. 找最宽函数(如 JSON.serialize)
4. 看调用栈:谁调的、调了什么
5. 优化:减少 JSON 序列化次数

代码或图示

perf 命令:
  perf record -g -p 12345 -- sleep 10
  perf script | stackcollapse-perf.pl | flamegraph.pl > cpu.svg

常见误区

  • 误区:火焰图只看最宽函数。最宽函数可能是等待(IO),要看调用栈判断是计算还是等待。
  • 误区:采样越久越好。采样 10~30 秒足够,太久采样数据太大。

追问

  • 问:怎么判断 IO 等待?答:火焰图里最宽的是系统调用(read、write),说明是 IO 瓶颈。
  • 问:怎么优化?答:计算密集优化算法,IO 密集用异步、批量。

09.13.3-003 锁火焰图怎么看?

一句话结论

锁火焰图(Off-CPU 火焰图)看线程在锁上等待的时间;最宽的锁等待是锁竞争热点;Off-CPU 火焰图采样线程阻塞时间(锁、IO、sleep),找谁在等锁。

概念解释

  • Off-CPU:线程不在 CPU 上(等待锁、IO、sleep)。
  • 锁火焰图:等待锁的时间分布。
  • 热点:最宽的锁等待。

原理流程

Off-CPU 采样:
  记录线程阻塞时的调用栈
  → 生成火焰图
  → 最宽 = 锁等待最多

代码或图示

Off-CPU:
  perf record -g -e sched:sched_switch -p <pid>
  → 生成 Off-CPU 火焰图

常见误区

  • 误区:CPU 火焰图能看锁。CPU 火焰图只看 CPU 时间,锁等待要看 Off-CPU 火焰图。
  • 误区:锁等待不是问题。锁等待多说明并发瓶颈,要减少锁竞争。

追问

  • 问:怎么减少锁竞争?答:减少锁粒度、乐观锁、无锁数据结构、分片。
  • 问:锁火焰图和 CPU 火焰图区别?答:CPU 看计算,Off-CPU 看等待。

09.13.3-004 IO 火焰图怎么看?

一句话结论

IO 火焰图看线程在 IO 等待的时间;最宽的 IO 调用是 IO 瓶颈;用 Off-CPU 火焰图或 biolatency 工具看磁盘 IO 等待;IO 瓶颈通常是磁盘慢、网络慢、NFS 慢。

概念解释

  • IO 等待:线程在 read/write/poll 上阻塞。
  • IO 火焰图:IO 等待时间分布。
  • 瓶颈:磁盘、网络。

原理流程

Off-CPU 火焰图:
  最宽函数是 read()、write()
  → IO 瓶颈
  → 看是磁盘慢还是网络慢

代码或图示

IO 分析:
  iostat 看磁盘利用率
  netstat 看网络
  → 定位 IO 瓶颈

常见误区

  • 误区:CPU 火焰图能看 IO。CPU 火焰图看不到 IO 等待,要用 Off-CPU。
  • 误区:IO 瓶颈加机器就好。先看是磁盘慢还是网络慢,针对性优化。

追问

  • 问:磁盘 IO 怎么优化?答:批量写、SSD、缓存、异步刷盘。
  • 问:网络 IO 怎么优化?答:批量、压缩、长连接。

09.13.3-005 perf 怎么用?

一句话结论

perf 是 Linux 性能分析工具:perf record 采样 CPU,perf report 查看报告,perf script 导出调用栈;perf 可以采样 CPU、缓存、分支预测等事件;是 Linux 性能分析的基础工具。

概念解释

  • perf record:采样。
  • perf report:交互查看。
  • perf script:导出文本。

原理流程

# 采样
perf record -g -p 12345 -- sleep 10
# 交互查看
perf report
# 导出火焰图
perf script | stackcollapse-perf.pl | flamegraph.pl > cpu.svg

代码或图示

perf 常用:
  perf top:实时看 CPU
  perf record:采样
  perf report:分析

常见误区

  • 误区:perf 只能分析 CPU。perf 支持硬件事件(缓存、分支)和软件事件(调度、系统调用)。
  • 误区:perf 在生产不能用。perf 开销小(< 5%),可以在生产用。

追问

  • 问:perf 需要 root 吗?答:采样内核符号需要 root,用户态不需要。
  • 问:perf top 怎么用?答:实时看哪个函数占 CPU,快速定位热点。

09.13.3-006 async-profiler 是什么?

一句话结论

async-profiler 是 Java 性能分析工具:采样 CPU、锁分配、内存分配;不需要修改 JVM,attach 到运行中的 JVM;生成火焰图(Java + C++ 调用栈);是 Java 应用性能分析的常用工具。

概念解释

  • async-profiler:Java profiler。
  • 采样:CPU、锁、内存。
  • 火焰图:Java + 原生调用栈。

原理流程

# attach 到 JVM
./profiler.sh -d 30 -e cpu -f cpu.svg 12345
# -e lock:锁分析
# -e alloc:内存分配

代码或图示

async-profiler:
  Java 应用性能分析
  CPU、锁、内存火焰图

常见误区

  • 误区:async-profiler 是 Arthas。async-profiler 采样火焰图,Arthas 是交互式诊断,两者互补。
  • 误区:async-profiler 修改 JVM。它 attach,不修改 JVM。

追问

  • 问:async-profiler 和 JFR 区别?答:JFR 是 JDK 内置,async-profiler 更灵活,火焰图更友好。
  • 问:怎么生成火焰图?答:-f output.svg,直接生成火焰图。

09.13.3-007 火焰图和顶视有什么区别?

一句话结论

顶视(Top-down)从调用者开始看,上层是调用方;火焰图从被调用者开始看,下层是入口;顶视看"谁调用了什么",火焰图看"什么函数耗时";两者互补,火焰图找热点,顶视看调用路径。

概念解释

  • 顶视:调用方 → 被调用方。
  • 火焰图:从被调用方看热点。
  • 互补:火焰图找热点,顶视看调用路径。

原理流程

顶视:
  main → A → B → C
  看 main 调用了谁
火焰图:
  C 最宽 → 谁调用了 C?

代码或图示

对比:
  顶视:从上往下看调用路径
  火焰图:从下往上看热点

常见误区

  • 误区:火焰图和顶视一样。火焰图是被调用者视角,顶视是调用者视角。
  • 误区:用火焰图就够了。火焰图找热点,顶视看调用路径,互补。

追问

  • 问:什么时候用顶视?答:看某个函数被谁调用。
  • 问:什么时候用火焰图?答:找 CPU 热点。

09.13.3-008 热点定位流程是什么?

一句话结论

流程:1. 看监控(CPU、RT、错误率);2. 确定是 CPU、IO、还是锁;3. 用对应火焰图(CPU/Off-CPU)采样;4. 找最宽热点;5. 分析调用栈;6. 优化;7. 验证。

概念解释

  • 监控:先看指标,定位方向。
  • 火焰图:采样定位具体函数。
  • 优化:针对性优化。

原理流程

1. 监控:CPU 90%,RT 高
2. 判断:CPU 瓶颈
3. 采样:CPU 火焰图
4. 找热点:JSON.serialize 占 40%
5. 分析:谁调的、为什么调这么多
6. 优化:减少序列化次数
7. 验证:RT 降了

代码或图示

流程:
  监控 → 判断类型 → 采样 → 找热点 → 优化 → 验证

常见误区

  • 误区:直接采样。先看监控,判断方向,再采样。
  • 误区:优化后不验证。优化后要重新压测,验证效果。

追问

  • 问:监控看什么?答:CPU、内存、RT、GC、连接池。
  • 问:常见热点?答:JSON 序列化、正则、循环、锁。

09.13.3-009 火焰图采样多久合适?

一句话结论

采样 10~30 秒:太短采样数据少,不准;太长数据太大,热点不明显;采样要覆盖业务高峰(压测时或高峰期),不要在业务低峰采样。

概念解释

  • 采样时长:10~30 秒。
  • 业务高峰:压测时或高峰时段。

原理流程

压测时采样 10~30 秒
  → 覆盖高峰
  → 热点明显

代码或图示

采样时长:
  10~30 秒
  压测或高峰时

常见误区

  • 误区:采样 1 秒。1 秒数据太少,热点不明显。
  • 误区:采样 5 分钟。数据太大,热点被稀释。

追问

  • 问:什么时候采样?答:压测时或业务高峰时。
  • 问:采样间隔?答:perf 默认 99Hz,够用。

09.13.3-010 差量火焰图是什么?

一句话结论

差量火焰图对比两次采样:优化前 vs 优化后,差值 = 优化后 - 优化前;红色是优化后增加的,绿色是减少的;差量火焰图直观看到优化效果。

概念解释

  • 差量:两次采样对比。
  • 红色:增加。
  • 绿色:减少。

原理流程

优化前采样 → profile1
优化后采样 → profile2
差量火焰图 = profile2 - profile1
  绿色:优化后减少的(优化生效)
  红色:优化后增加的(退化)

代码或图示

# 生成差量火焰图
./profiler.sh -d 30 -f before.svg <pid>
# 优化后
./profiler.sh -d 30 -f after.svg <pid>
# 差量
diff-flamegraph.pl before.svg after.svg > diff.svg

常见误区

  • 误区:差量火焰图必须两次采样时长相同。采样时长和条件要一致,否则不准。
  • 误区:差量火焰图是高级功能。它是验证优化效果的好工具,简单实用。

追问

  • 问:差量火焰图谁做?答:开发优化后验证效果。
  • 问:差量怎么看?答:绿色越多优化越好,红色要警惕。

待整理清单

  • [ ] perf/async-profiler 常用命令
  • [ ] 火焰图分析案例
  • [ ] JVM 性能调优 checklist