09.13.3 火焰图与热点定位
所属:全栈开发面试题库 / 09 高阶架构:高并发与分布式 / 09.13 压测与调优实战
覆盖范围
- 火焰图原理与阅读
- CPU 火焰图
- 锁与 IO 火焰图
- perf 与 async-profiler
- 热点定位流程
高频题速览
| 编号 | 题目 | 难度 | 频率 |
|---|---|---|---|
| 09.13.3-001 | 火焰图怎么看 | 进阶 | ★★★★☆ |
| 09.13.3-002 | CPU 火焰图怎么定位热点 | 进阶 | ★★★★☆ |
| 09.13.3-003 | 锁火焰图怎么看 | 高级 | ★★★☆☆ |
| 09.13.3-004 | IO 火焰图怎么看 | 高级 | ★★★☆☆ |
| 09.13.3-005 | perf 怎么用 | 进阶 | ★★★☆☆ |
| 09.13.3-006 | async-profiler 是什么 | 进阶 | ★★★☆☆ |
| 09.13.3-007 | 火焰图和顶视对比 | 基础 | ★★★☆☆ |
| 09.13.3-008 | 热点定位流程 | 进阶 | ★★★☆☆ |
| 09.13.3-009 | 火焰图采样多久合适 | 基础 | ★★☆☆☆ |
| 09.13.3-010 | 差量火焰图 | 高级 | ★★☆☆☆ |
09.13.3-001 火焰图怎么看?
一句话结论
火焰图横轴是采样占比(宽 = CPU 时间占比),纵轴是调用栈(上是调用方,下是被调用方);最宽的函数是热点;从下往上看,找最宽的平顶;火焰图是采样 CPU profile 的可视化。
概念解释
- 横轴:采样占比,宽 = 占比大。
- 纵轴:调用栈,下层调上层。
- 热点:最宽的函数。
原理流程
火焰图:
底部:main()
上层:被调用的函数
最宽:热点函数
代码或图示
阅读:
找最宽的平顶
→ 该函数 CPU 占比大
→ 从该函数往下看调用栈
常见误区
- 误区:纵轴宽是热点。横轴宽才是热点(占比),纵轴是调用栈深度。
- 误区:火焰图从上往下看。从下往上看调用栈,找最宽的平顶。
追问
- 问:火焰图怎么生成?答:perf record → perf script → FlameGraph,或 async-profiler。
- 问:火焰图颜色?答:颜色无意义,宽是重点。
09.13.3-002 CPU 火焰图怎么定位热点?
一句话结论
CPU 火焰图定位热点:1. 采样 10~30 秒;2. 找最宽的平顶函数;3. 看该函数调用栈;4. 判断是计算密集(循环)还是 IO 等待(系统调用);5. 优化热点函数(减少循环、优化算法、缓存)。
概念解释
- 采样:perf 采样 CPU。
- 热点:最宽函数。
- 优化:减少热点函数 CPU 时间。
原理流程
1. perf record -g -p <pid> -- sleep 10
2. 生成火焰图
3. 找最宽函数(如 JSON.serialize)
4. 看调用栈:谁调的、调了什么
5. 优化:减少 JSON 序列化次数
代码或图示
perf 命令:
perf record -g -p 12345 -- sleep 10
perf script | stackcollapse-perf.pl | flamegraph.pl > cpu.svg
常见误区
- 误区:火焰图只看最宽函数。最宽函数可能是等待(IO),要看调用栈判断是计算还是等待。
- 误区:采样越久越好。采样 10~30 秒足够,太久采样数据太大。
追问
- 问:怎么判断 IO 等待?答:火焰图里最宽的是系统调用(read、write),说明是 IO 瓶颈。
- 问:怎么优化?答:计算密集优化算法,IO 密集用异步、批量。
09.13.3-003 锁火焰图怎么看?
一句话结论
锁火焰图(Off-CPU 火焰图)看线程在锁上等待的时间;最宽的锁等待是锁竞争热点;Off-CPU 火焰图采样线程阻塞时间(锁、IO、sleep),找谁在等锁。
概念解释
- Off-CPU:线程不在 CPU 上(等待锁、IO、sleep)。
- 锁火焰图:等待锁的时间分布。
- 热点:最宽的锁等待。
原理流程
Off-CPU 采样:
记录线程阻塞时的调用栈
→ 生成火焰图
→ 最宽 = 锁等待最多
代码或图示
Off-CPU:
perf record -g -e sched:sched_switch -p <pid>
→ 生成 Off-CPU 火焰图
常见误区
- 误区:CPU 火焰图能看锁。CPU 火焰图只看 CPU 时间,锁等待要看 Off-CPU 火焰图。
- 误区:锁等待不是问题。锁等待多说明并发瓶颈,要减少锁竞争。
追问
- 问:怎么减少锁竞争?答:减少锁粒度、乐观锁、无锁数据结构、分片。
- 问:锁火焰图和 CPU 火焰图区别?答:CPU 看计算,Off-CPU 看等待。
09.13.3-004 IO 火焰图怎么看?
一句话结论
IO 火焰图看线程在 IO 等待的时间;最宽的 IO 调用是 IO 瓶颈;用 Off-CPU 火焰图或 biolatency 工具看磁盘 IO 等待;IO 瓶颈通常是磁盘慢、网络慢、NFS 慢。
概念解释
- IO 等待:线程在 read/write/poll 上阻塞。
- IO 火焰图:IO 等待时间分布。
- 瓶颈:磁盘、网络。
原理流程
Off-CPU 火焰图:
最宽函数是 read()、write()
→ IO 瓶颈
→ 看是磁盘慢还是网络慢
代码或图示
IO 分析:
iostat 看磁盘利用率
netstat 看网络
→ 定位 IO 瓶颈
常见误区
- 误区:CPU 火焰图能看 IO。CPU 火焰图看不到 IO 等待,要用 Off-CPU。
- 误区:IO 瓶颈加机器就好。先看是磁盘慢还是网络慢,针对性优化。
追问
- 问:磁盘 IO 怎么优化?答:批量写、SSD、缓存、异步刷盘。
- 问:网络 IO 怎么优化?答:批量、压缩、长连接。
09.13.3-005 perf 怎么用?
一句话结论
perf 是 Linux 性能分析工具:perf record 采样 CPU,perf report 查看报告,perf script 导出调用栈;perf 可以采样 CPU、缓存、分支预测等事件;是 Linux 性能分析的基础工具。
概念解释
- perf record:采样。
- perf report:交互查看。
- perf script:导出文本。
原理流程
# 采样
perf record -g -p 12345 -- sleep 10
# 交互查看
perf report
# 导出火焰图
perf script | stackcollapse-perf.pl | flamegraph.pl > cpu.svg
代码或图示
perf 常用:
perf top:实时看 CPU
perf record:采样
perf report:分析
常见误区
- 误区:perf 只能分析 CPU。perf 支持硬件事件(缓存、分支)和软件事件(调度、系统调用)。
- 误区:perf 在生产不能用。perf 开销小(< 5%),可以在生产用。
追问
- 问:perf 需要 root 吗?答:采样内核符号需要 root,用户态不需要。
- 问:perf top 怎么用?答:实时看哪个函数占 CPU,快速定位热点。
09.13.3-006 async-profiler 是什么?
一句话结论
async-profiler 是 Java 性能分析工具:采样 CPU、锁分配、内存分配;不需要修改 JVM,attach 到运行中的 JVM;生成火焰图(Java + C++ 调用栈);是 Java 应用性能分析的常用工具。
概念解释
- async-profiler:Java profiler。
- 采样:CPU、锁、内存。
- 火焰图:Java + 原生调用栈。
原理流程
# attach 到 JVM
./profiler.sh -d 30 -e cpu -f cpu.svg 12345
# -e lock:锁分析
# -e alloc:内存分配
代码或图示
async-profiler:
Java 应用性能分析
CPU、锁、内存火焰图
常见误区
- 误区:async-profiler 是 Arthas。async-profiler 采样火焰图,Arthas 是交互式诊断,两者互补。
- 误区:async-profiler 修改 JVM。它 attach,不修改 JVM。
追问
- 问:async-profiler 和 JFR 区别?答:JFR 是 JDK 内置,async-profiler 更灵活,火焰图更友好。
- 问:怎么生成火焰图?答:-f output.svg,直接生成火焰图。
09.13.3-007 火焰图和顶视有什么区别?
一句话结论
顶视(Top-down)从调用者开始看,上层是调用方;火焰图从被调用者开始看,下层是入口;顶视看"谁调用了什么",火焰图看"什么函数耗时";两者互补,火焰图找热点,顶视看调用路径。
概念解释
- 顶视:调用方 → 被调用方。
- 火焰图:从被调用方看热点。
- 互补:火焰图找热点,顶视看调用路径。
原理流程
顶视:
main → A → B → C
看 main 调用了谁
火焰图:
C 最宽 → 谁调用了 C?
代码或图示
对比:
顶视:从上往下看调用路径
火焰图:从下往上看热点
常见误区
- 误区:火焰图和顶视一样。火焰图是被调用者视角,顶视是调用者视角。
- 误区:用火焰图就够了。火焰图找热点,顶视看调用路径,互补。
追问
- 问:什么时候用顶视?答:看某个函数被谁调用。
- 问:什么时候用火焰图?答:找 CPU 热点。
09.13.3-008 热点定位流程是什么?
一句话结论
流程:1. 看监控(CPU、RT、错误率);2. 确定是 CPU、IO、还是锁;3. 用对应火焰图(CPU/Off-CPU)采样;4. 找最宽热点;5. 分析调用栈;6. 优化;7. 验证。
概念解释
- 监控:先看指标,定位方向。
- 火焰图:采样定位具体函数。
- 优化:针对性优化。
原理流程
1. 监控:CPU 90%,RT 高
2. 判断:CPU 瓶颈
3. 采样:CPU 火焰图
4. 找热点:JSON.serialize 占 40%
5. 分析:谁调的、为什么调这么多
6. 优化:减少序列化次数
7. 验证:RT 降了
代码或图示
流程:
监控 → 判断类型 → 采样 → 找热点 → 优化 → 验证
常见误区
- 误区:直接采样。先看监控,判断方向,再采样。
- 误区:优化后不验证。优化后要重新压测,验证效果。
追问
- 问:监控看什么?答:CPU、内存、RT、GC、连接池。
- 问:常见热点?答:JSON 序列化、正则、循环、锁。
09.13.3-009 火焰图采样多久合适?
一句话结论
采样 10~30 秒:太短采样数据少,不准;太长数据太大,热点不明显;采样要覆盖业务高峰(压测时或高峰期),不要在业务低峰采样。
概念解释
- 采样时长:10~30 秒。
- 业务高峰:压测时或高峰时段。
原理流程
压测时采样 10~30 秒
→ 覆盖高峰
→ 热点明显
代码或图示
采样时长:
10~30 秒
压测或高峰时
常见误区
- 误区:采样 1 秒。1 秒数据太少,热点不明显。
- 误区:采样 5 分钟。数据太大,热点被稀释。
追问
- 问:什么时候采样?答:压测时或业务高峰时。
- 问:采样间隔?答:perf 默认 99Hz,够用。
09.13.3-010 差量火焰图是什么?
一句话结论
差量火焰图对比两次采样:优化前 vs 优化后,差值 = 优化后 - 优化前;红色是优化后增加的,绿色是减少的;差量火焰图直观看到优化效果。
概念解释
- 差量:两次采样对比。
- 红色:增加。
- 绿色:减少。
原理流程
优化前采样 → profile1
优化后采样 → profile2
差量火焰图 = profile2 - profile1
绿色:优化后减少的(优化生效)
红色:优化后增加的(退化)
代码或图示
# 生成差量火焰图
./profiler.sh -d 30 -f before.svg <pid>
# 优化后
./profiler.sh -d 30 -f after.svg <pid>
# 差量
diff-flamegraph.pl before.svg after.svg > diff.svg
常见误区
- 误区:差量火焰图必须两次采样时长相同。采样时长和条件要一致,否则不准。
- 误区:差量火焰图是高级功能。它是验证优化效果的好工具,简单实用。
追问
- 问:差量火焰图谁做?答:开发优化后验证效果。
- 问:差量怎么看?答:绿色越多优化越好,红色要警惕。
待整理清单
- [ ] perf/async-profiler 常用命令
- [ ] 火焰图分析案例
- [ ] JVM 性能调优 checklist