Linux 性能工具链实战：perf、ftrace、eBPF 与火焰图完全指南¶
1. 现代 Linux 性能剖析三剑客对比¶
flowchart TD
subgraph Toolchain ["Linux 性能观测三剑客"]
T_Perf["1. perf (Linux 原生性能事件子系统)\n• 硬件 PMU 计数器直读与周期采样\n• 生成 On-CPU / Off-CPU 火焰图"]
T_Ftrace["2. ftrace (内核内部函数跟踪器)\n• 内核函数进出时间戳 (function_graph)\n• 关中断 / 关抢占长尾延迟捕获 (irqsoff)"]
T_eBPF["3. eBPF (内核虚拟机动态可编程探针)\n• 生产环境无侵入动态注入 (kprobe / uprobe)\n• 毫秒/微秒级延迟直方图统计 (BCC / bpftrace)"]
end
2. On-CPU 火焰图生成全流程与采样实战¶
flowchart LR
Run["perf record -F 99 -a -g -- sleep 30\n(全核 99Hz 采样 30 秒)"] --> Script["perf script > out.perf\n(解析为调用栈文本)"]
Script --> Collapse["stackcollapse-perf.pl out.perf > out.folded\n(折叠相同调用链)"]
Collapse --> SVG["flamegraph.pl out.folded > perf.svg\n(生成矢量火焰图)"]
- 火焰图判读法：
- X 轴（宽度）：代表该函数及其子函数占用 CPU 采样周期的相对比例（越宽耗费 CPU 越多）；
- Y 轴（高度）：代表函数调用栈深度（最顶端为当前正在执行的叶子函数）；
- 优化目标：寻找火焰图顶端最平、最宽的“平顶山”（Plateau），此处即为最核心的性能热点。
3. 使用 ftrace 捕捉微秒级关中断（IRQ-off）延迟¶
当实时任务出现偶发性响应超时时，使用 irqsoff 跟踪器定位内核最长关中断代码段：
# 挂载 tracefs
cd /sys/kernel/debug/tracing
# 1. 设置跟踪器为 irqsoff (追踪 local_irq_disable 到 enable 的最长区间)
echo irqsoff > current_tracer
# 2. 设置延迟捕获阈值 (例如超过 100μs 记录)
echo 100 > tracing_thresh
# 3. 开启跟踪
echo 1 > tracing_on
# ... 运行测试负载 ...
echo 0 > tracing_on
# 4. 查看捕获报告 (精准指出关中断的起始/结束函数及调用栈)
cat trace | head -n 30