ablog

perf + Flame Graphs で Linux カーネル内のボトルネックを特定する

Linux, perf

ddで1GBのファイルを作成し perf でプロファイリングし、Flame Graphs で可視化したものです。

下から上に行くほどコールスタックが深く、左から関数名のアルファベット順でソートされています。一番上で横幅が広い関数がCPUを長く使っています。今回は "_aesni_enc1" つまり暗号化がボトルネックになっていることがわかります。

Flame Graphs の見方

P.35

P.40

手順

• Flame Graphs を生成する Perl スクリプトをダウンロードする。

$ wget https://raw.githubusercontent.com/brendangregg/FlameGraph/master/stackcollapse-perf.pl
$ wget https://raw.githubusercontent.com/brendangregg/FlameGraph/master/flamegraph.pl

• root 以外でも perf を使えるようにする

# echo 0 > /proc/sys/kernel/perf_event_paranoid
# cat /proc/sys/kernel/perf_event_paranoid
0

• dd コマンドを実行し、perf でプロファイリングする。

$ perf record -a -g -F100000 dd if=/dev/zero of=/tmp/test.dat bs=1024K count=1000

• perf で取得したデータをテキストに変換する。

$ perf script> perf_data.txt

• Flame Graphs で可視化する。

$ perl stackcollapse-perf.pl perf_data.txt|perl flamegraph.pl --title "Flame Graphs - dd if=/dev/zero of=/tmp/test.dat bs=1024K count=1000" > flamegraph_dd.svg

環境

$ cat /etc/issue
Oracle Linux Server release 6.6
Kernel \r on an \m
$uname -r
2.6.39-400.17.1.el6uek.x86_64

参考

• Flame Graphs for Oracle | Databases at CERN
• Flame Graphs

関連

• 「シンプルでシステマチックなLinux性能分析方法」 @ db tech showcase 東京 2014 - ablog
• fulltime.sh by Craig Shallahamer で DB CPU の内訳を調べる - ablog
• sysのCPU使用率が高い場合にその内訳を調べる方法 - ablog

ツイートする

Permalink | コメント(0) | トラックバック(0) | 03:40