Perf分析CPU性能问题笔记

摘要：本文仅仅是一个笔记。因此同样可以用观察，但是会出现无法显示函数符号的问题，注意观察最下面一行解决办法是先用记录采样数据，然后将容器内文件系统绑定到上，然后用指定符号目录。观察容器内进程使用情况目前没有办法。

本文仅仅是一个笔记。

观察进程内各个函数的CPU使用情况：

sudo perf top -p 

同时显示函数调用链：

sudo perf top -g -p 

记录采样结果，以供后续分析，加上-g会记录调用链：

sudo perf record -g -p 

读取采样结果：

sudo perf report

容器内的进程实际上可以在host machine上看到，ps -ef | grep 可以找得到。

因此同样可以用perf top -p 观察，但是会出现无法显示函数符号的问题，注意观察perf top最下面一行：

Failed to open /opt/bitnami/php/lib/php/extensions/opcache.so, continuing without symbols

解决办法是先用perf record记录采样数据，然后将容器内文件系统绑定到host上，然后用perf report --symfs 指定符号目录。你得先安装bindfs（下面有安装方法）。

mkdir /tmp/foo
PID=$(docker inspect --format {{.State.Pid}} )
bindfs /proc/$PID/root /tmp/foo
perf report --symfs /tmp/foo

# 使用完成后不要忘记解除绑定
umount /tmp/foo/

把上面的改成你要观察的容器名。

你得要先安装perf-map-agent（下面有安装方法），在启动Java进程的时候添加-XX:+PreserveFramePointer参数，下面是几个用法：

perf-java-top

perf-java-record-stack

perf-java-report-stack

更多用法见官网说明。

还可以使用perf-java-flames 生成火焰图，你得先安装FlameGraph（下面有安装方法）。关于火焰图的解读看netflix的这篇博客。

目前没有办法。

下面讲的都是在Ubuntu 16.04系统上的安装方法。

安装perf

$ sudo apt install -y linux-tools-common

运行perf会出现：

$ perf
WARNING: perf not found for kernel 4.4.0-145

  You may need to install the following packages for this specific kernel:
    linux-tools-4.4.0-145-generic
    linux-cloud-tools-4.4.0-145-generic

  You may also want to install one of the following packages to keep up to date:
    linux-tools-generic
    linux-cloud-tools-generic

于是安装：

sudo apt install linux-tools-4.4.0-145-generic linux-cloud-tools-4.4.0-145-generic linux-cloud-tools-generic

到bindfs官网下载源码包（本文写是版本为1.13.11）。

先安装编译需要的工具：

sudo apt install -y cmake pkg-config libfuse-dev libfuse2 autoconf 

解压缩源码包，进入bindfs目录，编译：

./configure && make && sudo make install

到github clone perf-map-agent的源码仓库。

安装JDK，你之后要监测的程序都得用这个JDK启动，这个JDK也用来编译perf-map-agent。用apt安装openjdk的方法见下面。

编译：

cmake .
make

# will create links to run scripts in /usr/local/bin
sudo bin/create-links-in /usr/local/bin

sudo apt-get install -y openjdk-8-jdk

通过这种方式安装是没有JAVA_HOME环境变量的，因此我们要自己设置一个，查找openjdk的安装路径：

dpkg-query -L openjdk-8-jdk

将发现结果写到~/.bashrc里：

export JAVA_HOME=/usr/lib/jvm/java-8-openjdk-amd64

到github clone FlameGraph的源码仓库。

到~/.bashrc设置环境变量：

export FLAMEGRAPH_DIR=