iotop可以让我们很方便的找出哪个进程在消耗大量的IO资源。也就是统计出进程的IO量。 这个命令的统计结果，是真实的IO消耗的统计,一般排行在靠前的进程，说明消耗IO资源 较多。具体磁盘忙不忙，还要看IO吞吐量。 示例如下:

Total DISK READ :       0.00 B/s | Total DISK WRITE :     137.02 K/s

Actual DISK READ:       0.00 B/s | Actual DISK WRITE:     207.49 K/s

  TID  PRIO  USER     DISK READ  DISK WRITE  SWAPIN     IO>    COMMAND

 5965 be/4 adb         0.00 B/s   62.64 K/s  0.00 %  0.28 % postgres: wal writer process

 5908 be/4 adb         0.00 B/s   15.66 K/s  0.00 %  0.00 % postgres: logger process

 5952 be/4 adb         0.00 B/s   11.74 K/s  0.00 %  0.00 % postgres: logger process

 5953 be/4 adb         0.00 B/s   15.66 K/s  0.00 %  0.00 % postgres: logger process

 5967 be/4 adb         0.00 B/s   15.66 K/s  0.00 %  0.00 % postgres: stats collector process

 ........

输出结果以IO列做降序排列，固定的时间(默认1秒)间隔刷新一次结果。有了进程编号， 我们就可以很方便的分析，定位高IO产生的原因。 或者直接输入 iotop -boP 命令, 将 每秒输出一次IO统计和正在使用IO的进程。如果使用IO的进程较多，还是不加参数方便

不过有些环境，并没有安装iotop工具,那么我们怎么办？其实iotop命令，获取的数据就 是存储在/proc/<pid>/io文件中。比如:

#cat /proc/5977/io

rchar: 29381

wchar: 4369248962

syscr: 29379

syscw: 96033

read_bytes: 0

write_bytes: 4369088512

cancelled_write_bytes: 0

我们完全可以通过自己写脚本来实现基本的统计，比如每秒哪个进程读写最高。

pidstat 这个命令，也是可以用来做高IO等待的性能分析的。而且也非常方便实用。

我们可以通过 pidstat -d <interval> 来输出进程的消耗情况。

pidstat -d 1 1

12时56分51秒       PID   kB_rd/s   kB_wr/s kB_ccwr/s  Command

12时56分53秒      3348      0.00     20.00      0.00  jbd2/dm-2-8

12时56分53秒      3679      0.00      6.00      0.00  rsyslogd

12时56分53秒     22903      0.00    724.00      0.00  ns-slapd

12时56分53秒     44188      0.00     18.00      0.00  java

12时56分53秒     47980      0.00      4.00      0.00  java

也可以进行条件判断，取出关心的数据。比如:

pidstat -dl| head -3;pidstat -dl |awk '{if ($4 >10 || $3 > 10) print $0}'

这一行的本意是输出读或者写大于10K的进程，但是由于不同操作系统设置不同，读和写的列不一定是第3和第4列。 因此执行前，需要先确认。

note

pidstat -d 的输出，默认是以Pid 进行升序排列的。