Procs（进程）

• r: 运行队列中进程数量，这个值也可以判断是否需要增加CPU。（长期大于1）

• b: 等待IO的进程数量，也就是处在非中断睡眠状态的进程数，展示了正在执行和等待CPU资源的任务个数。当这个值超过了CPU数目，就会出现CPU瓶颈了

Memory（内存）

• swpd: 使用虚拟内存大小，如果swpd的值不为0，但是SI，SO的值长期为0，这种情况不会影响系统性能。

• free: 空闲物理内存大小。

• buff: 用作缓冲的内存大小。

• cache: 用作缓存的内存大小，如果cache的值大的时候，说明cache处的文件数多，如果频繁访问到的文件都能被cache处，那么磁盘的读IO bi会非常小。

Swap

• si: 每秒从交换区写到内存的大小，由磁盘调入内存。

• so: 每秒写入交换区的内存大小，由内存调入磁盘。

注意：内存够用的时候，这2个值都是0，如果这2个值长期大于0时，系统性能会受到影响，磁盘IO和CPU资源都会被消耗。有些朋友看到空闲内存（free）很少的或接近于0时，就认为内存不够用了，不能光看这一点，还要结合si和so，如果free很少，但是si和so也很少（大多时候是0），那么不用担心，系统性能这时不会受到影响的。

IO（现在的Linux版本块的大小为1kb）

• bi: 每秒读取的块数

• bo: 每秒写入的块数

注意：随机磁盘读写的时候，这2个值越大（如超出1024k)，能看到CPU在IO等待的值也会越大。

system（系统）

• in: 每秒中断数，包括时钟中断。

• cs: 每秒上下文切换数。

注意：上面2个值越大，会看到由内核消耗的CPU时间会越大。

CPU（以百分比表示）

• us: 用户进程执行时间百分比(user time)

us的值比较高时，说明用户进程消耗的CPU时间多，但是如果长期超50%的使用，那么我们就该考虑优化程序算法或者进行加速。

• sy: 内核系统进程执行时间百分比(system time)

sy的值高时，说明系统内核消耗的CPU资源多，这并不是良性表现，我们应该检查原因。

• wa: IO等待时间百分比

wa的值高时，说明IO等待比较严重，这可能由于磁盘大量作随机访问造成，也有可能磁盘出现瓶颈（块操作）。

• id: 空闲时间百分比

rrqm/s:    每秒进行 merge 的读操作数目。即 delta(rmerge)/s

wrqm/s:    每秒进行 merge 的写操作数目。即 delta(wmerge)/s

r/s:       每秒完成的读 I/O 设备次数。即 delta(rio)/s

w/s:       每秒完成的写 I/O 设备次数。即 delta(wio)/s

rsec/s:    每秒读扇区数。即 delta(rsect)/s

wsec/s:    每秒写扇区数。即 delta(wsect)/s

rkB/s:     每秒读K字节数。是 rsect/s 的一半，因为每扇区大小为512字节。(需要计算)

wkB/s:     每秒写K字节数。是 wsect/s 的一半。(需要计算)

avgrq-sz:  平均每次设备I/O操作的数据大小 (扇区)。delta(rsect+wsect)/delta(rio+wio)

avgqu-sz:  平均I/O队列长度。即 delta(aveq)/s/ (因为aveq的单位为毫秒)。

await:     平均每次设备I/O操作的等待时间 (毫秒)。即 delta(ruse+wuse)/delta(rio+wio)

svctm:     平均每次设备I/O操作的服务时间 (毫秒)。即 delta(use)/delta(rio+wio)

%util:     一秒中有百分之多少的时间用于 I/O 操作，或者说一秒中有多少时间 I/O 队列是非空的。即 delta(use)/s/ (因为use的单位为毫秒)

PROCESS STATE CODES

 D uninterruptible sleep (usually IO)

 R running or runnable (on run queue)

 S interruptible sleep (waiting for an event to complete)

 T stopped, either by a job control signal or because it is being traced.

 W paging (not valid since the 2.6.xx kernel)

 X dead (should never be seen)

 Z defunct ("zombie") process, terminated but not reaped by its parent.

for x in `seq `; do ps -eo state,pid,cmd | grep "^D"; echo "----"; sleep ; done

 D  [jbd2/dm--]

 D  bonnie++ -n  -u  -r  -s  -f -b -d /tmp

 ----

 D  [kdmflush]

 D  bonnie++ -n  -u  -r  -s  -f -b -d /tmp

 ----

# 或者：

while true; do date; ps auxf | awk '{if($8=="D") print $0;}'; sleep ; done

 Tue Aug  :: CLT

 root         0.0  0.0            ?        D    May22   :  \_ [kdmflush]

 root         0.0  0.0            ?        D    May22   :  \_ [jbd2/dm--]

 Tue Aug  :: CLT

 Tue Aug  :: CLT 

cat /proc//io

 rchar:

 wchar:

 syscr:

 syscw:

 read_bytes:

 write_bytes:

 cancelled_write_bytes: 

lsof -p

 COMMAND PID USER FD TYPE DEVICE SIZE/OFF NODE NAME

 bonnie++  root cwd DIR ,   /tmp

 <truncated>

 bonnie++  root 8u REG ,   /tmp/Bonnie.

 bonnie++  root 9u REG ,   /tmp/Bonnie.

 bonnie++  root 10u REG ,   /tmp/Bonnie.

 bonnie++  root 11u REG ,   /tmp/Bonnie.

 bonnie++  root 12u REG ,   <strong>/tmp/Bonnie.</strong>

df /tmp

 Filesystem 1K-blocks Used Available Use% Mounted on

 /dev/mapper/workstation-root    % /

fuser -vm /tmp

        USER        PID ACCESS COMMAND

 /tmp:  db2fenc1    ....m db2fmp

        db2fenc1    ....m db2fmp

        db2fenc1    ....m db2fmp

        db2fenc1    ....m db2fmp