Linux服务器随着业务的增加，会带来服务器的各种问题，比如CPU过高、load值过高、网卡流量过高、内存使用量过高等等。
Linux查看进程的方法有很多，但是想要找准哪个进程占的CPU、内存、以及I/O就要使用多种工具进行组合、最终找到问题所在。这篇文章讲述找出服务器I/O占用的原因及解决方法。
查看当前系统是否是由于I/O过高造成的原因，可以使用Linux最简单的也是最常用的工具top
12345 top - 09:24:57 up 360 days, 17:02, 2 users, load average: 5.69, 6.78, 7.04
Tasks: 200 total, 3 running, 197 sleeping, 0 stopped, 0 zombie
Cpu(s): 22.3%us, 5.9%sy, 0.0%ni, 51.3%id, 20.3%wa, 0.0%hi, 0.2%si, 0.0%st
Mem: 24592712k total, 24399804k used, 192908k free, 8852k buffers
Swap: 8388600k total, 4956692k used, 3431908k free, 17608380k cached
20.3%wa正是磁盘I/O占用CPU百分比的时间片。
查看哪个进程占用的I/O过高，使用iotop，ps，lsof
iotop
Total DISK READ: 57.94 M/s | Total DISK WRITE: 3.85 K/s
TID PRIO USER DISK READ DISK WRITE SWAPIN IO> COMMAND
4036 be/4 search 1076.67 K/s 26.92 K/s 0.00 % 99.99 % bs_r -f bin/conf/bs.conf -d
4040 be/4 search 1245.86 K/s 0.00 B/s 0.00 % 99.36 % bs_r -f bin/conf/bs.conf -d
20678 be/4 search 745.98 K/s 0.00 B/s 0.00 % 96.99 % mcreate -daemon
4039 be/4 search 2045.67 K/s 0.00 B/s 0.00 % 94.30 % bs_r -f bin/conf/bs.conf -d
4050 be/4 search 2.09 M/s 0.00 B/s 0.00 % 94.27 % bs_r -f bin/conf/bs.conf -d
4045 be/4 search 2.01 M/s 0.00 B/s 0.00 % 94.13 % bs_r -f bin/conf/bs.conf -d
4049 be/4 search 2.25 M/s 0.00 B/s 0.00 % 93.79 % bs_r -f bin/conf/bs.conf -d
4048 be/4 search 1641.92 K/s 0.00 B/s 0.00 % 93.62 % bs_r -f bin/conf/bs.conf -d
4029 be/4 search 1080.51 K/s 0.00 B/s 0.00 % 92.49 % bs_r -f bin/conf/bs.conf -d
4044 be/4 search 1538.10 K/s 0.00 B/s 0.00 % 91.64 % bs_r -f bin/conf/bs.conf -d
4032 be/4 search 1211.25 K/s 0.00 B/s 0.00 % 91.21 % bs_r -f bin/conf/bs.conf -d
4025 be/4 search 1899.55 K/s 0.00 B/s 0.00 % 90.32 % bs_r -f bin/conf/bs.conf -d
可以看出由于“bs_r -f bin/conf/bs.conf -d”这个进程占用总体I/O过高导致。
默认没有安装iotop，可以进行yum install iotop -y进行安装。
ps -eo state,pid,cmd
[root@localhost ~]# for x in `seq 1 1 10`;do ps -eo state,pid,cmd | grep "^D" ;echo "-------";sleep 1;done
D 4327 rsync -av ./data/idx3 172.16.175.193::MINI_SEARCH
D 8462 /data1/minisearch/intraexpress/bin/server/SearchServer_field -P 21751 -p 21750 -F /data1/minisearch/intraexpress/bin/conf/fields.ini -L /data1/minisearch/intraexpress/log -d
D 9804 date +updateattr %F %T
D 9854 /bin/sh /data1/minisearch/intranews3/3/bin/shell/idxserver.sh
D 9913 /bin/sh /data1/minisearch/intranews3/6/bin/shell/idxserver.sh
D 10510 /bin/sh /data1/minisearch/intranews3/6/bin/shell/absserver.sh
D 10615 /bin/sh /data1/minisearch/intranews3/3/bin/shell/absserver.sh
-------
D 4327 rsync -av ./data/idx3 172.16.175.193::MINI_SEARCH
D 8462 /data1/minisearch/intraexpress/bin/server/SearchServer_field -P 21751 -p 21750 -F /data1/minisearch/intraexpress/bin/conf/fields.ini -L /data1/minisearch/intraexpress/log -d
D 9804 date +updateattr %F %T
D 9854 /bin/sh /data1/minisearch/intranews3/3/bin/shell/idxserver.sh
D 9913 /bin/sh /data1/minisearch/intranews3/6/bin/shell/idxserver.sh
D 10510 /bin/sh /data1/minisearch/intranews3/6/bin/shell/absserver.sh
D 10615 /bin/sh /data1/minisearch/intranews3/3/bin/shell/absserver.sh
D 31670 [jbd2/sda6-8]
-------
D 4327 rsync -av ./data/idx3 172.16.175.193::MINI_SEARCH
D 8462 /data1/minisearch/intraexpress/bin/server/SearchServer_field -P 21751 -p 21750 -F /data1/minisearch/intraexpress/bin/conf/fields.ini -L /data1/minisearch/intraexpress/log -d
D 9804 date +updateattr %F %T
D 9854 /bin/sh /data1/minisearch/intranews3/3/bin/shell/idxserver.sh
D 9913 /bin/sh /data1/minisearch/intranews3/6/bin/shell/idxserver.sh
D 10510 /bin/sh /data1/minisearch/intranews3/6/bin/shell/absserver.sh
D 10615 /bin/sh /data1/minisearch/intranews3/3/bin/shell/absserver.sh
D 11182 awk -F {print $1;}
D 31670 [jbd2/sda6-8]