Linux系统磁盘IO监控
iostat命令介绍
磁盘IO的监控需要使用iostat命令(自行安装sysstat) iostat 用于输出CPU和磁盘IO相关统计信息 iostat可以显示CPU和IO系统的负载情况及分区状态信息，直接执行iostat可以显示下面内容：
CPU段配置说明
avg-cpu :
%user: 用户空间使用CPU百分比
%nice: nice使用
%system: 系统使用(kernel)CPU百分比
%iowait: CPU等待硬盘IO，所用的百分比
%steal: 系统偷出的CPU百分比
%idle: 系统空闲百分比
备注：
如果%iowait的值过高，表示硬盘存在I/O瓶颈
如果%idle值高，表示CPU较空闲
如果%idle值高但系统响应慢时，可能是CPU等待分配内存，应加大内存容量。
如果%idle值持续低于10，表明CPU处理能力相对较低，系统中最需要解决的资源是CPU。
Device磁盘段配置说明
tps: 每秒发送到到IO请求数
kB_read/s：每秒从磁盘读出的数据量，单位是KB
kB_wrtn/s：每秒从磁盘写入的数据量, 单位是KB
kB_read： 开机之后从磁盘读出的数据量，单位是KB
kB_wrtn： 开机之后从磁盘写入的数据量，单位是KB
iostat 命令使用
iostat 2 3 每隔2秒显示，显示3次
iostat -k 以KB为单位
iostat -m 以MB为单位
iostat -c 仅显示CPU
iostat -d 仅显示磁盘
iostat -x 显示详细信息
iostat -d -k -x 1 1 查看设备使用率(%util)、响应时间(await)
iostat -xdtk 5 3 > /tmp/iostat_temp.txt //每隔5秒刷新一次，总共显示3次
配置介绍：
rrqm/s： 每秒进行merge的读操作数目，即rmerge/s
wrqm/s： 每秒进行merge的写操作数目，即wmerge/s
r/s: 每秒完成的读IO设备次数, rio/s
w/s: 每秒完成的写IO设备次数, wio/s
rkB/s: 每秒读K字节数,KB/s
wkB/s: 每秒写K字节数，KB/s
avgrq-sz：平均每次设备IO操作的数据大小
avgqu-sz: 平均每次设备IO队列长度
Await: 平均每次设备IO操作的等待时间，ms
Svctm: 平均每次设备IO操作的服务时间,ms
%util：一秒中有百分之多少的时间用于 I/O，即被消耗的CPU百分比
如果%util接近100%，说明产生的I/O请求太多，I/O系统已经满负荷
idle小于70% IO压力就较大了，一般读取速度有较多的wait。
监控配置
获取IO使用情况,增加计划任务
[root@zabbix ~]#cat /etc/zabbix/scripts/disk_iostat.sh
# !/bin/bash
iostat -xdtk 5 3 > /tmp/iostat_temp.txt
times=`date "+%Y"年0"%h%d"日" %H"时"%M"分"%S"秒""`
grep "$times" -A 100 /tmp/iostat_temp.txt > /tmp/iostat_temp2.txt
[root@zabbix ~]# cat /etc/crontab
*/1 * * * * root /bin/bash /etc/zabbix/scripts/disk_iostat.sh
获取磁盘名字
[root@zabbix ~]#cat /etc/zabbix/scripts/disk_scan.sh
#!/bin/bash
diskarray=(`cat /proc/diskstats |grep -E "\bsd[abcdefg]\b"|awk '{print $3}'|sort|uniq 2>/dev/null`)
length=${#diskarray[@]}
printf "{\n"
printf '\t'"\"data\":["
for ((i=0;i<$length;i++))
do
printf '\n\t\t{'
printf "\"{#DISK_NAME}\":\"${diskarray[$i]}\"}"
if [ $i -lt $[$length-1] ];then
printf ','
fi
done
printf "\n\t]\n"
printf "}\n"
从文本中获取IO使用情况
[root@localhost ~]# cat disk.io.sh
#!/bin/bash
Disk=$1
case $2 in
riops)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $4}';;
wiops)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $5}';;
rkBps)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $6}';;
wkBps)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $7}';;
avgrq)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $8}';;
avgqu)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $9}';;
await)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $10}';;
svctm)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $11}';;
util)
grep "$Disk" /tmp/iostat_temp2.txt |awk '{print $12}';;
esac
增加监控项
[root@zabbix ~]#cat /etc/zabbix/zabbix_agentd.conf
UserParameter=discovery.io.disk,/etc/zabbix/scripts/disk_scan.sh
UserParameter=io.status[*],/etc/zabbix/scripts/disk.io.sh $1 $2
[root@zabbix ~]#systemctl restart zabbix-agent
几个命令介绍
top： http://www.jb51.net/LINUXjishu/34604.html
vmstat： http://www.jb51.net/LINUXjishu/152024.html
iostat： http://www.jb51.net/LINUXjishu/152032.html
free： http://www.jb51.net/LINUXjishu/10945.html
汇总： http://www.cnblogs.com/taosim/articles/4054142.html
iostat ，将对系统的磁盘操作活动进行监视
1、%iowait<20 为好，=35为坏，>=50为糟糕，如果%iowait的值过高，表示硬盘存在I/O瓶颈。
（%iowait：CPU等待输入输出完成时间的百分比）
2、若%idle值高，表示CPU较空闲，如果%idle值高但系统响应慢时，有可能是CPU等待分配内 存，此时应加大内存容量。%idle值如果持续低于10，那么系统的CPU处理能力相对较低，表明系统中最需要解决的资源是CPU。（%idle：CPU空闲时间百分比）
3、命令：iostat -d -x -k 1 1
4、如果 %util 接近 100%，说明产生的I/O请求太多，I/O系统已经满负荷，该磁盘可能存在瓶颈。（%util: 一秒中有百分之多少的时间用于 I/O 操作，即被io消耗的cpu百分比）
4 %idle小于70% IO压力就较大了，一般读取速度有较多的wait。
5、 可以结合vmstat 查看查看b参数(等待资源的进程数)和wa参数(IO等待所占用的CPU时间的百分比，高过30%时IO压力高)。
6 avgqu-sz 也是个做 IO 调优时需要注意的地方，这个就是直接每次操作的数据的大小，如果次数多，但数据拿的小的话，其实 IO 也会很小。如 果数据拿的大，才IO 的数据会高。也可以通过 avgqu-sz × ( r/s or w/s ) = rsec/s or wsec/s。也就是 讲，读定速度是这个来决定的。（avgqu-sz: 平均I/O队列长度。）、(r/s: 每秒完成的读 I/O 设备次数。即 rio/s)、(w/s: 每秒完成的写 I/O 设备次数。即 wio/s)
7 如果 svctm 比较接 近 await，说明 I/O 几乎没有等待时间；如果 await 远大于 svctm，说明I/O 队列太长，io响应太慢，则需要进行必要优化。如 果avgqu-sz比较大，也表示有大量io在等待。
其中的svctm一项，反应了磁盘的负载情况，如果该项大于15ms，并且util%接近100%，那就说明，磁盘现在是整个系统性能的瓶颈
await: 平均每次设备I/O操作的等待时间 (毫秒)。
svctm: 平均每次设备I/O操作的服务时间 (毫秒)。
