Zabbix自动发现并监控磁盘IO、报警

**本文转载自： https://www.93bok.com** ## 引言 Zabbix并没有提供模板来监控磁盘的IO性能，所以我们需要自己来创建一个，由于一台服务器中磁盘众多，如果只有一两台可以手动添加，但服务集群达到几十那就非常麻烦，因此需要利用自动发现这个功能，自动发现后自动添加对服务器磁盘的监控，而且添加磁盘后也会自动添加到监控，实现自动化运维的效果，接下来我们就来看看怎么自动发现磁盘并自动监控磁盘的IO性能，再设置触发器，IO达到阈值后发出报警 ## iostat简介 iostat主要用于监控系统设备的IO负载情况，iostat首次运行时显示自系统启动开始的各项统计信息，之后运行iostat将显示自上次运行该命令以后的统计信息。用户可以通过指定统计的次数和时间来获得所需的统计信息。所以在使用iostat监控系统IO负载的时候，不要直接iostat取结果，而是iostat -dxkt 1 2取结果，否则得到的数据根本不正确 ## iostat安装 ```bash yum -y install sysstat ``` ```bash iostat常用参数说明 -c #仅显示CPU统计信息.与-d选项互斥. -d #仅显示磁盘统计信息.与-c选项互斥. -k #以K为单位显示每秒的磁盘请求数,默认单位块. -t #在输出数据时,打印搜集数据的时间. -V #打印版本号和帮助信息. -x #输出扩展信息. ``` ## iostat命令输出说明   #### 图一 **avg-cpu段:** ```bash %user: 在用户级别运行所使用的CPU的百分比. %nice: nice操作所使用的CPU的百分比. %sys: 在系统级别(kernel)运行所使用CPU的百分比. %iowait: CPU等待硬件I/O时,所占用CPU百分比. %idle: CPU空闲时间的百分比. ``` **Device段:** ```bash tps: 每秒钟发送到的I/O请求数. Blk_read /s: 每秒读取的block数. Blk_wrtn/s: 每秒写入的block数. Blk_read: 读入的block总数. Blk_wrtn: 写入的block总数. ``` #### 图二 ```bash rrqm/s：每秒读请求被合并次数 wrqm/s：每秒写请求被合并次数 r/s：每秒完成的读次数 w/s：每秒完成的写次数 rkB/s：每秒读数据量（kb） wkB/s：每秒写数据量（kb） avgrq-sz：平均每次IO请求的扇区大小 avgqu-sz：平均每次IO请求的队列长度（越短越好） await：平均每次IO请求等待时间（毫秒），一般的系统IO等待时间应该低于5ms，如果大于10ms就比较大了。这个时间包括了队列时间和服务时间，也就是说，一般情况下，await大于svctm，它们的差值越小，则说明队列时间越短，反之差值越大，队列时间越长，说明系统出了问题。 r_await：读的平均耗时（毫秒） w_await：写入平均耗时（毫秒） svctm：平均每次IO请求处理时间（毫秒），如果svctm的值与await很接近，表示几乎没有I/O等待，磁盘性能很好，如果await的值远高于svctm的值，则表示I/O队列等待太长，系统上运行的应用程序将变慢。 %util：IO队列非空比例，该参数暗示了设备的繁忙程度。一般地，如果该参数是100%表示设备已经接近满负荷运行了 ``` ## 一、在被监控端上编写自动发现和监控磁盘IO脚本 ##### 1、创建zabbix脚本存放目录 ```bash mkdir -p /etc/zabbix/scripts ``` ##### 2、编写自动发现磁盘脚本 ```bash vim /etc/zabbix/scriptshttps://img.qb5200.com/download-x/disk_discovery.sh #!/bin/bash ############################################################ # $Name: disk_discovery.sh # $Function: DISK DISCOVERY # $Author: Mr.nong # $organization: nongziyi.xin # $Create Date: 2018/1/25 # $Description: Monitor DISK DISCOVERY ############################################################ disk_array=(`grep -E "(vd[a-z]$|sd[a-z]$)" /proc/partitions | awk '{print $4}'`) length=${#disk_array[@]} printf "{\n" printf '\t'"\"data\":[" for ((i=0;i<$length;i++)) do printf '\n\t\t{' printf "\"{#DISK_NAME}\":\"${disk_array[$i]}\"}" if [ $i -lt $[$length-1] ];then printf ',' fi done printf "\n\t]\n" printf "}\n" ``` ##### 3、编写监控磁盘IO脚本 ```bash vim /etc/zabbix/scriptshttps://img.qb5200.com/download-x/disk_io.sh #!/bin/bash ############################################################ # $Name: disk_io.sh # $Function: DISK IO # $Author: Mr.nong # $organization: nongziyi.xin # $Create Date: 2018/1/25 # $Description: Monitor DISK IO ############################################################ Device=$1 DISK=$2 case $DISK in #每秒读请求被合并次数 rrqm_s) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $2}' ;; #每秒写请求被合并次数 wrqm_s) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $3}' ;; #每秒完成的读次数 r_s) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $4}' ;; #每秒完成的写次数 w_s) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $5}' ;; #每秒读数据量(kb) rkb_s) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $6}' ;; #每秒写数据量(kb) wkb_s) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $7}' ;; #平均每次IO请求的扇区大小 avgrq_sz) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $8}' ;; #平均每次IO请求的队列长度(越短越好) avgqu_sz) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $9}' ;; #平均每次IO请求等待时间(毫秒) await) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $10}' ;; #读的平均耗时(毫秒) r_await) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $11}' ;; #写入平均耗时(毫秒) w_await) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $12}' ;; #平均每次IO请求处理时间(毫秒) svctm) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $13}' ;; #IO队列非空比例 util) iostat -dxkt 1 2 | grep "\b$Device\b" | awk 'NR==2{print $14}' ;; esac ``` ##### 4、给予脚本执行权限 ```bash chmod +x /etc/zabbix/scriptshttps://img.qb5200.com/download-x/disk_* ``` ##### 5、编辑zabbix_agentd的配置文件支持自定义脚本 ```bash vim /etc/zabbix/zabbix_agentd.conf UnsafeUserParameters=1 ``` ##### 6、编辑zabbix_agentd的配置文件添加zabbix配置文件目录 ```bash vim /etc/zabbix/zabbix_agentd.conf Include=/etc/zabbix/zabbix_agentd.conf.d/ ``` ##### 7、创建disk_io的key文件 ```bash vim /etc/zabbix/zabbix_agentd.conf.dhttps://img.qb5200.com/download-x/disk_status.conf UserParameter=disk.discovery[*],/etc/zabbix/scriptshttps://img.qb5200.com/download-x/disk_discovery.sh UserParameter=disk.io[*],/etc/zabbix/scriptshttps://img.qb5200.com/download-x/disk_io.sh $1 $2 ``` ```bash 参数说明： 其中的格式为UserParameter=