zabbix实现对磁盘动态监控

前言

zabbix一直是小规模互联网公司服务器性能监控首选,首先是免费,其次,有专门的公司和社区开发维护,使其稳定性和功能都在不断地增强和完善。zabbix拥有详细的UI界面和分组策略,在被监控的服务器上安装好agent后,无需添加任何监控选项,因为zabbix自带一些必要的监控,如agent.ping之类,zabbix支持画图,这个是专门给boss们看的,极其重要。另外还支持用户自定义监控选项,这一点非常方便,今天我要说的就是磁盘监控,标题中为动态的监控,意指智能的识别磁盘个数,并生成相应的监控选项,因为每台服务器的磁盘可能不一样,所以我是使用zabbix的discovery方式。

个人认为其UI界面是比较复杂的,但是毕竟越复杂越显得高端。我常用的不算configure和administration标签下所有的选项(这是必不可少的),也就graphs和screen,这两个选项是在monitor标签下的,也是BOSS们最关注的。

自动寻找磁盘

说到底,所有的自动判断都是人为的设置好所有的可能性,然后根据实际情况从中选择,方法有很多,看大家具体要求。在这里,我要对磁盘监控,首先要找出有哪些磁盘,这里使用shell脚本实现。由于zabbix的discovery需要固定的格式,具体可以参考这里,最下面部分。

脚本如下:

 1 #!/bin/bash
2 #written by lenwood
3 #mail:ccyhaoran@live.cn
4 diskarray=(`cat /proc/diskstats |grep -E "\bsd[abcdefg]\b|\bxvd[abcdefg]\b"|grep -i "\b$1\b"|awk '{print $3}'|sort|uniq 2>/dev/null`)
5 length=${#diskarray[@]}
6 printf "{\n"
7 printf '\t'"\"data\":["
8 for ((i=0;i<$length;i++))
9 do
10 printf '\n\t\t{'
11 printf "\"{#DISK_NAME}\":\"${diskarray[$i]}\"}"
12 if [ $i -lt $[$length-1] ];then
13 printf ','
14 fi
15 done
16 printf "\n\t]\n"
17 printf "}\n"

如上,这里通过读取/proc/diskstats,选择其中的磁盘,根据实际情况,我这里就找出类似sda或者xvda的,因为我们用的是sata接口的硬盘以及部分阿里云的服务器。

脚本执行出来的结果类似如下

1 {
2 "data":[
3 {"{#DISK_NAME}":"sda"}
4 {"{#DISK_NAME}":"sdb"}
5 ]
6 }

然后使用zabbix执行这个脚本,那么就要将其写到zabbix_agentd.conf中去,如下

UserParameter=io.scandisk[*],/infra/zabbix/os/disk_scan.sh $1

iostat命令

对于磁盘的监控我采用iostat命令,因为它能给出磁盘的详细信息,如扇区读写情况,io队列长度,iowait,svctime等等。

命令如下:

1 nohup iostat -m -x -d 30 >/tmp/iostat_output &

通过tail -f /tmp/iostat_output,可获得iostat命令收集的磁盘信息,结果类似下面

Device:         rrqm/s   wrqm/s   r/s   w/s    rMB/s    wMB/s avgrq-sz avgqu-sz   await  svctm  %util
hda 0.00 0.20 0.00 7.43 0.00 0.16 43.28 0.23 30.80 2.43 1.81
hda1 0.00 0.20 0.00 7.43 0.00 0.16 43.28 0.23 30.80 2.43 1.81
hda2 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
xvdb 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
xvdb1 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00
hdc 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00 0.00

其中部分参数的详细解释如下

rrqm/s:   每秒进行 merge 的读操作数目。即 delta(rmerge)/s
wrqm/s: 每秒进行 merge 的写操作数目。即 delta(wmerge)/s
r/s: 每秒完成的读 I/O 设备次数。即 delta(rio)/s
w/s: 每秒完成的写 I/O 设备次数。即 delta(wio)/s
rsec/s: 每秒读扇区数。即 delta(rsect)/s
wsec/s: 每秒写扇区数。即 delta(wsect)/s
rkB/s: 每秒读K字节数。是 rsect/s 的一半,因为每扇区大小为512字节。(需要计算)
wkB/s: 每秒写K字节数。是 wsect/s 的一半。(需要计算)
avgrq-sz: 平均每次设备I/O操作的数据大小 (扇区)。delta(rsect+wsect)/delta(rio+wio)
avgqu-sz: 平均I/O队列长度。即 delta(aveq)/s/1000 (因为aveq的单位为毫秒)。
await: 平均每次设备I/O操作的等待时间 (毫秒)。即 delta(ruse+wuse)/delta(rio+wio)
svctm: 平均每次设备I/O操作的服务时间 (毫秒)。即 delta(use)/delta(rio+wio)
%util: 一秒中有百分之多少的时间用于 I/O 操作,或者说一秒中有多少时间 I/O 队列是非空的。即 delta(use)/s/1000 (因为use的单位为毫秒)

结合zabbix

最开始已经说了,是结合zabbix的discovery功能,所以要对zabbix做出如下设置。

(1)新建discovery规则

(2)新建好discovery rule之后,就可以开始写item prototypes了,下面是一个例子avgqu-sz(平均I/O队列长度)。

在建立好item之后,zabbix_agentd.conf中也要写上相应的UserParameters,如下。

 1 UserParameter=io.scandisk[*],/infra/zabbix/os/disk_scan.sh $1
2 UserParameter=io.rps[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b"|tail -1|awk '{print $$4}'
3 UserParameter=io.wps[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$5}'
4 UserParameter=io.rMBps[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$6}'
5 UserParameter=io.wMBps[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$7}'
6 UserParameter=io.avgrq-sz[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$8}'
7 UserParameter=io.avgqu-sz[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$9}'
8 UserParameter=io.await[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$10}'
9 UserParameter=io.svctm[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$11}'
10 UserParameter=io.util[*],/usr/bin/tail /tmp/iostat_output |grep "\b$1\b" |tail -1|awk '{print $$12}'

以上,监控的部分实际就已经完成。不过还要画图,也就是新建graph prototype了,如下图。

最后,看一下劳动成功,这样就实现了zabbix自动判断服务器上的磁盘个数,然后自动部署对应磁盘的监控并生成图表。

-------------------------------------------------------------------------------------------------------------------------------------------------
以上都为原创文章,转载请注明出处。
我以前叫ccyhaoran,现在叫Lenwood,以下是我的联系方式。

QQ:12412149weibo:http://www.weibo.com/ccyhaoran有问题可以联系我,欢迎交流技术。

 

By:ccyhaoran && Lenwood

 
分类: Linux

最新文章

  1. 哪种缓存效果高?开源一个简单的缓存组件j2cache
  2. JavaScript一词被《牛津大词典》收录了
  3. Entity Framework 中使用SQL Server全文索引(Full Text Search)
  4. java中的foreach循环
  5. 6个强大的AngularJS扩展应用
  6. 数据库设计 Assignment 02
  7. 进入第一个Android应用界面
  8. 中文+django1.9+python3.5一些注意点
  9. Amazon 开始接受 Windows 礼品卡预订
  10. 利用 NUget包 EPPlus 实现数据导出到Excel(适用于DTcms)
  11. cocos2dx SpriteBatchNode 精灵的渲染优化类
  12. Ajax从服务器端获取数据---原生态Ajax
  13. 技术分析 | 新型勒索病毒Petya如何对你的文件进行加密
  14. IOS SDWebImage实现基本原理详解(转载)
  15. angular部署到iis出现404解决方案
  16. IntelliJ IDEA 集成 SVN
  17. 排查linux系统是否被入侵
  18. 获取微信的access_tokey,处理json格式的数据
  19. FileStream常用的属性和方法:
  20. Objective-C市场占有率排名升至第4位

热门文章

  1. C++中的class
  2. ssh 自动登录
  3. 为什么使用Hystrix?
  4. UITableView Cell 弹簧动画效果
  5. 吐槽一下项目中的代码坏味道:滥用java常量
  6. NSNotification、delegate和KVO的区别
  7. TypeScript入门
  8. MVC验证05-自定义验证规则、验证2个属性值不等
  9. C程序中引用自定义的C函数模块
  10. 快速构建Windows 8风格应用9-竖直视图