宕机监控报警程序
一.
需求来源
宕机对运维人员来说，最痛苦了。如何检测一台服务器是否还在正常运行，如果该服务器宕机，如何在第一时间监测到并通知一线运维人员进行维护，最大化减少损失。
二.
程序功能
对指定服务器进行宕机监测，如果确实宕机，则发送email到139邮箱(绑定手机，实现短信报警)
三.源程序
四.程序说明
1.通过 function_ping ，每隔4秒对 主机 172.29.141.115 进行ping 操作，(当然，如果主机172.29.141.115的防火墙，或者内过滤ICMP包，那么这个程序显然不能用)将输出重定向到ping_longxibendi.log 文件中
2.通过 function_downtime_detection_AND_sendemail ，每隔4秒，通过ping_longxibendi.log判断是否有没有ping通的迹象，如果有，则调用 sendEmail 邮件(手机短信)报警。
3.监控间隔时间说明 ，可以将 第一个 sleep 改为 150 ，第二个 sleep 改为 150 ，这样每隔5分钟监控一次。
四.使用环境说明
1.主机 A(172.29.141.112) 主机B (172.29.141.115) ，
在A上部署该监控程序(monitor_down.sh)，用于监控B
2.正常情况下A能ping通B
因为用的ping命令，所以如果使用该程序，需要在正常情况下A ping 通 B 。对企业来说，这可能就需要防火墙和Linux内核参数(当然，如果之前没有修改net.ipv4.icmp_echo_ignore_all，则不需要调整)
3.安装了 sendEmail 并 在139邮箱注册(绑定手机)，方可有邮件(短信)报警提示
五.程序测试
[root@localhost monitor]# sh monitor_down.sh
May 21 20:33:46 localhost sendEmail[9175]: Email was sent successfully!
May 21 20:33:56 localhost sendEmail[9204]: Email was sent successfully!
Terminated
[root@localhost monitor]#
六.程序扩展
这个程序，只是实现宕机监控并报警，但没有实现故障转移，自动切换功能。其实，只要稍微修改一下程序就可以实现故障转移，自动切换。故障转移，比如可以通过在热备机A上部署该程序，监控B，一旦B宕机，则A执行浮动改IP和更新下层服务器arp列表即可。可以参考
http://blog.csdn.net/longxibendi/archive/2011/05/21/6436606.aspx
声明：本文档可以随意更改，但必须署名原作者
作者：凤凰舞者 qq:578989855