登录站点

用户名

密码

一次服务器宕机的处理过程

2已有 2064 次阅读  2011-03-30 00:16   标签防火墙  宕机  紧急处理 
2011年3月29日下午4:00左右,论坛(http://club.isso.com.cn)突然宕机了,是小编报告的。
第一反应:
.NET挂了。
系统有点老了,.NET挂掉也不是一次两次了。
但是打开首页没反应,首页是ASP的。说明不是.NET的问题。
第二反应:
IIS挂了
立即远程终端,结果连不上。这下有点晕。
第三反应:
机房线路问题。
立即致电机房,客服小MM接电话后询问了相关情况,然后记录。5分钟后打过来说机房线路正常,服务器已经帮我重启了。
耐心等了5分钟,依然连不上,晕……
第四反应:
服务器硬件故障
立即派小编带着螺丝刀去机房
N分钟后,小编回电,已经在机房,接上显示器,显示一切正常
第五反应:
网线故障,立即让小编检查,回电,网络一切正常,而且用服务器可以正常上网。
这下彻底晕掉,初步判断是防火墙挂了。只能自己出马了。
------------------
到了机房
打开服务器,果然一切正常
打开防火墙,看不出什么名堂。在系统服务中重启防火墙的服务,没效果。
静静的琢磨了一会,没结果。
在防火墙软件里点来点去,突然看到防火墙服务处于停止状态。于是开启
于是……一切正常了。
晕啊,好好的防火墙怎么就会停掉呢?
不管了,反正已经正常了,先回去吧。
此时时间大约是5点零一点。
----------------------
晚上,7:00左右,打开电脑,上论坛,发现上不了,又宕了吗?
远程终端连不上,看来防火墙又挂了。这下更头大了,如果防火墙软件出问题了……
火急火燎的感到机房,机房已经要关大门了,感激溜进去。
连上显示器一看,果然防火墙又挂了。重启,又一切正常。
这回不能走了,得琢磨琢磨什么原因造成防火墙启动了又挂了。
折腾了10来分钟,没什么方向,突然想到,去看看防火墙的日志,看不出什么。这时,看到有“警报”标签,点开来看看,居然有报错,说日志写入错误,大约20秒后就报防火墙关闭,还说是正常关闭。再往上看,前面有报警说硬盘空间不足,NND,原来防火墙日志与IIS日志放在同一个硬盘,结果不断膨胀的IIS日志把硬盘空间撑满了。
于是清空硬盘……
为以防万一,网上搜一下,果然在微软的技术文档里提到日志错误会引起防火墙停止服务,而且在文档的指引下也找到了设置的地方,果然默认设置是日志故障就自动停止防火墙服务,什么设置啊,NND……
写这篇文章时已经过去快5个小时了,没有宕机,应该就是这个问题了。
累啊,下辈子做人绝不碰IT。
分享 举报

发表评论 评论 (2 个评论)

涂鸦板