机房动环改造:把告警从分钟级压到 40 秒的三个动作
机房出事,往往不是没有告警,而是告警发给了没人看的地方。改造动环,先改链路,再改设备。
动作一:采集周期从 5 分钟改到 30 秒
很多老机房的动环主机默认采集周期是 5 分钟,温度从 26 度升到 35 度可能在两次采集之间就完成了,等告警发出来,热区设备已经降频。把温湿度、漏水、烟感的采集周期统一改到 30 秒,能在温升初期就触发预警。
动作二:告警走三条路,不只发邮件
邮件容易被忽略,短信有延迟,声光报警没人值班时也无用。实际做法是三路并行:短信发到信息科值班手机、平台弹窗推送到大屏、机房内声光报警器现场提示。三条链路各自独立,任何一条断了不影响另外两条。
改造完成后必须逐项触发验证:拔掉市电、加热温感、滴水触发漏水绳、烟雾测试,记录从触发到短信到达的时间。我们最近一个医院项目实测平均 38 秒。
动作三:值班闭环要有回执
告警发出去只是开始,谁处理、多久到现场、处理结果如何,需要有回执。用简单的工单台账就能实现:值班人员收到短信后在群里回复已接收,到场后填处理记录,处理完拍照上传。月度统计一次,能看出哪些告警是重复误报,哪些设备该换了。
顺带说说 UPS 电池
动环改造常被忽略的是电池。容量衰减到 60% 以下的电池组,满载后备时间可能只有十几分钟,看着还在运行,实际已经没有意义。建议每年做一次容量测试,按实测结果决定更换,而不是按使用年限一刀切。
