CERNET郑州保卫战:暴雨突袭、电力中断后的18个小时

来源: 时间:2021-07-23
  7月20日 ,河南郑州遭遇“千年一遇”特大暴雨 ,城区内涝严重 ,电力中断 ,交通瘫痪。
  20日17时 ,因供电中断 ,CERNET郑州主节点遭遇严重的网络通信安全威胁。


俄罗斯专享会·294VIP(中国区)官方网站
  7月20日 ,17时 ,郑州大学校园里一片汪洋 ,全校停电 ,机房不得不采用发电机发电。当时 ,发电机房水位已达30厘米。郑州节点焦志杰老师、通信运行部何连杰冒着大雨去往发电机房加入仅剩的三桶备用柴油 ,维持发电。
 
俄罗斯专享会·294VIP(中国区)官方网站 
 
俄罗斯专享会·294VIP(中国区)官方网站
核心机房门口水位达70厘米。
 
俄罗斯专享会·294VIP(中国区)官方网站
17:10 ,核心节点配电房进水 ,节点老师闫亮清理电池房积水。
 
俄罗斯专享会·294VIP(中国区)官方网站
节点老师李正磊加盖电池架防止进水。
 
俄罗斯专享会·294VIP(中国区)官方网站
通信运行部何连杰想各种办法 ,以防止电池房通道进水。

俄罗斯专享会·294VIP(中国区)官方网站
17:40 ,河南分公司总经理李路路指挥人员封堵办公楼门口进水。
 
俄罗斯专享会·294VIP(中国区)官方网站
19:30 ,夜幕降临 ,平时灯火通明的机房几乎一片漆黑。节点老师李正磊核对UPS开关接入位置。
 
俄罗斯专享会·294VIP(中国区)官方网站
节点老师焦志杰检查学校UPS设备。

俄罗斯专享会·294VIP(中国区)官方网站
20:00 ,机房传输设备开始由发电机供电 ,节点老师胡志宇检查省网传输设备板卡。

俄罗斯专享会·294VIP(中国区)官方网站
深夜来临 ,节点的守护者们用电动车照明。
 
俄罗斯专享会·294VIP(中国区)官方网站
21日 ,凌晨4时 ,切换核心路由备用电至临时接线排。
 
俄罗斯专享会·294VIP(中国区)官方网站
7月21日 ,7时 ,终于打听到可以到达的有柴油的加油站了。
 
俄罗斯专享会·294VIP(中国区)官方网站
  7:10 ,校园内所有汽车浸泡无法使用。关键时刻 ,节点老师李正磊的父亲从家开车到学校 ,柴油终于买到了。疫情下 ,外来车辆只能停到离机房比较远的校园北门 ,大家在北门接送油桶。
 
俄罗斯专享会·294VIP(中国区)官方网站
节点老师胡志宇(左) ,通信运行部李浩然(右)运送柴油至发电房。
 
俄罗斯专享会·294VIP(中国区)官方网站
第一批柴油送到 ,早上8点多 ,何连杰尝试接通发电机电池连接线。
 
俄罗斯专享会·294VIP(中国区)官方网站
  7月21日 ,9时 ,郑州大学节点运行部主任陈刚带领节点老师、通信运行部同事、河南分公司同事抢救金水河内被水冲刷的光缆。
 
俄罗斯专享会·294VIP(中国区)官方网站
此时 ,主电缆已露出水面。
 
俄罗斯专享会·294VIP(中国区)官方网站
9:21 学校市电恢复 ,传输设备由市电供电。
9:30多 ,为更加保险 ,采购UPS备用电池。河南分公司总经理李路路为正在搬运备用电池的技术人员打伞遮雨。

 
俄罗斯专享会·294VIP(中国区)官方网站
11:30 ,一切就绪后 ,同志们终于吃到了18个小时来的第一顿饭。
 
  18个小时里 ,在CERNET网络中心的总体部署下 ,俄罗斯专享会公司和节点高校相关人员连夜紧急抢修 ,多方协同工作 ,保证了郑州核心节点的正常运行 ,确保了教育网整体的安全畅通 ,保障了网上高招的顺利进行。
  向CERNET的每一位守护者致敬!

 
附录:
CERNET郑州保卫战:
18小时抗洪保通全记录
2021年7月20日
• 16:39  郑州大学机房停电 ,学校发电机供电。
• 17:02  因暴雨郑州大学配电房进水 ,全校停电。郑大机房发电机房水位30厘米 ,单位门口水位70厘米。
• 17:23  接到公司通信运行部电话 ,紧急汇报郑州节点情况 ,总部强调保证人员安全。
• 18:14  郑州大学发电机无法启动 ,原因水位上涨过快 ,发电机关机 ,UPS电源供电。联系附近5公里内加油站 ,均因停电无法购买柴油 ,此时发电机房水位60厘米 ,单位门口水位100厘米 ,开始往楼里灌水。
• 18:24  汇报总部后开始停用中兴设备。负载由79A降低到49A ,由UPS电源供电。
• 18:45  利用旧书本 ,泥土 ,沙袋 ,协助学校对电源间、大楼门口进行挡水处理。
• 19:10  经多方联系 ,有一个加油站可以加油 ,距离郑大机房4公里左右。校内此时校门口水位110厘米左右 ,校外情况也不乐观 ,无法外出购买柴油。
• 19:30  供电班回复学校南校区跨金水河桥被冲断 ,主电缆在水中漂浮 ,短时间无法恢复供电。
• 19:48  学校水位回退40厘米 ,配合学校把仅剩的三桶油加入油箱 ,查看是否可以重启发电机 ,检查完毕 ,准备重启发电机。
• 19:57  郑州大学机房传输设备由发电机供电 ,UPS电源处于充电状态。
• 20:05  前往冲断桥地点查看 ,桥面已被洪水吞没 ,无法恢复市电。
• 21:30  继续协调外部人员看能否送油 ,因天黑路面积水严重 ,无法开车 ,只能天亮行动购买柴油。

2021年7月21号
• 03:30  郑州大学因燃油耗尽发电机停电。传输设备由UPS电源供电。
• 04:00  协助学校老师制作接线排 ,用于CERNET主干网核心路由器进行单独供电。
• 05:00  协助学校老师切换核心路由备用电至临时接线排。
• 05:03  传输设备由UPS电源供电 ,负载49A电量90%剩余。
• 05:10  巡视校内金水河情况 ,水位有所下退 ,学校围墙被部分冲塌。
• 05:41  外出前往金水河查看情况 ,水已回退至露出桥面 ,联系电工班询问有没有恢复供电可能。
• 06:31  传输设备由UPS电源供电 ,负载49A电量80%剩余。安排人员外出购买柴油。
• 07:08  接到通信运行部电话 ,将郑州大学机房情况如实汇报。
• 07:15  终于购买回来可满足三天使用的柴油加到发电机中。
• 09:00  前往金水河桥查看情况 ,此时主电缆已露出水面 ,随即联系学校电工班是否可恢复供电。
• 09:21  学校市电恢复 ,传输设备由市电供电。供电危险解除。