CERNET郑州保卫战:暴雨突袭、电力中断后的18个小时

来源: 时间:2021-07-23
  7月20日,河南郑州遭遇“千年一遇”特大暴雨,城区内涝严重,电力中断,交通瘫痪。
  20日17时,因供电中断,CERNET郑州主节点遭遇严重的网络通信安全威胁。


  7月20日,17时,郑州大学校园里一片汪洋,全校停电,机房不得不采用发电机发电。当时,发电机房水位已达30厘米。郑州节点焦志杰老师、通信运行部何连杰冒着大雨去往发电机房加入仅剩的三桶备用柴油,维持发电。
 
 
 
核心机房门口水位达70厘米。
 
17:10,核心节点配电房进水,节点老师闫亮清理电池房积水。
 
节点老师李正磊加盖电池架防止进水。
 
通信运行部何连杰想各种办法,以防止电池房通道进水。

17:40,河南分公司总经理李路路指挥人员封堵办公楼门口进水。
 
19:30,夜幕降临,平时灯火通明的机房几乎一片漆黑。节点老师李正磊核对UPS开关接入位置。
 
节点老师焦志杰检查学校UPS设备。

20:00,机房传输设备开始由发电机供电,节点老师胡志宇检查省网传输设备板卡。

深夜来临,节点的守护者们用电动车照明。
 
21日,凌晨4时,切换核心路由备用电至临时接线排。
 

7月21日,7时,终于打听到可以到达的有柴油的加油站了。
 
  7:10,校园内所有汽车浸泡无法使用。关键时刻,节点老师李正磊的父亲从家开车到学校,柴油终于买到了。疫情下,外来车辆只能停到离机房比较远的校园北门,大家在北门接送油桶。
 
节点老师胡志宇(左),通信运行部李浩然(右)运送柴油至发电房。
 
第一批柴油送到,早上8点多,何连杰尝试接通发电机电池连接线。
 
  7月21日,9时,郑州大学节点运行部主任陈刚带领节点老师、通信运行部同事、河南分公司同事抢救金水河内被水冲刷的光缆。
 
此时,主电缆已露出水面。
 
9:21 学校市电恢复,传输设备由市电供电。
9:30多,为更加保险,采购UPS备用电池。河南分公司总经理李路路为正在搬运备用电池的技术人员打伞遮雨。

 
11:30,一切就绪后,同志们终于吃到了18个小时来的第一顿饭。
 
  18个小时里,在CERNET网络中心的总体部署下,太阳成集团tyc234cc公司和节点高校相关人员连夜紧急抢修,多方协同工作,保证了郑州核心节点的正常运行,确保了教育网整体的安全畅通,保障了网上高招的顺利进行。
  向CERNET的每一位守护者致敬!

 
附录:
CERNET郑州保卫战:
18小时抗洪保通全记录
2021年7月20日
• 16:39  郑州大学机房停电,学校发电机供电。
• 17:02  因暴雨郑州大学配电房进水,全校停电。郑大机房发电机房水位30厘米,单位门口水位70厘米。
• 17:23  接到公司通信运行部电话,紧急汇报郑州节点情况,总部强调保证人员安全。
• 18:14  郑州大学发电机无法启动,原因水位上涨过快,发电机关机,UPS电源供电。联系附近5公里内加油站,均因停电无法购买柴油,此时发电机房水位60厘米,单位门口水位100厘米,开始往楼里灌水。
• 18:24  汇报总部后开始停用中兴设备。负载由79A降低到49A,由UPS电源供电。
• 18:45  利用旧书本,泥土,沙袋,协助学校对电源间、大楼门口进行挡水处理。
• 19:10  经多方联系,有一个加油站可以加油,距离郑大机房4公里左右。校内此时校门口水位110厘米左右,校外情况也不乐观,无法外出购买柴油。
• 19:30  供电班回复学校南校区跨金水河桥被冲断,主电缆在水中漂浮,短时间无法恢复供电。
• 19:48  学校水位回退40厘米,配合学校把仅剩的三桶油加入油箱,查看是否可以重启发电机,检查完毕,准备重启发电机。
• 19:57  郑州大学机房传输设备由发电机供电,UPS电源处于充电状态。
• 20:05  前往冲断桥地点查看,桥面已被洪水吞没,无法恢复市电。
• 21:30  继续协调外部人员看能否送油,因天黑路面积水严重,无法开车,只能天亮行动购买柴油。

2021年7月21号
• 03:30  郑州大学因燃油耗尽发电机停电。传输设备由UPS电源供电。
• 04:00  协助学校老师制作接线排,用于CERNET主干网核心路由器进行单独供电。
• 05:00  协助学校老师切换核心路由备用电至临时接线排。
• 05:03  传输设备由UPS电源供电,负载49A电量90%剩余。
• 05:10  巡视校内金水河情况,水位有所下退,学校围墙被部分冲塌。
• 05:41  外出前往金水河查看情况,水已回退至露出桥面,联系电工班询问有没有恢复供电可能。
• 06:31  传输设备由UPS电源供电,负载49A电量80%剩余。安排人员外出购买柴油。
• 07:08  接到通信运行部电话,将郑州大学机房情况如实汇报。
• 07:15  终于购买回来可满足三天使用的柴油加到发电机中。
• 09:00  前往金水河桥查看情况,此时主电缆已露出水面,随即联系学校电工班是否可恢复供电。
• 09:21  学校市电恢复,传输设备由市电供电。供电危险解除。