20日17时,因供电中断,cernet郑州主节点遭遇严重的网络通信安全威胁。
7月20日,17时,郑州大学校园里一片汪洋,全校停电,机房不得不采用发电机发电。当时,发电机房水位已达30厘米。郑州节点焦志杰老师、通信运行部何连杰冒着大雨去往发电机房加入仅剩的三桶备用柴油,维持发电。
核心机房门口水位达70厘米。
17:10,核心节点配电房进水,节点老师闫亮清理电池房积水。
节点老师李正磊加盖电池架防止进水。
通信运行部何连杰想各种办法,以防止电池房通道进水。
17:40,河南分公司总经理李路路指挥人员封堵办公楼门口进水。
19:30,夜幕降临,平时灯火通明的机房几乎一片漆黑。节点老师李正磊核对ups开关接入位置。
节点老师焦志杰检查学校ups设备。
20:00,机房传输设备开始由发电机供电,节点老师胡志宇检查省网传输设备板卡。
深夜来临,节点的守护者们用电动车照明。
21日,凌晨4时,切换核心路由备用电至临时接线排。
7月21日,7时,终于打听到可以到达的有柴油的加油站了。
7:10,校园内所有汽车浸泡无法使用。关键时刻,节点老师李正磊的父亲从家开车到学校,柴油终于买到了。疫情下,外来车辆只能停到离机房比较远的校园北门,大家在北门接送油桶。
节点老师胡志宇(左),通信运行部李浩然(右)运送柴油至发电房。
第一批柴油送到,早上8点多,何连杰尝试接通发电机电池连接线。
7月21日,9时,郑州大学节点运行部主任陈刚带领节点老师、通信运行部同事、河南分公司同事抢救金水河内被水冲刷的光缆。
此时,主电缆已露出水面。
9:21 学校市电恢复,传输设备由市电供电。
9:30多,为更加保险,采购ups备用电池。河南分公司总经理李路路为正在搬运备用电池的技术人员打伞遮雨。
9:30多,为更加保险,采购ups备用电池。河南分公司总经理李路路为正在搬运备用电池的技术人员打伞遮雨。
11:30,一切就绪后,同志们终于吃到了18个小时来的第一顿饭。
18个小时里,在cernet网络中心的总体部署下,赛尔公司和节点高校相关人员连夜紧急抢修,多方协同工作,保证了郑州核心节点的正常运行,确保了教育网整体的安全畅通,保障了网上高招的顺利进行。
向cernet的每一位守护者致敬!
附录:
cernet郑州保卫战:
18小时抗洪保通全记录
2021年7月20日18小时抗洪保通全记录
• 16:39 郑州大学机房停电,学校发电机供电。
• 17:02 因暴雨郑州大学配电房进水,全校停电。郑大机房发电机房水位30厘米,单位门口水位70厘米。
• 17:23 接到公司通信运行部电话,紧急汇报郑州节点情况,总部强调保证人员安全。
• 18:14 郑州大学发电机无法启动,原因水位上涨过快,发电机关机,ups电源供电。联系附近5公里内加油站,均因停电无法购买柴油,此时发电机房水位60厘米,单位门口水位100厘米,开始往楼里灌水。
• 18:24 汇报总部后开始停用中兴设备。负载由79a降低到49a,由ups电源供电。
• 18:45 利用旧书本,泥土,沙袋,协助学校对电源间、大楼门口进行挡水处理。
• 19:10 经多方联系,有一个加油站可以加油,距离郑大机房4公里左右。校内此时校门口水位110厘米左右,校外情况也不乐观,无法外出购买柴油。
• 19:30 供电班回复学校南校区跨金水河桥被冲断,主电缆在水中漂浮,短时间无法恢复供电。
• 19:48 学校水位回退40厘米,配合学校把仅剩的三桶油加入油箱,查看是否可以重启发电机,检查完毕,准备重启发电机。
• 19:57 郑州大学机房传输设备由发电机供电,ups电源处于充电状态。
• 20:05 前往冲断桥地点查看,桥面已被洪水吞没,无法恢复市电。
• 21:30 继续协调外部人员看能否送油,因天黑路面积水严重,无法开车,只能天亮行动购买柴油。
2021年7月21号
• 03:30 郑州大学因燃油耗尽发电机停电。传输设备由ups电源供电。
• 04:00 协助学校老师制作接线排,用于cernet主干网核心路由器进行单独供电。
• 05:00 协助学校老师切换核心路由备用电至临时接线排。
• 05:03 传输设备由ups电源供电,负载49a电量90%剩余。
• 05:10 巡视校内金水河情况,水位有所下退,学校围墙被部分冲塌。
• 05:41 外出前往金水河查看情况,水已回退至露出桥面,联系电工班询问有没有恢复供电可能。
• 06:31 传输设备由ups电源供电,负载49a电量80%剩余。安排人员外出购买柴油。
• 07:08 接到通信运行部电话,将郑州大学机房情况如实汇报。
• 07:15 终于购买回来可满足三天使用的柴油加到发电机中。
• 09:00 前往金水河桥查看情况,此时主电缆已露出水面,随即联系学校电工班是否可恢复供电。
• 09:21 学校市电恢复,传输设备由市电供电。供电危险解除。