CERNET鄭州保衛(wèi)戰(zhàn):暴雨突襲、電力中斷后的18個小時

來源: 時間:2021-07-23
  7月20日,河南鄭州遭遇“千年一遇”特大暴雨,城區(qū)內(nèi)澇嚴重,電力中斷,交通癱瘓。
  20日17時,因供電中斷,CERNET鄭州主節(jié)點遭遇嚴重的網(wǎng)絡(luò)通信安全威脅。


  7月20日,17時,鄭州大學校園里一片汪洋,全校停電,機房不得不采用發(fā)電機發(fā)電。當時,發(fā)電機房水位已達30厘米。鄭州節(jié)點焦志杰老師、通信運行部何連杰冒著大雨去往發(fā)電機房加入僅剩的三桶備用柴油,維持發(fā)電。
 
 
 
核心機房門口水位達70厘米。
 
17:10,核心節(jié)點配電房進水,節(jié)點老師閆亮清理電池房積水。
 
節(jié)點老師李正磊加蓋電池架防止進水。
 
通信運行部何連杰想各種辦法,以防止電池房通道進水。

17:40,河南分公司總經(jīng)理李路路指揮人員封堵辦公樓門口進水。
 
19:30,夜幕降臨,平時燈火通明的機房幾乎一片漆黑。節(jié)點老師李正磊核對UPS開關(guān)接入位置。
 
節(jié)點老師焦志杰檢查學校UPS設(shè)備。

20:00,機房傳輸設(shè)備開始由發(fā)電機供電,節(jié)點老師胡志宇檢查省網(wǎng)傳輸設(shè)備板卡。

深夜來臨,節(jié)點的守護者們用電動車照明。
 
21日,凌晨4時,切換核心路由備用電至臨時接線排。
 

7月21日,7時,終于打聽到可以到達的有柴油的加油站了。
 
  7:10,校園內(nèi)所有汽車浸泡無法使用。關(guān)鍵時刻,節(jié)點老師李正磊的父親從家開車到學校,柴油終于買到了。疫情下,外來車輛只能停到離機房比較遠的校園北門,大家在北門接送油桶。
 
節(jié)點老師胡志宇(左),通信運行部李浩然(右)運送柴油至發(fā)電房。
 
第一批柴油送到,早上8點多,何連杰嘗試接通發(fā)電機電池連接線。
 
  7月21日,9時,鄭州大學節(jié)點運行部主任陳剛帶領(lǐng)節(jié)點老師、通信運行部同事、河南分公司同事?lián)尵冉鹚觾?nèi)被水沖刷的光纜。
 
此時,主電纜已露出水面。
 
9:21 學校市電恢復,傳輸設(shè)備由市電供電。
9:30多,為更加保險,采購UPS備用電池。河南分公司總經(jīng)理李路路為正在搬運備用電池的技術(shù)人員打傘遮雨。

 
11:30,一切就緒后,同志們終于吃到了18個小時來的第一頓飯。
 
  18個小時里,在CERNET網(wǎng)絡(luò)中心的總體部署下,賽爾公司和節(jié)點高校相關(guān)人員連夜緊急搶修,多方協(xié)同工作,保證了鄭州核心節(jié)點的正常運行,確保了教育網(wǎng)整體的安全暢通,保障了網(wǎng)上高招的順利進行。
  向CERNET的每一位守護者致敬!

 
附錄:
CERNET鄭州保衛(wèi)戰(zhàn):
18小時抗洪保通全記錄
2021年7月20日
• 16:39  鄭州大學機房停電,學校發(fā)電機供電。
• 17:02  因暴雨鄭州大學配電房進水,全校停電。鄭大機房發(fā)電機房水位30厘米,單位門口水位70厘米。
• 17:23  接到公司通信運行部電話,緊急匯報鄭州節(jié)點情況,總部強調(diào)保證人員安全。
• 18:14  鄭州大學發(fā)電機無法啟動,原因水位上漲過快,發(fā)電機關(guān)機,UPS電源供電。聯(lián)系附近5公里內(nèi)加油站,均因停電無法購買柴油,此時發(fā)電機房水位60厘米,單位門口水位100厘米,開始往樓里灌水。
• 18:24  匯報總部后開始停用中興設(shè)備。負載由79A降低到49A,由UPS電源供電。
• 18:45  利用舊書本,泥土,沙袋,協(xié)助學校對電源間、大樓門口進行擋水處理。
• 19:10  經(jīng)多方聯(lián)系,有一個加油站可以加油,距離鄭大機房4公里左右。校內(nèi)此時校門口水位110厘米左右,校外情況也不樂觀,無法外出購買柴油。
• 19:30  供電班回復學校南校區(qū)跨金水河橋被沖斷,主電纜在水中漂浮,短時間無法恢復供電。
• 19:48  學校水位回退40厘米,配合學校把僅剩的三桶油加入油箱,查看是否可以重啟發(fā)電機,檢查完畢,準備重啟發(fā)電機。
• 19:57  鄭州大學機房傳輸設(shè)備由發(fā)電機供電,UPS電源處于充電狀態(tài)。
• 20:05  前往沖斷橋地點查看,橋面已被洪水吞沒,無法恢復市電。
• 21:30  繼續(xù)協(xié)調(diào)外部人員看能否送油,因天黑路面積水嚴重,無法開車,只能天亮行動購買柴油。

2021年7月21號
• 03:30  鄭州大學因燃油耗盡發(fā)電機停電。傳輸設(shè)備由UPS電源供電。
• 04:00  協(xié)助學校老師制作接線排,用于CERNET主干網(wǎng)核心路由器進行單獨供電。
• 05:00  協(xié)助學校老師切換核心路由備用電至臨時接線排。
• 05:03  傳輸設(shè)備由UPS電源供電,負載49A電量90%剩余。
• 05:10  巡視校內(nèi)金水河情況,水位有所下退,學校圍墻被部分沖塌。
• 05:41  外出前往金水河查看情況,水已回退至露出橋面,聯(lián)系電工班詢問有沒有恢復供電可能。
• 06:31  傳輸設(shè)備由UPS電源供電,負載49A電量80%剩余。安排人員外出購買柴油。
• 07:08  接到通信運行部電話,將鄭州大學機房情況如實匯報。
• 07:15  終于購買回來可滿足三天使用的柴油加到發(fā)電機中。
• 09:00  前往金水河橋查看情況,此時主電纜已露出水面,隨即聯(lián)系學校電工班是否可恢復供電。
• 09:21  學校市電恢復,傳輸設(shè)備由市電供電。供電危險解除。