2021年7月20日18點14分(fēn),位于鄭州大學(xué)南校區(qū)逸夫樓一層的CERNET鄭州核心節點機房因為(wèi)停電(diàn)一片漆黑,樓前水位已達100厘米,開始倒灌樓内……鄭州節點和賽爾網絡有限公司河南分(fēn)公司的工作(zuò)人員,看着依然沒有停歇迹象的暴雨心急如焚。
他(tā)們都明白,河南節點牽一發而動全身,一旦斷掉,不但會“阻塞”中國(guó)教育和科(kē)研計算網CERNET這條國(guó)家信息化基礎設施的主動脈,更有可(kě)能(néng)影響當下正在如火如荼進行的高考招生,繼而影響社會穩定。所以,河南節點不容有失!
這一晚,注定是一個不眠之夜!
一場罕見的特大暴雨
7月18日開始,河南省多(duō)地發生連續降雨。20日更是遭遇“千年一遇”特大暴雨,往常來看,日降雨量達到250毫米已屬于大暴雨級别,而這一天的小(xiǎo)時降雨量就達到201毫米,打破曆史極值。
鄭州大學(xué)校園内有一條貫穿鄭州東西的金水河,但從20日下午開始,整個校園一片汪洋,那條河已經看不見了。16點39分(fēn),鄭州節點機房由于暴雨沖斷主電(diàn)纜而突然停電(diàn),改由學(xué)校發電(diàn)機緊急供電(diàn)。17點02分(fēn),因暴雨鄭州大學(xué)全校停電(diàn),發電(diàn)機機房也進水,節點機房又改為(wèi)UPS供電(diàn),但僅能(néng)應急2個小(xiǎo)時左右。此時,鄭州大學(xué)機房的發電(diàn)機房水位達30厘米,省網節點門前水位已達70厘米。
電(diàn)力供應迫在眉睫,網絡暢通萬分(fēn)火急。在市政供電(diàn)恢複之前,如何保證備用(yòng)發電(diàn)機的正常使用(yòng)?如何保證網絡的正常運行?鄭州核心節點迅速把險情上報CERNET網絡中心。
17點剛過,北京。接到鄭州節點緊急通報後,剛剛分(fēn)管CERNET通信運行工作(zuò)的王繼龍教授迅速上報:鄭州目前暴雨,水位過高。學(xué)校市電(diàn)由于天氣原因已停,緊急啓用(yòng)油機供電(diàn),但發電(diàn)機的機房已經進水,且水位上漲較快,發電(diàn)機也要馬上斷電(diàn),節點将啓用(yòng)UPS繼續供電(diàn),預計能(néng)支撐2小(xiǎo)時,一旦徹底失電(diàn),南北互聯将僅剩合肥至天津路段,網絡将出現擁塞情況。
CERNET網絡中心主任吳建平迅速作(zuò)出指示:迅速制定底線(xiàn)應急方案,确保網絡安(ān)全通暢!
緊急預案随之迅速啓動:一方面部署網絡調度,力保教育網的整體(tǐ)通暢;另一方面要求打好CERNET鄭州保衛戰,在确保人員安(ān)全的前提下,全力解決供電(diàn)問題。
一次艱難的保電(diàn)行動
“暴雨沖斷了學(xué)校附近橋梁,金水河倒灌,核心節點機房附近被過膝的洪水圍困,交通基本中斷,既不能(néng)進也不能(néng)出;至晚間機房内已經全面斷電(diàn),現場一片漆黑。”
據賽爾河南分(fēn)公司總經理(lǐ)李路路介紹,包括她在内的所有工作(zuò)人員,都在堅守崗位,但隻能(néng)摸黑排查。更讓她揪心的,是發電(diàn)機的柴油緊缺問題。
在這一場事關網絡安(ān)全暢通的戰役中,電(diàn)是根本問題。怎麽保電(diàn)成為(wèi)鄭州保衛戰的關鍵。當務(wù)之急是找到柴油,保證當天及第二天的使用(yòng)。但此時整個鄭州大水漫漫,交通中斷。
“我們不斷聯系附近的加油站,但全市很(hěn)多(duō)地方停電(diàn)無法購(gòu)買柴油。”李路路說。此時發電(diàn)機房水位距地面60厘米,節點中心門口水位距地面100厘米。水位很(hěn)高,并開始往樓裏灌水。
18點24分(fēn),節點向北京彙報搶險進展,根據CERNET網絡中心的意見,開始停用(yòng)優先級靠後的設備,降低負載以使得UPS電(diàn)源能(néng)支撐更久的運行。
在持續尋求購(gòu)買柴油途徑的同時,分(fēn)公司同事和節點老師們協助學(xué)校相關部處人員,利用(yòng)舊書本、泥土、沙袋等對電(diàn)源間等重要地點進行擋水,以保護機房重要設備。
19點,有消息證實,學(xué)校南校區(qū)跨金水河橋被沖斷,主電(diàn)纜在水中漂浮,短時間無法恢複市政供電(diàn)。此時,節點老師把僅剩的三桶柴油加入油箱,并不斷關注着市政供電(diàn)情況。
“晚些時候,核心節點機房的4G/5G信号完全中斷,隻能(néng)依靠WiFi支持的互聯網保持通訊,但由于手機沒法充電(diàn),也存在着失聯的危險。在不斷接聽各方面問候支持以及電(diàn)量不斷見底的焦慮中,更憂心的則是鄭州節點的通斷問題。” 鄭州核心節點的焦志(zhì)傑老師說。
對于網絡通斷狀況,CERNET鄭州核心節點NOC運行部主任陳剛一直揪着心,他(tā)發現有好幾段省網路線(xiàn)通信質(zhì)量有所下降,“在這個關鍵時刻,我們必須守好CERNET主幹大動脈”。
“當日20點,同事們再次前往斷橋地點查看,橋面已被水吞沒,市政供電(diàn)短時間顯然無法恢複。我們一直在聯系是否能(néng)協調外部人員送油,但當時整個城市被大水圍困,城市交通已基本中斷,甚至求助于兄弟(dì)分(fēn)公司幫助發送信息給民(mín)間救援組織,也都沒有實現。”李路路說。
夜晚,往常燈火通明的機房幾乎一片漆黑,黑暗中人們卻一點也沒放棄。“20日半夜時分(fēn),分(fēn)公司終于聯系到有柴油的加油站,幾位節點老師和分(fēn)公司員工非要冒着危險用(yòng)小(xiǎo)推車(chē)去取油”賽爾網絡公司副總經理(lǐ)金立科(kē)提到,“我們經過商量,為(wèi)了大家的安(ān)全,勸阻了他(tā)們。但幹部員工在危急時刻,所爆發出的不怕苦、不畏險、負責任的力量和對CERNET的熱愛都讓我很(hěn)感動。”
21日淩晨3點30分(fēn),因燃油耗盡,鄭州大學(xué)發電(diàn)機停止運作(zuò),鄭州核心節點的傳輸設備由UPS電(diàn)源供電(diàn)。4點,鄭州核心節點的老師和賽爾通信運行部同事制作(zuò)接線(xiàn)排,用(yòng)在CERNET主幹網的核心路由器上進行單獨供電(diàn)。
淩晨5點,傳輸設備由UPS電(diàn)源供電(diàn),負載49A,此時電(diàn)池電(diàn)量還剩90%。
5點以後,大雨漸小(xiǎo),大家查看金水河情況,發現水已退回,橋面已剛剛露出,接着又聯系電(diàn)工班。
6點半,傳輸設備電(diàn)池供電(diàn),負載49A,還剩80%的電(diàn)量。
7點15分(fēn),鄭州節點終于聯系到一家可(kě)以提供柴油的加油站。但此時,所有人員的車(chē)子都被水浸泡無法使用(yòng)。
“關鍵時刻,鄭州節點的李正磊老師讓他(tā)父親從家開車(chē)過來,幫忙運送柴油。分(fēn)兩次運了6桶後,柴油基本充足了。”陳剛介紹說。
一場保電(diàn)保衛戰落下帷幕。
一場網上高招的應急護航
7月,也是高考招生錄取的關鍵時期。
7月20日前後,高招錄取進入到最繁忙、緊張的階段,大部分(fēn)省市提前批錄取已經結束,本科(kē)批正在進行中。
這也是一年一度最受國(guó)人關注,事關百萬家庭以及諸多(duō)學(xué)子命運的重要時段。
當考生拿(ná)到錄取通知書舉家歡慶時,很(hěn)少有人知道,高招錄取的平穩有序與一張大網密切相關。
從1999年起,中國(guó)教育和科(kē)研計算機網CERNET開始支持網上高招錄取的試點工作(zuò)。從2002年起,全國(guó)招生錄取工作(zuò)全部由網上完成,而支撐這項工作(zuò)的網絡,就是CERNET。
每年上千萬考生的資料信息通過CERNET與各地考試院交換到各高校。迄今為(wèi)止,這也是世界上規模最大的教育應用(yòng)之一。
CERNET網絡的通暢、安(ān)全,直接影響着全國(guó)高考網上錄取工作(zuò)的安(ān)全與順利!
在落實保障措施的同時,賽爾各部門也迅速行動起來,主動聯系各高校,詢問網絡保障需求與情況。
這其中,河南省招辦是一個重要的節點。
因為(wèi)當地移動網絡癱瘓,無法聯系上具體(tǐ)的負責人,王繼龍教授希望盡快聯系河南省招辦,做好針對性保障工作(zuò)。21号上午,賽爾公司相關負責人緊急聯系河南省招辦信息處的領導詢問網絡狀況,對方向CERNET和賽爾公司在高招保障方面的重視和保障力度表示了感謝(xiè)。
不僅僅是鄭州,河南全境普降大雨,各種基礎設施遭受巨大的破壞。針對河南境内部分(fēn)高校出現的網絡故障情況,CERNET與賽爾公司及時提供高招相關系統域名解析切換服務(wù),确保了網上招生工作(zuò)的順利進行。
21日中午塵埃落定,河南省招辦與教育部相關部門相繼反饋:網上招生未受影響。
一張大網的最後勝利
鄭州核心節點對于CERNET而言意味着什麽?
據CERNET鄭州核心節點主任李占波介紹,鄭州節點是CERNET北環與西環彙聚轉發的大動脈,也是CERNET流量最繁忙的京漢廣線(xiàn)路的關鍵節點之一。
鄭州節點的通斷不但影響自身通信,還影響到北環、西環甚至南環相關節點的暢通和運行質(zhì)量。一旦鄭州節點中斷,西環、北環、南環的流量都會壓到北京-合肥段,不但整個網絡将出現擁塞情況,還會對當前正在進行的高招保障造成影響。
因此,鄭州核心節點的安(ān)全穩定運行非常重要。吳建平院士提出,在重大災害面前,要以底線(xiàn)思維确保網絡暢通,全力确保CERNET這張大網的穩定運行。
CERNET掀起了全網保衛戰,在北京到武漢和北京到上海臨時開通了兩條100G的備份線(xiàn)路,即便河南節點暫時斷網也能(néng)保障整個教育網的網絡通暢。同時使用(yòng)未來互聯網試驗設施FITI通信通道作(zuò)為(wèi)機動信道,根據實際流量情況對擁堵段落進行臨時增加帶寬和疏導,确保高招正常進行。
截至21日上午10點,鄭州市區(qū)供電(diàn)終于恢複,CERNET鄭州核心節點的險情逐漸解除,CERNET全網運行未受影響。
在這次特大暴雨災害中,CERNET網絡中心統一部署,賽爾公司以及核心節點高校的協同作(zuò)戰,打赢了一場驚心動魄的網絡保衛戰,保證了CERNET鄭州核心節點的正常運行,确保了CERNET主幹網的安(ān)全通暢和高招網絡保障的順利進行。
一位高校的領導說,“沒有想到,你們的網沒有斷!”海南教育廳副廳長(cháng)、來自河南的陶洪建說:“河南的父老鄉親感謝(xiè) CERNET!”