為了提升數據中心針對突發(fā)事件的應急響應水平,使各信息系統在危機事件中能夠得到及時(shí)有效的保護并在事件后能夠迅速恢復,最大限度地減少數據和設備損失,2015年9月25日中國化工IT數據中心在順義機房組織開(kāi)展了2015年度應急演練活動(dòng)。本次應急演練的目的是為檢驗《IT數據中心應急管理辦法(應急手冊)》中規定和描述的完整性及準確性,確保應急預案及其流程執行的順暢和有效。
本次演練采取模擬和實(shí)際操作相結合的方式進(jìn)行,即:故障報告和對外聯(lián)系電話(huà)真打實(shí)撥,現場(chǎng)檢查和操作模擬進(jìn)行,緊急關(guān)機和恢復開(kāi)機在預先準備好的專(zhuān)用測試環(huán)境實(shí)際操作。整個(gè)活動(dòng)分演練背景與場(chǎng)景介紹、演練過(guò)程和演練講評總結三個(gè)階段,共計用時(shí)3小時(shí)。其中演練過(guò)程共十三步:市電中斷問(wèn)題發(fā)現、問(wèn)題提升、確認UPS工作狀態(tài)、確認發(fā)電機正常啟動(dòng)、確認ATS正常切換、發(fā)電機故障、升級問(wèn)題、緊急關(guān)閉核心系統、聯(lián)系修理發(fā)電機、發(fā)電機恢復供電、系統開(kāi)機及應用恢復、市電恢復、應急狀態(tài)結束。
IT數據中心對本次演練進(jìn)行了長(cháng)時(shí)間的詳細準備。首先是重新起草了應急管理手冊,分系統制定應急預案,明確相關(guān)流程和關(guān)鍵人員/單位聯(lián)絡(luò )清單。其次是結合“5.16”事件策劃了本次演練的具體場(chǎng)景:市電中斷,數據機房進(jìn)行應急處置;UPS正常工作,發(fā)電機啟動(dòng)后由發(fā)電機供電;隨后發(fā)電機出現故障,在UPS供電情況下對核心系統(ERP/HR/協(xié)同辦公系統)開(kāi)始以保護數據及核心設備為主要目的的緊急關(guān)機。為了使演練具有實(shí)戰性,針對生產(chǎn)系統非常龐大、停機操作相當復雜的實(shí)際情況,IT數據中心研究開(kāi)發(fā)出批量處理停機腳本,以縮短停機操作時(shí)間,確保在UPS電源有效供電時(shí)間內完成數據保護和核心系統安全停機。最后,編寫(xiě)了詳細的演練劇本,并經(jīng)過(guò)多輪的研討和桌面模擬演練。
集團管信部、藍星、昊華、農化和信息中心等公司領(lǐng)導及CIO受邀參加了現場(chǎng)演練。管信部領(lǐng)導及各專(zhuān)業(yè)公司CIO均對本次活動(dòng)作了詳盡的點(diǎn)評,在肯定IT數據中心近期運維成績(jì)提升的同時(shí),要求進(jìn)一步重視系統維護及信息安全管理,強化安全管控相關(guān)的基礎設施建設與保障;將安全管理與安全保密制度相結合,把IT數據中心應急管理辦法形成制度并徹底落實(shí)到實(shí)際工作中;進(jìn)一步強化IT數據中心機房人員的隊伍建設,加強專(zhuān)業(yè)知識的培訓;防患于未然,以技術(shù)規范和信息手段加強信息安全控制與防范。IT數據中心CEO程華軍作總結發(fā)言,指出本次演練準備充分、過(guò)程有序、結果有效,基本達到了演練的目的,總體而言是成功的。同時(shí)針對后續工作提出三點(diǎn)要求:一是認真總結演練過(guò)程,對發(fā)現的問(wèn)題進(jìn)行深入分析,針對問(wèn)題根源提出有效合理的解決方案;二是IT數據中心以后要堅持兩級定期演練,即中心層面每年進(jìn)行一次正式的應急演練,各運維部門(mén)層面按季度或按月進(jìn)行定期演練,每次演練要有明確的主題,要有針對性,要解決實(shí)際問(wèn)題;三是本次演練技術(shù)上以測試環(huán)境為主,相關(guān)的應急開(kāi)關(guān)機腳本也主要針對測試環(huán)境,因此針對生產(chǎn)環(huán)境的正式應急腳本也要抓緊開(kāi)發(fā)和測試,在國慶或春節期間申請利用計劃維護窗口進(jìn)行實(shí)測,形成正式的、可行的應急措施。
本次演練是一次接近實(shí)戰的操演,整個(gè)過(guò)程緊張而有序,是數據中心系統運維的一次重要活動(dòng),受到了觀(guān)摩演練活動(dòng)的集團管信部領(lǐng)導、各專(zhuān)業(yè)公司領(lǐng)導及信息中心領(lǐng)導的高度認可。今后,數據中心將在向集團管信部和專(zhuān)業(yè)公司匯報其應急狀態(tài)下響應能力的同時(shí),更加突出近期IT數據中心開(kāi)展的關(guān)于“運維提升—為誰(shuí)提供服務(wù)、為誰(shuí)創(chuàng )造價(jià)值”的行動(dòng)主旨。