銀行基礎(chǔ)設(shè)施及物理環(huán)境異常處置流程和應(yīng)急措施

流程和應(yīng)急措施隨著金融行業(yè)電子化建設(shè)體系架構(gòu)由分散模式發(fā)展為數(shù)據(jù)集中模式，相應(yīng)風(fēng)險集中到總行數(shù)據(jù)匯聚中心。數(shù)據(jù)中心的安全、穩(wěn)定將影響到金融行業(yè)所有前臺網(wǎng)點(diǎn)業(yè)務(wù)的正常開展。建立健全有效的基礎(chǔ)設(shè)施及物理環(huán)境異常處置流程和應(yīng)急措施，最大限度的減小突發(fā)事件所造成的損失和影響，結(jié)合《***銀行應(yīng)急方案》現(xiàn)形成基礎(chǔ)設(shè)施及物理環(huán)境異常處置流程和應(yīng)急措施。第一章機(jī)柜斷電異常處置流程及應(yīng)急措施（一）排查機(jī)柜停電故障原因1、查看機(jī)柜服務(wù)器電源部分不亮或全部不亮，服務(wù)器部分停機(jī)或全部停機(jī)；2、查看電源列頭柜中此柜的空氣開關(guān)是否已經(jīng)跳閘（整柜或單路全斷的情況一般都是控制此機(jī)柜的空開跳閘了）；3、逐臺查看機(jī)柜服務(wù)器，主要查看是否有異味及燒焦的情況發(fā)生，機(jī)柜停電的原因主要是某臺服務(wù)器電源模塊故障導(dǎo)致短路，從而造成電流過高跳閘，表現(xiàn)為發(fā)黑、有燒焦味；4、在得到相關(guān)領(lǐng)導(dǎo)批準(zhǔn)的情況下，拔下已經(jīng)停電的所有服務(wù)器電源插頭；5、使用測電儀器對機(jī)柜內(nèi)斷電的所有設(shè)備進(jìn)行短路、斷路測量；6、使用墻邊電源對每臺服務(wù)器進(jìn)行加電測試。（二）恢復(fù)機(jī)柜供電1、排除有異味、燒焦味、短路、斷路的服務(wù)器；2、使用測電儀器對機(jī)柜電源插排進(jìn)行短路、斷路檢查，確定供電電源有無問題，請交由專業(yè)人士操作；3、有以下情況的，不允許再次接入機(jī)柜：3.1、發(fā)現(xiàn)無法開機(jī)的；3.2、導(dǎo)致排插跳閘的；3.3、測電各項指標(biāo)（如13次電流諧波）不通過的；3.4、電流極其不穩(wěn)定的；3.5、服務(wù)器電源指示燈異常的（由機(jī)房管理員聯(lián)系各品牌服務(wù)器廠商判斷）4、列頭柜空氣開關(guān)合閘，對測電通過的服務(wù)器放入機(jī)柜后逐一恢復(fù)供電；5、機(jī)房管理員逐臺啟動服務(wù)器；6、對有問題的服務(wù)器進(jìn)行記錄，故障服務(wù)器在維修完畢后需要通過測電才能再次接入機(jī)柜。（三）其他故障以上是常見的故障，但也有極少數(shù)情況是本身機(jī)柜的供電問題，請聯(lián)系專業(yè)電工使用萬用表，由下到上逐步測試電源端子或電源接口是否有電，有無虛接，從機(jī)柜的電源到列頭柜的空開電源等。第二章空調(diào)異常處置流程及應(yīng)急措施（一）空調(diào)系統(tǒng)故障導(dǎo)致機(jī)房溫度升高處理措施1、 正常情況下:機(jī)房內(nèi)保持平均23土LC,濕度45土5%,當(dāng)機(jī)房因空調(diào)故障平均溫度上升到28C以上，就可能造成機(jī)房內(nèi)服務(wù)器應(yīng)高溫引起宕機(jī)事故。2、 機(jī)房溫度升高,首先查看故障空調(diào)的位置和現(xiàn)象。3、 如果故障較為嚴(yán)重,影響范圍較大,則立即向上級匯報。4、 啟用備用空調(diào)、風(fēng)扇、降低機(jī)房內(nèi)溫度,并打開機(jī)房門,以便設(shè)備散熱和空氣流通。5、 機(jī)房管理人員要密切注意各設(shè)備的運(yùn)行狀況,如出現(xiàn)告警,查看日志了解情及時聯(lián)系維保公司維修。6、 機(jī)房管理人員要密切注意機(jī)房內(nèi)服務(wù)器運(yùn)行狀態(tài),如已影響到系統(tǒng)和業(yè)務(wù)的正常運(yùn)行,尤其是一些重要業(yè)務(wù),應(yīng)立即向上級匯報。7、 待機(jī)房內(nèi)溫、濕度恢復(fù)正常并監(jiān)控一段時間后無異常情況,將備用空調(diào)、風(fēng)扇關(guān)閉并放回原位,保持機(jī)房衛(wèi)生和整潔。8、 機(jī)房管理人員對此次故障做出總結(jié)和匯報,以文檔形式上交負(fù)責(zé)人,并存入文檔。（二）機(jī)房空調(diào)系統(tǒng)常見故障處理1、單臺空調(diào)故障故障描述：（1） 空調(diào)制冷效率下降、有異常響聲、有報警信息、（2） 處置措施：機(jī)房內(nèi)都有備份空調(diào),單臺空調(diào)故障不會影響機(jī)房正常運(yùn)行。關(guān)閉故障空調(diào)，開啟機(jī)房內(nèi)備用空調(diào)。撥打維保公司電話，通知上門維修，注意故障描述要準(zhǔn)確無誤。2、機(jī)房跑水故障描述：（1）機(jī)房空調(diào)加濕跑水，機(jī)房空調(diào)循環(huán)水跑水。（2）處置措施：加水用水管徑較小，短時間關(guān)閉加濕用水，對機(jī)房危害較小。加濕用水空調(diào)端漏水，關(guān)閉該臺空調(diào)，同時關(guān)閉加濕用水閥門，并用拖布把水拖干。（機(jī)房內(nèi)加濕用水總閥門在空調(diào)冷卻水供回水水管旁）加濕用水主管路漏水，應(yīng)關(guān)閉加濕用水主閥門,位置在本層新風(fēng)機(jī)房，軟化樹脂罐上閥門?？照{(diào)循環(huán)水跑水，空調(diào)端冷卻水跑水，關(guān)閉該臺空調(diào)冷卻水供回水閥門.（位置在該臺空調(diào)旁供回水立管上）空調(diào)循環(huán)水主管路跑水，對機(jī)房危害較大，嚴(yán)重影響機(jī)房正常運(yùn)行。發(fā)主管路漏水應(yīng)關(guān)閉冷卻水供回水閥門，位置在本層管道井內(nèi)。3、空調(diào)循環(huán)水故障故障描述：（1）水壓異常，或無水壓，回水溫度高處理措施：（2）水壓異常是循環(huán)泵未開，或系統(tǒng)缺水，通知后勤服務(wù)中心查看循環(huán)泵是否正常，并按機(jī)房高溫措施處理。第三章不間斷電源異常處置流程及應(yīng)急措施（一）市電中斷應(yīng)急處理流程市電供應(yīng)中斷分為計劃內(nèi)事件和計劃外事件。發(fā)生計劃外事件時，應(yīng)當(dāng)立即聯(lián)系后勤服務(wù)中心或電力公司詢問斷電原因以及預(yù)計斷電持續(xù)時間。預(yù)計停電時間超過30分鐘或預(yù)計停電時間未知的情況下應(yīng)當(dāng)做好啟動發(fā)電機(jī)的準(zhǔn)備。接到計劃內(nèi)的停電通知時，需要確認(rèn)停電時間、持續(xù)時間后勤服務(wù)中心值班人員聯(lián)系方式、能否順利啟動發(fā)電機(jī)。打開一樓外發(fā)電機(jī)房房門，打開發(fā)電機(jī)控制器電源。按按鍵“AUTO”使發(fā)電機(jī)處于自動啟動狀態(tài)。合上發(fā)電機(jī)的斷路開關(guān)。正常情況下發(fā)電機(jī)房市電與發(fā)電機(jī)切換的ATS開關(guān)已置于自動狀態(tài)。此時發(fā)電機(jī)自動啟動發(fā)電。觀察并記錄中心機(jī)房各用電設(shè)備及UPS主機(jī)在切換過程中狀態(tài)。發(fā)電機(jī)發(fā)電后，正常狀態(tài)下配電控制柜由“I”路切換到“II"路，并且II路對應(yīng)指示燈全部點(diǎn)亮；同時發(fā)電機(jī)控制器液晶面板顯示有電壓值（400V左右）和電流值，頻率在50Hz左右。環(huán)境監(jiān)控系統(tǒng)電話告警提示電量儀電壓已恢復(fù)。（二）市電回切恢復(fù)步驟開啟機(jī)房電路系統(tǒng)空開，機(jī)房配電柜ATS自動切換至機(jī)房市電供電線路，發(fā)電機(jī)自動關(guān)閉。觀察并記錄配電柜、UPS的狀態(tài)。第四章機(jī)房消防異常處置流程及應(yīng)對措施機(jī)房突發(fā)火災(zāi)應(yīng)急處理預(yù)案1、“先斷電，后滅火”是撲滅電氣火災(zāi)的基本原則，在切斷電源時要根據(jù)現(xiàn)場火勢、著火設(shè)備進(jìn)行判斷，考慮重要負(fù)荷、消防電源的影響以及配電系統(tǒng)回路的分布，防止火災(zāi)未救，人員先被電擊或灼傷。2、如果發(fā)現(xiàn)機(jī)柜內(nèi)設(shè)備出現(xiàn)內(nèi)部打火、冒煙但沒有明火出現(xiàn)時，要立即拔掉該設(shè)備的電源插頭，并把該設(shè)備拿離機(jī)柜，防止危害其他設(shè)備；發(fā)現(xiàn)局部輕微著火不危機(jī)其他設(shè)備的情況下，要立即斷開該設(shè)備電源，并組織人員利用就近消防器材進(jìn)行滅火，防止火勢蔓延擴(kuò)大，并向領(lǐng)導(dǎo)報告；發(fā)現(xiàn)設(shè)備火勢大危機(jī)整個機(jī)柜但不危機(jī)人員生命還能控制時，立即對應(yīng)機(jī)柜編號，斷開整個機(jī)柜電源，并組織人員使用氣體滅火器進(jìn)行撲火，發(fā)現(xiàn)UPS電池組著火時先斷開電池組箱體上的控制開關(guān)，必要時再斷開電源室控制UPS的總斷路器，用氣體滅火器滅火，如果火勢大不能控制應(yīng)立即向負(fù)責(zé)人匯報、撥打119報警，根據(jù)情況切斷機(jī)房總電源再進(jìn)行組織滅火。3、在消防車來之前，先盡力使用現(xiàn)有消防設(shè)備將火勢控制在最小范圍。消防車來之后，值班人員配合消防專業(yè)人員撲救或作好輔助工作。迅速組織人員逃生，原則是“先救人，后救物”，及時安全地疏散人員和財產(chǎn)轉(zhuǎn)移。火勢大時可用滅火器邊噴邊撤退，確保人員安全。第五章通信網(wǎng)絡(luò)異常處置流程及應(yīng)對措施（一）發(fā)生網(wǎng)絡(luò)故障時，首先檢查機(jī)房設(shè)備情況，確定網(wǎng)絡(luò)故障的原因。通過telnet或console口進(jìn)入網(wǎng)絡(luò)設(shè)備，用命令disipintbrief查看網(wǎng)絡(luò)設(shè)備各端口是否正常，如果個端口的物理連路及協(xié)議都是up狀態(tài)，則能夠判斷線路是正常的。（二）確認(rèn)原因后，首先啟動備用線路和設(shè)備，保證網(wǎng)絡(luò)的正常運(yùn)行。然后聯(lián)系網(wǎng)絡(luò)維護(hù)人員，及時處理和排除故障。（三） 通過命令disipintbrief查看出端口down的情況下，還需網(wǎng)絡(luò)管理員進(jìn)一步判斷是否是本地故障，檢查光端機(jī)狀態(tài)是否正常。如果不是本地故障，立即聯(lián)系運(yùn)營商聯(lián)系，及時處理故障。當(dāng)確認(rèn)原因?yàn)槎虝r間無法恢復(fù)，應(yīng)該及時向負(fù)責(zé)領(lǐng)導(dǎo)匯報。并且每過10分鐘電話跟蹤一次故障狀態(tài)。（四） 當(dāng)人為或病毒破壞的故障發(fā)生時，具體按以下順序進(jìn)行：判斷破壞的來源及性質(zhì)，斷開影響安全與穩(wěn)定的信息網(wǎng)絡(luò)設(shè)備，斷開與破壞來源的物理網(wǎng)絡(luò)連接，跟蹤并鎖定破壞的來源和其他網(wǎng)絡(luò)用戶信息，修復(fù)被破壞的信息，恢復(fù)系統(tǒng)。（五） 通信網(wǎng)絡(luò)故障恢復(fù)以后，驗(yàn)證交易狀態(tài)是否正常。第六章網(wǎng)絡(luò)設(shè)備故障異常處置流程及應(yīng)對措施（一）網(wǎng)絡(luò)設(shè)備的排錯流程下面流程圖是網(wǎng)絡(luò)維護(hù)人員所應(yīng)采取的排錯模型，當(dāng)發(fā)生網(wǎng)絡(luò)故障時應(yīng)按照此流程快速進(jìn)行定位、排除故障。

1、網(wǎng)絡(luò)系統(tǒng)故障突發(fā)事件分級故障等級故障現(xiàn)象1級網(wǎng)絡(luò)完全擁塞或設(shè)備宕機(jī)網(wǎng)絡(luò)或設(shè)備處理能力嚴(yán)重受影響，對最終客戶端的業(yè)務(wù)運(yùn)作有嚴(yán)重影響網(wǎng)絡(luò)或設(shè)備故障對重要的程序造成嚴(yán)重影響2級網(wǎng)絡(luò)或設(shè)備的性能嚴(yán)重下降，對最終客戶端的業(yè)務(wù)運(yùn)作產(chǎn)生重要影響部分區(qū)域網(wǎng)絡(luò)故障一般網(wǎng)絡(luò)節(jié)點(diǎn)發(fā)生故障大部分客戶端的網(wǎng)絡(luò)通訊質(zhì)量下降3級網(wǎng)絡(luò)或設(shè)備性能受損，但最終客戶端大部分業(yè)務(wù)仍可正常工作報警出錯和操作命令反常4級其它一般的故障，不影響系統(tǒng)的整體運(yùn)行，不影響大部分客戶端的使用（二）應(yīng)急措施1、黑客攻擊時的緊急處置措施A、 網(wǎng)絡(luò)管理員當(dāng)發(fā)現(xiàn)網(wǎng)頁內(nèi)容被篡改、Internet接入路由器有未知用戶登錄或通過其他方式發(fā)現(xiàn)有黑客正在進(jìn)行攻擊時，應(yīng)立即向科技信息部相關(guān)人員通報情況；B、 立即備份當(dāng)時的log日志并采用端口限制方式阻斷外部的入侵，觀察被攻擊的服務(wù)器等設(shè)備狀態(tài)，同時向部門負(fù)責(zé)人和分管領(lǐng)導(dǎo)匯報情況；C、 協(xié)調(diào)相關(guān)應(yīng)用部門，與科技信息部有關(guān)技術(shù)人員一同負(fù)責(zé)被破壞系統(tǒng)的恢復(fù)與重建工作；D、 有關(guān)部門配合共同追查非法信息來源；E、 情況嚴(yán)重的，根據(jù)突發(fā)事件級別應(yīng)及時向有關(guān)上級部門匯報。2、病毒安全緊急處置措施A、當(dāng)發(fā)現(xiàn)計算機(jī)感染有病毒后，應(yīng)立即將該機(jī)從網(wǎng)絡(luò)上隔離出來；通知維護(hù)人員對該設(shè)備的硬盤進(jìn)行數(shù)據(jù)備份；C、 啟用殺病毒軟件對該機(jī)進(jìn)行殺毒處理，同時進(jìn)行病毒檢測軟件對其他機(jī)器進(jìn)行病毒掃描和清除工作；D、 如發(fā)現(xiàn)殺病毒軟件無法清除該病毒，應(yīng)立即向部門負(fù)責(zé)人報告，維護(hù)人員確認(rèn)無法查殺該病毒后，采取格式化硬盤，作好相關(guān)記錄；E、 機(jī)器恢復(fù)后重新開啟網(wǎng)絡(luò)設(shè)備的相應(yīng)端口；F、 認(rèn)為情況極為嚴(yán)重，根據(jù)突發(fā)事件級別應(yīng)及時向有關(guān)上級部

門匯報。3、網(wǎng)絡(luò)設(shè)備緊急處置措施A、 如屬路由器、交換機(jī)等網(wǎng)絡(luò)設(shè)備（光模塊）故障，應(yīng)立即查找是否有相關(guān)備件可以替換，或與設(shè)備提供商聯(lián)系更換設(shè)備，并調(diào)試暢通；B、 如屬路由器、交換機(jī)配置文件破壞，應(yīng)迅速按照備份配置文件重新配置，并調(diào)試暢通；如遇無法解決的技術(shù)問題，立即向有關(guān)廠商請求支援；C、 檢查主機(jī)網(wǎng)絡(luò)連接情況1)2)3)檢查連通性；檢查是否有1)2)3)檢查端口狀態(tài)：包括檢查端口狀態(tài)、端口協(xié)議、CRC錯誤D、 核心交換機(jī)/路由器替換應(yīng)急處置步驟（1） 將原有設(shè)備關(guān)機(jī)，徹底取消它可能的影響（2） 設(shè)備到位，將設(shè)備放在原有設(shè)備附近上電，緊急情況無需上架（3） 配置每個vlan或端口的網(wǎng)關(guān)地址（4） 配置關(guān)鍵路由.啟動VRRP路由協(xié)議（如有），劃分相關(guān)端口到對應(yīng)vlan（交換機(jī)）（5） 按照網(wǎng)線端口切換表，將原有連接在交換機(jī)/路由器上的端口，移至新設(shè)備上。（預(yù)期15分鐘，可以和3-6步驟同時進(jìn)行）（6） 接線方法：連接原則是端口位置不變，如果重合則另選空

閑端口。E、情況嚴(yán)重的，根據(jù)突發(fā)事件級別應(yīng)及時向有關(guān)上級部門匯報。4、網(wǎng)絡(luò)突發(fā)事件記錄文檔第七章服務(wù)器異常處置流程及應(yīng)對措施（一）排錯流程（二）應(yīng)急處置具體措施1、服務(wù)器設(shè)備損壞應(yīng)急處置措施A、 關(guān)鍵應(yīng)用系統(tǒng)所在服務(wù)器設(shè)備損壞后，應(yīng)立即查明原因，使用備份服務(wù)器替換損壞設(shè)備，并立即恢復(fù)應(yīng)用系統(tǒng)正常使用;B、 立即與設(shè)備提供商聯(lián)系，請求派維修人員前來維修。（三）服務(wù)器軟件損壞緊急處置措施A、 迅速查找原因，嘗試重啟系統(tǒng)。使用備份進(jìn)行恢復(fù)。必要時聯(lián)系開發(fā)商;B、 當(dāng)發(fā)現(xiàn)服務(wù)器感染有病毒后，應(yīng)立即將該機(jī)從網(wǎng)絡(luò)上隔離出來。并啟用殺病毒軟件對該機(jī)進(jìn)行殺毒處理，同時使用病毒檢測軟件對其他機(jī)器進(jìn)行病毒掃描和清除工作。經(jīng)技術(shù)人員確認(rèn)確實(shí)無法查殺該病毒后，應(yīng)作好相關(guān)記錄，并迅速聯(lián)系有關(guān)產(chǎn)品商研究解決