機房業(yè)務系統應急演練方案

機房業(yè)務系統應急演練方案目錄TOC\o"1-5"\h\z背景 3演練時間與地點 3演練目的 3演練組織機構 3演練影響范圍 3系統總體架構 3演練內容及相關安排 3演練前準備 4告警信息 4演練準備工作 4\o"CurrentDocument"演練前檢查工作 4演練操作 5登錄驗證 5業(yè)務應急驗證 5\o"CurrentDocument"業(yè)務測試 7一、背景為了保障業(yè)務平臺安全穩(wěn)定運行，定于 20XX年X月X日晚進行業(yè)務平臺系統的應急演練。二、演練時間與地點演練時間：20XX年X月X日23:00演練地點：機房三、演練目的檢驗在突發(fā)硬件故障的情況下的應急處理能力。保證在硬件單點故障的時候，平臺仍然能夠安全穩(wěn)定運行。四、演練組織機構演練總負責人：XXX演練小組成員：XXXXXX五、演練影響范圍web服務器做雙機互備，在出現單點故障的時候， 不影響正常業(yè)務的運行。 如雙臺同時出現故障，業(yè)務平臺將無法正常運行，不能處理平臺中的業(yè)務。六、系統總體架構七、演練內容及相關安排.演練前準備告警信息演練期間，將出現以下告警：Web服務器其中一臺8080端口告警(2)數據庫服務器其中一臺1521端口告警(3)文件服務器其中一臺21端口告警演練準備工作遠程登錄環(huán)境測試以下備份工作要求在操作當日 20:00前確認完成NO.事項主要負責人1VPN撥入機房，能夠遠程登錄到平臺所有服務器。演練小組成員數據備份以下備份工作要求在測試當日 22:00前確認已完成準備。NO.事 項主要負責人1備份數據庫執(zhí)行準備好的數據庫備份腳本演練小組成員2備份兩臺web服務器配置文件和程序文件：(1)tomcat配置文件/usr/local/tomcat/conf 目錄復制到對方服務器的/bak/目錄卜面(2)程序文件/usr/local/java 目錄里制到對方服務器的/bak/目錄卜面演練小組成員演練前檢查工作NO.事項主要負責人

1nagios監(jiān)控平臺上無異常告警。演練小組成員2web發(fā)布服務與ftp服務運行狀態(tài)：#ps-ef|grepjava#ps-ef|grepvsftp演練小組成員.演練操作登錄驗證NO.操作注息事項與操作目的時間點對現網影響主要負責人1配置好VPN客戶端23:00業(yè)務無影響演練小組成員2連接成功后SSH?系統23:05-23:10業(yè)務無影響演練小組成員3取得登陸用戶和密碼后登陸設備23:10-23:15業(yè)務無影響演練小組成員業(yè)務應急驗證應急web服務器單點故障測試驗證:演練時間：23:20-23:30演練內容web服務器單臺主機故障演練目的確認單點故障不影響該節(jié)點主機業(yè)務的正常開展演練方法及注意事項演練方法：登入web雙機設備主機執(zhí)行#ps-ef|grepjava 查看雙機tomcat發(fā)布是否正常執(zhí)行關閉其中臺的tomcat命令#killalljava注后事項:使用命令#ps-ef|grepjava 查有"那臺tomcat是否關閉訪問平臺貝囿是否止常顯不

操作人員XXX操作時刻23:20平臺檢查說明登錄無故障服務器，查看tomcat發(fā)布器是否正常運行。輸入平臺地址：能正常顯示頁面。預計結果/現象1、關閉其中一臺的tomcat發(fā)布服務后，能正常訪問業(yè)務平臺實際結果/現象恢復方法執(zhí)行servicetomcatstart重新啟動發(fā)布服務恢復后現象及驗證方法#ps-ef|grepjava查看tomcat發(fā)布進程是否存在#netstat十Inp查看java端口是否已經存恢復時刻恢復時間演練總結應急數據庫單點故障:演練內容Oracle數據庫服務器單臺主機故障演練目的單點故障不影響該節(jié)點主機業(yè)務的正常開展平臺檢查說明登錄無故障數據庫服務器，查看數據庫是否運行正常。應用程序與PL/SQL客戶端等連接數據庫是否止常等

恢復方法重新啟動故障節(jié)點的數據庫實例與監(jiān)聽等；啟動完成后查看數據庫運行狀態(tài)等；恢復后現象及驗證方法psaux|grepora，命