IDC數(shù)據(jù)中心項目割接方案

IDC數(shù)據(jù)中心項目割接方案IDC數(shù)據(jù)中心項目割接方案目錄1.割接工作概述 52. 準備階段 52.1. 內(nèi)部分工 52.2. 文檔編制交付物 73. 中秋假期階段工作 83.1. 割接工作流程圖 83.2. 應(yīng)急資源準備 103.3. 數(shù)據(jù)備份、配置導(dǎo)出 103.4. 關(guān)機臨檢 123.5. 設(shè)備關(guān)機 133.6. 安全檢查 133.7. 設(shè)備開機 143.8. APC英飛UPS電池電量測試 143.9. 網(wǎng)絡(luò)恢復(fù)測試 143.10. 應(yīng)用恢復(fù)測試 154. 國慶假期階段工作 164.1. 安防臨時環(huán)境搭建 164.2. 應(yīng)急資源準備 164.3. 數(shù)據(jù)備份、配置導(dǎo)出 174.4. 關(guān)機臨檢 184.5. 設(shè)備關(guān)機 194.6. 設(shè)備下架遷出 204.7. 設(shè)備遷回上架 204.8. 通訊線纜恢復(fù) 214.9. 動力線纜恢復(fù) 214.10. 安全檢查 224.11. 設(shè)備開機 224.12. 網(wǎng)絡(luò)恢復(fù)測試 234.13. 應(yīng)用恢復(fù)測試 235. 需注意事項 255.1. 機柜使用展望 255.2. 弱電布線展望 275.2.1. IDC內(nèi)部機柜互通 275.2.2. 外部光纜接入 275.3. APC英飛UPS電池電量測試 285.4. 下架設(shè)備堆放 285.5. ***配合事項 295.6. ***配合事項 295.7. 國慶期間IDC停電 305.8. 國慶期間園區(qū)BA環(huán)控響應(yīng)暫停 305.9. 國慶期間園區(qū)安防系統(tǒng)保障 306. 應(yīng)急預(yù)案 316.1. 網(wǎng)絡(luò)設(shè)備開機故障 316.2. 安全設(shè)備開機故障 316.3. x86服務(wù)器開機故障 336.4. 應(yīng)用恢復(fù)故障 336.4.1. ***應(yīng)用 336.4.2. ***應(yīng)用 368/35割接工作概述***IDC機房將于***I年***I月底至***I月中旬進行改造，涉及IDC內(nèi)所有設(shè)備斷電停機兩次，并由于強弱電布線施工及地板更換，在第二次停機需將所有信息化設(shè)備遷移至機房外部，工作量巨大，且時間嚴格范圍限定，要求信息化設(shè)備的割接工作精細縝密，確保割接全過程順利完成。割接大體時間安排如下：階段具體日期工作概述準備階段9月6信息收集、改造后規(guī)劃、文檔準備、客戶溝通中秋假期9月21為配合UPS間改造及UPS負載合并，所有信息設(shè)備關(guān)機開機測試。國慶假期9月30為配合IDC強弱電改造及地板更換，所有信息設(shè)備關(guān)機下架、移位遷出遷回、上架開機測試。本文檔僅關(guān)注整個IDC改造期間的信息化設(shè)備割接工作，對于其它強弱電及環(huán)境監(jiān)控類工作未有涉及，上述時間安排表也僅代表信息化設(shè)備的工作安排，非整個項目的時間安排。準備階段內(nèi)部分工本次改造項目中IT相關(guān)工作團隊由***信息運維服務(wù)部駐***團隊成員及技術(shù)服務(wù)部成員組成，主要成員分工如下表：崗位成員職責割接團隊負責人負責整個割接工作的計劃制定、分工制定、需求控制、進度控制、風險控制；協(xié)助網(wǎng)絡(luò)組及服務(wù)器組工作；負責2次停機中網(wǎng)絡(luò)組的應(yīng)急資源審核、數(shù)據(jù)備份以及與項目其它干系方的溝通接口。網(wǎng)絡(luò)組網(wǎng)絡(luò)組負責人，負責割接前的信息收集、應(yīng)急資源準備、配置導(dǎo)出，割接后的網(wǎng)絡(luò)部屬規(guī)劃、相關(guān)圖表制作，割接過程中的所有網(wǎng)絡(luò)設(shè)備/安全設(shè)備開關(guān)機/上下架、通訊線纜拆除/連接、測試驗證，應(yīng)急預(yù)案的制定，網(wǎng)絡(luò)類突發(fā)事件的處置，與IT團隊負責人的溝通接口。協(xié)助網(wǎng)絡(luò)組負責人完成工作。協(xié)助網(wǎng)絡(luò)組負責人完成工作。服務(wù)器組服務(wù)器組負責人，負責割接前的信息收集、應(yīng)急資源準備、數(shù)據(jù)備份與配置導(dǎo)出，割接后的服務(wù)器部屬規(guī)劃、相關(guān)圖表制作，割接過程中的所有服務(wù)器/存儲設(shè)備開關(guān)機/上下架、動力線纜拆除/連接、測試驗證，應(yīng)急預(yù)案的制定，與IT團隊負責人的溝通接口。協(xié)助服務(wù)器組負責人完成工作。協(xié)助服務(wù)器組負責人完成工作（側(cè)重BA網(wǎng)中的服務(wù)器）。輔助組根據(jù)現(xiàn)場實際情況協(xié)助網(wǎng)絡(luò)組與服務(wù)器組的工作，尤其在物理設(shè)備上下架過程中進行協(xié)助安全員負責信息化設(shè)備上下架、開關(guān)機期間的安全監(jiān)管（電、火、水），英飛UPS電池放電測試，負責信息化設(shè)備室外堆放期間的設(shè)備看管。應(yīng)用保障支持負責2次停機中服務(wù)器組的應(yīng)急資源審核、數(shù)據(jù)備份審核、配置導(dǎo)出審核，負責各應(yīng)用系統(tǒng)應(yīng)急預(yù)案的審核，負責服務(wù)器及應(yīng)用類突發(fā)事件的處置，負責驗證各類業(yè)務(wù)應(yīng)用的恢復(fù)。外部支持人員：網(wǎng)絡(luò)相關(guān)：數(shù)據(jù)庫相關(guān)：BA相關(guān)：消費相關(guān)：文檔編制交付物在準備階段，所有文檔的編制工作由割接團隊負責人、網(wǎng)絡(luò)組負責人、服務(wù)器組負責人完成，具體分工如下表：文檔交付物負責人內(nèi)部審核時間內(nèi)部審核人定稿時間割接計劃書物理鏈路連接表（新舊兩份）網(wǎng)絡(luò)設(shè)備密鑰表網(wǎng)絡(luò)設(shè)備規(guī)劃機柜圖服務(wù)器清單服務(wù)器設(shè)備密鑰表服務(wù)器設(shè)備規(guī)劃機柜圖中秋假期階段工作割接工作流程圖應(yīng)急資源準備時間節(jié)點團隊工作描述責任人審核人9月20網(wǎng)絡(luò)組核心、匯聚交換機備機準備接入交換機備機準備9月20服務(wù)器組X86服務(wù)器備機準備服務(wù)器開機光盤準備Windows操作系統(tǒng)光盤準備Oracle安裝光盤準備SQLServer安裝文件準備Exchange安裝文件安準備Sharepoint安裝文件準備Insight安裝文件準備備用磁盤驅(qū)動器、內(nèi)存條準備數(shù)據(jù)備份、配置導(dǎo)出時間節(jié)點團隊工作描述責任人審核人9月21日網(wǎng)絡(luò)組所有交換機的配置信息以copy方式導(dǎo)出為txt文檔，存放于Laptop中所有安全設(shè)備的配置信息以截屏形式導(dǎo)出為png圖片，存放于Laptop中917:30~24:009月服務(wù)器組***Exchange數(shù)據(jù)庫由于數(shù)據(jù)量較大，備份時間較長，故提前在20日晚間即以Ntbackup方式備份至異機***、***所有DC、Exchange服務(wù)器提前在20日晚間備份Windows狀態(tài)信息***外網(wǎng)AD數(shù)據(jù)庫、Exchange數(shù)據(jù)庫以Ntbackup方式備份至異機***BA網(wǎng)AD數(shù)據(jù)庫以Ntbackup方式備份至異機***BAInsight、InfoCenter服務(wù)器Ghost備份至異機；Insight、InfoCenter服務(wù)器數(shù)據(jù)庫導(dǎo)出備份***消費服務(wù)器SQL數(shù)據(jù)庫導(dǎo)出備份至異機***門禁服務(wù)器Ghost備份，SQL數(shù)據(jù)庫導(dǎo)出備份至異機***OA服務(wù)器Ghost備份至異機，SQL數(shù)據(jù)庫導(dǎo)出備份至異機***外網(wǎng)AD數(shù)據(jù)庫以Ntbackup方式備份至異機***內(nèi)網(wǎng)AD數(shù)據(jù)庫以Ntbackup方式備份至異機***內(nèi)網(wǎng)LIMS系統(tǒng)Oracle數(shù)據(jù)庫以Exp方式備份至異機***信息AD數(shù)據(jù)庫、Exchange數(shù)據(jù)庫以Ntbackup方式備份至異機對于上述需要異機存放備份數(shù)據(jù)的情況，分別在***與***服務(wù)器群中選擇專用服務(wù)器，作為備份數(shù)據(jù)存放的目的服務(wù)器，規(guī)劃如下表：類別系統(tǒng)備份數(shù)據(jù)目的服務(wù)器外網(wǎng)AD、Exchange、BA網(wǎng)AD、BAInsight、BAInfoCenter、消費、門禁、OA系統(tǒng)備份數(shù)據(jù)***閑置DellR900外網(wǎng)AD、ExchangeNas-head（172.19.21.11）內(nèi)網(wǎng)AD、LIMS系統(tǒng)備份數(shù)據(jù)LocalNAS（172.22.64.35）AD、Exchange系統(tǒng)備份數(shù)據(jù)臺式機關(guān)機臨檢時間節(jié)點團隊工作描述責任人審核人918:30~19:00網(wǎng)絡(luò)組測試***電信、聯(lián)通出口鏈路測試***外網(wǎng)核心至各入駐單位接入層鏈路連通性測試***內(nèi)網(wǎng)核心至宜山路、田林路鏈路連通性測試***內(nèi)網(wǎng)核心至接入層鏈路連通性測試政務(wù)網(wǎng)連通性服務(wù)器組測試***外網(wǎng)AD、Exchange、OA系統(tǒng)應(yīng)用測試***BA網(wǎng)AD、Insight、InfoCenter、消費、門禁系統(tǒng)應(yīng)用協(xié)助戚世春測試***Web網(wǎng)站、園區(qū)管理、LIMS系統(tǒng)應(yīng)用測試***外網(wǎng)AD、Exchange系統(tǒng)應(yīng)用測試***內(nèi)網(wǎng)AD、LIMS系統(tǒng)應(yīng)用協(xié)助周濤測試***Web網(wǎng)站系統(tǒng)應(yīng)用協(xié)助沈意吉測試***Citrix系統(tǒng)應(yīng)用測試***信息AD、Exchange系統(tǒng)應(yīng)用檢查所有服務(wù)器、存儲陣列硬件健康狀況，記錄健康燈、磁盤燈異常狀況設(shè)備關(guān)機時間節(jié)點團隊工作描述責任人審核人9月服務(wù)器組按照系統(tǒng)劃分，依次關(guān)閉應(yīng)用服務(wù)器/前端服務(wù)器數(shù)據(jù)庫服務(wù)器/后端服務(wù)器存儲陣列域控制器Exchange服務(wù)器需先手動停止相關(guān)服務(wù)后再關(guān)機9月網(wǎng)絡(luò)組按照網(wǎng)絡(luò)劃分，依次關(guān)閉接入層交換機匯聚交換機旁路安全設(shè)備核心交換機干路安全設(shè)備路由設(shè)備此部分工作結(jié)束后可通告際達公司開始負載合并工作。計劃耗時20:00~次日01:00。安全檢查待際達公司將APCSmartUPS下線，并將***負載遷移到APC英飛UPS之后，即可開展安全檢查工作。時間節(jié)點團隊工作描述責任人審核人9月安全員對際達公司實施的UPS負載合并工作結(jié)果進行復(fù)查，確認線纜連接無誤，確認空開容量、線徑大小匹配并滿足負載需求再次確認合并后所有負載的功率總和，評估UPS開機條件是否成熟排查全部機柜的負載接入，排查短路等風險隱患設(shè)備開機時間節(jié)點團隊工作描述責任人審核人9月網(wǎng)絡(luò)組按照網(wǎng)絡(luò)劃分，依次開機路由設(shè)備干路安全設(shè)備核心交換機旁路安全設(shè)備匯聚交換機接入層交換機9月服務(wù)器組按照系統(tǒng)劃分，依次開機域控制器存儲陣列數(shù)據(jù)庫服務(wù)器/后端服務(wù)器應(yīng)用服務(wù)器/前端服務(wù)器。需要注意的是，***LIMS數(shù)據(jù)庫小型機開機后暫拔除網(wǎng)卡網(wǎng)線，以等待后續(xù)UPS電池測試完成后再聯(lián)通網(wǎng)絡(luò)901:30~03:00安全員觀察UPSLoad值，隨時通報開機過程中的增長情況需要重點注意的是：開機節(jié)奏應(yīng)盡量防緩，以系統(tǒng)為單位依次開機，防止眾多設(shè)備同時開機造成負載峰值的疊加。APC英飛UPS電池電量測試時間節(jié)點團隊工作描述責任人審核人903:00~04:00安全員記錄UPSLed面板顯示的電池電量剩余值網(wǎng)絡(luò)組監(jiān)控設(shè)備運行狀態(tài)，以備電量快速損耗時的大功率設(shè)備關(guān)機服務(wù)器組本部分工作內(nèi)容詳見本文檔第5.3節(jié)。網(wǎng)絡(luò)恢復(fù)測試時間節(jié)點團隊工作描述責任人審核人9月網(wǎng)絡(luò)組測試***電信、聯(lián)通出口鏈路測試***外網(wǎng)核心至各入駐單位接入層鏈路連通性測試***內(nèi)網(wǎng)核心至宜山路、田林路鏈路連通性測試***內(nèi)網(wǎng)核心至接入層鏈路連通性測試政務(wù)網(wǎng)連通性應(yīng)用恢復(fù)測試時間節(jié)點團隊工作描述責任人審核人9月服務(wù)器組測試***外網(wǎng)AD、Exchange、OA系統(tǒng)應(yīng)用測試***BA網(wǎng)AD、Insight、InfoCenter、消費、門禁系統(tǒng)應(yīng)用協(xié)助戚世春測試***Web網(wǎng)站、園區(qū)管理、LIMS系統(tǒng)應(yīng)用測試***安防系統(tǒng)應(yīng)用測試***外網(wǎng)AD、Exchange系統(tǒng)應(yīng)用測試***內(nèi)網(wǎng)AD、LIMS系統(tǒng)應(yīng)用協(xié)助周濤測試***Web網(wǎng)站系統(tǒng)應(yīng)用協(xié)助謝初南測試***LIMS系統(tǒng)應(yīng)用協(xié)助沈意吉測試***Citrix系統(tǒng)應(yīng)用測試***信息AD、Exchange系統(tǒng)應(yīng)用檢查所有服務(wù)器、存儲陣列硬件健康狀況，記錄健康燈、磁盤燈異常狀況9月12:00、18:00服務(wù)器組在***上班前最后復(fù)查應(yīng)用2遍國慶假期階段工作安防臨時環(huán)境搭建時間節(jié)點團隊工作描述責任人審核人99:00~12:00安全員、網(wǎng)絡(luò)組安防服務(wù)器、安防存儲提前下架并遷移至1F中控機房安防服務(wù)器、安防存儲連入1F中控機房BA接入層交換機測試安防應(yīng)用恢復(fù)應(yīng)急資源準備時間節(jié)點團隊工作描述責任人審核人9月29網(wǎng)絡(luò)組核心、匯聚交換機備機準備接入交換機備機準備光纖跳線準備雙絞線跳線準備9月29服務(wù)器組X86服務(wù)器備機準備服務(wù)器開機光盤準備Windows操作系統(tǒng)光盤準備Oracle安裝光盤準備SQLServer安裝文件準備Exchange安裝文件安準備Sharepoint安裝文件準備Insight安裝文件準備備用磁盤驅(qū)動器、內(nèi)存條準備數(shù)據(jù)備份、配置導(dǎo)出時間節(jié)點團隊工作描述責任人審核人9月網(wǎng)絡(luò)組所有交換機的配置信息以copy方式導(dǎo)出為txt文檔，存放于Laptop中所有安全設(shè)備的配置信息以截屏形式導(dǎo)出為png圖片，存放于Laptop中917:30~24:009月30日16:00~19服務(wù)器組***Exchange數(shù)據(jù)庫由于數(shù)據(jù)量較大，備份時間較長，故提前在29日晚間即以Ntbackup方式備份至異機***、***所有DC、Exchange服務(wù)器提前在29日晚間備份Windows狀態(tài)信息***外網(wǎng)AD數(shù)據(jù)庫、Exchange數(shù)據(jù)庫以Ntbackup方式備份至異機***BA網(wǎng)AD數(shù)據(jù)庫以Ntbackup方式備份至異機***BAInsight、InfoCenter服務(wù)器Ghost備份至異機；Insight、InfoCenter服務(wù)器數(shù)據(jù)庫導(dǎo)出備份***消費服務(wù)器SQL數(shù)據(jù)庫導(dǎo)出備份至異機***門禁服務(wù)器Ghost備份，SQL數(shù)據(jù)庫導(dǎo)出備份至異機***OA服務(wù)器Ghost備份至異機，SQL數(shù)據(jù)庫導(dǎo)出備份至異機***外網(wǎng)AD數(shù)據(jù)庫以Ntbackup方式備份至異機***內(nèi)網(wǎng)AD數(shù)據(jù)庫以Ntbackup方式備份至異機***內(nèi)網(wǎng)LIMS系統(tǒng)Oracle數(shù)據(jù)庫以Exp方式備份至異機***信息AD數(shù)據(jù)庫、Exchange數(shù)據(jù)庫以Ntbackup方式備份至異機對于上述需要異機存放備份數(shù)據(jù)的情況，分別在***與***服務(wù)器群中選擇專用服務(wù)器，作為備份數(shù)據(jù)存放的目的服務(wù)器，規(guī)劃如下表：類別系統(tǒng)備份數(shù)據(jù)目的服務(wù)器外網(wǎng)AD、Exchange、BA網(wǎng)AD、BAInsight、BAInfoCenter、消費、門禁、OA系統(tǒng)備份數(shù)據(jù)***閑置DellR900外網(wǎng)AD、ExchangeNas-head（172.19.21.11）內(nèi)網(wǎng)AD、LIMS系統(tǒng)備份數(shù)據(jù)LocalNAS（172.22.64.35）AD、Exchange系統(tǒng)備份數(shù)據(jù)臺式機關(guān)機臨檢時間節(jié)點團隊工作描述責任人審核人919:00~19:30網(wǎng)絡(luò)組測試***電信、聯(lián)通出口鏈路測試***外網(wǎng)核心至各入駐單位接入層鏈路連通性測試***內(nèi)網(wǎng)核心至宜山路、田林路鏈路連通性測試***內(nèi)網(wǎng)核心至接入層鏈路連通性測試政務(wù)網(wǎng)連通性服務(wù)器組測試***外網(wǎng)AD、Exchange、OA系統(tǒng)應(yīng)用測試***BA網(wǎng)AD、Insight、InfoCenter、消費、門禁系統(tǒng)應(yīng)用協(xié)助戚世春測試***Web網(wǎng)站、園區(qū)管理、LIMS系統(tǒng)應(yīng)用測試***外網(wǎng)AD、Exchange系統(tǒng)應(yīng)用測試***內(nèi)網(wǎng)AD、LIMS系統(tǒng)應(yīng)用協(xié)助周濤測試***Web網(wǎng)站系統(tǒng)應(yīng)用協(xié)助沈意吉測試***Citrix系統(tǒng)應(yīng)用測試***信息AD、Exchange系統(tǒng)應(yīng)用檢查所有服務(wù)器、存儲陣列硬件健康狀況，記錄健康燈、磁盤燈異常狀況設(shè)備關(guān)機時間節(jié)點團隊工作描述責任人審核人9月30日19:30~服務(wù)器組按照系統(tǒng)劃分，依次關(guān)閉應(yīng)用服務(wù)器/前端服務(wù)器數(shù)據(jù)庫服務(wù)器/后端服務(wù)器存儲陣列域控制器Exchange服務(wù)器需先手動停止相關(guān)服務(wù)后再關(guān)機9月30日20:30網(wǎng)絡(luò)組按照網(wǎng)絡(luò)劃分，依次關(guān)閉接入層交換機匯聚交換機旁路安全設(shè)備核心交換機干路安全設(shè)備路由設(shè)備設(shè)備下架遷出時間節(jié)點團隊工作描述責任人審核人9月30日~10月1日服務(wù)器組、輔助組拆除通訊線纜、動力線纜，歸類放置，其中SCSI線纜留在存儲陣列上從靠近IDC后門的前排機柜開始下架服務(wù)器并遷出機柜，為后排機柜騰出通道依次為后排機柜下架服務(wù)器并遷出機柜對于有導(dǎo)軌的服務(wù)器可先僅下架服務(wù)器，導(dǎo)軌留待后續(xù)工作日拆除10月00:00~07:00網(wǎng)絡(luò)組、輔助組拆除通訊線纜、動力線纜，歸類放置對所有網(wǎng)絡(luò)設(shè)備及安全設(shè)備下架并遷出機柜對于有進室光纜的機柜可暫不遷出設(shè)備上、下架時每3人1個小組，一共4個小組。饒文和李斌需對服務(wù)器設(shè)備的下架堆放起到指揮作用。具體下架設(shè)備的堆放規(guī)劃見本文檔第5.4節(jié)。此部分工作結(jié)束后即將IDC機房移交際達公司，開始全面強弱電施工。計劃在10月5日17設(shè)備遷回上架時間節(jié)點團隊工作描述責任人審核人10月2日~10月5日服務(wù)器組、輔助組根據(jù)際達強弱電施工完成進度開始設(shè)備的逐步回遷上架工作（機柜已于1日遷回）網(wǎng)絡(luò)組、輔助組根據(jù)際達強弱電施工完成進度開始設(shè)備的逐步回遷上架工作（機柜已于1日遷回）信息化設(shè)備的的物理部屬規(guī)劃需參見服務(wù)器組與網(wǎng)絡(luò)組在割接準備階段即完成的機柜規(guī)劃圖與物理連接規(guī)劃表。通訊線纜恢復(fù)時間節(jié)點團隊工作描述責任人審核人10月12:00~20:00服務(wù)器組、網(wǎng)絡(luò)組依次恢復(fù)所有服務(wù)器、存儲設(shè)備到網(wǎng)絡(luò)設(shè)備的通訊線纜連接依次恢復(fù)所有服務(wù)器、存儲設(shè)備之間的內(nèi)部通訊線纜此部分工作由服務(wù)器組與網(wǎng)絡(luò)組成員協(xié)同工作動力線纜恢復(fù)時間節(jié)點團隊工作描述責任人審核人10月12:00~20:00服務(wù)器組依次恢復(fù)服務(wù)器、存儲設(shè)備的動力線纜連接，對于單電源設(shè)備，連接UPSPDU；對于雙電源設(shè)備，則分別連接UPSPDU和市電PDU網(wǎng)絡(luò)組依次網(wǎng)絡(luò)設(shè)備、安全設(shè)備的動力線纜連接，對于單電源設(shè)備，連接UPSPDU；對于雙電源設(shè)備，則分別連接UPSPDU和市電PDU安全檢查待際達公司的強弱電施工全部結(jié)束后，信息設(shè)備的物理上架及線纜連接工作亦告完成，即可開展安全檢查工作。時間節(jié)點團隊工作描述責任人審核人10月5日20:00~安全員對際達公司實施的配電系統(tǒng)（含UPS）進行復(fù)查，確認線纜連接無誤，確認空開容量、線徑大小匹配并滿足負載需求再次確認合并后所有負載的功率總和，評估UPS開機條件是否成熟排查全部機柜的負載接入，排查短路等風險隱患設(shè)備開機時間節(jié)點團隊工作描述責任人審核人10月6日08網(wǎng)絡(luò)組按照網(wǎng)絡(luò)劃分，依次開機路由設(shè)備干路安全設(shè)備核心交換機旁路安全設(shè)備匯聚交換機接入層交換機10月6日10服務(wù)器組按照系統(tǒng)劃分，依次開機域控制器存儲陣列數(shù)據(jù)庫服務(wù)器/后端服務(wù)器應(yīng)用服務(wù)器/前端服務(wù)器1008:00~12:00安全員觀察UPSLoad值，隨時通報開機過程中的增長情況需要重點注意的是：開機節(jié)奏應(yīng)盡量防緩，以系統(tǒng)為單位依次開機，防止眾多設(shè)備同時開機造成負載峰值的疊加。網(wǎng)絡(luò)恢復(fù)測試時間節(jié)點團隊工作描述責任人審核人10月6日12:00~14網(wǎng)絡(luò)組測試***電信、聯(lián)通出口鏈路測試***外網(wǎng)核心至各入駐單位接入層鏈路連通性測試***內(nèi)網(wǎng)核心至宜山路、田林路鏈路連通性測試***內(nèi)網(wǎng)核心至接入層鏈路連通性測試政務(wù)網(wǎng)連通性應(yīng)用恢復(fù)測試時間節(jié)點團隊工作描述責任人審核人10月6日14:0服務(wù)器組測試***外網(wǎng)AD、Exchange、OA系統(tǒng)應(yīng)用測試***BA網(wǎng)AD、Insight、InfoCenter、消費、門禁系統(tǒng)應(yīng)用協(xié)助戚世春測試***Web網(wǎng)站、園區(qū)管理、LIMS系統(tǒng)應(yīng)用測試***安防系統(tǒng)應(yīng)用測試***外網(wǎng)AD、Exchange系統(tǒng)應(yīng)用測試***內(nèi)網(wǎng)AD、LIMS系統(tǒng)應(yīng)用協(xié)助周濤測試***Web網(wǎng)站系統(tǒng)應(yīng)用協(xié)助謝初南測試***LIMS系統(tǒng)應(yīng)用協(xié)助沈意吉測試***Citrix系統(tǒng)應(yīng)用測試***信息AD、Exchange系統(tǒng)應(yīng)用檢查所有服務(wù)器、存儲陣列硬件健康狀況，記錄健康燈、磁盤燈異常狀況需注意事項機柜使用展望改造后的IDC新增若干機柜，主機房內(nèi)將合計擁有28個機柜，另有UPS間內(nèi)屏蔽機柜1臺。本著保持現(xiàn)有設(shè)備分布習(xí)慣，適當擴容服務(wù)器機柜空間的基本原則，將28個機柜的使用規(guī)劃如下：位置機柜編號用途前排左側(cè)7臺機柜N1~N7主要放置網(wǎng)絡(luò)設(shè)備及安全設(shè)備中間2臺機柜W1~W2IDC內(nèi)互通線纜用頭柜右側(cè)4臺機柜S1~S4***服務(wù)器設(shè)備后排右側(cè)7臺機柜S5~S11***服務(wù)器設(shè)備左側(cè)8臺機柜S12~S19***服務(wù)器設(shè)備及部分安全設(shè)備UPS間屏蔽機柜SH1涉密類網(wǎng)絡(luò)及服務(wù)器專用機柜編號中：N代表Network（網(wǎng)絡(luò)）S代表Server（服務(wù)器）W代表Wiring（布線）SH代表Shield（屏蔽）機柜的平面布局見下圖：弱電布線展望IDC內(nèi)部機柜互通服務(wù)器機柜一共15（后排）+4（前排）=19臺，分別命名為S1、S2、……S19；網(wǎng)絡(luò)機柜一共7臺（前排頭柜左側(cè)的7臺），分別命名為N1、N2、……N7；布線專用頭柜共兩臺機柜，分別命名為W1、W2，其中W1用于銅纜匯聚，W2用于光纜匯聚；服務(wù)器機柜每臺24根銅纜匯聚到銅纜頭柜，6芯多模光纜匯聚到光纜頭柜（每兩臺機柜共用1根12芯光纜及1個12口光配架）；網(wǎng)絡(luò)機柜中每臺12芯多模光纜匯聚到光纜頭柜；屏蔽機柜6芯多模光纜匯聚到光纜頭柜；網(wǎng)絡(luò)機柜中N124根、N224根、N32×24根、N424根、N524根、N65×24根、N724根分別匯聚到銅纜頭柜；原IDC內(nèi)部機柜互通所用的多模光纜全部拆除，涉及原所有服務(wù)器機柜、新的N4柜、N7柜；原IDC內(nèi)部機柜互通所用的單模光纜全部拆除，涉及原A1柜、新的N4柜、N7柜；兩臺頭柜僅承擔IDC內(nèi)部機柜互通的匯聚用，最終銅纜頭柜使用31個24口配線架，光纜頭柜使用9個24口光配架。外部光纜接入N1柜作為BA網(wǎng)核心設(shè)備所在機柜，延用原有進室光纜，本次改造僅重新熔接；N2柜、N3柜作為***原內(nèi)網(wǎng)、***內(nèi)網(wǎng)核心設(shè)備所在機柜，延用原有進室光纜，本次改造僅重新熔接；N4柜中至7F的政務(wù)網(wǎng)6芯單模光纜移至N2柜下部；N5柜、N6柜作為***外網(wǎng)核心、***、***匯聚設(shè)備所在機柜，延用原有進室光纜，本次改造僅重新熔接；N7柜中至隔壁電話總機房的單模光纜原址保留或移至N6柜；原有聯(lián)通進室光纜上移至本機柜（N7）頂部；原有政務(wù)網(wǎng)進室光纜由N6柜移至N2柜下部；原屏蔽機柜（SH1）至綜合樓地下室、5F、7F的單模光纜保留。APC英飛UPS電池電量測試中秋節(jié)假期間，在原***負載并入APC英飛UPS后，記錄UPSLoad值，并由際達公司協(xié)助進行該UPS的電池電量測試。測試起始時間點：所有信息化設(shè)備開機完成，并且尚未進行應(yīng)用測試。測試方法：斷開整個IDC的市電接入，由UPS電池為所有負載提供動力支持，以每3分鐘記錄1次的頻率，記錄UPSLed面板顯示的電池電量剩余值。測試結(jié)束時間點：當UPSLed面板顯示剩余電量下降至30%時，即恢復(fù)UPS的市電接入。測試交付物：通過測試期間記錄數(shù)據(jù)，生成Excel表與二維曲線圖，縱軸為電量剩余值，橫軸為時間。以圖表為素材編制文檔后提交***客戶。測試分工：積達公司負責UPS市電的開/斷，以***IT團隊負責人指令為準；***信息安全員負責記錄UPS電池電量剩余值，并最終編制測試交付物；網(wǎng)絡(luò)組與服務(wù)器組成員監(jiān)控設(shè)備運行狀態(tài)，以備電量快速損耗時的大功率設(shè)備關(guān)機。下架設(shè)備堆放整個IDC共有服務(wù)器（含存儲陣列）設(shè)備約120臺，網(wǎng)絡(luò)設(shè)備（含信息安全設(shè)備）約50臺。國慶假期下架后的存放需嚴格確保設(shè)備的物理安全。設(shè)備堆放規(guī)劃如下：選擇203會議室與608會議室作為設(shè)備堆放場地。203會議室延會議桌堆放一周，合計46個堆位，每堆位堆疊設(shè)備不超過兩臺4U設(shè)備，或4臺2U設(shè)備，該房間將堆放設(shè)備約130臺。608會議室延會議桌堆放一周，合計20個堆位，每堆位堆疊不超過兩臺設(shè)備，該房間將堆放設(shè)備約40臺。原則上203會議室放置重型設(shè)備，1U類輕型設(shè)備運往608會議室存放。203會議室與608會議室為復(fù)合地板，為放置地板劃傷，需加蓋保護材料后方可堆放設(shè)備。10月1日所有機柜原則上外遷放置在2F咖啡茶座區(qū)，如實在只能移到走廊上的，需注意留出施工材料進出通道。***配合事項部分信息化系統(tǒng)運維工作職能尚未由***承擔，且***團隊未掌握相關(guān)設(shè)備的帳號密鑰，故需要***及第三方廠商提供相應(yīng)協(xié)助，具體如下：系統(tǒng)協(xié)助方配合事項Web網(wǎng)站系統(tǒng)戚世春數(shù)據(jù)的提前備份，業(yè)務(wù)應(yīng)用關(guān)閉，設(shè)備物理關(guān)機，業(yè)務(wù)應(yīng)用啟動并測試，突發(fā)事件的應(yīng)急處置園區(qū)管理系統(tǒng)戚世春LIMS系統(tǒng)戚世春LIMSASP系統(tǒng)中軟公司***配合事項部分信息化系統(tǒng)運維工作職能尚未由***承擔，且***團隊未掌握相關(guān)設(shè)備的帳號密鑰，故需要***科信處及第三方廠商提供相應(yīng)協(xié)助，具體如下：系統(tǒng)協(xié)助方配合事項Web網(wǎng)站系統(tǒng)周濤、大漢公司數(shù)據(jù)的提前備份，業(yè)務(wù)應(yīng)用關(guān)閉，設(shè)備物理關(guān)機，業(yè)務(wù)應(yīng)用啟動并測試，突發(fā)事件的應(yīng)急處置Citrix系統(tǒng)沈意吉LIMS系統(tǒng)謝初南、維斯德公司業(yè)務(wù)應(yīng)用恢復(fù)后的測試，突發(fā)事件的應(yīng)急處置國慶期間IDC停電***園區(qū)擬定10月4日白天停電檢修，屆時信息化設(shè)備尚未到開機時間節(jié)點，亦未開始大規(guī)模的上架安裝，原則上本次停電不對信息化由現(xiàn)場項目經(jīng)理負責跟蹤停電情況，并作為與物業(yè)和客戶的溝通接口人。國慶期間園區(qū)BA環(huán)控響應(yīng)暫停由于國慶期間BA服務(wù)器及核心網(wǎng)絡(luò)設(shè)備下架停機，故BA系統(tǒng)的環(huán)境調(diào)控功能將在假期中完全暫停，園區(qū)內(nèi)所有區(qū)域的假期環(huán)境控制需求必須在關(guān)機前提前設(shè)置好。一旦關(guān)機后，對任何臨時產(chǎn)生的環(huán)控需求停止響應(yīng)。由運維項目經(jīng)理發(fā)出通知，告知各入駐單位在9月30國慶期間園區(qū)安防系統(tǒng)保障由于國慶期間安防系統(tǒng)無法承受長時間中斷，亦無法承受長時間的視頻數(shù)據(jù)缺失，故BA核心交換機、安防服務(wù)器，及存儲陣列需保證運行，即使中斷亦嚴格控制時長。為確保實時監(jiān)看以及數(shù)據(jù)存儲，考慮到BA網(wǎng)物理光纜匯聚到IDC機房，故BA核心交換機無法外遷，必須原地下架并保證持續(xù)開機。同時，安防服務(wù)器及存儲陣列在9月24日白天移至1應(yīng)急預(yù)案網(wǎng)絡(luò)設(shè)備開機故障CISCO設(shè)備開機時，若發(fā)生內(nèi)存問題導(dǎo)致設(shè)備無法正常啟動，立刻利用備件進行更換，保證設(shè)備的正常啟動。若發(fā)生CISCO設(shè)備板卡故障，則利用備機上的板卡進行替換。CISCO設(shè)備啟動時無法加載IOS時，從外部導(dǎo)入IOS。當Radware設(shè)備開機發(fā)生故障時，利用已配置好的Array進行替換，保證ISP接入。當PIX開機發(fā)生故障時，直接去除PIX設(shè)備，把Radware和6509連接上，把PIX上的NAT映射移至6509上去，從而保證網(wǎng)絡(luò)的聯(lián)通。當***外網(wǎng)4507匯聚設(shè)備開機發(fā)生故障時，直接利用原***內(nèi)網(wǎng)4507設(shè)備進行替換，同時，修改配置，保證網(wǎng)絡(luò)的可用性。當***外網(wǎng)4507匯聚設(shè)備開機發(fā)生故障時，直接利用原***內(nèi)網(wǎng)4507設(shè)備及3550交換機來進行替換，滿足原有光電接口的需求，保證網(wǎng)絡(luò)的可用性。當BA核心開機發(fā)生故障時，利用原有兩臺老BA核心以及1臺3550交換機進行替換，可以還原成原先架構(gòu)，保證網(wǎng)絡(luò)的可用性。安全設(shè)備開機故障安全設(shè)備可以分為***內(nèi)外網(wǎng)設(shè)備和***內(nèi)外網(wǎng)設(shè)備。其中***的外網(wǎng)設(shè)備有IPS、BLUECOAT、UTM、數(shù)字認證、安達通VPN、Kill郵件網(wǎng)關(guān)、Atomix短信網(wǎng)關(guān)。由于IPS、UTM直接接入骨干鏈路中，當其發(fā)生意外而無法正常啟動時，立刻對其做下線處理，在骨干鏈路中去除此設(shè)備，保證網(wǎng)絡(luò)的連通性。由于BLUECOAT作為流控設(shè)備具有BYPASS功能，所以，當設(shè)備無法正常啟動時，網(wǎng)絡(luò)數(shù)據(jù)將透傳過設(shè)備，不會對網(wǎng)絡(luò)的連通性造成影響。安達通作為旁路VPN設(shè)備，當發(fā)生開機故障時，可以對設(shè)備做下線處理，將不會對主要業(yè)務(wù)產(chǎn)生影響。數(shù)字認證設(shè)備作為旁路接入提供對***原內(nèi)網(wǎng)的接入認證。當設(shè)備啟動發(fā)生意外而無法應(yīng)用時，可以對設(shè)備進行修復(fù)操作，設(shè)備的下線不會對主要業(yè)務(wù)產(chǎn)生影響。Atomix短信網(wǎng)關(guān)作為旁路設(shè)備，當設(shè)備開機發(fā)生故障時，可以對其進行下線修復(fù)，不會對主要業(yè)務(wù)造成影響。***內(nèi)網(wǎng)設(shè)備有網(wǎng)神防火墻、內(nèi)網(wǎng)審計系統(tǒng)。當網(wǎng)神防火墻和審計系統(tǒng)出現(xiàn)開機故障時，可以對其進行下線處理，不會對主要業(yè)務(wù)產(chǎn)生影響。***外網(wǎng)設(shè)備有FortiGate、MAXNET、漏洞掃描、入侵檢測、WebsenseRiskFilter。兩臺FortiGate互為備份HA備份，一旦同時發(fā)生設(shè)備故障，可將***外網(wǎng)服務(wù)器網(wǎng)段VLAN終結(jié)遷移至PIX上實現(xiàn)，并相應(yīng)修改6509配置。MAXNET作為流控設(shè)備，具有BYPASS功能，出現(xiàn)開機故障時，將可以透傳網(wǎng)絡(luò)流量，不影響網(wǎng)絡(luò)的可用性。漏洞掃描、入侵檢測作為旁路設(shè)備，出現(xiàn)故障時，可以進行下線處理，不影響主要業(yè)務(wù)。WebsenseRiskFilte作為郵件網(wǎng)關(guān)，出現(xiàn)故障時，可啟用原作為備機的美訊智郵件網(wǎng)關(guān)。***內(nèi)網(wǎng)設(shè)備有Iblock、安全審計、數(shù)據(jù)庫審計。安全審計和數(shù)據(jù)庫審計設(shè)備作為旁路設(shè)備，在發(fā)生開機故障時，可以對其進行下線處理。Iblock雖作為干路設(shè)備，但以透明模式部屬，故在發(fā)生開機故障時，可對其進行下線處理，不影響主要業(yè)務(wù)。x86服務(wù)器開機故障在***與***服務(wù)器群中分別選擇兩臺x86架構(gòu)服務(wù)器作為整合割接過程中的服務(wù)器備機。***選擇閑置的DellR900服務(wù)器兩臺。***選擇閑置的HPDL385與DL380服務(wù)器各1臺（原內(nèi)網(wǎng)DC與原Pubnas）。一旦有x86服務(wù)器因嚴重硬件故障或系統(tǒng)故障導(dǎo)致無法恢復(fù)，則啟用上述備機。應(yīng)用恢復(fù)故障***應(yīng)用BAInsight系統(tǒng)首先排除發(fā)現(xiàn)的故障，如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：對Insight主服務(wù)器和InfoCenter服務(wù)器做Ghost備份，異機保存。應(yīng)急恢復(fù)時，首先在Insight備服務(wù)器上做Ghost恢復(fù)，并遷移USB-key。然后對InfoCenter服務(wù)器做Ghost恢復(fù)。作為備用方案，備份兩臺主用服務(wù)器的數(shù)據(jù)庫，異機保存。應(yīng)急恢復(fù)時，如Ghost恢復(fù)后仍然無效，啟用Insight備服務(wù)器，需重新安裝Windows2000server系統(tǒng)，然后重新安裝Insight軟件。針對InfoCenter服務(wù)器，需重新安裝Windows2000server系統(tǒng)，然后安裝SQLServer數(shù)據(jù)庫，連接Insight服務(wù)器，最后對其進行數(shù)據(jù)恢復(fù)，從而恢復(fù)正常業(yè)務(wù)。門禁系統(tǒng)首先排除發(fā)現(xiàn)的故障，如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：首先對原主門禁服務(wù)器做好系統(tǒng)鏡像，并把其他盤符中的資料，備份和系統(tǒng)鏡像拷貝出來；若主門禁服務(wù)器開機出現(xiàn)故障時，直接利用主門禁服務(wù)器的系統(tǒng)鏡像對備門禁服務(wù)器進行系統(tǒng)還原，并把主門禁服務(wù)器中的相關(guān)資料拷貝到備門禁服務(wù)器中，導(dǎo)入數(shù)據(jù)庫備份，并修改備門禁服務(wù)器的IP地址。消費系統(tǒng)首先排除發(fā)現(xiàn)的故障，如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：首先保證兩臺服務(wù)器之間數(shù)據(jù)的同步，在施工前做一次最終的數(shù)據(jù)備份。應(yīng)急恢復(fù)時首先切到備份服務(wù)器上，業(yè)務(wù)恢復(fù)正常。作為備用應(yīng)急預(yù)案，需對消費數(shù)據(jù)做異機備份，如切換備用服務(wù)器后仍然存在故障，需重新安裝消費軟件，重新安裝SQLServer2000數(shù)據(jù)庫，最后將之前備份過的數(shù)據(jù)進行導(dǎo)入恢復(fù)，最后運行消費軟件，恢復(fù)正常業(yè)務(wù)。域控制器首先排除發(fā)現(xiàn)的故障，包括：電源模塊檢查，服務(wù)器狀態(tài)指示燈檢查，RAID卡掛載檢查，磁盤狀態(tài)檢查。軟件部份主要包括：安全模式及最后一次正確配置模式。同時還原數(shù)據(jù)的前提是已經(jīng)備有最近一次的完整、干凈的數(shù)據(jù)備份。如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：***域控制器包括三個系統(tǒng)：第一部分為原內(nèi)網(wǎng)域控，機器名APMDC1環(huán)境為單結(jié)點架構(gòu)。一旦出現(xiàn)意外情況導(dǎo)致機器無法正常啟動，首先從硬件環(huán)境上判斷，是否電源各項指示燈正常，硬盤RAID的掛載是否正常。然后試圖進入安全模式能否自行恢復(fù)。如果安全模式也不能進入，則需要修復(fù)安裝，如修復(fù)安裝也無效，只能搭建新環(huán)境，然后重新導(dǎo)入最新的數(shù)據(jù)備份。第二部份為外網(wǎng)域控，機器分別為new-dc1和new-dc2。該環(huán)境具有雙結(jié)點環(huán)境，如果BDC機器無法正常動，不影響正常使用，因為PDC上具有域控的五個主要角色。因此當BDC不論何種原因不能正常啟動時，都不會對大系統(tǒng)環(huán)境造成影響。排障的過程分為硬件與軟件部份，首先從硬件環(huán)境上判斷，是否電源各項指示燈正常，硬盤RAID的掛載是否正常。然后試圖進入安全模式能否自行恢復(fù)。如果安全模式也不能進入，則只能搭建新環(huán)境。將原有域的賬號重置，并將新裝機器IP與機器名設(shè)為原機器一致，加入域后即可。域環(huán)境會自動將域的活動目錄信息傳遞到新機器上。如果是主域控不能正常啟動。硬件排錯過程同上，由于主域控上運行了5個角色，因此需要在BDC上轉(zhuǎn)移五個角色，由輔域控來擔當主域控的角色，并將原PDC計算機賬號重置。由于主域控上主要應(yīng)用業(yè)務(wù)是DNS解析，因此可首先將BDC的IP改成PDC的IP地址，讓客戶機能有正常DNS解析與身份驗證功能。然后將損壞的PDC重新安裝。并加入域即可，最后一切正常重新將5種角色還給PDC。第三部分是BA網(wǎng)域控，機器分別為jiance-lims和jiliang-lims。該環(huán)境具有雙結(jié)點環(huán)境，應(yīng)急排障與恢復(fù)過程同外網(wǎng)域控的雙節(jié)點環(huán)境一致。Exchange郵件系統(tǒng)首先排除發(fā)現(xiàn)的故障，包括：電源模塊檢查，服務(wù)器狀態(tài)指示燈檢查，RAID卡掛載檢查，磁盤狀態(tài)檢查。軟件部份主要包括：安全模式及最后一次正確配置模式。同時還原數(shù)據(jù)的前提是已經(jīng)備有最近一次的完整、干凈的數(shù)據(jù)備份。如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：中心的郵件系統(tǒng)目前是單節(jié)點環(huán)境，分為前端與后端二個角色，互相之間沒有任何冗余，也就是說二臺機器之間有任何一臺機器出現(xiàn)故障都就有可能讓整個郵件系統(tǒng)出現(xiàn)癱瘓。當前端出現(xiàn)問題時，由于前端只是提供用戶的訪問等角色，當出現(xiàn)問題時首先需要從硬件上判斷入手，檢測硬件環(huán)境是否正常，能否進安全模式、是否可修復(fù)安裝等。假如機器是硬件問題引起或是軟件問題引起的嚴重崩潰。此時唯一辦法只能是重新搭建新環(huán)境，然后啟用備份還原。當后端出現(xiàn)問題，由于后端主要是數(shù)據(jù)庫角色，因此出現(xiàn)故障時首先從硬件環(huán)境上判斷，是否電源各項指示燈正常，硬盤RAID的掛載是否正常。然后試圖進入安全模式能否自行恢復(fù)。如果安全模式也不能進入，則需要修復(fù)安裝，如修復(fù)安裝也無效，只能搭建新環(huán)境，然后重新導(dǎo)入最新的數(shù)據(jù)備份。OA系統(tǒng)首先排除發(fā)現(xiàn)的故障，如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：首選對OA服務(wù)器做Ghost備份。其次備份數(shù)據(jù)庫，將備份數(shù)據(jù)異地保存。應(yīng)急時只需對服務(wù)器做Ghost恢復(fù)，從而恢復(fù)正常業(yè)務(wù)。作為備用方案，需要對OA服務(wù)器的數(shù)據(jù)庫做好完整的異機備份。當以上Ghost方案執(zhí)行后仍然存在故障，則考慮對該服務(wù)器重新安裝Windowssever2003系統(tǒng)，在域控服務(wù)器上重置apmoa-1這個域賬戶，然后對OA服務(wù)器加域（以上兩個步驟需要域控服務(wù)器的正常運行），安裝IISwindows組件，安裝SQLServer2005數(shù)據(jù)庫，安裝MicrosoftOffice2007軟件，安裝和部署MicrosoftOfficeSharepointServer2007，然后部署OA系統(tǒng)平臺，最后后對Sharepoint做數(shù)據(jù)庫恢復(fù)，從而恢復(fù)正常業(yè)務(wù)。***應(yīng)用內(nèi)網(wǎng)應(yīng)用LIMS數(shù)據(jù)庫首先排除發(fā)現(xiàn)的故障，如若故障無法排除，則執(zhí)行以下應(yīng)急預(yù)案：LIMS數(shù)據(jù)庫采用兩臺Sun小型機組成SunCluster，提供基于Oracle9i的數(shù)據(jù)庫服務(wù)，基于小型機硬件架構(gòu)及Solaris操作系統(tǒng)的穩(wěn)定性，暫不考慮兩臺小機硬件及系統(tǒng)同時故障的可能性，僅從數(shù)據(jù)庫角度進行應(yīng)急預(yù)案。當數(shù)據(jù)庫無法啟動時，依次查看檢測ORACLE后臺進程ps-ef|grepora，監(jiān)聽器后臺進程ps-ef|greptns，網(wǎng)絡(luò)服務(wù)端口netstat–an|grep1521。嘗試mount并opendatabase，嘗試startupmount。查看數(shù)據(jù)庫空間使用情況。到/u01/admin/orcl/bdump目錄下，通過tai