系統(tǒng)容災(zāi)恢復(fù)實(shí)施方案

1、 系統(tǒng)容災(zāi)恢復(fù)實(shí)施方案基于HPE 3Par存儲(chǔ)目 錄 TOC o 1-3 h z u HYPERLINK l _Toc498624630 1.概述 PAGEREF _Toc498624630 h 3 HYPERLINK l _Toc498624631 2.系統(tǒng)架構(gòu)及基本配置 PAGEREF _Toc498624631 h 3 HYPERLINK l _Toc498624632 2.1.容災(zāi)系統(tǒng)架構(gòu) PAGEREF _Toc498624632 h 3 HYPERLINK l _Toc498624633 2.2.數(shù)據(jù)復(fù)制范圍及復(fù)制組（RC Group）對(duì)應(yīng)關(guān)系 PAGEREF _Toc498624

2、633 h 4 HYPERLINK l _Toc498624634 2.3.定時(shí)快照 PAGEREF _Toc498624634 h 4 HYPERLINK l _Toc498624635 3.日常維護(hù) PAGEREF _Toc498624635 h 4 HYPERLINK l _Toc498624636 3.1.日常維護(hù)任務(wù) PAGEREF _Toc498624636 h 4 HYPERLINK l _Toc498624637 3.2.日常維護(hù)操作方法 PAGEREF _Toc498624637 h 4 HYPERLINK l _Toc498624638 3.2.1.檢查容災(zāi)系統(tǒng)狀態(tài) PAG

3、EREF _Toc498624638 h 6 HYPERLINK l _Toc498624639 3.2.2.手工暫停及恢復(fù)容災(zāi)數(shù)據(jù)復(fù)制 PAGEREF _Toc498624639 h 7 HYPERLINK l _Toc498624640 3.2.3.檢查快照完成情況 PAGEREF _Toc498624640 h 10 HYPERLINK l _Toc498624641 3.2.4.維護(hù)快照定時(shí)任務(wù) PAGEREF _Toc498624641 h 11 HYPERLINK l _Toc498624642 3.2.5.手工創(chuàng)建快照 PAGEREF _Toc498624642 h 13 HYP

4、ERLINK l _Toc498624643 3.2.6.從某一快照恢復(fù)數(shù)據(jù) PAGEREF _Toc498624643 h 14 HYPERLINK l _Toc498624644 4.容災(zāi)切換操作步驟 PAGEREF _Toc498624644 h 19 HYPERLINK l _Toc498624645 4.1.切換場(chǎng)景 PAGEREF _Toc498624645 h 19 HYPERLINK l _Toc498624646 4.1.1.計(jì)劃性切換 PAGEREF _Toc498624646 h 19 HYPERLINK l _Toc498624647 4.1.2.非計(jì)劃性切換 PAGE

5、REF _Toc498624647 h 19 HYPERLINK l _Toc498624648 4.2.存儲(chǔ)切換步驟 PAGEREF _Toc498624648 h 19 HYPERLINK l _Toc498624649 4.2.1.主存儲(chǔ)切換至容災(zāi)存儲(chǔ) PAGEREF _Toc498624649 h 20 HYPERLINK l _Toc498624650 4.2.2.容災(zāi)存儲(chǔ)切換回主存儲(chǔ) PAGEREF _Toc498624650 h 26 HYPERLINK l _Toc498624651 5.常見(jiàn)故障處理 PAGEREF _Toc498624651 h 33 HYPERLINK l

6、 _Toc498624652 5.1.單條復(fù)制鏈路故障 PAGEREF _Toc498624652 h 33 HYPERLINK l _Toc498624653 5.2.全部復(fù)制鏈路中斷 PAGEREF _Toc498624653 h 33 HYPERLINK l _Toc498624654 附錄：快照定時(shí)任務(wù)腳本 PAGEREF _Toc498624654 h 34概述本文檔詳細(xì)描述了3PAR容災(zāi)系統(tǒng)的組成、基本配置、日常維護(hù)及容災(zāi)切換技術(shù)操作流程等內(nèi)容，可以作為系統(tǒng)維護(hù)人員對(duì)容災(zāi)系統(tǒng)的日常維護(hù)手冊(cè)及容災(zāi)切換技術(shù)操作手冊(cè)系統(tǒng)架構(gòu)及基本配置容災(zāi)系統(tǒng)架構(gòu)容災(zāi)系統(tǒng)架構(gòu)如下圖所示：容災(zāi)系統(tǒng)采用主備磁

7、盤陣列的方式，主存儲(chǔ)為一臺(tái)HP 3PAR V400磁盤陣列，容災(zāi)存儲(chǔ)為一臺(tái)HP 3PAR F400磁盤陣列，利用Remote Copy存儲(chǔ)復(fù)制軟件將V400上的數(shù)據(jù)通過(guò)定時(shí)異步的方式復(fù)制F400上，實(shí)現(xiàn)同機(jī)房的數(shù)據(jù)級(jí)容災(zāi)。兩臺(tái)磁盤陣列之間數(shù)據(jù)傳輸通過(guò)兩條直連千兆以太網(wǎng)線來(lái)進(jìn)行。主存儲(chǔ)上的虛擬卷（Virtual Volume）在復(fù)制到容災(zāi)存儲(chǔ)上的同時(shí)，還通過(guò)Virtual Copy軟件在本地定時(shí)生成快照（Snapshot）用于邏輯恢復(fù)。數(shù)據(jù)復(fù)制范圍及復(fù)制組（RC Group）對(duì)應(yīng)關(guān)系本次項(xiàng)目涉及的數(shù)據(jù)復(fù)制范圍及復(fù)制組對(duì)應(yīng)關(guān)系參見(jiàn)附件3PAR容災(zāi)系統(tǒng)數(shù)據(jù)復(fù)制對(duì)應(yīng)關(guān)系表。定時(shí)快照在陣列內(nèi)部通過(guò)定時(shí)任

8、務(wù)的方式來(lái)進(jìn)行定時(shí)快照。對(duì)于每一個(gè)VV Set（即每一個(gè)應(yīng)用系統(tǒng)所使用的磁盤集合），從每日8點(diǎn)至20點(diǎn)每隔2小時(shí)創(chuàng)建一份只讀快照數(shù)據(jù)，命名格式為“vvname_mmddHHMM.ro”，例如9月25日14點(diǎn)05分對(duì)vv1創(chuàng)建的快照名稱為vv1_09251405.ro。每份快照保存期為1天，過(guò)期將被磁盤陣列自動(dòng)刪除?？煺斩〞r(shí)任務(wù)使用的命令語(yǔ)法為：createsv ro exp 1d vvname_mdHM.ro set:”VVset 名稱”除上述快照外，每天0點(diǎn)還會(huì)創(chuàng)建一份保存期為7天的快照，命名方式相同。詳細(xì)執(zhí)行腳本參見(jiàn)附錄日常維護(hù)日常維護(hù)任務(wù)容災(zāi)系統(tǒng)的日常維護(hù)主要包含以下任務(wù)：檢查容災(zāi)系統(tǒng)狀

9、態(tài)手工暫停及恢復(fù)容災(zāi)數(shù)據(jù)復(fù)制檢查快照創(chuàng)建情況暫停及恢復(fù)快照定時(shí)任務(wù)手工創(chuàng)建快照日常維護(hù)操作方法日常維護(hù)主要通過(guò)登陸3PAR圖形界面管理工具IMC來(lái)完成。在管理終端上點(diǎn)擊Inform Management Console圖標(biāo)，選擇登陸兩臺(tái)3PAR，用戶名/密碼為3paradm/3pardata，如下圖所示：注意不要勾選“Secure Connection”選項(xiàng)。點(diǎn)擊左下方“Remote Copy”，即可進(jìn)入容災(zāi)系統(tǒng)管理界面。如下圖所示。檢查容災(zāi)系統(tǒng)狀態(tài)檢查容災(zāi)系統(tǒng)整體狀態(tài)點(diǎn)擊Summary卡片，檢查右側(cè)Health一欄的容災(zāi)系統(tǒng)整體狀態(tài)。其中Service State應(yīng)為Normal，Targe

10、t應(yīng)為1 Ready，Links為4 Up，Groups為9 Started，均為綠燈顯示。如下圖：檢查容災(zāi)鏈路狀態(tài)點(diǎn)擊左側(cè)”Links”選項(xiàng)，觀察右側(cè)Links欄狀態(tài)信息，每臺(tái)存儲(chǔ)下應(yīng)都有4條鏈路狀態(tài)為Up，顯示為綠燈。檢查容災(zāi)組狀態(tài)點(diǎn)擊左側(cè)Groups選項(xiàng)，觀察右側(cè)信息，所有復(fù)制組狀態(tài)均為Started。點(diǎn)擊每個(gè)Group，觀察下方的Virtual Volume欄信息，每個(gè)虛擬卷Sync State狀態(tài)均為Synced或Syncing。如下圖所示。手工暫停及恢復(fù)容災(zāi)數(shù)據(jù)復(fù)制手工暫停容災(zāi)數(shù)據(jù)復(fù)制在以下情況下需要手工中斷數(shù)據(jù)復(fù)制：復(fù)制鏈路上產(chǎn)生擁塞，需中斷部分復(fù)制組的數(shù)據(jù)同步以保證其他復(fù)制組的

11、正常運(yùn)行災(zāi)備數(shù)據(jù)驗(yàn)證或演習(xí)時(shí)，主備存儲(chǔ)切換前需手工暫停數(shù)據(jù)復(fù)制主存儲(chǔ)或容災(zāi)存儲(chǔ)需要進(jìn)行軟件升級(jí)，升級(jí)前需要手工暫停數(shù)據(jù)復(fù)制執(zhí)行方法如下：點(diǎn)擊左側(cè)Group選項(xiàng)，在右側(cè)選中需要暫停的復(fù)制組，右鍵選擇Stop Remote Copy Groups，如下圖：根據(jù)提示選擇OK。該復(fù)制組狀態(tài)將變?yōu)镾topped。如下圖：恢復(fù)容災(zāi)數(shù)據(jù)復(fù)制當(dāng)手工斷開(kāi)容災(zāi)復(fù)制或數(shù)據(jù)復(fù)制因鏈路故障導(dǎo)致中斷后，在鏈路暢通的情況下可以手工恢復(fù)容災(zāi)數(shù)據(jù)復(fù)制。執(zhí)行方法如下：選中已暫停的復(fù)制組，右鍵選擇Start Remote Copy Groups，如下圖：根據(jù)提示選擇OK檢查復(fù)制組恢復(fù)到Started狀態(tài)，且虛擬卷狀態(tài)從Syncin

12、g變?yōu)镾ynced。檢查快照完成情況檢查快照定時(shí)任務(wù)完成情況檢查右下方Recent Tasks卡片的任務(wù)完成情況，可以看到所有Scheduled Task狀態(tài)為Completed。如出現(xiàn)狀態(tài)為Failed的Scheduled Task，則表明有快照定時(shí)任務(wù)失敗。如下圖：檢查快照卷點(diǎn)擊左下方Provisioning按鈕，選擇3ParV400Vritual Volumes，在右側(cè)選擇Virtual Volumes，點(diǎn)擊虛擬卷左側(cè)+號(hào)可查看所有的快照卷。如下圖：維護(hù)快照定時(shí)任務(wù)以下工作需要通過(guò)命令行（SSH）方式登錄主存儲(chǔ)V400來(lái)進(jìn)行。暫?？煺斩〞r(shí)任務(wù)暫停一項(xiàng)快照定時(shí)任務(wù)，以APS004_1D為例

13、setsched suspend APS004_1D執(zhí)行showsched命令可顯示該任務(wù)已被標(biāo)記為SuspendedSchedName File/Command Min Hour DOM Month DOW CreatedBy Status Alert NextRunTime createsv_APS019_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS019 30 0 * * * 3paradm active Y 2012-09-26 00:30:00 CSTcreatesv_APS015-APS018_7D createsv -r

14、o -exp 7d vvname_YmdHM.ro set:V400_APS015-APS018 25 0 * * * 3paradm active Y 2012-09-26 00:25:00 CSTcreatesv_DBS001_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_DBS001 20 0 * * * 3paradm active Y 2012-09-26 00:20:00 CSTcreatesv_APS011_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS011 15 0

15、* * * 3paradm active Y 2012-09-26 00:15:00 CSTcreatesv_APS009_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS009 10 0 * * * 3paradm active Y 2012-09-26 00:10:00 CSTcreatesv_APS006_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS006 5 0 * * * 3paradm active Y 2012-09-26 00:05:00 CSTcreatesv_

16、APS004_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS004 0 0 * * * 3paradm active Y 2012-09-26 00:00:00 CSTcreatesv_APS019_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS019 30 8,10,12,14,16,18,20 * * * 3paradm active Y 2012-09-25 12:30:00 CSTcreatesv_APS015-APS018_1D createsv -ro -exp 1d

17、 vvname_YmdHM.ro set:V400_APS015-APS018 25 8,10,12,14,16,18,20 * * * 3paradm active Y 2012-09-25 12:25:00 CSTcreatesv_DBS001_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_DBS001 20 8,10,12,14,16,18,20 * * * 3paradm active Y 2012-09-25 12:20:00 CSTcreatesv_APS011_1D createsv -ro -exp 1d vvname_Ymd

18、HM.ro set:V400_APS011 15 8,10,12,14,16,18,20 * * * 3paradm active Y 2012-09-25 12:15:00 CSTcreatesv_APS009_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS009 10 8,10,12,14,16,18,20 * * * 3paradm active Y 2012-09-25 12:10:00 CSTcreatesv_APS006_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS

19、006 5 8,10,12,14,16,18,20 * * * 3paradm active Y 2012-09-25 12:05:00 CSTcreatesv_APS004_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS004 0 8,10,12,14,16,18,20 * * * 3paradm suspended Y - 暫停全部定時(shí)任務(wù)setsched suspend_all執(zhí)行showsched命令可顯示全部任務(wù)已被標(biāo)記為SuspendedSchedName File/Command Min Hour DOM Month DO

20、W CreatedBy Status Alert NextRunTimecreatesv_APS019_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS019 30 0 * * * 3paradm suspended Y - createsv_APS015-APS018_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS015-APS018 25 0 * * * 3paradm suspended Y - createsv_DBS001_7D createsv -ro -exp 7d

21、vvname_YmdHM.ro set:V400_DBS001 20 0 * * * 3paradm suspended Y - createsv_APS011_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS011 15 0 * * * 3paradm suspended Y - createsv_APS009_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS009 10 0 * * * 3paradm suspended Y - createsv_APS006_7D create

22、sv -ro -exp 7d vvname_YmdHM.ro set:V400_APS006 5 0 * * * 3paradm suspended Y - createsv_APS004_7D createsv -ro -exp 7d vvname_YmdHM.ro set:V400_APS004 0 0 * * * 3paradm suspended Y - createsv_APS019_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS019 30 8,10,12,14,16,18,20 * * * 3paradm suspende

23、d Y - createsv_APS015-APS018_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS015-APS018 25 8,10,12,14,16,18,20 * * * 3paradm suspended Y - createsv_DBS001_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_DBS001 20 8,10,12,14,16,18,20 * * * 3paradm suspended Y - createsv_APS011_1D createsv -ro -e

24、xp 1d vvname_YmdHM.ro set:V400_APS011 15 8,10,12,14,16,18,20 * * * 3paradm suspended Y - createsv_APS009_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS009 10 8,10,12,14,16,18,20 * * * 3paradm suspended Y - createsv_APS006_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS006 5 8,10,12,14,16,

25、18,20 * * * 3paradm suspended Y - createsv_APS004_1D createsv -ro -exp 1d vvname_YmdHM.ro set:V400_APS004 0 8,10,12,14,16,18,20 * * * 3paradm suspended Y - 恢復(fù)快照定時(shí)任務(wù)恢復(fù)一項(xiàng)快照定時(shí)任務(wù)，以APS004_1D為例setsched -resume createsv_APS004_1D執(zhí)行showsched命令可顯示該任務(wù)已被標(biāo)記為Active恢復(fù)全部快照定時(shí)任務(wù)setsched resume_all執(zhí)行showsched命令可顯示全部任

26、務(wù)已被標(biāo)記為Active創(chuàng)建新的定時(shí)任務(wù)createsched 任務(wù)名 “須執(zhí)行的命令” “任務(wù)執(zhí)行計(jì)劃”，例如：createsched createsv -ro -exp 1d vvname_mdHM.ro set:V400_APS004 0 8,10,12,14,16,18,20 * * * createsv_APS004_1D上例為每天8:00,10:00, 12:00, 14:00, 16:00, 18:00, 20:00各執(zhí)行一次createsv操作。刪除一項(xiàng)定時(shí)任務(wù)removesched 任務(wù)名手工創(chuàng)建快照通過(guò)以下方法可以手工創(chuàng)建一份快照：點(diǎn)擊左下方Provisioning按鈕，選

27、擇Virtual Volume Sets，選擇相應(yīng)VV Set右鍵點(diǎn)擊Create Virtual Copy：選擇快照卷名稱，點(diǎn)選Read Only，不必設(shè)置Expiration Time，點(diǎn)擊OK。同一VV Set里的所有虛擬卷都會(huì)同時(shí)創(chuàng)建一份快照。從某一快照恢復(fù)數(shù)據(jù)當(dāng)生產(chǎn)數(shù)據(jù)因誤操作等因素出現(xiàn)邏輯錯(cuò)誤時(shí)，可通過(guò)以下步驟從某個(gè)時(shí)間點(diǎn)的快照恢復(fù)數(shù)據(jù)。注意：同一個(gè)虛擬卷組（VV set）里的虛擬卷（VV）必須全部從同一時(shí)間點(diǎn)的快照中恢復(fù)才能保證數(shù)據(jù)一致性。從主機(jī)上卸載（unmount）磁盤刪除虛擬卷與主機(jī)的映射關(guān)系 選中VV Set，點(diǎn)擊右側(cè)VLUNs卡片，選中所有LUN ID并右鍵點(diǎn)擊Remo

28、ve點(diǎn)選虛擬卷下列出的某個(gè)快照卷，執(zhí)行promote操作。該操作需對(duì)虛擬卷組的所有卷重復(fù)執(zhí)行。確認(rèn)所有promote任務(wù)成功完成添加虛擬卷與主機(jī)的映射關(guān)系選中VV Set，右鍵點(diǎn)擊Export選中需映射的主機(jī)。在主機(jī)上掛起（mount）磁盤檢查數(shù)據(jù)容災(zāi)切換操作步驟本章詳細(xì)描述了對(duì)容災(zāi)系統(tǒng)進(jìn)行存儲(chǔ)切換的全過(guò)程。存儲(chǔ)切換以復(fù)制組（Remote Copy Group）為單位執(zhí)行。切換場(chǎng)景對(duì)于存儲(chǔ)切換來(lái)說(shuō)存在兩種切換場(chǎng)景：計(jì)劃性切換及非計(jì)劃性切換。對(duì)于兩個(gè)場(chǎng)景而言，存儲(chǔ)切換的基本操作步驟是一樣的。在某些細(xì)節(jié)上的差異指出，在4.2節(jié)切換步驟描述中會(huì)明確列舉。計(jì)劃性切換計(jì)劃性切換時(shí)，主存儲(chǔ)和容災(zāi)存儲(chǔ)之間的

29、聯(lián)系保持暢通且均可與管理臺(tái)連接。以下場(chǎng)景適用于計(jì)劃性切換：存儲(chǔ)復(fù)制數(shù)據(jù)驗(yàn)證及切換測(cè)試災(zāi)難恢復(fù)演習(xí)主存儲(chǔ)需關(guān)機(jī)維護(hù)的場(chǎng)合（如電源改造等）非計(jì)劃性切換非計(jì)劃性切換時(shí)，主存儲(chǔ)全部或部分容災(zāi)組與容災(zāi)存儲(chǔ)之間的復(fù)制鏈路將發(fā)生中斷且主存儲(chǔ)可能與管理臺(tái)失去連接。以下場(chǎng)景適用于非計(jì)劃性切換：主存儲(chǔ)嚴(yán)重故障導(dǎo)致不可訪問(wèn)（如多個(gè)控制器故障、多塊硬盤損壞等）主存儲(chǔ)異常斷電存儲(chǔ)切換步驟存儲(chǔ)切換包含兩部分步驟：從主存儲(chǔ)切換到容災(zāi)存儲(chǔ)，以及從容災(zāi)存儲(chǔ)回切到主存儲(chǔ)。本節(jié)所使用的圖示均以非計(jì)劃性切換為例，主要區(qū)別是：在非計(jì)劃性切換時(shí)，圖形界面可能只能顯示容災(zāi)存儲(chǔ)的狀態(tài)（主存儲(chǔ)顯示為灰色），而計(jì)劃性切換時(shí)，圖形界面將可以同時(shí)顯

30、示兩臺(tái)存儲(chǔ)的狀態(tài)。主存儲(chǔ)切換至容災(zāi)存儲(chǔ) 檢查復(fù)制組狀態(tài)參照3.2.1節(jié)內(nèi)容檢查復(fù)制組狀態(tài)。對(duì)于非計(jì)劃性切換來(lái)說(shuō)，Target狀態(tài)應(yīng)為Failed，復(fù)制組狀態(tài)應(yīng)為Stopped。如下圖：對(duì)于計(jì)劃性切換來(lái)說(shuō)，需參照3.2.2節(jié)方法暫停容災(zāi)組數(shù)據(jù)復(fù)制，復(fù)制組狀態(tài)應(yīng)變?yōu)镾topped。如下圖：刪除主存儲(chǔ)上該復(fù)制組磁盤與主機(jī)的映射關(guān)系 此步驟主要用于計(jì)劃性切換，非計(jì)劃性切換時(shí)如果管理臺(tái)可以訪問(wèn)主存儲(chǔ)，也執(zhí)行此步驟。執(zhí)行方法如下：選中VV Set，點(diǎn)擊右側(cè)VLUNs卡片，選中所有LUN ID并右鍵點(diǎn)擊Remove如整臺(tái)主存儲(chǔ)已無(wú)法訪問(wèn)，則切換前必須斷開(kāi)主存儲(chǔ)與SAN交換機(jī)之間的所有光纖連接，確保不會(huì)因主存

31、儲(chǔ)自動(dòng)啟動(dòng)導(dǎo)致主機(jī)同時(shí)識(shí)別到多個(gè)相同的磁盤。主機(jī)重新掃描磁盤（或重啟），此時(shí)應(yīng)已無(wú)法識(shí)別原有主存儲(chǔ)磁盤對(duì)復(fù)制組執(zhí)行切換操作點(diǎn)擊左側(cè)Group選項(xiàng)，在右側(cè)選中需要切換的復(fù)制組，右鍵選擇Failover Remote Copy Groups，如下圖：確認(rèn)該復(fù)制組Writeable LUNs一列為3ParF400在容災(zāi)存儲(chǔ)上添加虛擬卷與主機(jī)的映射關(guān)系選中容災(zāi)存儲(chǔ)F400上對(duì)應(yīng)的VV Set（VV Set對(duì)應(yīng)關(guān)系參見(jiàn)3PAR容災(zāi)系統(tǒng)數(shù)據(jù)復(fù)制對(duì)應(yīng)關(guān)系表），右鍵選擇Export：在主機(jī)上重新掃描磁盤，應(yīng)識(shí)別到容災(zāi)存儲(chǔ)磁盤在主機(jī)上掛起（Mount）容災(zāi)存儲(chǔ)磁盤檢查文件系統(tǒng)完整性與一致性，主備切換完成。容災(zāi)存

32、儲(chǔ)切換回主存儲(chǔ)如主存儲(chǔ)修復(fù)且原始配置未丟失，啟動(dòng)主存儲(chǔ)前必須首先斷開(kāi)主存儲(chǔ)與主機(jī)的光纖連接，在刪除虛擬卷與主機(jī)映射關(guān)系后再連接上光纖。確認(rèn)主存儲(chǔ)狀態(tài)回切前需首先確認(rèn)主存儲(chǔ)狀態(tài)正常，包括：主存儲(chǔ)可以正常被管理臺(tái)圖形界面管理主存儲(chǔ)硬件狀態(tài)正常主存儲(chǔ)相應(yīng)復(fù)制組所在虛擬卷未映射給主機(jī)復(fù)制鏈路狀態(tài)正常，檢查方法參見(jiàn)3.2.1節(jié)已切換復(fù)制組DR State為Failover， State為Normal，如下圖：對(duì)復(fù)制組執(zhí)行恢復(fù)操作點(diǎn)擊復(fù)制組，右鍵選擇Recover Remote Copy Groups，如下圖：等待復(fù)制組狀態(tài)為Synced，如下圖停止主機(jī)上的IO訪問(wèn)在主機(jī)上卸載（unmont）容災(zāi)存儲(chǔ)所在

33、磁盤對(duì)復(fù)制組執(zhí)行同步操作點(diǎn)擊復(fù)制組，右鍵選擇Sync Remote Copy Groups，如下圖：等待復(fù)制組狀態(tài)為Synced。在容災(zāi)存儲(chǔ)上刪除虛擬卷與主機(jī)的映射關(guān)系在容災(zāi)存儲(chǔ)F400上選中VV Set，點(diǎn)擊右側(cè)VLUNs卡片，選中所有LUN ID并右鍵點(diǎn)擊Remove，如下圖：對(duì)復(fù)制組執(zhí)行還原操作選擇復(fù)制組，右鍵選擇Restore Remote Copy Group，如下圖：等待復(fù)制組狀態(tài)恢復(fù)為初始正常狀態(tài)，如下圖：在主存儲(chǔ)上添加虛擬卷與主機(jī)的映射關(guān)系在主存儲(chǔ)V400上選中VV Set，右鍵點(diǎn)擊Export選中需映射的主機(jī)。在主機(jī)上重新掃描磁盤，應(yīng)識(shí)別到主存儲(chǔ)磁盤在主機(jī)上掛起（Mount）

34、主存儲(chǔ)磁盤檢查文件系統(tǒng)完整性與一致性，回切完成。常見(jiàn)故障處理以下列舉容災(zāi)系統(tǒng)常見(jiàn)故障及處理方法：?jiǎn)螚l復(fù)制鏈路故障故障檢測(cè)機(jī)制單條復(fù)制鏈路故障時(shí)，系統(tǒng)將在25秒后檢測(cè)并將鏈路狀態(tài)設(shè)置為Down，檢查方法參考3.2.1節(jié)。故障影響單條復(fù)制鏈路故障不會(huì)影響容災(zāi)系統(tǒng)運(yùn)行。處理方法修復(fù)復(fù)制網(wǎng)絡(luò)故障后，系統(tǒng)會(huì)自動(dòng)檢測(cè)該鏈路狀態(tài)并設(shè)置為Up，不需人工處理。 全部復(fù)制鏈路中斷故障檢測(cè)機(jī)制全部復(fù)制鏈路故障時(shí)，系統(tǒng)將在25秒后檢測(cè)并將所有鏈路狀態(tài)設(shè)置為Down，并在200秒后將對(duì)端存儲(chǔ)狀態(tài)設(shè)置為Failed。檢查方法參考3.2.1節(jié)。故障影響全部復(fù)制鏈路中斷將導(dǎo)致所有復(fù)制組被置為Stopped狀態(tài)。處理方法修復(fù)復(fù)

35、制網(wǎng)絡(luò)故障后，系統(tǒng)會(huì)自動(dòng)檢測(cè)復(fù)制鏈路狀態(tài)并設(shè)置為Up，但需手工恢復(fù)復(fù)制組數(shù)據(jù)復(fù)制。參見(jiàn)3.2.2節(jié)。 存儲(chǔ)故障主存儲(chǔ)或容災(zāi)存儲(chǔ)發(fā)生重啟、宕機(jī)等故障時(shí)，容災(zāi)系統(tǒng)表現(xiàn)與全部復(fù)制鏈路中斷場(chǎng)景一致，請(qǐng)參考5.2節(jié)進(jìn)行檢測(cè)和處理。附錄：快照定時(shí)任務(wù)腳本以下為V400上的showsched輸出：SchedName File/Command Min Hour DOM Month DOW CreatedBy Status Alert NextRunTime createsv_APS019_7D createsv -ro -exp 7d vvname_mdHM.ro set:V400_APS019 30 0 *

36、 * * 3paradm active Y 2012-09-26 00:30:00 CSTcreatesv_APS015-APS018_7D createsv -ro -exp 7d vvname_mdHM.ro set:V400_APS015-APS018 25 0 * * * 3paradm active Y 2012-09-26 00:25:00 CSTcreatesv_DBS001_7D createsv -ro -exp 7d vvname_mdHM.ro set:V400_DBS001 20 0 * * * 3paradm active Y 2012-09-26 00:20:00 CSTcreatesv_APS011_7D createsv -ro -exp 7d vvname_mdHM.ro set:V400_APS011 15 0 * * * 3paradm active Y 2012-09-26 00:15:00 CSTcreatesv_APS009_7D createsv -ro -exp 7d vvname_mdHM.ro set:V400_APS009 10 0 * * * 3paradm active Y 2012-09-26 00:10:00 CSTcreatesv_APS00