VMAXK容災(zāi)SRDF管理手冊

1、 第 PAGE 19 頁VMAX10K容災(zāi)SRDF管理手冊 HYPERLINK http:/ t _blank 易安信電腦系統(tǒng)（中國）有限公司2014年09月23日文檔信息項目名稱：文檔版本號：1.0文檔作者：生成日期：文檔審核者：審核日期：文檔維護(hù)記錄版本號維護(hù)日期作者/維護(hù)人描述1.02014年9月23日張亮創(chuàng)建版權(quán)說明本文件中出現(xiàn)的任何文字?jǐn)⑹?、文檔格式、插圖、照片、方法、過程等內(nèi)容，除另有特別注明，版權(quán)均屬外匯管理局公司和EMC公司所有，受到有關(guān)產(chǎn)權(quán)及版權(quán)法保護(hù)。任何個人、機(jī)構(gòu)未經(jīng)外匯管理局公司和EMC公司的書面授權(quán)許可，不得復(fù)制、引用或傳播本文件的任何片斷，無論通過電子形式或非電子形

2、式。目 錄 TOC o 1-4 h z u HYPERLINK l _Toc399265099 第一章EMC SRDF技術(shù)介紹 PAGEREF _Toc399265099 h 4 HYPERLINK l _Toc399265100 1.1SRDF/S PAGEREF _Toc399265100 h 4 HYPERLINK l _Toc399265101 1.2SRDF/A PAGEREF _Toc399265101 h 4 HYPERLINK l _Toc399265102 第二章環(huán)境描述 PAGEREF _Toc399265102 h 6 HYPERLINK l _Toc399265103

3、2.1整體架構(gòu) PAGEREF _Toc399265103 h 6 HYPERLINK l _Toc399265104 2.2存儲信息 PAGEREF _Toc399265104 h 7 HYPERLINK l _Toc399265105 2.3dg信息與rdfg信息 PAGEREF _Toc399265105 h 7 HYPERLINK l _Toc399265106 2.3.1dg介紹 PAGEREF _Toc399265106 h 7 HYPERLINK l _Toc399265107 2.3.2rdfg介紹 PAGEREF _Toc399265107 h 7 HYPERLINK l _

4、Toc399265108 2.3.3dg與rdfg 列表 PAGEREF _Toc399265108 h 8 HYPERLINK l _Toc399265109 第三章SRDF操作 PAGEREF _Toc399265109 h 9 HYPERLINK l _Toc399265110 3.1LUN狀態(tài)對應(yīng)表 PAGEREF _Toc399265110 h 9 HYPERLINK l _Toc399265111 3.2SRDF狀態(tài)查詢 PAGEREF _Toc399265111 h 9 HYPERLINK l _Toc399265112 3.2.1查詢同城SRDF/S狀態(tài) PAGEREF _To

5、c399265112 h 9 HYPERLINK l _Toc399265113 3.2.2查詢異地SRDF/A狀態(tài) PAGEREF _Toc399265113 h 9 HYPERLINK l _Toc399265114 3.3SRDF分離與恢復(fù)流程 PAGEREF _Toc399265114 h 10 HYPERLINK l _Toc399265115 3.3.1停止SRDF/A一致性保護(hù)命令 PAGEREF _Toc399265115 h 12 HYPERLINK l _Toc399265116 3.3.2分離命令 PAGEREF _Toc399265116 h 12 HYPERLINK

6、l _Toc399265117 3.3.3更改為自適應(yīng)拷貝模式命令 PAGEREF _Toc399265117 h 12 HYPERLINK l _Toc399265118 3.3.4恢復(fù)增量拷貝命令 PAGEREF _Toc399265118 h 13 HYPERLINK l _Toc399265119 3.3.5更改為SRDF/A或SRDF/S模式命令 PAGEREF _Toc399265119 h 13 HYPERLINK l _Toc399265120 3.3.6啟用SRDF/A一致性保護(hù)命令 PAGEREF _Toc399265120 h 13 HYPERLINK l _Toc399

7、265121 3.4分離與恢復(fù)操作示例腳本 PAGEREF _Toc399265121 h 13 HYPERLINK l _Toc399265122 3.4.1貨物貿(mào)易同城SRDF/S分離與恢復(fù) PAGEREF _Toc399265122 h 14 HYPERLINK l _Toc399265123 3.4.2貨物貿(mào)易異地SRDF/A分離與恢復(fù) PAGEREF _Toc399265123 h 14 HYPERLINK l _Toc399265124 3.5現(xiàn)有業(yè)務(wù)擴(kuò)盤加入容災(zāi) PAGEREF _Toc399265124 h 14 HYPERLINK l _Toc399265125 3.5.1擴(kuò)

8、容盤加入容災(zāi)流程 PAGEREF _Toc399265125 h 14 HYPERLINK l _Toc399265126 3.5.2擴(kuò)容盤加入容災(zāi)示例腳本 PAGEREF _Toc399265126 h 15 HYPERLINK l _Toc399265127 創(chuàng)建臨時pair PAGEREF _Toc399265127 h 15 HYPERLINK l _Toc399265128 臨時pair完成同步 PAGEREF _Toc399265128 h 16 HYPERLINK l _Toc399265129 SRDF/S move pair PAGEREF _Toc399265129 h 1

9、6 HYPERLINK l _Toc399265130 SRDF/A move pair PAGEREF _Toc399265130 h 16 HYPERLINK l _Toc399265131 將擴(kuò)容盤加入dg PAGEREF _Toc399265131 h 17 HYPERLINK l _Toc399265132 檢查 PAGEREF _Toc399265132 h 17 HYPERLINK l _Toc399265133 第四章故障與維護(hù) PAGEREF _Toc399265133 h 18 HYPERLINK l _Toc399265134 4.1SRDF鏈路中斷 PAGEREF _T

10、oc399265134 h 18 HYPERLINK l _Toc399265135 4.2生產(chǎn)中心災(zāi)難切換 PAGEREF _Toc399265135 h 18 HYPERLINK l _Toc399265136 4.3生產(chǎn)中心恢復(fù)回切 PAGEREF _Toc399265136 h 18EMC SRDF技術(shù)介紹SRDF(Symmetrix Remote Data Facility)運用EMC Symmetrix數(shù)據(jù)存儲系統(tǒng)實現(xiàn)災(zāi)難恢復(fù)和業(yè)務(wù)連續(xù)性。SRDF提供了從一個到一個、一個到多個物理上分離的Symmetrix系統(tǒng)的數(shù)據(jù)復(fù)制技術(shù)，尤其在多點容災(zāi)技術(shù)方面， SRDF遠(yuǎn)程數(shù)據(jù)復(fù)制技術(shù)在中間

11、站點容量需求、擴(kuò)展性等方面有一定優(yōu)勢。在外匯管理局的環(huán)境中，涉及SRDF技術(shù)的三個主要的類型：SRDF/S同步方式的SRDF，是將本地生產(chǎn)數(shù)據(jù)以完全同步的方式復(fù)制到異地，每一個本地的I/O 處理均需等待遠(yuǎn)程復(fù)制的完成，從而實現(xiàn)主/備中心磁盤陣列同步地進(jìn)行數(shù)據(jù)更新。SRDF/A異步方式的SRDF，是將本地生產(chǎn)數(shù)據(jù)以后臺處理的方式復(fù)制到異地的方式，每一個本地的I/O 處理后，無需等待遠(yuǎn)程復(fù)制的完成就正常釋放，也就是在應(yīng)用系統(tǒng)的I/O寫入主磁盤陣列后，主磁盤陣列立即返回給主機(jī)應(yīng)用系統(tǒng)“寫完成”信息，主機(jī)應(yīng)用可以繼續(xù)進(jìn)行讀、寫I/O的操作。環(huán)境描述整體架構(gòu)外匯管理局目前的EMC存儲系統(tǒng)，由3臺EMC

12、Symmetrix高端存儲組成。構(gòu)成“并發(fā)型SRDF”容災(zāi)結(jié)構(gòu)，即concurrent SRDF.后續(xù)文檔中，采用“型號-序列號末3位”的方式標(biāo)示存儲。北京機(jī)房為生產(chǎn)中心，有1臺VMAX10K-213和1臺DMX3-223；上海機(jī)房為異地災(zāi)備中心，有一臺VMAX10K-214。北京機(jī)房的VMAX10K-213和DMX3-223之間采用EMC SRDF/S技術(shù)實現(xiàn)背靠背同城數(shù)據(jù)保護(hù);北京機(jī)房的VMAX10K-213和上海機(jī)房的VMAX10K-214之間采用EMC SRDF/A技術(shù)實現(xiàn)異地數(shù)據(jù)保護(hù);邏輯拓?fù)淙缦拢捍鎯π畔⒈本┥虾４鎯γQDMX3-223VMAX10K_213VMAX10K_214存

13、儲序列號CK290300223CN498700213CN498700214SRDF屬性R2R1R2控制主機(jī)86以上設(shè)備在使用中有任何問題，請聯(lián)系EMC24小時支持熱線：固話撥打：800-819-0009 手機(jī)撥打：400-670-0009請?zhí)峁┕收显O(shè)備的序列號，并記錄case號碼。dg信息與rdfg信息dg介紹SRDF技術(shù)基于LUN級別進(jìn)行復(fù)制，同一個業(yè)務(wù)的LUN可建立Device Group，即dg，通過該業(yè)務(wù)的SRDF group (rdfg)形成配對關(guān)系，進(jìn)行統(tǒng)一管理操作。dg信息保存在管理機(jī)上，如果主機(jī)重裝操作系統(tǒng)，需要先將dg信息導(dǎo)出備份，之后重新安裝SE軟件并且導(dǎo)入dg信息。rdf

14、g介紹SRDF/A要求每一個業(yè)務(wù)建立獨自的rdfg，相當(dāng)于復(fù)制的邏輯通道。對于每一個業(yè)務(wù)來說，從生產(chǎn)存儲出發(fā)，都有2個rdfg，一個去往同城容災(zāi)的DMX3-223，另一個去往異地容災(zāi)的VMAX10K-214.在指定dg進(jìn)行SRDF操作時，要通過指定rdfg來確定操作的是同城容災(zāi)還是異地容災(zāi)。例如，斷開SRDF：symrdf g DG_NAME rdfg 同城rdfg split (斷開同城容災(zāi))symrdf g DG_NAME rdfg 異地rdfg split (斷開異地容災(zāi))dg與rdfg 列表可以用如下命令查看某一臺管理機(jī)上的dg：/usr/symcli/bin/symdg list系統(tǒng)

15、名稱DGLUN數(shù)量同城rdfg異地rdfg貨物貿(mào)易29_tradedb_dg741011資本項目32_cfadb_dg451314ASONE46_asonedb_dg51617國際收支47_bizdb_dg111920國際收支48_bopdb_dg162223表單系統(tǒng)（銀行網(wǎng)和內(nèi)網(wǎng)）21_interdb_dg92526表單（分局報表）20_bdfjbbdb_dg92829貨物貿(mào)易（海關(guān)前置）28_chkinportdb_dg73132政府網(wǎng)站35_zfwzdb_dg143435stage group28SRDF操作下面的所有操作，以”貨物貿(mào)易”即29_tradedb_dg來做示例。LUN狀態(tài)對

16、應(yīng)表SRDF pair狀態(tài)R1 lun狀態(tài)R2 lun狀態(tài)SplitRWRWSuspendRWRWSynchronizedRWWDConsistentRWWDsyncInProgRWWDpartitionRWRWfailedoverWDRWRW - 磁盤處于read/write狀態(tài)，主機(jī)可以使用WD - 磁盤處于write disable狀態(tài)，主機(jī)不可使用注意：在使用SRDF操作使LUN變成WD之前，需要先停止業(yè)務(wù)，umount文件系統(tǒng)，并varyoff vg。SRDF狀態(tài)查詢查詢同城SRDF/S狀態(tài)/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 10

17、query查詢異地SRDF/A狀態(tài)/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 11 query -rdfa在正常保護(hù)狀態(tài)下，查看點：RDF pair state同城SRDF/S （北京VMAX10K-北京DMX3）應(yīng)為synctronized異地SRDF/A（北京VMAX10K-上海VMAX10K）應(yīng)為consistentInvalid track應(yīng)為0.輸出結(jié)果示例：SRDF分離與恢復(fù)流程在保護(hù)狀態(tài)下，R1的LUN為RW狀態(tài)，主機(jī)可使用；R2的LUN為WD狀態(tài)，主機(jī)不可使用。經(jīng)過SRDF的分離操作，R2的LUN狀態(tài)變?yōu)镽W狀態(tài)，主機(jī)可以進(jìn)行讀寫操作

18、。SRDF中最常用的就是分離和恢復(fù)操作，其流程步驟如下：同城SRDF/S的分離與恢復(fù)流程分離操作只需要split一條命令即成功。在需要恢復(fù)時，如果分離時間較長，數(shù)據(jù)差異大，建議先修改成自適應(yīng)拷貝模式，此時只更改狀態(tài)，未發(fā)起同步?；謴?fù)增量同步后，數(shù)據(jù)開始增量拷貝，待接近追平時，重新修改為同步狀態(tài)。異地SRDF/A的分離與恢復(fù)流程分離操作只需要disable（停止一致性保護(hù)）和split兩條命令即。在需要恢復(fù)時，如果分離時間較長，數(shù)據(jù)差異大，建議先修改成自適應(yīng)拷貝模式，此時只更改狀態(tài)，未發(fā)起同步?；謴?fù)增量同步后，數(shù)據(jù)開始增量拷貝，待接近追平時，重新修改為異步狀態(tài)。最后啟用一致性保護(hù)。具體步驟命令如

19、下：停止SRDF/A一致性保護(hù)命令（僅適用異地SRDF/A操作，同城SRDF/S不需操作此步驟）/usr/symcli/bin/symrdf g DG_NAME disable示例：分離命令/usr/symcli/bin/symrdf g DG_NAME split示例：更改為自適應(yīng)拷貝模式命令(如果分離時間較長，可更改為自適應(yīng)拷貝模式，這種模式數(shù)據(jù)拷貝速度較快，且不對R1的讀寫時間造成影響)/usr/symcli/bin/symrdf g DG_NAME set mode acp_disk恢復(fù)增量拷貝命令/usr/symcli/bin/symrdf g DG_NAME establish更改

20、為SRDF/A或SRDF/S模式命令/usr/symcli/bin/symrdf g DG_NAME set mode async/usr/symcli/bin/symrdf g DG_NAME set mode sync啟用SRDF/A一致性保護(hù)命令（僅適用異地SRDF/A操作，同城SRDF/S不需操作此步驟）/usr/symcli/bin/symrdf g DG_NAME enable分離與恢復(fù)操作示例腳本貨物貿(mào)易同城SRDF/S分離與恢復(fù)分離操作/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 10 split恢復(fù)操-1 修改自適應(yīng)拷貝模式/usr/

21、symcli/bin/symrdf g 29_tradedb_dg rdfg 10 set mode acp_disk恢復(fù)操-2 恢復(fù)增量拷貝/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 10 est恢復(fù)操-3 修改同步模式/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 10 set mode sync貨物貿(mào)易異地SRDF/A分離與恢復(fù)分離操作-1 停止一致性保護(hù)/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 11 disable分離操作-2 分離/usr/symcli/b

22、in/symrdf g 29_tradedb_dg rdfg 11 split恢復(fù)操-1 修改自適應(yīng)拷貝模式/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 11 set mode acp_disk恢復(fù)操-2 恢復(fù)增量拷貝/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 11 est恢復(fù)操-3 修改同步模式/usr/symcli/bin/symrdf g 29_tradedb_dg rdfg 11 set mode async恢復(fù)操-4 啟用一致性保護(hù)/usr/symcli/bin/symrdf g 29_traded

23、b_dg rdfg 11 enable現(xiàn)有業(yè)務(wù)擴(kuò)盤加入容災(zāi)擴(kuò)容盤加入容災(zāi)流程現(xiàn)有業(yè)務(wù)如果擴(kuò)盤，需要加入容災(zāi)，在完成兩端主機(jī)認(rèn)盤后，首先要在stage rdfg中創(chuàng)建擴(kuò)容盤的臨時SRDF pair，完成北京到上海的數(shù)據(jù)拷貝（由于生產(chǎn)存儲上所有盤都已經(jīng)預(yù)先做了SRDF到DMX3，所以不需要重新做生產(chǎn)VMAX到DMX3的臨時pair同步）；然后把同城和異地的SRDF pair分別從stage rdfg移動到表格的規(guī)劃rdfg中，movepair的操作需要在split狀態(tài)下完成；最后將生產(chǎn)的擴(kuò)容盤加入dg，實現(xiàn)統(tǒng)一檢查和管理。流程圖如下：擴(kuò)容盤加入容災(zāi)示例腳本模擬場景：”貨物貿(mào)易”擴(kuò)容2個LUN，示例

24、列表如下：生產(chǎn)LUN ID同城LUN ID異地LUN IDAA1BB1CC1AA2BB2CC2對于生產(chǎn)擴(kuò)容的LUN，對應(yīng)的異地LUN ID與生產(chǎn)的一樣；對應(yīng)的同城LUN ID可以查詢之前總結(jié)的盤號excel文件。創(chuàng)建臨時pair在控制路徑下vi兩個pair文件：s_tmp.pair用于SRDF/S的操作，其中第一列是生產(chǎn)LUN，第二列是同城LUN；aaa_tmp.pair用于SRDF/A的操作，其中第一列是生產(chǎn)LUN，第二列是異地LUN。vi s_tmp.pairAA1 BB1AA2 BB2vi aaa_tmp.pairAA1 CC1AA2 CC2臨時pair完成同步在本步驟中，先要將異地R2

25、的目標(biāo)LUN置成write disable，然后用上一步的pair文件建立起同步對，并發(fā)起數(shù)據(jù)拷貝直到拷貝完成。symdev sid 214 write_disable CC1symdev sid 214 write_disable CC2/usr/symcli/bin/symrdf createpair -sid 213 -file aaa_tmp.pair -rdfg 8 -type rdf1 -invalidate r2 -rdf_mode acp_disk (此命令為2行)/usr/symcli/bin/symrdf -sid 213 -file aaa_tmp.pair -rdfg

26、8 est/usr/symcli/bin/symrdf -sid 213 -file aaa_tmp.pair -rdfg 8 set mode asyncSRDF/S move pair此操作需要在把擴(kuò)容lun和原有l(wèi)un的pair都置成split/usr/symcli/bin/symrdf -sid 213 -file s_tmp.pair -rdfg 2 split/usr/symcli/bin/symrdf -g 29_tradedb_dg -rdfg 10 split/usr/symcli/bin/symrdf -sid 213 -file s_tmp.pair -rdfg 2 movepair -new_rdfg 10SRDF/A move pair/usr/symcli/bin/symrdf -sid 213 -file aaa_tmp.pair -rdfg 8 split/usr/symcli/bin/symrdf -g 29_tradedb_dg -rdfg 11 split/usr/symcli/bin/symrdf -sid 213 -file s_tmp.pair -rdfg 8 movepair -new_rdfg 11將擴(kuò)容盤加入dg由于在movepair的操作需要在split狀態(tài)下做，在movepair做完且加入dg后，可以使