VMAX10K容災(zāi)SRDF管理手冊(cè)

VMAX10K容災(zāi)SRDF管理手冊(cè)易安信電腦系統(tǒng)（中國）有限公司2014年09月23日文檔信息項(xiàng)目名稱：文檔版本號(hào)：1.0文檔作者：生成日期：文檔審核者：審核日期：文檔維護(hù)記錄版本號(hào)維護(hù)日期作者/維護(hù)人描述1.02014年9月23日張亮創(chuàng)建版權(quán)說明本文件中出現(xiàn)的任何文字?jǐn)⑹觥⑽臋n格式、插圖、照片、方法、過程等內(nèi)容，除另有特別注明，版權(quán)均屬外匯管理局公司和EMC公司所有，受到有關(guān)產(chǎn)權(quán)及版權(quán)法保護(hù)。任何個(gè)人、機(jī)構(gòu)未經(jīng)外匯管理局公司和EMC公司的書面授權(quán)許可，不得復(fù)制、引用或傳播本文件的任何片斷，無論通過電子形式或非電子形式。

目錄TOC\o"1-4"\h\z\u第一章 EMCSRDF技術(shù)介紹 41.1 SRDF/S 41.2 SRDF/A 4第二章 環(huán)境描述 62.1 整體架構(gòu) 62.2 存儲(chǔ)信息 72.3 dg信息與rdfg信息 7 dg介紹 7 rdfg介紹 7 dg與rdfg列表 8第三章 SRDF操作 93.1 LUN狀態(tài)對(duì)應(yīng)表 93.2 SRDF狀態(tài)查詢 9 查詢同城SRDF/S狀態(tài) 9 查詢異地SRDF/A狀態(tài) 93.3 SRDF分離與恢復(fù)流程 10 停止SRDF/A一致性保護(hù)命令 12 分離命令 12 更改為自適應(yīng)拷貝模式命令 12 恢復(fù)增量拷貝命令 13 更改為SRDF/A或SRDF/S模式命令 13 啟用SRDF/A一致性保護(hù)命令 133.4 分離與恢復(fù)操作示例腳本 13 貨物貿(mào)易同城SRDF/S分離與恢復(fù) 14 貨物貿(mào)易異地SRDF/A分離與恢復(fù) 143.5 現(xiàn)有業(yè)務(wù)擴(kuò)盤加入容災(zāi) 14 擴(kuò)容盤加入容災(zāi)流程 14 擴(kuò)容盤加入容災(zāi)示例腳本 15創(chuàng)建臨時(shí)pair 15臨時(shí)pair完成同步 163.5.2.3SRDF/Smovepair 163.5.2.4SRDF/Amovepair 16將擴(kuò)容盤加入dg 17檢查 17第四章 故障與維護(hù) 184.1 SRDF鏈路中斷 184.2 生產(chǎn)中心災(zāi)難切換 184.3 生產(chǎn)中心恢復(fù)回切 18 EMCSRDF技術(shù)介紹SRDF(SymmetrixRemoteDataFacility)運(yùn)用EMCSymmetrix數(shù)據(jù)存儲(chǔ)系統(tǒng)實(shí)現(xiàn)災(zāi)難恢復(fù)和業(yè)務(wù)連續(xù)性。SRDF提供了從一個(gè)到一個(gè)、一個(gè)到多個(gè)物理上分離的Symmetrix系統(tǒng)的數(shù)據(jù)復(fù)制技術(shù)，尤其在多點(diǎn)容災(zāi)技術(shù)方面，SRDF遠(yuǎn)程數(shù)據(jù)復(fù)制技術(shù)在中間站點(diǎn)容量需求、擴(kuò)展性等方面有一定優(yōu)勢。在外匯管理局的環(huán)境中，涉及SRDF技術(shù)的三個(gè)主要的類型：SRDF/S同步方式的SRDF，是將本地生產(chǎn)數(shù)據(jù)以完全同步的方式復(fù)制到異地，每一個(gè)本地的I/O處理均需等待遠(yuǎn)程復(fù)制的完成，從而實(shí)現(xiàn)主/備中心磁盤陣列同步地進(jìn)行數(shù)據(jù)更新。SRDF/A異步方式的SRDF，是將本地生產(chǎn)數(shù)據(jù)以后臺(tái)處理的方式復(fù)制到異地的方式，每一個(gè)本地的I/O處理后，無需等待遠(yuǎn)程復(fù)制的完成就正常釋放，也就是在應(yīng)用系統(tǒng)的I/O寫入主磁盤陣列后，主磁盤陣列立即返回給主機(jī)應(yīng)用系統(tǒng)“寫完成”信息，主機(jī)應(yīng)用可以繼續(xù)進(jìn)行讀、寫I/O的操作。環(huán)境描述整體架構(gòu)外匯管理局目前的EMC存儲(chǔ)系統(tǒng)，由3臺(tái)EMCSymmetrix高端存儲(chǔ)組成。構(gòu)成“并發(fā)型SRDF”容災(zāi)結(jié)構(gòu)，即concurrentSRDF.后續(xù)文檔中，采用“型號(hào)-序列號(hào)末3位”的方式標(biāo)示存儲(chǔ)。北京機(jī)房為生產(chǎn)中心，有1臺(tái)VMAX10K-213和1臺(tái)DMX3-223；上海機(jī)房為異地災(zāi)備中心，有一臺(tái)VMAX10K-214。北京機(jī)房的VMAX10K-213和DMX3-223之間采用EMCSRDF/S技術(shù)實(shí)現(xiàn)背靠背同城數(shù)據(jù)保護(hù);北京機(jī)房的VMAX10K-213和上海機(jī)房的VMAX10K-214之間采用EMCSRDF/A技術(shù)實(shí)現(xiàn)異地?cái)?shù)據(jù)保護(hù);邏輯拓?fù)淙缦拢?/p>

存儲(chǔ)信息北京上海存儲(chǔ)名稱DMX3-223VMAX10K_213VMAX10K_214存儲(chǔ)序列號(hào)CK290300223CN498700213CN498700214SRDF屬性R2R1R2控制主機(jī)以上設(shè)備在使用中有任何問題，請(qǐng)聯(lián)系EMC24小時(shí)支持熱線：固話撥打：800-819-0009

手機(jī)撥打：400-670-0009請(qǐng)?zhí)峁┕收显O(shè)備的序列號(hào)，并記錄case號(hào)碼。dg信息與rdfg信息dg介紹SRDF技術(shù)基于LUN級(jí)別進(jìn)行復(fù)制，同一個(gè)業(yè)務(wù)的LUN可建立DeviceGroup，即dg，通過該業(yè)務(wù)的SRDFgroup(rdfg)形成配對(duì)關(guān)系，進(jìn)行統(tǒng)一管理操作。dg信息保存在管理機(jī)上，如果主機(jī)重裝操作系統(tǒng)，需要先將dg信息導(dǎo)出備份，之后重新安裝SE軟件并且導(dǎo)入dg信息。rdfg介紹SRDF/A要求每一個(gè)業(yè)務(wù)建立獨(dú)自的rdfg，相當(dāng)于復(fù)制的邏輯通道。對(duì)于每一個(gè)業(yè)務(wù)來說，從生產(chǎn)存儲(chǔ)出發(fā)，都有2個(gè)rdfg，一個(gè)去往同城容災(zāi)的DMX3-223，另一個(gè)去往異地容災(zāi)的VMAX10K-214.在指定dg進(jìn)行SRDF操作時(shí)，要通過指定rdfg來確定操作的是同城容災(zāi)還是異地容災(zāi)。例如，斷開SRDF：symrdf–gDG_NAME–rdfg同城rdfgsplit(斷開同城容災(zāi))symrdf–gDG_NAME–rdfg異地rdfgsplit(斷開異地容災(zāi))dg與rdfg列表可以用如下命令查看某一臺(tái)管理機(jī)上的dg：/usr/symcli/bin/symdglist系統(tǒng)名稱DGLUN數(shù)量同城rdfg異地rdfg貨物貿(mào)易29_tradedb_dg741011資本項(xiàng)目32_cfadb_dg451314ASONE46_asonedb_dg51617國際收支47_bizdb_dg111920國際收支48_bopdb_dg162223表單系統(tǒng)（銀行網(wǎng)和內(nèi)網(wǎng)）21_interdb_dg92526表單（分局報(bào)表）20_bdfjbbdb_dg92829貨物貿(mào)易（海關(guān)前置）28_chkinportdb_dg73132政府網(wǎng)站35_zfwzdb_dg143435stagegroup

28SRDF操作下面的所有操作，以”貨物貿(mào)易”即29_tradedb_dg來做示例。LUN狀態(tài)對(duì)應(yīng)表SRDFpair狀態(tài)R1lun狀態(tài)R2lun狀態(tài)SplitRWRWSuspendRWRWSynchronizedRWWDConsistentRWWDsyncInProgRWWDpartitionRWRWfailedoverWDRWRW-磁盤處于read/write狀態(tài)，主機(jī)可以使用WD-磁盤處于writedisable狀態(tài)，主機(jī)不可使用注意：在使用SRDF操作使LUN變成WD之前，需要先停止業(yè)務(wù)，umount文件系統(tǒng)，并varyoffvg。SRDF狀態(tài)查詢查詢同城SRDF/S狀態(tài)/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg10query查詢異地SRDF/A狀態(tài)/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11query-rdfa在正常保護(hù)狀態(tài)下，查看點(diǎn)：RDFpairstate同城SRDF/S（北京VMAX10K-北京DMX3）應(yīng)為synctronized異地SRDF/A（北京VMAX10K-上海VMAX10K）應(yīng)為consistentInvalidtrack應(yīng)為0.輸出結(jié)果示例：SRDF分離與恢復(fù)流程在保護(hù)狀態(tài)下，R1的LUN為RW狀態(tài)，主機(jī)可使用；R2的LUN為WD狀態(tài)，主機(jī)不可使用。經(jīng)過SRDF的分離操作，R2的LUN狀態(tài)變?yōu)镽W狀態(tài)，主機(jī)可以進(jìn)行讀寫操作。SRDF中最常用的就是分離和恢復(fù)操作，其流程步驟如下：同城SRDF/S的分離與恢復(fù)流程分離操作只需要split一條命令即成功。在需要恢復(fù)時(shí)，如果分離時(shí)間較長，數(shù)據(jù)差異大，建議先修改成自適應(yīng)拷貝模式，此時(shí)只更改狀態(tài)，未發(fā)起同步。恢復(fù)增量同步后，數(shù)據(jù)開始增量拷貝，待接近追平時(shí)，重新修改為同步狀態(tài)。異地SRDF/A的分離與恢復(fù)流程分離操作只需要disable（停止一致性保護(hù)）和split兩條命令即。在需要恢復(fù)時(shí)，如果分離時(shí)間較長，數(shù)據(jù)差異大，建議先修改成自適應(yīng)拷貝模式，此時(shí)只更改狀態(tài)，未發(fā)起同步?；謴?fù)增量同步后，數(shù)據(jù)開始增量拷貝，待接近追平時(shí)，重新修改為異步狀態(tài)。最后啟用一致性保護(hù)。具體步驟命令如下：停止SRDF/A一致性保護(hù)命令（僅適用異地SRDF/A操作，同城SRDF/S不需操作此步驟）/usr/symcli/bin/symrdf–gDG_NAMEdisable示例：分離命令/usr/symcli/bin/symrdf–gDG_NAMEsplit示例：更改為自適應(yīng)拷貝模式命令(如果分離時(shí)間較長，可更改為自適應(yīng)拷貝模式，這種模式數(shù)據(jù)拷貝速度較快，且不對(duì)R1的讀寫時(shí)間造成影響)/usr/symcli/bin/symrdf–gDG_NAMEsetmodeacp_disk恢復(fù)增量拷貝命令/usr/symcli/bin/symrdf–gDG_NAMEestablish更改為SRDF/A或SRDF/S模式命令/usr/symcli/bin/symrdf–gDG_NAMEsetmodeasync/usr/symcli/bin/symrdf–gDG_NAMEsetmodesync啟用SRDF/A一致性保護(hù)命令（僅適用異地SRDF/A操作，同城SRDF/S不需操作此步驟）/usr/symcli/bin/symrdf–gDG_NAMEenable分離與恢復(fù)操作示例腳本貨物貿(mào)易同城SRDF/S分離與恢復(fù)分離操作/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg10split恢復(fù)操-1修改自適應(yīng)拷貝模式/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg10setmodeacp_disk恢復(fù)操-2恢復(fù)增量拷貝/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg10est恢復(fù)操-3修改同步模式/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg10setmodesync貨物貿(mào)易異地SRDF/A分離與恢復(fù)分離操作-1停止一致性保護(hù)/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11disable分離操作-2分離/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11split恢復(fù)操-1修改自適應(yīng)拷貝模式/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11setmodeacp_disk恢復(fù)操-2恢復(fù)增量拷貝/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11est恢復(fù)操-3修改同步模式/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11setmodeasync恢復(fù)操-4啟用一致性保護(hù)/usr/symcli/bin/symrdf–g29_tradedb_dg–rdfg11enable現(xiàn)有業(yè)務(wù)擴(kuò)盤加入容災(zāi)擴(kuò)容盤加入容災(zāi)流程現(xiàn)有業(yè)務(wù)如果擴(kuò)盤，需要加入容災(zāi)，在完成兩端主機(jī)認(rèn)盤后，首先要在stagerdfg中創(chuàng)建擴(kuò)容盤的臨時(shí)SRDFpair，完成北京到上海的數(shù)據(jù)拷貝（由于生產(chǎn)存儲(chǔ)上所有盤都已經(jīng)預(yù)先做了SRDF到DMX3，所以不需要重新做生產(chǎn)VMAX到DMX3的臨時(shí)pair同步）；然后把同城和異地的SRDFpair分別從stagerdfg移動(dòng)到表格的規(guī)劃rdfg中，movepair的操作需要在split狀態(tài)下完成；最后將生產(chǎn)的擴(kuò)容盤加入dg，實(shí)現(xiàn)統(tǒng)一檢查和管理。流程圖如下：擴(kuò)容盤加入容災(zāi)示例腳本模擬場景：”貨物貿(mào)易”擴(kuò)容2個(gè)LUN，示例列表如下：生產(chǎn)LUNID同城LUNID異地LUNIDAA1BB1CC1AA2BB2CC2對(duì)于生產(chǎn)擴(kuò)容的LUN，對(duì)應(yīng)的異地LUNID與生產(chǎn)的一樣；對(duì)應(yīng)的同城LUNID可以查詢之前總結(jié)的盤號(hào)excel文件。創(chuàng)建臨時(shí)pair在控制路徑下vi兩個(gè)pair文件：s_tmp.pair用于SRDF/S的操作，其中第一列是生產(chǎn)LUN，第二列是同城LUN；aaa_tmp.pair用于SRDF/A的操作，其中第一列是生產(chǎn)LUN，第二列是異地LUN。vis_tmp.pairAA1BB1AA2BB2viaaa_tmp.pairAA1CC1AA2CC2臨時(shí)pair完成同步在本步驟中，先要將異地R2的目標(biāo)LUN置成writedisable，然后用上一步的pair文件建立起同步對(duì)，并發(fā)起數(shù)據(jù)拷貝直到拷貝完成。symdev–sid214write_disableCC1symdev–sid214write_disableCC2/usr/symcli/bin/symrdfcreatepair-sid213-fileaaa_tmp.pair-rdfg8-typerdf1-invalidater2-rdf_modeacp_disk(此命令為2行)/usr/symcli/bin/symrdf-sid213-fileaaa_tmp.pair-rdfg8est/usr/symcli/bin/symrdf-sid213-fileaaa_tmp.pair-rdfg8setmodeasyncSRDF/Smovepair此操作需要在把擴(kuò)容lun和原有l(wèi)un的pair都置成split/usr/symcli/bin/symrdf-sid213-files_tmp.pair-rdfg2split/usr/symcli/bin/symrdf-g29_tradedb_dg-rdfg10split/usr/symcli/bin/symrdf-sid213-files_tmp.pair-rdfg2movepair-new_rdfg10SRDF/Amovepair/usr/symcli/bin/symrdf-sid213-fileaaa_tmp.pair-rdfg8split/usr/symcli/bin/symrdf-g29_tradedb_dg-rdfg11split/usr/symcli/bin/symrdf-sid213-files_tmp.pair-rdfg8movepair-new_rdfg11將擴(kuò)容盤加入dg由于在movepair的操作需要在split狀態(tài)下做，在movepair做完且加入dg后，可以使用dg一起將擴(kuò)容后的合集拉起同步symdg–g29_tradedb_dg–sid213adddevAA1symdg–g29_tradedb_dg–sid213adddevAA2symrdf–g29_tradedb_dg–rdfg10estsymrdf–g29_tradedb_dg–rdfg11est檢查symrdf–g29_tradedb_dg