存儲(chǔ)及雙活測(cè)試方案

800-999682523/23融通基金存儲(chǔ)升級(jí)及雙活數(shù)據(jù)中心項(xiàng)目測(cè)試方案V1.0深圳市桑威科技有限公司2016年5月SUNWAY VPLEXmetro雙活數(shù)據(jù)中心測(cè)試方案文檔信息項(xiàng)目名稱(chēng)：融通基金VPLEXMetro項(xiàng)目測(cè)試報(bào)告文檔版本號(hào)：1.0文檔作者：彭世華生成日期：2016年5月文檔審核者：審核日期：文檔維護(hù)記錄版本號(hào)維護(hù)日期作者/維護(hù)人描述1.02016年5月12日彭世華創(chuàng)建初稿目 錄TOC\o"1-4"\u1. 環(huán)境配置 52. 測(cè)試目的 53. VPLEX測(cè)試環(huán)境的建立 53.1. SANSwitch物理連線(xiàn) 53.2. SANSwitch配置 53.3. 存儲(chǔ)系統(tǒng)配置 54. 測(cè)試場(chǎng)景 65. 測(cè)試結(jié)論 76. 測(cè)試步驟及結(jié)果 86.1. 測(cè)試1:VPLEX控制器高可用測(cè)試 86.2. 測(cè)試2：VPLEX后端鏈路高可用測(cè)試 96.3. 測(cè)試3：雙活鏡像測(cè)試 96.4. 測(cè)試4：VPLEXMetro級(jí)聯(lián)鏈路高可用測(cè)試_1 106.5. 測(cè)試5：雙活仲裁測(cè)試_1 106.6. 測(cè)試6：雙活仲裁測(cè)試_2 116.7. 測(cè)試7：雙活仲裁測(cè)試_3 116.8. 測(cè)試8：雙活仲裁測(cè)試_4 126.9. 測(cè)試9：雙活仲裁測(cè)試_5 126.10. 測(cè)試10：雙活仲裁測(cè)試_6 136.11. 測(cè)試11：雙活仲裁測(cè)試_7 137. 場(chǎng)景測(cè)試及結(jié)果 147.1. 測(cè)試場(chǎng)景1：超算VNX5800故障 147.2. 測(cè)試場(chǎng)景2：漢唐VNX5500故障 147.3. 測(cè)試場(chǎng)景3：所有存儲(chǔ)同時(shí)故障 157.4. 測(cè)試場(chǎng)景4：Witness發(fā)生故障 157.5. 測(cè)試場(chǎng)景5：vplex_1、vplex_2同時(shí)故障 157.6. 測(cè)試場(chǎng)景6：vplex_1、vplex_2同時(shí)故障，后端存儲(chǔ)也同時(shí)故障 167.7. 測(cè)試場(chǎng)景7：Witness與vplex_1IP通信中斷，其他正常 167.8. 測(cè)試場(chǎng)景8：Witness與vplex_2IP通信中斷，其他正常 177.9. 測(cè)試場(chǎng)景9：Witness與vplex_1、vplex2IP通信中斷，其他正常 177.10. 測(cè)試場(chǎng)景10：vplex_1、vplex2IP通信中斷，但是vplex_1、vplex2各自與witnessIP通信正常 187.11. 測(cè)試場(chǎng)景11：4臺(tái)FC交換機(jī)之間的裸光纖全部故障，其他正常 187.12. 測(cè)試場(chǎng)景12：超算FC交換機(jī)故障 197.13. 測(cè)試場(chǎng)景13：漢唐FC交換機(jī)故障 197.14. 測(cè)試場(chǎng)景14：所有交換機(jī)同時(shí)故障 207.15. 測(cè)試場(chǎng)景15：vplex_1與vnx5800光纖鏈路故障，其它正常 207.16. 測(cè)試場(chǎng)景16：vplex_2與vnx5500光纖鏈路故障，其它正常 217.17. 測(cè)試場(chǎng)景17：裸光纖全故障，外網(wǎng)LUN在超算起來(lái)，內(nèi)網(wǎng)LUN從漢唐起來(lái) 218. 審計(jì)意見(jiàn) 229. 討論反饋后備注 22

環(huán)境配置硬件：設(shè)備數(shù)量微碼/版本備注VPLEXVS225.5SP2每個(gè)機(jī)房配置雙引擎建議安裝版本5.5SP2SANSwitchsEMCDS6510B\5100B47.2.1c1用于連接EMCVPLEX和后端存儲(chǔ)現(xiàn)有5100微碼需要升級(jí)VNX5800\540025.33我們使用全新的VNX5800和5400測(cè)試2測(cè)試主機(jī)（待定）軟件：項(xiàng)目版本備注虛化化Esxi6.0物理機(jī)OL6.5多路徑軟件Esxi6.0自帶、Powerpath6.0測(cè)試目的測(cè)試不同場(chǎng)景下，測(cè)試主機(jī)對(duì)EMC虛擬化存儲(chǔ)的訪(fǎng)問(wèn)狀況，從而測(cè)試EMCVPLEXmetro的高可用性。VPLEX測(cè)試環(huán)境的建立SANSwitch物理連線(xiàn)完成測(cè)試主機(jī)到SANSwitch，SANSwitch到測(cè)試存儲(chǔ)系統(tǒng)之間的光纖連接。SANSwitch配置完成測(cè)試主機(jī)與測(cè)試存儲(chǔ)系統(tǒng)之間的ZONE配置。存儲(chǔ)系統(tǒng)配置VPLEX將已封裝的LUN分配給ESX主機(jī)及物理機(jī)測(cè)試場(chǎng)景vplex_1、Witness、vnx5800在超算機(jī)房，vplex_2、vnx5500在漢唐機(jī)房。測(cè)試內(nèi)容說(shuō)明預(yù)期測(cè)試1VPLEX單個(gè)director故障將一臺(tái)VPLEX的一個(gè)director的光纖線(xiàn)全部斷開(kāi)，觀察測(cè)試主機(jī)的IO路徑和IO訪(fǎng)問(wèn)狀況虛擬機(jī)不受影響，主機(jī)的IO讀寫(xiě)能持續(xù)進(jìn)行測(cè)試2VPLEX后端鏈路高可用測(cè)試VPLEX的后端鏈路部分中斷虛擬機(jī)不受影響，主機(jī)的IO讀寫(xiě)能持續(xù)進(jìn)行測(cè)試3雙活鏡像測(cè)試后端存儲(chǔ)VNX5800發(fā)生突然停機(jī)虛擬機(jī)不受影響，主機(jī)的IO讀寫(xiě)能持續(xù)進(jìn)行測(cè)試4VPLEXMetro級(jí)聯(lián)鏈路（裸纖）高可用測(cè)試_1VPLEXWAN-com級(jí)聯(lián)鏈路有一條故障虛擬機(jī)不受影響，主機(jī)可以持續(xù)讀寫(xiě)數(shù)據(jù)。測(cè)試5雙活仲裁測(cè)試1VPLEXWAN-com級(jí)聯(lián)鏈路全部故障（Witness正常工作）虛擬機(jī)不受影響，主機(jī)可以持續(xù)讀寫(xiě)數(shù)據(jù)。測(cè)試6雙活仲裁測(cè)試2關(guān)閉VPLEX_2，觀察測(cè)試主機(jī)的IO路徑和IO訪(fǎng)問(wèn)狀況（Witness正常工作）虛擬機(jī)不受影響，主機(jī)可以持續(xù)讀寫(xiě)數(shù)據(jù)。測(cè)試7雙活仲裁測(cè)試3關(guān)閉VPLEX_1，觀察測(cè)試主機(jī)的IO路徑和IO訪(fǎng)問(wèn)狀況（Witness正常工作）虛擬機(jī)不受影響，主機(jī)可以持續(xù)讀寫(xiě)數(shù)據(jù)。測(cè)試8雙活仲裁測(cè)試4關(guān)閉Witness，觀察測(cè)試主機(jī)的IO路徑和IO訪(fǎng)問(wèn)狀況虛擬機(jī)不受影響，主機(jī)可以持續(xù)讀寫(xiě)數(shù)據(jù)。測(cè)試9雙活仲裁測(cè)試5同時(shí)關(guān)閉VPLEX_2和Witness虛擬機(jī)不能運(yùn)行，主機(jī)IO掛起，需要在VPLEX_1上手動(dòng)恢復(fù)IO訪(fǎng)問(wèn)測(cè)試10雙活仲裁測(cè)試6同時(shí)關(guān)閉VPLEX_1和Witness虛擬機(jī)不能運(yùn)行，主機(jī)IO掛起，需要在VPLEX_2上手動(dòng)恢復(fù)IO訪(fǎng)問(wèn)測(cè)試11雙活仲裁測(cè)試7Witness和所有WAN-com（裸纖）全部同時(shí)故障虛擬機(jī)不能運(yùn)行，主機(jī)IO掛起，VPLEX_1和VPLEX_2都掛起，需手動(dòng)選擇恢復(fù)測(cè)試12超算VNX5800故障超算VNX5800故障測(cè)試13漢唐VNX5500故障漢唐VNX5800故障測(cè)試14所有存儲(chǔ)同時(shí)故障超算VNX5800與漢唐VNX5500同時(shí)故障測(cè)試15Witness發(fā)生故障Witness發(fā)生故障，其它正常測(cè)試16vplex_1、vplex_2同時(shí)故障vplex_1、vplex_2同時(shí)故障，后端存儲(chǔ)存活測(cè)試17vplex_1、vplex_2同時(shí)故障，后端存儲(chǔ)也同時(shí)故障vplex_1、vplex_2同時(shí)故障，后端存儲(chǔ)也同時(shí)故障測(cè)試18Witness與vplex_1IP通信中斷，其他正常Witness與vplex_1IP通信中斷，其他正常測(cè)試19Witness與vplex_2IP通信中斷，其他正常Witness與vplex_2IP通信中斷，其他正常測(cè)試20Witness與vplex_1、vplex2IP通信中斷，其他正常Witness與vplex_1、vplex2IP通信中斷，其他正常測(cè)試21vplex_1、vplex2IP通信中斷，但是vplex_1、vplex2各自與witnessIP通信正常vplex_1、vplex2IP通信中斷，但是vplex_1、vplex2各自與witnessIP通信正常測(cè)試224臺(tái)FC交換機(jī)之間的裸光纖全部故障，其他正常4臺(tái)FC交換機(jī)之間的裸光纖全部故障，其他正常測(cè)試23超算FC交換機(jī)故障超算FC交換機(jī)故障全部故障測(cè)試24漢唐FC交換機(jī)故障漢唐FC交換機(jī)故障全部故障測(cè)試25所有交換機(jī)同時(shí)故障所有交換機(jī)同時(shí)故障測(cè)試26vplex_1與vnx5800光纖鏈路故障，其它正常vplex_1與vnx5800光纖鏈路故障，其它正常測(cè)試27vplex_2與vnx5500光纖鏈路故障，其它正常vplex_2與vnx5500光纖鏈路故障，其它正常測(cè)試28裸光纖全故障，外網(wǎng)LUN在超算起來(lái)，內(nèi)網(wǎng)LUN從漢唐起來(lái)裸光纖全故障，外網(wǎng)LUN在超算起來(lái)，內(nèi)網(wǎng)LUN從漢唐起來(lái)測(cè)試28測(cè)試29測(cè)試30測(cè)試31

測(cè)試結(jié)論測(cè)試內(nèi)容測(cè)試結(jié)論測(cè)試1VPLEX控制器高可用測(cè)試測(cè)試2VPLEX后端鏈路高可用測(cè)試測(cè)試3雙活鏡像測(cè)試測(cè)試4VPLEXMetro級(jí)聯(lián)鏈路高可用測(cè)試_1測(cè)試5雙活仲裁測(cè)試1測(cè)試6雙活仲裁測(cè)試2測(cè)試7雙活仲裁測(cè)試3測(cè)試8雙活仲裁測(cè)試4測(cè)試9雙活仲裁測(cè)試5測(cè)試10雙活仲裁測(cè)試6測(cè)試11雙活仲裁測(cè)試7測(cè)試步驟及結(jié)果測(cè)試1:VPLEX控制器高可用測(cè)試故障模擬：其中一臺(tái)VPLEX上的一個(gè)director（控制器）突然發(fā)生故障測(cè)試方法：直接rebootdirector或者disable該director在SAN交換機(jī)的端口模擬該director故障此處采用disable端口初始相關(guān)參數(shù)：VPLEX:auto-resume-at-loser=trueCG：detach-rule=winnercluster-1after5s步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；斷開(kāi)VPLEX_1的directorA的所有光纖線(xiàn)登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。故障恢復(fù)：director重啟或者enable交換機(jī)中主機(jī)與該director的zone模擬該director故障恢復(fù)預(yù)期結(jié)果：主機(jī)的IO路徑中斷一半，主機(jī)可以繼續(xù)訪(fǎng)問(wèn)VPLEX_1測(cè)試1記錄：測(cè)試1結(jié)論：測(cè)試2：VPLEX后端鏈路高可用測(cè)試故障模擬：VPLEX與后端存儲(chǔ)直接的鏈路出現(xiàn)不穩(wěn)定或故障測(cè)試方法：在交換機(jī)上disableVPLEX的后端端口（兩邊非同時(shí)）預(yù)期結(jié)果：主機(jī)可以繼續(xù)訪(fǎng)問(wèn)VPLEX，被拔掉的一邊后端存儲(chǔ)顯示失效。測(cè)試記錄：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；登錄SAN交換機(jī)找到一臺(tái)VPLEX的后端端口portdisable這些后端端口登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試2結(jié)果：測(cè)試2結(jié)論：測(cè)試3：雙活鏡像測(cè)試故障模擬：VPLEX的后端VNX5800存儲(chǔ)突然down機(jī)，模擬后端存儲(chǔ)完全故障測(cè)試方法：把VNX5800的前端口在交換機(jī)上disable步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；在交換機(jī)上將VNX5800存儲(chǔ)的端口全部關(guān)閉。登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。預(yù)期結(jié)果：主機(jī)正常訪(fǎng)問(wèn)VPLEX，主機(jī)端不受任何影響，虛擬機(jī)狀態(tài)正常，虛擬化平臺(tái)正常，磁盤(pán)掃描沒(méi)有變化，主機(jī)到VPLEX路徑全部都在結(jié)束時(shí)間：測(cè)試3結(jié)果：測(cè)試3結(jié)論：測(cè)試4：VPLEXMetro級(jí)聯(lián)鏈路高可用測(cè)試_1故障模擬：VPLEXMetro兩個(gè)site的WAN-com(裸纖)級(jí)聯(lián)鏈路出現(xiàn)不穩(wěn)定開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；斷開(kāi)VPLEX_1的的一個(gè)WAN-COM口的光纖線(xiàn)（或disable一條裸纖在交換機(jī)上的所有端口）登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試4結(jié)果：測(cè)試4結(jié)論：測(cè)試5：雙活仲裁測(cè)試_1故障模擬：VPLEXMetro兩個(gè)site的WAN-com級(jí)聯(lián)鏈路全部中斷開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；斷開(kāi)VPLEX_1的的兩個(gè)WAN-COM口的光纖線(xiàn)登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試5結(jié)果：測(cè)試5結(jié)論：測(cè)試6：雙活仲裁測(cè)試_2故障模擬：當(dāng)Witness工作正常時(shí)，模擬一個(gè)VPLEX群集故障開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；斷開(kāi)VPLEX_2的的所有接口登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試6結(jié)果：測(cè)試6結(jié)論：測(cè)試7：雙活仲裁測(cè)試_3故障模擬：當(dāng)Witness工作正常時(shí)，模擬另外一個(gè)VPLEX群集（VPLEX_1）故障開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；斷開(kāi)VPLEX_1的的所有接口登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試7結(jié)果：測(cè)試7結(jié)論：測(cè)試8：雙活仲裁測(cè)試_4故障模擬：當(dāng)Witness故障時(shí)，確認(rèn)VPLEX群集是否工作正常開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；關(guān)閉Witness登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試8結(jié)果：測(cè)試8結(jié)論：測(cè)試9：雙活仲裁測(cè)試_5故障模擬：一個(gè)VPLEX群集（VPLEX_2）和Witness同時(shí)故障開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；同時(shí)關(guān)閉VPLEX_2所有端口和Witness登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試9結(jié)果：測(cè)試9結(jié)論：測(cè)試10：雙活仲裁測(cè)試_6故障模擬：另外一個(gè)VPLEX群集（VPLEX_1）和Witness同時(shí)故障開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；同時(shí)關(guān)閉VPLEX_1所有端口和Witness登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試10結(jié)果：測(cè)試10結(jié)論：測(cè)試11：雙活仲裁測(cè)試_7故障模擬：所有WAN-com（裸纖）和Witness同時(shí)故障開(kāi)始時(shí)間：步驟：當(dāng)前主機(jī)訪(fǎng)問(wèn)VPLEXMetro正常確認(rèn)VPLEX狀態(tài)正常，確認(rèn)當(dāng)前無(wú)rebuild任務(wù)；同時(shí)關(guān)閉所有裸纖在光纖交換機(jī)上的所有端口和Witness登錄VMWARE管理界面觀察，記錄結(jié)果登錄VPLEXGUI和CLI觀察，記錄結(jié)果。結(jié)束時(shí)間：測(cè)試11結(jié)果：測(cè)試11結(jié)論：場(chǎng)景測(cè)試及結(jié)果測(cè)試場(chǎng)景1：超算VNX5800故障場(chǎng)景模擬：超算VNX5800故障測(cè)試方法：在交換機(jī)上disableVNX5800前端口預(yù)期結(jié)果：主機(jī)可以繼續(xù)訪(fǎng)問(wèn)VPLEX，超算VPLEX顯示后端存儲(chǔ)故障，所有超算端Volume出錯(cuò)。測(cè)試記錄：測(cè)試場(chǎng)景1結(jié)果：測(cè)試場(chǎng)景1結(jié)論：測(cè)試場(chǎng)景2：漢唐VNX5500故障場(chǎng)景模擬：漢唐VNX5800故障測(cè)試方法：在交換機(jī)上disable漢唐VNX5500前端口預(yù)期結(jié)果：主機(jī)可以繼續(xù)訪(fǎng)問(wèn)VPLEX，漢唐VPLEX顯示后端存儲(chǔ)故障，所有漢唐端Volume出錯(cuò)。測(cè)試記錄：測(cè)試場(chǎng)景2結(jié)果：測(cè)試場(chǎng)景2結(jié)論：測(cè)試場(chǎng)景3：所有存儲(chǔ)同時(shí)故障場(chǎng)景模擬：所有存儲(chǔ)同時(shí)故障測(cè)試方法：在交換機(jī)上disableVNX5800及VNX5500前端口預(yù)期結(jié)果：VPLEX系統(tǒng)顯示后端存儲(chǔ)故障，主機(jī)雖然連接VPLEX，但無(wú)法讀寫(xiě)數(shù)據(jù)測(cè)試記錄：測(cè)試場(chǎng)景3結(jié)果：測(cè)試場(chǎng)景3結(jié)論：測(cè)試場(chǎng)景4：Witness發(fā)生故障場(chǎng)景模擬：僅Witness發(fā)生故障測(cè)試方法：關(guān)閉Witness虛擬機(jī)預(yù)期結(jié)果：主機(jī)訪(fǎng)問(wèn)VPLEX正常，超算及汊唐Cluster正常，系統(tǒng)提示W(wǎng)itness連接中斷。測(cè)試記錄：測(cè)試場(chǎng)景4結(jié)果：測(cè)試場(chǎng)景4結(jié)論：測(cè)試場(chǎng)景5：vplex_1、vplex_2同時(shí)故障場(chǎng)景模擬：vplex_1、vplex_2同時(shí)故障測(cè)試方法：在交換機(jī)上Disablevplex_1、vplex_2的所有前端及后端預(yù)期結(jié)果：VPLEX系統(tǒng)顯示所有Cluster故障，主機(jī)訪(fǎng)問(wèn)中斷。測(cè)試記錄：測(cè)試場(chǎng)景5結(jié)果：測(cè)試場(chǎng)景5結(jié)論：測(cè)試場(chǎng)景6：vplex_1、vplex_2同時(shí)故障，后端存儲(chǔ)也同時(shí)故障場(chǎng)景模擬：vplex_1、vplex_2同時(shí)故障，后端存儲(chǔ)也同時(shí)故障測(cè)試方法：在交換機(jī)上Disablevplex_1、vplex_2的所有前端及后端，Disable所有存儲(chǔ)前端預(yù)期結(jié)果：VPLEX系統(tǒng)顯示所有Cluster故障，主機(jī)訪(fǎng)問(wèn)中斷。測(cè)試記錄：測(cè)試場(chǎng)景6結(jié)果：測(cè)試場(chǎng)景6結(jié)論：測(cè)試場(chǎng)景7：Witness與vplex_1IP通信中斷，其他正常場(chǎng)景模擬：Witness與vplex_1IP通信中斷，其他正常測(cè)試方法：撥出超算vplex_1的管理網(wǎng)線(xiàn)預(yù)期結(jié)果：主機(jī)訪(fǎng)問(wèn)VPLEX正常，超算及汊唐Cluster正常，系統(tǒng)提示Cluster1的Witness連接中斷。測(cè)試記錄：測(cè)試場(chǎng)景7結(jié)果：測(cè)試場(chǎng)景7結(jié)論：測(cè)試場(chǎng)景8：Witness與vplex_2IP通信中斷，其他正常場(chǎng)景模擬：Witness與vplex_2IP通信中斷，其他正常測(cè)試方法：撥出漢唐vplex_2的管理網(wǎng)線(xiàn)預(yù)期結(jié)果：主機(jī)訪(fǎng)問(wèn)VPLEX正常，超算及汊唐Cluster正常，系統(tǒng)提示Cluster2的Witness連接中斷。測(cè)試記錄：測(cè)試場(chǎng)景8結(jié)果：測(cè)試場(chǎng)景8結(jié)論：測(cè)試場(chǎng)景9：Witness與vplex_1、vplex2IP通信中斷，其他正常場(chǎng)景模擬：Witness與vplex_1、vplex2IP通信中斷，其他正常測(cè)試方法：在虛擬機(jī)上斷開(kāi)Witness的網(wǎng)卡連接預(yù)期結(jié)果：主機(jī)訪(fǎng)問(wèn)VPLEX正常，超算及汊唐Cluster正常，系統(tǒng)提示W(wǎng)itness連接中斷。。測(cè)試記錄：測(cè)試場(chǎng)景9結(jié)果：測(cè)試場(chǎng)景9結(jié)論：測(cè)試場(chǎng)景10：vplex_1、vplex2IP通信中斷，但是vplex_1、vplex2各自與witnessIP通信正常場(chǎng)景模擬：vplex_1、vplex2IP通信中斷，但是vplex_1、vplex2各自與witnessIP通信正常測(cè)試方法：斷開(kāi)vplex_1、vplex2之間的網(wǎng)絡(luò)路由預(yù)期結(jié)果：主機(jī)訪(fǎng)問(wèn)VPLEX正常，超算及汊唐Cluster正常，系統(tǒng)提示W(wǎng)itnessVPN連接異常。。測(cè)試記錄：測(cè)試場(chǎng)景10結(jié)果：測(cè)試場(chǎng)景10結(jié)論：測(cè)試場(chǎng)景11：4臺(tái)FC交換機(jī)之間的裸光纖全部故障，其他正常場(chǎng)景模擬：4臺(tái)FC交換機(jī)之間的裸光纖全部故障，其他正常測(cè)試方法：Disable所有DS6510與DS5100之間的所有級(jí)聯(lián)端口預(yù)期結(jié)果：超算主機(jī)訪(fǎng)問(wèn)VPLEX正常，漢唐主機(jī)訪(fǎng)問(wèn)VPLEX故障，VPLEX系統(tǒng)顯示ClusterPartition。測(cè)試記錄：測(cè)試場(chǎng)景11結(jié)果：測(cè)試場(chǎng)景11結(jié)論：測(cè)試場(chǎng)景12：超算FC交換機(jī)故障場(chǎng)景模擬：超算2臺(tái)DS6510交換機(jī)故障測(cè)試方法：關(guān)閉超算2臺(tái)DS6510交換機(jī)所有電源預(yù)期結(jié)果：漢唐主機(jī)訪(fǎng)問(wèn)VPLEX正常，超算主機(jī)訪(fǎng)問(wèn)VPLEX故障，VPLEX系統(tǒng)顯示ClusterPartition。測(cè)試記錄：測(cè)試場(chǎng)景12結(jié)果：測(cè)試場(chǎng)景12結(jié)論：測(cè)試場(chǎng)景13：漢唐FC交換機(jī)故障場(chǎng)景模擬：漢唐2臺(tái)DS5100交換機(jī)故障測(cè)試方法：關(guān)閉漢唐2臺(tái)DS5100交換機(jī)所有電源預(yù)期結(jié)果：超算主機(jī)訪(fǎng)問(wèn)VPLEX正常，漢唐主機(jī)訪(fǎng)問(wèn)VPLEX故障，VPLEX系統(tǒng)顯示ClusterPartition。測(cè)試記錄：測(cè)試場(chǎng)景13結(jié)果：測(cè)試場(chǎng)景13結(jié)論：測(cè)試場(chǎng)景14：所有交換機(jī)同時(shí)故障場(chǎng)景模擬：4臺(tái)SAN交換機(jī)故障測(cè)試方法：關(guān)閉超算及漢唐4臺(tái)SAN交換機(jī)所有電源預(yù)期結(jié)果：VPLEX系統(tǒng)顯示所有Cluster故障，主機(jī)訪(fǎng)問(wèn)中斷。測(cè)試記錄：測(cè)試場(chǎng)景14結(jié)果：測(cè)試場(chǎng)景14結(jié)論：測(cè)試場(chǎng)景15：vplex_1與vnx5800光纖鏈路故障，其它正常場(chǎng)景模擬：vplex_1與vnx5800光纖鏈路故障，其它正常測(cè)試方法：Disablevplex_1與vnx5800所在的SAN交換機(jī)端口預(yù)期結(jié)果：所有主機(jī)可以繼續(xù)訪(fǎng)問(wèn)VPLEX，VPLEX系統(tǒng)顯示ClusterPartition，Cluster1故障，所有超算端Volume出錯(cuò)，。測(cè)試記錄：測(cè)試場(chǎng)景15結(jié)果：測(cè)試場(chǎng)景15結(jié)論：測(cè)試場(chǎng)景16：vplex_2與vnx5500光纖鏈路故障，其它正常場(chǎng)景模擬：vplex_2與vnx5500光纖鏈路故障，其它正常測(cè)試方法：Disablevplex_2與vnx5500所在的SAN交換機(jī)端口預(yù)期結(jié)果：所有主機(jī)可以繼續(xù)訪(fǎng)問(wèn)VPLEX，VPLEX系統(tǒng)顯示ClusterPartition，Cluster2故障，所有漢唐端Volume出錯(cuò)，。測(cè)試記錄：測(cè)試場(chǎng)景16結(jié)果：測(cè)試場(chǎng)景16結(jié)論：測(cè)試場(chǎng)景17：裸光纖全故障，外網(wǎng)LUN在超算起來(lái)，內(nèi)網(wǎng)LUN從漢唐起來(lái)場(chǎng)景模擬：裸光纖全故障，外網(wǎng)LUN在超算起來(lái)，內(nèi)網(wǎng)LUN從漢唐起來(lái)測(cè)試方法：撥出波分系統(tǒng)上的所有裸光纖預(yù)期結(jié)果：超算主機(jī)訪(fǎng)問(wèn)VPLEX正常，漢唐中心Cluster2Suspended，VPLEX系統(tǒng)顯示Cluster2故障。若要選擇外網(wǎng)LUN在超算起來(lái)（由于所有LUN均在超算運(yùn)行，因此外網(wǎng)LUN無(wú)需任何操作）；若要選擇內(nèi)網(wǎng)LUN從漢唐起來(lái)，需要以下步驟：將內(nèi)網(wǎng)業(yè)務(wù)在超算的服務(wù)器關(guān)機(jī)在漢唐中心ssh登陸vplex命令行，執(zhí)行命令（以TATZ_CG為例）：VPlexcli:/clusters/cluster-2/consistency-groups/TATZ_CG>choose-winner-ccluster-2啟動(dòng)該系統(tǒng)數(shù)據(jù)庫(kù)及應(yīng)用即可。測(cè)試記錄：測(cè)試場(chǎng)景17結(jié)果：測(cè)試場(chǎng)景17結(jié)論：審計(jì)意見(jiàn)審計(jì)：上述描寫(xiě)測(cè)試步驟沒(méi)問(wèn)題，但有兩個(gè)意見(jiàn)測(cè)試總共有28項(xiàng)，這里只有11項(xiàng)，未完成。另外雙活中心功能測(cè)試最好結(jié)合OracleRAC完成，原因是VMWARE的容錯(cuò)性較高，而Oracle容錯(cuò)性較低，從Oracle的角度去測(cè)試會(huì)更加嚴(yán)格，能夠發(fā)現(xiàn)的問(wèn)題會(huì)更多。涉及兩個(gè)機(jī)房切換的測(cè)試建議加壓力測(cè)試，以了解在高負(fù)荷情況下，切換是否能順利，是否能在應(yīng)用接受的延遲下完成切換。討論反饋后備注上述問(wèn)題都沒(méi)完成基于C8051F單片機(jī)直流電動(dòng)機(jī)反饋控制系統(tǒng)的設(shè)計(jì)與研究基于單片機(jī)的嵌入式Web服務(wù)器的研究MOTOROLA單片機(jī)MC68HC（8）05PV8/A內(nèi)嵌EEPROM的工藝和制程方法及對(duì)良率的影響研究基于模糊控制的電阻釬焊單片機(jī)溫度控制系統(tǒng)的研制基于MCS-51系列單片機(jī)的通用控制模塊的研究基于單片機(jī)實(shí)現(xiàn)的供暖系統(tǒng)最佳啟停自校正（STR）調(diào)節(jié)器單片機(jī)控制的二級(jí)倒立擺系統(tǒng)的研究基于增強(qiáng)型51系列單片機(jī)的TCP/IP協(xié)議棧的實(shí)現(xiàn)基于單片機(jī)的蓄電池自動(dòng)監(jiān)測(cè)系統(tǒng)基于32位嵌入式單片機(jī)系統(tǒng)的圖像采集與處理技術(shù)的研究基于單片機(jī)的作物營(yíng)養(yǎng)診斷專(zhuān)家系統(tǒng)的研究基于單片機(jī)的交流伺服電機(jī)運(yùn)動(dòng)控制系統(tǒng)研究與開(kāi)發(fā)基于單片機(jī)的泵管內(nèi)壁硬度測(cè)試儀的研制基于單片機(jī)的自動(dòng)找平控制系統(tǒng)研究基于C8051F040單片機(jī)的嵌入式系統(tǒng)開(kāi)發(fā)基于單片機(jī)的液壓動(dòng)力系統(tǒng)狀態(tài)監(jiān)測(cè)儀開(kāi)發(fā)模糊Smith智能控制方法的研究及其單片機(jī)實(shí)現(xiàn)一種基于單片機(jī)的軸快流CO〈,2〉激光器的手持控制面板的研制基于雙單片機(jī)沖床數(shù)控系統(tǒng)的研究基于CYGNAL單片機(jī)的在線(xiàn)間歇式濁度儀的研制基于單片機(jī)的噴油泵試驗(yàn)臺(tái)控制器的研制基于單片機(jī)的軟起動(dòng)器的研究和設(shè)計(jì)基于單片機(jī)控制的高速快走絲電火花線(xiàn)切割機(jī)床短循環(huán)走絲方式研究基于單片機(jī)的機(jī)電產(chǎn)品控制系統(tǒng)開(kāi)發(fā)基于PIC單片機(jī)的智能手機(jī)充電器基于單片機(jī)的實(shí)時(shí)內(nèi)核設(shè)計(jì)及其應(yīng)用研究基于單片機(jī)的遠(yuǎn)程抄表系統(tǒng)的設(shè)計(jì)與研究基于單片機(jī)的煙氣二氧化硫濃度檢測(cè)儀的研制基于微型光譜儀的單片機(jī)系統(tǒng)單片機(jī)系統(tǒng)軟件構(gòu)件開(kāi)發(fā)的技術(shù)研究基于單片機(jī)的液體點(diǎn)滴速度自動(dòng)檢測(cè)儀的研制基于單片機(jī)系統(tǒng)的多功能溫度測(cè)量?jī)x的研制基于PIC單片機(jī)的電能采集終端的設(shè)計(jì)和應(yīng)用基于單片機(jī)的光纖光柵解調(diào)儀的研制氣壓式線(xiàn)性摩擦焊機(jī)單片機(jī)控制系統(tǒng)的研制基于單片機(jī)的數(shù)字磁通門(mén)傳感器基于單片機(jī)的旋轉(zhuǎn)變壓器-數(shù)字轉(zhuǎn)換器的研究基于單片機(jī)的光纖Bragg光柵解調(diào)系統(tǒng)的研究單片機(jī)控制的便攜式多功能乳腺治療儀的研制基于C8051F020單片機(jī)的多生理信號(hào)檢測(cè)儀基于單片機(jī)的電機(jī)運(yùn)動(dòng)控制系統(tǒng)設(shè)計(jì)Pico專(zhuān)用單片機(jī)核的可測(cè)性設(shè)計(jì)研究基于MCS-51單片機(jī)的熱量計(jì)基于雙單片機(jī)的智能遙測(cè)微型氣象站MCS-51單片機(jī)構(gòu)建機(jī)器人的實(shí)踐研究基于單片機(jī)的輪軌力檢測(cè)基于單片機(jī)的GPS定位儀的研究與實(shí)現(xiàn)基于單片機(jī)的電液伺服控制系統(tǒng)用于單片機(jī)系統(tǒng)的MMC卡文件系統(tǒng)研制基于單片機(jī)的時(shí)控和計(jì)數(shù)系統(tǒng)性能優(yōu)化的研究基于單片機(jī)和CPLD的粗光柵位移測(cè)量系統(tǒng)研究單片機(jī)控制的后備式方波UPS提升高職學(xué)生單片機(jī)應(yīng)用能力的探究基于單片機(jī)控制的自動(dòng)低頻減載裝置研究基于單片機(jī)控制的水下焊接電源的研究基于單片機(jī)的多通道數(shù)據(jù)采集系統(tǒng)基于uPSD3234單片機(jī)的氚表面污染測(cè)量?jī)x的研制基于單片機(jī)的紅外測(cè)油儀的研究96系列單片機(jī)仿真器研究與設(shè)計(jì)基于單片機(jī)的單晶金剛石刀具刃磨設(shè)備的數(shù)控改造基于單片機(jī)的溫度智能控制系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)基于MSP430單片機(jī)的電梯門(mén)機(jī)控制器的研制基于單片機(jī)的氣體測(cè)漏儀的研究基于三菱M16C/6N系列單片機(jī)的CAN/USB協(xié)議轉(zhuǎn)換器基于單片機(jī)和DSP的變壓器油色譜在線(xiàn)監(jiān)測(cè)技術(shù)研究基于單片機(jī)的膛壁溫度報(bào)警系統(tǒng)設(shè)計(jì)基于AVR單片機(jī)的低壓無(wú)功補(bǔ)償控制器的設(shè)計(jì)基于單片機(jī)船舶電力推進(jìn)電機(jī)監(jiān)測(cè)系統(tǒng)基于單片機(jī)網(wǎng)絡(luò)的振動(dòng)信號(hào)的采集系統(tǒng)基于單片機(jī)的大容量數(shù)據(jù)存儲(chǔ)技術(shù)的應(yīng)用研究基于單片機(jī)的疊圖機(jī)研究與教學(xué)方法實(shí)踐基于單片機(jī)嵌入式Web服務(wù)器技術(shù)的研究及實(shí)現(xiàn)基于AT89S52單片機(jī)的通用數(shù)據(jù)采集系統(tǒng)基于單片機(jī)的多道脈沖幅度分析儀研究機(jī)器人旋轉(zhuǎn)電弧傳感角焊縫跟蹤單片機(jī)控制系統(tǒng)基于單片機(jī)的控制系統(tǒng)在PLC虛擬教學(xué)實(shí)驗(yàn)中的應(yīng)用研究基于單片機(jī)系統(tǒng)的網(wǎng)絡(luò)通信研究與應(yīng)用基于PIC16F877單片機(jī)的莫爾斯碼自動(dòng)譯碼系統(tǒng)設(shè)計(jì)與研究基于單片機(jī)的模糊控制器在工業(yè)電阻爐上的應(yīng)用研究基于雙單片機(jī)沖床數(shù)控系統(tǒng)的研究與開(kāi)發(fā)基于Cygnal單片機(jī)的μC/OS-Ⅱ的研究基于單片機(jī)的一體化智能差示掃描量熱儀系統(tǒng)研究基于TCP/IP協(xié)議的單片機(jī)與Internet互聯(lián)的研究與實(shí)現(xiàn)變頻調(diào)速液壓電梯單片機(jī)控制器的研究基于單片機(jī)γ-免疫計(jì)數(shù)器自動(dòng)換樣功能的研究與實(shí)現(xiàn)基于單片機(jī)的倒立擺控制系統(tǒng)設(shè)計(jì)與實(shí)現(xiàn)單片機(jī)嵌入式以太網(wǎng)防盜報(bào)警系統(tǒng)基于51單片機(jī)的嵌入式Internet系統(tǒng)的設(shè)計(jì)與實(shí)現(xiàn)單片機(jī)監(jiān)測(cè)系統(tǒng)在擠壓機(jī)上的應(yīng)用MSP430單片機(jī)在智能水表系統(tǒng)上的研究與應(yīng)用基于單片機(jī)的嵌入式系統(tǒng)中TCP