存儲(chǔ)維護(hù)管理

1、dell 存儲(chǔ)常見(jiàn)存儲(chǔ)管理、故障處理和注意事項(xiàng)常見(jiàn)故障原因經(jīng)驗(yàn)表明,造成客戶存儲(chǔ)故障的外部原因主要有以下幾種：l存儲(chǔ)內(nèi)部錯(cuò)誤的開(kāi)關(guān)機(jī)順序。l機(jī)頭或擴(kuò)展柜的速率開(kāi)關(guān)處于錯(cuò)誤的位置。l不規(guī)范的軟硬件升級(jí)。l對(duì)存儲(chǔ)子系統(tǒng)進(jìn)行破壞性操作。l不規(guī)范的故障修復(fù)操作。l維護(hù)過(guò)程中觸發(fā)了相關(guān)的隱患。l存儲(chǔ)系統(tǒng)沒(méi)有冗余的配置方案。開(kāi)關(guān)機(jī)步驟開(kāi)機(jī)：lsan交換機(jī)exp磁盤(pán)擴(kuò)展柜主控柜主機(jī) 關(guān)機(jī)：l主機(jī)主控柜exp磁盤(pán)擴(kuò)展柜san交換機(jī) 不正確的開(kāi)關(guān)機(jī)順序可能會(huì)導(dǎo)致部分硬盤(pán)離線以及數(shù)據(jù)無(wú)法訪問(wèn)。l注意：在ds5000按下電源按鈕關(guān)機(jī)后，在控制器代碼和所有電源燈熄滅前絕對(duì)不能進(jìn)行任何操作！ 管理軟件storage m

2、anager客戶端管理軟件連接方式如下： l將裝有storage manager client客戶端軟件的工作站，通過(guò)以太網(wǎng)hub或switch，同時(shí)連接到ds4000/ds5000的兩個(gè)控制器。l打開(kāi)storage manager client客戶端軟件l 控制器有一個(gè)出廠默認(rèn)的ip地址：控制器a/b：192.168.128.101/102 （控制器a/b：192.168.129.101/102 ）存儲(chǔ)子系統(tǒng)狀態(tài)標(biāo)識(shí)管理界面-企業(yè)主管理界面管理界面子系統(tǒng)管理界面子系統(tǒng)部件標(biāo)識(shí)故障檢測(cè)按鈕使用“recovery guru” 故障檢測(cè)按鈕檢查ds4000/ds5000子系統(tǒng)的整體狀態(tài) “聽(tīng)診器”

3、故障檢測(cè)按鈕正常故障控制器和擴(kuò)展柜的硬件狀態(tài) 點(diǎn)擊物理硬盤(pán)右側(cè)的狀態(tài)檢查按鈕，可以打開(kāi)查看具體部件的硬件工作狀態(tài)查看控制器信息 選擇“storage subsystem menu” “view” “ profile” 故障數(shù)據(jù)收集收集 all support datal菜單：advanced-troubleshooting-collect all support data . 故障數(shù)據(jù)收集查看major event log l菜單：advanced-troubleshooting-view event log 故障數(shù)據(jù)收集查看鏈路信號(hào)噪音檢測(cè)報(bào)告 l菜單：advanced-troublesho

4、oting-run diagnostics-read link status 電池和緩存電池和緩存的設(shè)計(jì)原理l為了保證寫(xiě)緩存數(shù)據(jù)的安全性，ds4000/ds5000系統(tǒng)中，只要電池發(fā)生故障（處于failed狀態(tài)）或者超過(guò)微碼所規(guī)定的設(shè)計(jì)壽命，那么寫(xiě)緩存就會(huì)被自動(dòng)禁用l為了保證寫(xiě)緩存數(shù)據(jù)的安全性，默認(rèn)兩個(gè)控制器的cache mirroring寫(xiě)緩存鏡像功能是打開(kāi)的。因此當(dāng)一個(gè)控制器的寫(xiě)緩存被禁用之后，另外一個(gè)控制器的寫(xiě)緩存也不能使用了。電池和緩存寫(xiě)緩存禁用之后的故障現(xiàn)象l主機(jī)端應(yīng)用程序響應(yīng)變慢，從topas檢查主機(jī)性能指標(biāo)，i/o waiting顯著增加，每個(gè)邏輯盤(pán)的busy接近100%，但是i

5、o吞吐量很小，每秒只有幾十k到1m不等： 電池和緩存電池的更換策略l如果電池當(dāng)前是處于“failed”或“removed”狀態(tài)l如果電池當(dāng)前狀態(tài)正常，只是接近或已超過(guò)告警壽命在aix上使用mpio的一些注意事項(xiàng)aix版本5.2以上，除了原有的集成的rdac功能以外，操作系統(tǒng)還新增了mpio的功能來(lái)實(shí)現(xiàn)外部磁盤(pán)的多通路訪問(wèn)。aix 5.2/5.3默認(rèn)是使用rdac，而aix6.1默認(rèn)是使用mpio。 rdac和mpio的兼容性lds3000: 只支持 mpio lds4000: 支持方式：rdac, mpiolds5000: 支持方式：mpio (ds5000在aix上不再支持rdac) 在ai

6、x上使用mpio的一些注意事項(xiàng)如何在aix上確認(rèn)當(dāng)前正在使用mpio還是rdac l在aix中執(zhí)行“manage_disk_drivers” l以下是一個(gè)當(dāng)前使用mpio的例子： l#manage_disk_drivers 1: ds4300: currently mpio; supported: rdac/fcparray, mpio 2: ds4500: currently mpio; supported: rdac/fcparray, mpio 3: ds4700/ds4200: currently mpio; supported: rdac/fcparray, mpio 4: ds48

7、00: currently mpio; supported: rdac/fcparray, mpio l以下是一個(gè)當(dāng)前使用rdac的例子： 1: ds4300: currently rdac/fcparray; supported: rdac/fcparray, mpio 2: ds4500: currently rdac/fcparray; supported: rdac/fcparray, mpio 3: ds4700/ds4200: currently rdac/fcparray; supported: rdac/fcparray, mpio 4: ds4800: currently r

8、dac/fcparray; supported: rdac/fcparray, mpio 在aix上使用mpio的一些注意事項(xiàng)如何檢查當(dāng)前磁盤(pán)的工作路徑lrdac：fget_config -av lmpio: mpio_get_config -av 常見(jiàn)故障處理和注意事項(xiàng)控制器微碼是不是有重大隱患的版本？ l06.23.05.00： 隱患一：當(dāng)某個(gè)控制器內(nèi)存校驗(yàn)出錯(cuò)時(shí)，故障控制器無(wú)法正確的被隔離offline，從而導(dǎo)致邏輯盤(pán)lun不能切換到好的控制器上，主機(jī)訪問(wèn)中斷。 隱患二：ds4800寫(xiě)緩存被禁用，主機(jī)寫(xiě)性能大幅度下降，從而影響業(yè)務(wù)。 l07.10.23.00： 隱患一：更換故障硬盤(pán)后，之

9、前已經(jīng)接管的熱備盤(pán)無(wú)法copyback 隱患二：media scan被自動(dòng)禁用 常見(jiàn)故障處理和注意事項(xiàng)exp擴(kuò)展柜的esm微碼版本有沒(méi)有重大隱患？ lexp710的esm的微碼隱患（9681以下版本） 當(dāng)一塊硬盤(pán)故障時(shí)，mel里面顯示fiber channel link up和link down的event，發(fā)生大面積的多塊硬盤(pán)的同時(shí)故障，客戶數(shù)據(jù)訪問(wèn)中斷。 lexp810和exp420的esm的微碼隱患（98d0以下版本） 當(dāng)一塊硬盤(pán)故障時(shí)，mel里面顯示fiber channel link up和link down的event，發(fā)生大面積的多塊硬盤(pán)的同時(shí)故障，客戶數(shù)據(jù)訪問(wèn)中斷。 常見(jiàn)故障處

10、理和注意事項(xiàng)要特別注意前面板右下方的（2gb/4gb）速率開(kāi)關(guān)，是否處于正確的位置。速率開(kāi)關(guān)處于4gb位置時(shí)，2gbps的硬盤(pán)將不能被識(shí)別；相反速率開(kāi)關(guān)處于2gb位置時(shí)，4gbps的硬盤(pán)是可以使用的，但是性能將會(huì)下降。這種情況比較容易被忽視。速率開(kāi)關(guān)的更改需要關(guān)機(jī)下電。注意：所有3gbps的sata硬盤(pán)，都推薦運(yùn)行在4gbps。常見(jiàn)故障處理和注意事項(xiàng)磁盤(pán)擴(kuò)展柜的光纖連線符合ibm的規(guī)范。在控制器有冗余的光模塊光模塊條件下，建議將多個(gè)擴(kuò)展柜連接在多個(gè)冗余環(huán)路上，盡量不要將所有的擴(kuò)展柜串聯(lián)在一個(gè)環(huán)路里。 常見(jiàn)故障處理和注意事項(xiàng)只要使用了光纖交換機(jī)，做zone是強(qiáng)制要求。每一個(gè)zone必須只包含兩個(gè)

11、成員，一個(gè)對(duì)應(yīng)主機(jī)的一張光纖卡的一個(gè)端口，另一個(gè)對(duì)應(yīng)ds4000/ds5000的一個(gè)控制器的一個(gè)端口。 常見(jiàn)故障處理和注意事項(xiàng)邏輯盤(pán)不在最優(yōu)路徑“l(fā)ogical drive not on preferred path” l。這個(gè)問(wèn)題指的是ds4000/ds5000的邏輯盤(pán)（lun）沒(méi)有掛在原本所屬的控制器下。常見(jiàn)故障處理和注意事項(xiàng)原因分析：（主要有6點(diǎn)） l從主機(jī)的光纖卡到logical drive的光纖物理鏈路有問(wèn)題。lp-series主機(jī)的dar0的虛擬設(shè)備配置有問(wèn)題l光纖交換機(jī)fabric1的zone設(shè)置有問(wèn)題。l主機(jī)光纖卡hba和ds4000/ds5000控制器的主機(jī)端口host po

12、rt之間的光纖連線方式不正確，沒(méi)有符合ibm的規(guī)范。l控制器發(fā)生過(guò)重啟，或者控制器已經(jīng)offline（離線） 常見(jiàn)故障處理和注意事項(xiàng)檢查的確認(rèn)方法：（主要有8點(diǎn)） l確認(rèn)從主機(jī)的光纖卡到邏輯盤(pán)logical drive的物理鏈路是完全正常的。l查看光纖交換機(jī)相應(yīng)的主機(jī)光纖卡端口和ds4000/ds5000控制器端口的狀態(tài)燈l登陸主機(jī)，運(yùn)行“fget_config -av”確認(rèn)dar的虛擬設(shè)備配置正常l確認(rèn)光纖交換機(jī)的zone設(shè)置沒(méi)有問(wèn)題。l確認(rèn)主機(jī)光纖卡hba和ds4000/ds5000控制器的主機(jī)端口host port之間的光纖連線方式是正確。l在sm客戶端管理軟件里面確認(rèn)ds4000/ds

13、5000的控制器狀態(tài)正常l檢查ds4000/ds5000內(nèi)部的mapping是否正確l確認(rèn) linux主機(jī)的host type是否正確。 常見(jiàn)故障處理和注意事項(xiàng)恢復(fù)方法 l在storage manager客戶端管理軟件里面運(yùn)行: advanced recovery redistribute logical drives l在storage manager客戶端管理軟件里面，更改每一個(gè)邏輯盤(pán)logical drive的所屬控制器 菜單：logical drivechangeownership/preferred path l注意：在恢復(fù)之前，一定要確認(rèn)從主機(jī)的光纖卡到logical drive的

14、通道是完全正常的，只有在完全確認(rèn)上述幾種故障都已經(jīng)解決之后，才能實(shí)施恢復(fù)。否則后果一定是災(zāi)難性的！ 常見(jiàn)故障處理和注意事項(xiàng)storage manager客戶端軟件不能連接和訪問(wèn)ds4000/ds5000的控制器 l首先排除網(wǎng)絡(luò)方面的問(wèn)題l看看控制器的兩位數(shù)字led的顯示是否正常l如果控制器的兩位數(shù)字led的顯示在循環(huán)變化，或者ping的時(shí)通時(shí)斷，這時(shí)候可以通過(guò)串口連上控制器，觀察并捕獲屏幕的輸出。l控制器能ping通但是storage manager連不上l如果能安排停機(jī)時(shí)間，重啟機(jī)頭是最有效的解決方法。 常見(jiàn)故障處理和注意事項(xiàng)拔除ds4000/ds5000系統(tǒng)中所有未使用（沒(méi)有光纖連接）的光

15、電轉(zhuǎn)換模塊sfp l會(huì)導(dǎo)致光纖鏈路的不穩(wěn)定l在mel event log中，會(huì)發(fā)現(xiàn)有大量的“fibre channel link down”和“fibre channel link up”的提示信息。 常見(jiàn)故障處理和注意事項(xiàng)特別注意：不規(guī)范的實(shí)施ds4000/ds5000系統(tǒng)exp擴(kuò)展柜和物理硬盤(pán)的升級(jí)和遷移，可能會(huì)造成客戶數(shù)據(jù)丟失！ lds4000/ds5000系統(tǒng)增加新的exp擴(kuò)展柜（升級(jí)）lds4000/ds5000系統(tǒng)增加新的物理硬盤(pán)（升級(jí)） l 將一個(gè)或多個(gè)exp擴(kuò)展柜，從一個(gè)現(xiàn)有的ds4000/ds5000系統(tǒng)遷移到另一個(gè)ds4000/ds5000系統(tǒng)（遷移） l將一塊或多塊硬盤(pán)，

16、從一個(gè)現(xiàn)有的ds4000/ds5000系統(tǒng)遷移到另一個(gè)ds4000/ds5000系統(tǒng)（遷移） l以上工作必須嚴(yán)格按照最新版的ibm官方文檔里面所規(guī)定的步驟進(jìn)行。常見(jiàn)故障處理和注意事項(xiàng)注意定期保存ds4000/ds5000系統(tǒng)的all support data（asd） lds4000/ds5000的all support data里面記錄了所有array的配置信息和主機(jī)mapping的信息，在關(guān)鍵時(shí)刻對(duì)于客戶的數(shù)據(jù)恢復(fù)有著非常重要的作用。常見(jiàn)故障處理和注意事項(xiàng)尋找ds4000/ds5000的recovery profile lsm客戶端軟件的一個(gè)功能l記錄了ds4000的array和lun的基本信息常見(jiàn)故障處理和注意事項(xiàng)不能對(duì)處于“degraded”狀態(tài)的array的故障硬盤(pán)使用revive操作! l當(dāng)array變成degraded狀態(tài)時(shí)，主機(jī)的訪問(wèn)將會(huì)恢復(fù)。l故障硬盤(pán)仍然處于被隔離的靜止?fàn)顟B(tài)l造成數(shù)據(jù)丟失！ 常見(jiàn)故障處理和注意事項(xiàng) 故障誤報(bào)l微碼和舊版的不兼容l通過(guò)升級(jí)微碼解決l通過(guò)重啟機(jī)頭解決常見(jiàn)故障處理和注意事項(xiàng)絕對(duì)不能在生產(chǎn)系統(tǒng)使用sm客戶端管理軟件的“reset configuration”功能l刪除ds4000/ds5000系統(tǒng)里面所有的array/lun信息l將所有配置恢復(fù)成出廠設(shè)置值常見(jiàn)故障處理和注意事項(xiàng)ds5000維護(hù)注意事項(xiàng)