FusionCubeHANA一體機日常維護及故障處理

1、1會計學(xué)FusionCubeHANA一體機日常維護及故一體機日常維護及故障處理障處理1.1. FusionCube HANAFusionCube HANA一體機日常維護一體機日常維護三板斧三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 網(wǎng)絡(luò)故障如何網(wǎng)絡(luò)故障如何處理處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電

2、上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作三板斧三板斧1：查看：查看FusionManager的的Portal看是否有告警：看是否有告警：FusionManager的的Portal整合了所有日常巡檢內(nèi)容，包括硬件、網(wǎng)絡(luò)、軟件、存儲等。整合了所有日常巡檢內(nèi)容，包括硬件、網(wǎng)絡(luò)、軟件、存儲等。三板斧三板斧2：查看資源占用曲線變化情況：查看資源占用曲線變化情況：簡單對比連續(xù)簡單對比連續(xù)2天天CPU占用曲線，如有明顯變化說明可能有故障或變更：占用曲線，如有明顯變化說明可能有故障或變更：三板斧三板斧3： 查看查看HANA節(jié)點的目錄空間占用情況：節(jié)

3、點的目錄空間占用情況：HANA節(jié)點的節(jié)點的SHARE卷、卷、LOG卷、卷、DATA卷和備份目錄空間占用不在卷和備份目錄空間占用不在FusionManager監(jiān)控范圍內(nèi)：監(jiān)控范圍內(nèi)：1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 網(wǎng)絡(luò)故障如何網(wǎng)絡(luò)故障如何處理處理8.8.

4、操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作可配置告警郵件發(fā)送，產(chǎn)生告警時郵件提醒：1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計

5、與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作通過通過FMFM檢查檢查FusionCube HANA FusionCube HANA 一體機告警一體機告警綜合健康評分告警級別和數(shù)量1、點擊頂菜單“監(jiān)控”菜單查看具體告警列表。2、點擊告警右側(cè)放大鏡按鈕查看告警具體內(nèi)容。1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2. H

6、ANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作內(nèi)存ECC校驗糾正是一種常見現(xiàn)象，太陽黑子爆、經(jīng)過機箱的人身上帶靜電發(fā)等因素都可能讓內(nèi)存短時間內(nèi)產(chǎn)生多次

7、ECC校驗糾正。該類告警閾值為24小時內(nèi)單根內(nèi)存1000次ECC校驗糾正，如超過該閾值則產(chǎn)生告警，如低于1000次告警自動解除。因此遇到該告警首先等待24小時看告警是否消失排除偶然外因影響。如持續(xù)很長時間不消失則建議更換內(nèi)存。首先記錄下告警的服務(wù)器名稱和內(nèi)存槽位號，本例為E9000_1_2_03和DIMM620。E9000_1_2_03表示1機柜2框03槽位。點擊頂菜單的“資源”，再點擊側(cè)菜單的“設(shè)備”菜單。點擊左側(cè)菜單的服務(wù)器菜單，在右側(cè)工作區(qū)點擊告警中的服務(wù)器名稱。記錄下故障節(jié)點的Hostname和登陸IPSSH登陸該節(jié)點：查看Linux操作系統(tǒng)通用的硬件日志/var/log/mcelog

8、文件，可以看到內(nèi)存錯誤發(fā)生的相關(guān)記錄。在更換內(nèi)存前線利用HANA的HA特性，將該節(jié)點設(shè)置為Standby節(jié)點，而后關(guān)閉操作系統(tǒng)。在Portal上點擊查看詳細信息，彈出窗口中點擊左側(cè)安裝部署菜單，找到機框SMM板的IP地址。遠程登陸管理虛擬機桌面，網(wǎng)頁瀏覽器中輸入SMM板地址并登陸SMM硬件管理界面：點擊告警中槽位刀片，點擊制造信息，抄下Board Serial Number并聯(lián)系華為獲得新內(nèi)存。點擊告警中槽位刀片，并點亮UID指示燈，機房中刀片的定位燈會亮起，方便更換內(nèi)存人員找到故障內(nèi)存刀片。1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維

9、護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作點擊告警放大鏡，記錄好服務(wù)器IP地址和磁盤槽位號：登陸任意該套一體機的HANA節(jié)點，

10、用dsware用戶SSH到告警中的IP。在/var/log/dsware目錄下找到告警發(fā)生時間段的日志壓縮包，可以解壓縮查看或發(fā)送給華為工程人員定位：可以通過HOSTNAME得知硬盤故障節(jié)點的信息：Storage003_0_1_2_16，后三位代表1機柜2機框16槽位。點擊頂菜單中的“資源”，選擇“設(shè)備”，點擊“FusionStorage”，進入到具體資源池中。點擊磁盤管理按鈕點擊磁盤管理按鈕?？梢圆榭吹礁婢疘P所在服務(wù)器的硬盤被踢出集群。遠程登陸管理虛擬機桌面，網(wǎng)頁瀏覽器中輸入SMM板地址并登陸SMM硬件管理界面，點擊UID指示燈為ON，機房中的對應(yīng)刀片會亮起藍燈，方便更換硬盤人員找到。故障

11、硬盤被替換后，會自動加入集群并進行數(shù)據(jù)冗余重分配，不必做額外操作。1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時

12、如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作點擊頂菜單“資源”，選擇設(shè)備中的“FusionStorage”，選擇具體FSM后，點擊性能統(tǒng)計。如何查看資源占用統(tǒng)計曲線左邊的IP地址是內(nèi)部管理IP，該IP可查詢各HANA節(jié)點的Bond0的IP進行節(jié)點對應(yīng)。右側(cè)選擇時間區(qū)域和統(tǒng)計項，點擊統(tǒng)計即可查看資源曲線，點擊導(dǎo)出可以保存。如何查看資源占用統(tǒng)計曲線1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2.HANAHANA一體機配置郵件告警一體機配置郵件告警3.3.FusionCubeFusionCu

13、be告警查看告警查看4.4.內(nèi)存故障處理內(nèi)存故障處理5.5.磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9.系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10. 網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作遠程登陸管理虛擬機桌面，網(wǎng)頁瀏覽器中輸入SMM板地址并登陸，點擊中轉(zhuǎn)KVM登陸：刀片網(wǎng)絡(luò)故障如何處理1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機

14、日常維護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作點擊刀片槽位號，即可遠程BMC方式管理刀片，點擊右側(cè)電源按鈕，即可對刀

15、片進行上電、下電、重啟等操作。刀片網(wǎng)絡(luò)不通如何查看1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2.HANAHANA一體機配置郵件告警一體機配置郵件告警3.3.FusionCubeFusionCube告警查看告警查看4.4.內(nèi)存故障處理內(nèi)存故障處理5.5.磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電

16、系統(tǒng)10.10. 網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作關(guān)閉HANA的所有業(yè)務(wù)后，點擊頂菜單“資源”，選擇“設(shè)備”，“服務(wù)器”，點擊右側(cè)的全部下電按鈕。系統(tǒng)搬遷時如何全局下電上電系統(tǒng)待搬遷完成后，只上電管理刀片，10分鐘左右后管理虛擬機啟動完成，F(xiàn)usionManager的Portal可以登陸，此時可能有網(wǎng)絡(luò)不通等告警不必理會，點擊頂菜單“資源”，選擇“設(shè)備”，“服務(wù)器”，點擊右側(cè)的全部上電按鈕。HANA節(jié)點內(nèi)存很大，可能自檢時間長達30分鐘左右，請耐心等待任務(wù)完成。系統(tǒng)搬遷時如何全局下電上電系統(tǒng)1.1. FusionCube HANAFusionCube HANA一體機日常維護

17、三板斧一體機日常維護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 刀片網(wǎng)絡(luò)故障如何處理刀片網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9. 系統(tǒng)搬遷時如何全局下電上電系統(tǒng)系統(tǒng)搬遷時如何全局下電上電系統(tǒng)10.10.網(wǎng)絡(luò)規(guī)劃變更時網(wǎng)絡(luò)規(guī)劃變更時IPIP變更操作變更操作管理網(wǎng)絡(luò)變更：點擊頂菜單“系統(tǒng)”，選擇系統(tǒng)管理子網(wǎng)，按照需

18、要進行網(wǎng)絡(luò)IP變更，等待10分鐘左右變更完成。網(wǎng)絡(luò)規(guī)劃變更時IP變更操作HANA業(yè)務(wù)，備份網(wǎng)絡(luò)IP變更：點擊頂菜單“資源”，選擇“設(shè)備”，“服務(wù)器”，選擇要變更IP的右側(cè)下三角踩點，選擇修改主機業(yè)務(wù)IP，彈出對話框修改IP地址后點“確定?！本W(wǎng)絡(luò)規(guī)劃變更時IP變更操作SSH登陸該節(jié)點：查看Linux操作系統(tǒng)通用的硬件日志/var/log/mcelog文件，可以看到內(nèi)存錯誤發(fā)生的相關(guān)記錄。在更換內(nèi)存前線利用HANA的HA特性，將該節(jié)點設(shè)置為Standby節(jié)點，而后關(guān)閉操作系統(tǒng)。點擊告警中槽位刀片，并點亮UID指示燈，機房中刀片的定位燈會亮起，方便更換內(nèi)存人員找到故障內(nèi)存刀片。1.1. FusionCube HANAFusionCube HANA一體機日常維護三板斧一體機日常維護三板斧2.2. HANAHANA一體機配置郵件告警一體機配置郵件告警3.3. FusionCubeFusionCube告警查看告警查看4.4. 內(nèi)存故障處理內(nèi)存故障處理5.5. 磁盤故障處理磁盤故障處理6.6. 計算資源占用情況統(tǒng)計與分析計算資源占用情況統(tǒng)計與分析7.7. 網(wǎng)絡(luò)故障如何處理網(wǎng)絡(luò)故障如何處理8.8. 操作系統(tǒng)掛死無法登陸如何重啟節(jié)點操作系統(tǒng)掛死無法登陸如何重啟節(jié)點9.9