FusionCompute日常維護(hù)與故障處理介紹

1、FusionCompute日常維護(hù)與故障處理介紹技術(shù)創(chuàng)新，變革未來FusionCompute是華為云計算解決方案的基石，了解和掌握FusionCompute的日常維護(hù)和故障處理方法，可以更好的部署和維護(hù)企業(yè)云計算環(huán)境。通過本章學(xué)習(xí)，您將能夠掌握FusionCompute系統(tǒng)的日常運維能力。學(xué)完本課程后，您將能夠：描述日常維護(hù)操作區(qū)分FusionCompute告警分析常見故障處理步驟描述FusionCompute常見故障處理方法維護(hù)管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復(fù)故障管理日常維護(hù)操作為了保證系統(tǒng)長期正常、穩(wěn)定的運行，維護(hù)工程師需要定期對系統(tǒng)進(jìn)行檢查，并根據(jù)檢查出的

2、異常結(jié)果排除故障。維護(hù)項目檢查項正常狀態(tài)維護(hù)周期查看系統(tǒng)告警FusionCompute上的告警無新增告警每天檢查FusionCompute健康狀態(tài)健康檢查報告無“不合格”檢查項每天檢查設(shè)備運行狀態(tài)服務(wù)器、交換機(jī)和存儲設(shè)備的指示燈狀態(tài)指示燈顯示正常每天檢查設(shè)備運行環(huán)境溫濕度符合運行環(huán)境對溫度和濕度的要求。每周空氣質(zhì)量符合運行環(huán)境對空氣質(zhì)量的要求每周防塵情況無明顯塵土附著每周查看預(yù)警整改公告“/enterprise”，選擇“公告產(chǎn)品公告預(yù)警公告IT云計算數(shù)據(jù)中心FusionSphereFusionSphere”，查看預(yù)警整改公告。滿足預(yù)警通知的要求每月查看告警告警級別圖標(biāo)說明緊急已經(jīng)影響業(yè)務(wù)、需要

3、立即采取糾正措施的告警為緊急告警。重要已經(jīng)影響業(yè)務(wù)，如果不及時處理會產(chǎn)生較為嚴(yán)重后果的告警為重要告警。次要目前對業(yè)務(wù)沒有影響，但需要采取糾正措施，以防止更為嚴(yán)重的故障的發(fā)生，這種情況下的告警為次要告警。提示檢測到潛在的或即將發(fā)生的影響業(yè)務(wù)的故障，但是目前對業(yè)務(wù)還沒有影響，這種情況下的告警為提示告警。實時監(jiān)控管理員可以查看集群、主機(jī)以及虛擬機(jī)的監(jiān)控信息，以便于了解集群在指定時間段內(nèi)的運行狀態(tài)維護(hù)管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復(fù)故障管理系統(tǒng)配置 (1)管理員可以根據(jù)業(yè)務(wù)需求對FusionCompute系統(tǒng)配置參數(shù)作出調(diào)整。配置域認(rèn)證信息更新License修改系統(tǒng)Lo

4、go配置登錄超時時間配置資源調(diào)度周期配置SNMP管理站VRM單節(jié)點擴(kuò)展為主備部署系統(tǒng)配置 (2)任務(wù)管理管理員可以通過FusionCompute查看操作任務(wù)的進(jìn)度維護(hù)管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復(fù)故障管理FusionCompute賬戶FusionCompute賬戶分為：本地用戶、域用戶、接口對接用戶。本地用戶用于登錄、管理系統(tǒng)；在配置域后可用域用戶登錄系統(tǒng)；接口對接用戶用于其他用戶對接。FusionCompute登錄賬戶如下表：登錄模式默認(rèn)賬戶/密碼賬戶權(quán)限普通模式admin/IaaSPORTAL-CLOUD8!具有系統(tǒng)管理員權(quán)限三員分立模式系統(tǒng)管理員： sy

5、sadmin/Sysadmin#安全管理員： secadmin/Secadmin#安全審計員： secauditor/Secauditor#系統(tǒng)管理員：僅具有系統(tǒng)業(yè)務(wù)操作維護(hù)權(quán)限，以及創(chuàng)建、刪除用戶的權(quán)限安全管理員：僅具有用戶、角色的權(quán)限管理權(quán)，但不能創(chuàng)建用戶。安全審計員:僅有日志查看和日志導(dǎo)出權(quán)限，用于對其他用戶的操作進(jìn)行審查。維護(hù)管理日常監(jiān)控配置管理用戶管理FusionCompute備份與恢復(fù)故障管理備份與恢復(fù)策略維護(hù)工程師在對系統(tǒng)進(jìn)行重大操作(如升級、重大數(shù)據(jù)調(diào)整等)前，為了保證FusionCompute在出現(xiàn)異常或未達(dá)到預(yù)期結(jié)果時可以及時進(jìn)行數(shù)據(jù)恢復(fù)，將對業(yè)務(wù)的影響降到最低，需要提前對

6、VRM節(jié)點的數(shù)據(jù)進(jìn)行備份。FusionCompute同時支持對關(guān)鍵數(shù)據(jù)進(jìn)行自動備份和手工備份。在對系統(tǒng)部件進(jìn)行重大操作(如升級、重大數(shù)據(jù)調(diào)整等)后，系統(tǒng)有可能出現(xiàn)異?；蛭催_(dá)到預(yù)期結(jié)果。此時，需要對其進(jìn)行回退，回退過程中需要進(jìn)行數(shù)據(jù)恢復(fù)操作。本節(jié)介紹了FusionCompute系統(tǒng)的日常管理內(nèi)容，包括監(jiān)控管理、配置管理、用戶管理和管理數(shù)據(jù)備份等內(nèi)容。維護(hù)管理故障處理主機(jī)和集群故障處理存儲故障處理網(wǎng)絡(luò)故障處理虛擬機(jī)和模板故障處理主機(jī)和集群創(chuàng)建流程FusionCompute主機(jī)和集群的故障處理，可以參考該流程順序進(jìn)行檢查。主機(jī)和集群的故障可能會涉及到如下關(guān)鍵故障點：站點故障集群故障主機(jī)故障系統(tǒng)接口故

7、障創(chuàng)建集群向集群添加主機(jī)設(shè)置主機(jī)時鐘同步添加主機(jī)存儲接口修改主機(jī)存儲多路徑存儲設(shè)備廠商其他否華為存儲類型為SAN？是主機(jī)和集群故障點站點故障不能使用FusionCompute不能配置級聯(lián)集群故障不能創(chuàng)建、修改、移除集群集群配置故障主機(jī)故障不能添加、修改、移除主機(jī)主機(jī)配置故障系統(tǒng)接口故障網(wǎng)口綁定異常業(yè)務(wù)管理接口異常存儲接口異常站點、集群故障點分析故障點不能使用FusionCompute不能配置級聯(lián)不能創(chuàng)建、修改、移除集群集群配置故障可能的故障原因網(wǎng)絡(luò)異常VRM節(jié)點異常站點配置異常集群配置異常排除故障排除網(wǎng)絡(luò)故障排除VRM節(jié)點故障修復(fù)站點配置修復(fù)集群配置FusionCompute使用VRM節(jié)點對資

8、源統(tǒng)一調(diào)度管理，站點、集群故障和VRM節(jié)點強(qiáng)相關(guān)。站點、集群故障案例 - VRM虛擬機(jī)無法啟動收集信息FusionCompute服務(wù)異常，無法啟動VRM虛擬機(jī)定位故障可能在FusionCompute中對VRM虛擬機(jī)執(zhí)行過關(guān)機(jī)操作可能在VRM虛擬機(jī)上執(zhí)行過關(guān)機(jī)命令可能VRM操作系統(tǒng)異常而引發(fā)VRM自動關(guān)機(jī)排除故障使用“PuTTY”，登錄VRM節(jié)點所在主機(jī)切換至“root”用戶: su - root查找VRM虛擬機(jī)id啟動虛擬機(jī): virsh start 虛擬機(jī)ID檢查確認(rèn)告警消失業(yè)務(wù)正常主機(jī)故障點分析故障點不能添加、修改、移除主機(jī)主機(jī)配置故障可能的故障原因網(wǎng)絡(luò)異常代理服務(wù)異常系統(tǒng)異常排除故障排除

9、網(wǎng)絡(luò)故障修復(fù)代理服務(wù)重裝系統(tǒng)主機(jī)上的計算資源經(jīng)過虛擬化后，形成計算資源池，并分配給虛擬機(jī)使用。如果主機(jī)出現(xiàn)故障，將影響上層的虛擬機(jī)和業(yè)務(wù)。主機(jī)故障案例 - 添加主機(jī)失敗收集信息在FusionCompute界面上添加主機(jī)失敗定位故障VRM與CNA節(jié)點網(wǎng)絡(luò)鏈路不通添加主機(jī)失敗后，主機(jī)上可能殘留網(wǎng)絡(luò)配置數(shù)據(jù)，導(dǎo)致再次添加主機(jī)失敗排除故障檢查VRM與故障CNA節(jié)點網(wǎng)絡(luò)連接刪除故障CNA節(jié)點殘留網(wǎng)絡(luò)數(shù)據(jù)檢查確認(rèn)告警消失業(yè)務(wù)正常系統(tǒng)接口管理FusionCompute管理如下幾類系統(tǒng)接口：綁定網(wǎng)口綁定主機(jī)的網(wǎng)口，以提高網(wǎng)絡(luò)的可靠性。存儲接口在主機(jī)中添加存儲接口，實現(xiàn)主機(jī)與存儲設(shè)備對接。添加多個存儲接口，可以

10、實現(xiàn)存儲的多路徑傳輸。業(yè)務(wù)管理接口承載一些特殊業(yè)務(wù)流量的系統(tǒng)接口，這些特殊業(yè)務(wù)包括熱遷移虛擬機(jī)、虛擬機(jī)主機(jī)容災(zāi)、虛擬化SAN存儲心跳檢測等。系統(tǒng)接口故障點分析故障點網(wǎng)口綁定異常業(yè)務(wù)管理接口異常存儲接口異?？赡艿墓收显蚓W(wǎng)絡(luò)異常主機(jī)異常VRM異常排除故障排除網(wǎng)絡(luò)故障修復(fù)主機(jī)修復(fù)VRM系統(tǒng)接口涉及到底層網(wǎng)絡(luò)硬件，主機(jī)和VRM節(jié)點，排除故障時可自頂向下快速定位故障層次，然后再自底向上逐步排除故障點。系統(tǒng)接口故障案例 - 刪除存儲接口路由導(dǎo)致異常收集信息刪除存儲接口路由后，提示存儲鏈路中斷，關(guān)聯(lián)虛擬機(jī)不能使用定位故障主機(jī)與存儲設(shè)備通過三層網(wǎng)絡(luò)連接，主機(jī)的存儲接口和存儲設(shè)備的存儲IP地址不在同一網(wǎng)段，需

11、要設(shè)置靜態(tài)路由，使存儲平面能夠互通排除故障登錄主機(jī)為主機(jī)存儲接口配置靜態(tài)路由檢查確認(rèn)告警消失業(yè)務(wù)正常維護(hù)管理故障處理主機(jī)和集群故障處理存儲故障處理網(wǎng)絡(luò)故障處理虛擬機(jī)和模板故障處理存儲資源池配置流程FusionCompute存儲池的故障處理，可以參考該流程順序進(jìn)行檢查。存儲池可能會涉及到如下關(guān)鍵故障點：存儲資源故障存儲設(shè)備故障數(shù)據(jù)存儲故障虛擬磁盤故障添加站點的存儲資源判斷存儲設(shè)備類型Advanced SANFusionStorage向主機(jī)關(guān)聯(lián)存儲資源掃描存儲設(shè)備添加數(shù)據(jù)存儲創(chuàng)建磁盤NASFC/IP SAN本地存儲存儲資源池故障點存儲資源故障不能添加、修改、刪除存儲資源不能關(guān)聯(lián)存儲資源存儲設(shè)備故障

12、掃描不到存儲設(shè)備數(shù)據(jù)存儲故障添加、修改、移除數(shù)據(jù)存儲異常關(guān)聯(lián)、解關(guān)聯(lián)主機(jī)異常數(shù)據(jù)存儲異常虛擬磁盤故障創(chuàng)建、綁定、解綁定、刪除虛擬磁盤異常調(diào)整容量異?？煺债惓＿w移異常存儲資源、存儲設(shè)備故障點分析故障點不能添加、修改、刪除存儲資源不能關(guān)聯(lián)存儲資源掃描不到存儲設(shè)備可能的故障原因存儲網(wǎng)絡(luò)鏈路異常對端存儲設(shè)備異常主機(jī)存儲接口異常排除故障排除存儲網(wǎng)絡(luò)鏈路故障排除對端存儲設(shè)備故障修復(fù)主機(jī)存儲接口配置FusionCompute存儲資源、存儲設(shè)備故障涉及到對端存儲設(shè)備配置，存儲鏈路，存儲接口等，需要逐步排錯。存儲資源故障案例 - 存儲資源管理鏈路中斷收集信息FusionCompute上報告警信息：存儲資源管理鏈

13、路中斷定位故障網(wǎng)絡(luò)異常存儲資源網(wǎng)口故障排除故障查看故障的存儲資源的名稱及出現(xiàn)故障的存儲資源管理IP登錄VRM節(jié)點查看VRM與故障的管理鏈路的IP能否正常通信網(wǎng)絡(luò)排查、修復(fù)檢查確認(rèn)告警消失業(yè)務(wù)正常數(shù)據(jù)存儲故障點分析故障點不能添加、修改、移除數(shù)據(jù)存儲關(guān)聯(lián)、解關(guān)聯(lián)主機(jī)異常數(shù)據(jù)存儲異?？赡艿墓收显虼鎯W(wǎng)絡(luò)故障虛擬化的本地存儲文件系統(tǒng)損壞對應(yīng)存儲設(shè)備損壞排除故障排除存儲網(wǎng)絡(luò)故障修復(fù)文件系統(tǒng)損壞修復(fù)磁盤損壞FusionCompute數(shù)據(jù)存儲涉及到虛擬化和非虛擬化數(shù)據(jù)存儲，也就是文件系統(tǒng)和塊存儲，需要重點關(guān)注這兩類故障。數(shù)據(jù)存儲故障案例 - VIMS文件系統(tǒng)損壞收集信息共享存儲的VIMS文件系統(tǒng)損壞定位故

14、障系統(tǒng)文件元數(shù)據(jù)損壞或用戶文件元數(shù)據(jù)損壞超級塊損壞或文件系統(tǒng)根目錄損壞排除故障停止故障存儲設(shè)備上的業(yè)務(wù)運行fsck修復(fù)只讀卷恢復(fù)故障存儲設(shè)備上的業(yè)務(wù)運行檢查確認(rèn)告警消失業(yè)務(wù)正常虛擬磁盤故障點分析故障點不能創(chuàng)建、綁定、解綁定、刪除虛擬磁盤調(diào)整容量異?？煺债惓４疟P遷移異常可能的故障原因數(shù)據(jù)存儲異常磁盤類型限制磁盤配置模式限制虛擬機(jī)狀態(tài)限制排除故障修復(fù)數(shù)據(jù)存儲更改磁盤類型更改磁盤配置模式更改虛擬機(jī)狀態(tài)FusionCompute上的虛擬機(jī)，如果綁定的虛擬磁盤出現(xiàn)故障，會影響到業(yè)務(wù)和數(shù)據(jù)，故障排除時需提前備份數(shù)據(jù)。虛擬磁盤故障案例 - 磁盤無法在線擴(kuò)容收集信息虛擬機(jī)磁盤不能在線擴(kuò)容定位故障磁盤所屬的數(shù)據(jù)

15、存儲類型不支持?jǐn)U容磁盤配置模式不支持在線擴(kuò)容虛擬機(jī)操作系統(tǒng)不支持在線擴(kuò)容排除故障遷移磁盤到支持?jǐn)U容的數(shù)據(jù)存儲上更改磁盤配置模式重啟虛擬機(jī)檢查確認(rèn)磁盤擴(kuò)容成功，業(yè)務(wù)正常維護(hù)管理故障處理主機(jī)和集群故障處理存儲故障處理網(wǎng)絡(luò)故障處理虛擬機(jī)和模板故障處理網(wǎng)絡(luò)池創(chuàng)建流程FusionCompute網(wǎng)絡(luò)池的故障處理，可以參考該流程順序進(jìn)行檢查。網(wǎng)絡(luò)池可能會涉及到如下關(guān)鍵故障點：分布式交換機(jī)故障上行鏈路故障VLAN池故障子網(wǎng)故障端口組故障因網(wǎng)絡(luò)池的各個組件關(guān)聯(lián)緊密，可以統(tǒng)一概括成如下故障：虛擬機(jī)之間通訊故障虛擬機(jī)和外部網(wǎng)絡(luò)通訊故障創(chuàng)建分布式交換機(jī)已有可用的分布式交換機(jī)？否添加上行鏈路添加VLAN池 (可選)添加

16、子網(wǎng) (可選)配置VTEP (可選)是創(chuàng)建端口組虛擬機(jī)之間通訊故障故障點同一主機(jī)上，虛擬機(jī)之間通訊故障不同主機(jī)上，虛擬機(jī)之間通訊故障可能的故障原因端口組配置異常分布式交換機(jī)配置異常VLAN池配置異常子網(wǎng)配置異常排除故障修復(fù)端口組配置修復(fù)分布式交換機(jī)配置修復(fù)VLAN池配置修復(fù)子網(wǎng)配置虛擬機(jī)可能分別屬于不同分布式交換機(jī)，歸屬于不同端口組，使用不同上行鏈路，需要逐一進(jìn)行故障排除。虛擬機(jī)之間通訊故障案例 - 兩臺虛擬機(jī)無法通訊收集信息同一主機(jī)上的兩臺虛擬機(jī)無法通訊定位故障虛擬機(jī)自身網(wǎng)絡(luò)異常虛擬機(jī)所屬的端口組不同虛擬機(jī)所屬的分布式交換機(jī)不同排除故障修復(fù)故障虛擬機(jī)自身網(wǎng)絡(luò)配置更改故障虛擬機(jī)所屬端口組檢查所

17、屬的分布式交換機(jī)檢查確認(rèn)網(wǎng)絡(luò)正常，業(yè)務(wù)正常虛擬機(jī)和外部網(wǎng)絡(luò)通訊故障故障點虛擬機(jī)不能訪問外部網(wǎng)絡(luò)虛擬機(jī)訪問外部網(wǎng)絡(luò)慢可能的故障原因上行鏈路異常主機(jī)網(wǎng)絡(luò)服務(wù)異常外部交換機(jī)配置異常硬件故障排除故障修復(fù)上行鏈路修復(fù)主機(jī)網(wǎng)絡(luò)服務(wù)修復(fù)外部交換機(jī)配置排除硬件故障虛擬機(jī)和外部網(wǎng)絡(luò)通訊涉及到底層主機(jī)、網(wǎng)卡、外部交換機(jī)等，需要逐一進(jìn)行故障排除。網(wǎng)絡(luò)通訊故障案例 - 綁定網(wǎng)口后網(wǎng)絡(luò)不通收集信息FusionCompute綁定網(wǎng)口后網(wǎng)絡(luò)不通定位故障上行鏈路綁定模式外部交換機(jī)鏈路匯聚模式排除故障修改上行鏈路綁定模式修改外部交換機(jī)端口匯聚模式檢查確認(rèn)網(wǎng)絡(luò)正常，業(yè)務(wù)正常維護(hù)管理故障處理主機(jī)和集群故障處理存儲故障處理網(wǎng)絡(luò)故障處

18、理虛擬機(jī)和模板故障處理虛擬機(jī)創(chuàng)建方式創(chuàng)建空虛擬機(jī)創(chuàng)建空虛擬機(jī)時，可選擇創(chuàng)建在主機(jī)或集群上，并可自定義CPU、內(nèi)存、磁盤、網(wǎng)卡等規(guī)格?？仗摂M機(jī)創(chuàng)建完成后，需要在上面安裝操作系統(tǒng)。使用模板創(chuàng)建虛擬機(jī)按模板部署虛擬機(jī)或模板導(dǎo)入虛擬機(jī)時，以下屬性繼承自模板，其他屬性可自定義。虛擬機(jī)的操作系統(tǒng)類型和操作系統(tǒng)版本號虛擬機(jī)磁盤的數(shù)量和容量虛擬機(jī)的網(wǎng)卡數(shù)使用虛擬機(jī)創(chuàng)建虛擬機(jī)克隆虛擬機(jī)過程中，以下屬性繼承自原虛擬機(jī)，其他屬性可自定義。虛擬機(jī)的操作系統(tǒng)類型和操作系統(tǒng)版本號虛擬機(jī)磁盤的數(shù)量和容量虛擬機(jī)的網(wǎng)卡數(shù)如果有一個要經(jīng)?？寺〉奶摂M機(jī)，可以將該虛擬機(jī)轉(zhuǎn)換為模板。虛擬機(jī)創(chuàng)建流程FusionCompute三種虛擬機(jī)創(chuàng)建方式都需要經(jīng)過“選擇創(chuàng)建位置”、“設(shè)置虛擬機(jī)屬性”、“設(shè)置網(wǎng)卡和磁盤”和“創(chuàng)建虛擬機(jī)”四個過程。虛擬機(jī)創(chuàng)建、調(diào)整、回收、操作和虛擬機(jī)模板轉(zhuǎn)換、管理等故障都可以參考該流程逐一檢查。選擇創(chuàng)建位置集群 or 主機(jī)設(shè)置虛擬機(jī)屬性虛擬機(jī)名稱操作系統(tǒng)類型、版本號硬件規(guī)格 (CPU內(nèi)存磁盤數(shù)網(wǎng)卡數(shù))虛擬機(jī)藍(lán)屏策略設(shè)置網(wǎng)卡和磁盤網(wǎng)卡所屬的分布式交換機(jī)和端口組磁盤屬性 (數(shù)據(jù)存儲、配置模式、容量、是否受