虛擬化平臺日常管理和應急處理規(guī)范0

1、VMware虛擬化平臺服務(wù)器日常維護和應急處理規(guī)范1目的為提高部門處理VMware虛擬化服務(wù)器故障的能力，形成科學、有效、反應迅速的日常管理流程和應急處理機制，確保虛擬化平臺的安全和穩(wěn)定運行，最大限度地減小服務(wù)器故障對生產(chǎn)的影響，降低業(yè)務(wù)中斷風險，特制定本規(guī)范。2適用范圍本規(guī)范適用于公司局域網(wǎng)中所有提供VMware虛擬化平臺服務(wù)的服務(wù)器管理，應對發(fā)生和可能發(fā)生的故障。3規(guī)范內(nèi)容虛擬化平臺服務(wù)器運維和應急處理應包括風險評估，檢測體系和應急處理三個環(huán)節(jié)，合理有效的執(zhí)行控制將防止故障影響擴大。3.1 故障分類虛擬化平臺故障包括服務(wù)器硬件和虛擬化軟件的故障；自然災害(水、火、電等)造成的物理破壞；電腦

2、病毒等惡意代碼危害；人為誤操作造成的損害等。3.2 應急準備部門責任人員明確職責和管理范圍，根據(jù)實際情況，安排應急值班，確保到崗到人，聯(lián)絡(luò)暢通，處理及時準確。3.3 具體措施(1)建立安全、可靠、穩(wěn)定運行的機房環(huán)境，防火、防雷電、防水、防靜電、防塵；建立備份電源系統(tǒng)。(2)虛擬化平臺服務(wù)器應采用可靠、穩(wěn)定、兼容性硬件，落實責任管理機制，遵守安全操作規(guī)范；對虛擬機和管理服務(wù)器進行定時備份；采用有效的虛擬化監(jiān)控工具，及時發(fā)現(xiàn)問題和日報告。4故障處理規(guī)范機房停電接到停電通知后，相關(guān)人員應及時部署應對具體措施，啟動備用電源，保證服務(wù)器正常運行。硬件維護(1)平臺服務(wù)器出現(xiàn)硬件告警需要停機維護，服務(wù)器責

3、任人應立即通知相關(guān)人員，將業(yè)務(wù)虛機遷移到集群中其他服務(wù)器主機上，再將故障服務(wù)器切換至維護模式并從HA集群中移除，負責陪同硬件廠家現(xiàn)場更換至成功恢復。(2)若服務(wù)器硬件24小時內(nèi)無法恢復，服務(wù)器責任人需書面報告原因并立即通知業(yè)務(wù)管理人員進行數(shù)據(jù)應急備份，防止災難擴大。(3)若虛擬化存儲硬件出現(xiàn)告警，第一目擊人應立即通知存儲管理員，并上報主管領(lǐng)導，存儲管理員應在報告1小時內(nèi)聯(lián)系廠家到場處理，處理完成后因報告原因，找到解決方法；并立即對數(shù)據(jù)做完整性檢查，消除重復發(fā)生隱患。虛擬化平臺故障(1)虛擬化服務(wù)器應保證雙機群集配置，并同時配置好一套備用服務(wù)器群集，隨時待命。(2)發(fā)生平臺故障后，相關(guān)人員應及時

4、查找、確定故障原因，進行先期處置。若故障在短時間內(nèi)無法修復，相關(guān)人員應將業(yè)務(wù)遷移到備用平臺環(huán)境中，保持業(yè)務(wù)系統(tǒng)的正常運行；將故障服務(wù)器脫離網(wǎng)絡(luò)，進行故障排除工作。虛擬機軟件系統(tǒng)故障(1)日常做好虛擬機的定時備份和快照，系統(tǒng)崩潰后，能夠及時恢復虛擬機。(2)發(fā)生虛擬機系統(tǒng)故障后，相關(guān)人員應及時通知業(yè)務(wù)人員檢查出現(xiàn)故障的原因并盡快排除。(3)如遇虛擬機系統(tǒng)需要啟用備份系統(tǒng)進行恢復時，應在恢復后和業(yè)務(wù)管理員仔細檢查業(yè)務(wù)是否恢復并做好恢復記錄。虛擬化管理服務(wù)器故障預防虛擬化服務(wù)器采用群集配置。平臺選用VMware勺企業(yè)版，配套管理選用VMwarevCenter標準版對虛擬數(shù)據(jù)中心管理單元進行集中管理，

5、系統(tǒng)平臺常年24小時運行，每天將產(chǎn)生大量的任務(wù)日志和記錄信息。同時vCenter器擔任了整個平臺主機管理和集中配置的角色，使用率極高。為了安全，應定期備份VIM數(shù)據(jù)庫，定期檢查告警日志。同時考慮利用虛擬化平臺定時P2V服務(wù)器為備用虛擬機。當實體化vCenter服務(wù)器出現(xiàn)不可恢復的硬件故障時，馬上在虛擬化平臺上啟動備用虛擬機，從而減小平臺失去管理的故障風險。虛擬化平臺日常告警故障排除當虛擬化平臺出現(xiàn)告警信息，通過以下步驟排除：(1)確定故障原因。查看已觸發(fā)的警報內(nèi)容，確定故障前操作是否是引發(fā)該故障的原因，對合規(guī)操作引起的告警，進行消除CHA：ii琬要盅損機主機口花責通臼t區(qū)能任再與事件目上枳陽恥

6、肘身置文件含加性4ftms酷：已觸發(fā)的萼報定義名稱包畬”虛假機內(nèi)存候用，盾況vShieldVirtualMachineAlannv5hdEndpainESVMstatusvshieldEndpointHos煢瞰s虛限機需要整合1#在vSphersDistnbuted成狙匹酉?狀態(tài)虎拇機CPU使用情況v5phereDistributedSwitchMiRJ匹配狀態(tài)vSphereDistnbuted'AM中拿隹狀態(tài)生機詳可證版本與Valiter%Tver詳可v5phtreH虎擬機告慘錯誤v£p屜mHA虎撰機監(jiān)隹操祚SphereM虛楹機苴彈切抽失政生機班勞凌制臺交損案vSpbtrc

7、HA主機1越戰(zhàn)不到vSphereHA主代理Sphere1正在遂行故障切摘uSpbeitbZ成障切描,怎不足定義范國描逑mt-監(jiān)悖成楸機內(nèi)存使用，胤兄的萼認二"vCente.vShieldVirtualMadiineAlarm.Eeev.yCente.MgnitgrvShieldEndpointSVMstatus.vCente.MionltorShieldEndpointHo-stMatus.北行也，說發(fā)虛限機需要整合抬窈后將-1:nte監(jiān)控vSphereDistributedSivibch1監(jiān)控虛掇機匚網(wǎng)使用情況四-VCen'Le.監(jiān)修vSfShteDistributedSw

8、itchMjCtnte監(jiān)性丫牛11£m口話tributEdSwitchM”Cenze溫度wSpheraDi&iributed&h'tchVL.，-“監(jiān)控生機法可證版本是否不允詳vsohtrcW無法重置制班機時發(fā)<ente.丫殳帆障HA重量虛擺棚寸發(fā)出等.壯打陰.-Sphere+無法故障切換由期機監(jiān)控主機眼片控制白內(nèi)存交樵章-，vCtnti監(jiān)|空由vSbhrruH;報告的主機:常工.YQntuS«rva長fl寸間無沽連攫到，心田.在Sphere，J一應府9帥沒有足白繆群集資置r口aua泉#Lili.R3王田田田田sla日(2)對提示硬件產(chǎn)生的告警

9、，應查看硬件狀態(tài)信息，對確認是硬件的問題按硬件維護預案處理a»；pftiSB與顯示所存?zhèn)鞲衅黠@示后有志批工息至郭曬他喜科狀花,本期生電也存與正常PC1民度©正常電壓e正常坦度®正常取加未知網(wǎng)決。1個善病1個臣也普吉gDiskDriveBay3ROME。譽U送粕狀況：AssertQOkkDriveSay3ROME推普舍當It桃況：AssertUvmMeArutrd1PMnSA7T*出產(chǎn)M?：H:DFMCi*rt(3)對提示因資源不足或性能引發(fā)的告警，因查看近期性能圖表,找出原因，消除故障提示性篇圖表圖例項員擒剜里匯度單位最希ftm最低平均1使用情況平均侑%1.313

10、.960J110.141使用情況平均值%1.392.311.0311工1。211停用慌*MH1：用均值MHz221啾1&S2的二AH：任秀與串件髻振面后存甘翩制心旭砌W»子，.孑一戊電暗(4)對于無法判斷的故障，可導出系統(tǒng)日志發(fā)給廠家分析處理H辱出系虢日志|tpxd-pr&filervpjtd-pcafiler.log_J全部顯示顯示不一組才備行|日熬目SectionforVMv/areVirtualCeoterr：pid=12745rver5ion=5.L“build=79973，option=Rfilease/ActivatiionStats/Task/Actyv

11、im.vm.check.CQmpAtlbilityChecker.checkCompitibility/WnMostmnstnjdmeari0/ActivatinSats/Task/Adv='vim.vm.dieck.CampatibilityChecker.chedcCompatibilityjVmHostcorTjdBrjhm0_>/ArtivationSlats/Task/Aitv=、im.vm.dieck.CompahbilltyChecker.chtdcCompatiblliity'/VmHosterfitrmtor/numSamples4一>/Artlv

12、ationSats/Task/Artv='vim.vm,dieck.Campatibilityhecker.checkCompatibHi1y)VmHcKtconructo曲北由0一>/ActivationStats/Task/Actv-vim.vm.check.CompatibilityChecker.checkConipatibilityB/Vrn0口erdtioMFiraiBeOperati口甘阿0->/ActivationStats/Task/Artv-'vim.vm.check.CompalibiIityCheckeracheckComp4tibility

13、'/Vm。口eraitionwFinafaBOpergtion/m&an0->/ActivationStats/Task/A-dtv-'vim.vm.check.Compatibilit>'Checker-ch已匚kCompatibility8/VmOperatkyK：HnafcperoriTm0->/ActivatinStats/Tfl$k/ACtv"'wim.vrri.check.CompstibilityChecker.checikCOmpatibilitv'/Vin0口電廠成2口:FinafaeOperagiV

14、ngSanRl,4>/ActivationStats/Task/Adv=，imuvE.dieck.CompatibilityChecker.checkCompatibility!/VmOpe：atiDn:Finafee3perati口0>/AftivatiOrtSlM5r«l</Aav«,vim,vm!checkXofflpstibilltyCheckerachedlcCompbilitY，/VmSlatec&ft5truaorwhitoksKSfingvtscO>/ActivationSatsfTask/Actv=vim.vm.dieck.

15、CompatibilityChecker.checkCompatibility'/VmStateconstructorwhichtakesanadstingvnymean0->/ActivatidnStats/Task/Actv«vim.m.dieck.Connpabbl11tyChecker.chedcCompatib11ity'/VmStMeconstructorwhfditaksansasangvnymin0->/ActivationSats/Taisk/Adv=Vim.vm.check.CompatibiIityChecker.cherikComp

16、stibiIity'/VmState-canstrudorwhichtakesanastingwrnumSamp->/ActivationSlats/Task/A<iv=*vim.vm.check.Compahbi11tyChecker.checkCompatib11ity'/VrnStateconstructarwhiditrikesaneastingvrrjitotal0->/ActivationSats/Task/Actv='vim.vm.check.CampatibiIityChecker.checkCompatibiIity'/VmS

17、atecdroonstoxtoi/m®0->/ActivationStats/Task/Actv=vim.vm.check.CampatibiIityChecker.checkConipatibiIity8mStateconstrudomeafi0->/ActivationStats/Task/Adv=Vim.vm.check.CompabbilityCheckerBcheckCgm口司tibility'/VmStatebwconstoud)00fminQ->/ActivationStats/Task/A-dtv-'vim.vm.check.Comp

18、atibilit'Checker-ch已匚kCompatibility8/VmSlate-匚0(犀co阻rudDiWjmSMndes2->/ActivatinStats/Taik/Actv"'wim.vrri.check.CompstibilityChecker.checikCOmpatibilitv'AmStoterowBEudg加3I0一、jfiir+iu/innQai-s/TawlffumrlirLnmnTilHliiiIibuFhP-rLprrhP-rlri"nmhiIiK/1A/mTAcHrhjwr/TnHinihTrn»,fli5、虛擬化平臺故障預防平臺管理初始狀態(tài)備份安裝配置好vcenter服務(wù)器軟件系統(tǒng)，經(jīng)測試能夠正常投入生產(chǎn)使用后，將數(shù)據(jù)庫進行一次完成的備份，并記錄配置信息。備份文件本機一份，移動存儲一份。虛擬機實時狀態(tài)備份平臺上的虛擬機包括vmware提供的其他功能性服務(wù)器，應在測試通過后進