2025H3C服務器故障處理手冊

目錄1安 1 1 1 1 1 收集HDMSDS日 收集FCHBA卡日 收集QlogicFCHBA卡日 收集EmulexFCHBA卡日 HGXGPUFieldDiag現(xiàn)場診斷工具使用方 1 1 上電后顯示No 邏輯盤寫緩存策略由WriteBack變?yōu)閃rite CPUConfigurationError（僅適用于IntelCPU的服務器 FCHBA卡問 存儲設備無法識別FCHBA卡端口的 存儲設備已經(jīng)識別FCHBA卡的端口WWPN但服務器端無法識別到 1 H5KVM安裝OS緩慢或失 1 1 啟動到UEFI HDMRedfish HDM 1 服務器的空閑槽位必須安裝假面板，比如硬盤、風扇、PCIe卡、OCP網(wǎng)卡、電源模塊的UPS為服務器供電。這種電源可防止服表1-1H3CG7H3CUniServerR4970H3CUniServerR4930H3CUniServerR5330H3CUniServerR5500H3CG6H3CUniServerR3950H3CUniServerR4300H3CUniServerR4500H3CUniServerR4700H3CUniServerR4700LEH3CUniServerR4900H3CUniServerR4900G6H3CUniServerR4900LEG6H3CUniServerR4950H3CUniServerR5300H3CUniServerR5350H3CUniServerR5500H3CUniServerR6700H3CUniServerR6900H3CUniServerE3300H3CG5H3CUniServerR4300H3CUniServerR4330H3CUniServerR4330G5H3CUniServerR4700H3CUniServerR4700LCH3CUniServerR4900H3CUniServerR4900LCH3CUniServerR4930H3CUniServerR4930G5H3CUniServerR4930LCG5H3CUniServerR4950H3CUniServerR5300H3CUniServerR5500H3CUniServerR5500LCH3CUniServerR6900H3CG3H3CUniServerR2700H3CUniServerR2900H3CUniServerR4300H3CUniServerR4500H3CUniServerR4700H3CUniServerR4900H3CUniServerR5300H3CUniServerR6700H3CUniServerR6900H3CUniServerR8900H3C技術(shù)支持。圖3-1表3-1細信息請參見4故障診斷前的準備工作。5收集故障相關(guān)信息。題的處理建議請參見7硬件類問題或8軟件類問題。910軟件和配置工具表4-1表4-2H3C服務器支持的所有存RAID）LSI存儲控制卡*表4-3舉例：H3CUniServerR4300序列號以“SN”開頭，如4-1所示。圖4-1產(chǎn)品序列號（示例產(chǎn)品的用戶指南，4-2僅為示例。圖4-2抽拉式資產(chǎn)標簽的位置（示例品序列號，如4-3所示；也可在“產(chǎn)品信息”頁面中查看產(chǎn)品序列號，如4-4所示。圖4-3圖4-4IPMIIPMI平臺管理工具：IPMITOOLusername-Ppasswordfrulistfruid圖4-5IPMI表4-4HDM是否能正常登錄？是否能正常收集HDMSDS日服務器開機后，HDMWebKVM遠程控制臺是否有顯POSTF7找不到系統(tǒng)啟動項）？F7是否可以看到網(wǎng)卡啟動引導項，是否可以正常PXE環(huán)境？GrubHDMMCA（Machine警？MCAMSMI/CATERRIERR/CATERRMCERR為標志性日志信息。POST所需的部件。服務器的最小化硬件配置如4-5所示。表4-5H3CUniServerR4970B0風扇：4H3CUniServerR4930內(nèi)存：1CPU1風扇：42H3CUniServerR5330K0風扇：48GPU計算板：1Switch節(jié)H3CUniServerR5500K0風扇：15H3CUniServerR5300內(nèi)存：2A0風扇模塊：4GPU計算板：1Switch節(jié)H3CUniServerR5500H3CUniServerR5500LCH3CUniServerE3300內(nèi)存：11A0槽2個，F(xiàn)an3&Fan41H3CUniServerR4500CPU：1CPU112H3CUniServerR4300CPU：1CPU1風扇：4H3CUniServerR4700CPU：1CPU1風扇：8H3CUniServerR4700LE內(nèi)存：2A0H3CUniServerR4900CPU：1CPU1風扇：4H3CUniServerR4900G6CPU：1CPU1風扇：4H3CUniServerR4900LEG6內(nèi)存：2A0H3CUniServerR3950內(nèi)存：1A0風扇：4H3CUniServerR4950內(nèi)存：2A0風扇：4H3CUniServerR5350內(nèi)存：2A0風扇模塊：4GPU計算板：1Switch節(jié)H3CUniServerR6700CPU：1CPU1風扇：4H3CUniServerR6900CPU：1CPU1風扇：4H3CUniServerR4300CPU：1CPU1風扇：4H3CUniServerR4700CPU：1CPU1風扇：7H3CUniServerR4700LC內(nèi)存：2A0風扇：7H3CUniServerR4900CPU：1CPU1風扇：6H3CUniServerR4900LC內(nèi)存：2A0風扇：6H3CUniServerR4950CPU：1CPU1內(nèi)存：1CPU1的D0風扇：6H3CUniServerR6900CPU：1CPU1H3CUniServerR2700CPU：1CPU1內(nèi)存：1A1風扇：4Fan3、Fan5、Fan6、Fan7槽位H3CUniServerR2900CPU：1CPU1內(nèi)存：1A1風扇：4Fan2、Fan4、Fan5、Fan6槽位H3CUniServerR4300CPU：1CPU1內(nèi)存：1A1風扇：4Fan1、Fan2、Fan3、Fan4槽位H3CUniServerR4500CPU：1CPU1內(nèi)存：1CPU1的A0槽風扇：5存儲控制卡：1H3CUniServerR4700CPU：1CPU1內(nèi)存：1A1風扇：4Fan4、Fan5、Fan6、Fan7槽位H3CUniServerR4900CPU：1CPU1內(nèi)存：1A1風扇：4Fan3、Fan4、Fan5、Fan6槽位H3CUniServerR6700CPU：1CPU1內(nèi)存：1A1風扇：6H3CUniServerR6900CPU1風扇模塊：6H3CUniServerR8900計算模塊：113位置（與管理模塊和PDB板：1PDB板模塊CPU1內(nèi)存：1A11PDB12PDB2H3CUniServerR4930CPU：1CPU1內(nèi)存：1風扇：6H3CUniServerR4930G5CPU：1CPU1內(nèi)存：1風扇：6H3CUniServerR4930LCG5內(nèi)存：2風扇：6H3CUniServerR4330CPU：1CPU1內(nèi)存：1風扇：4H3CUniServerR4330G5CPU：1CPU1內(nèi)存：1風扇：4H3CUniServerR5300GPU計算板：1Switch節(jié)H3CUniServerR5300GPU計算板：1Switch節(jié)H3CUniServerR5500表5-1接口線纜（如網(wǎng)線、光纖USBType-CUSBWIFI模塊（小米品牌顯示終端（如溫度計/表5-2在操作系統(tǒng)下單擊[計算機/管理]單擊[工具/事件查看器]sosreport命令收集全部LinuxrootESXiESXiServerConsolerootESXiESXiServerConsoleAlt+F12Alt+PageUp或收集HDMSDSSDS（SmartDiagnoseSystem，智能診斷系統(tǒng)）日志包括服務器的日志信息（包括事件日志、操作日志和內(nèi)部日志等SDS日志可以了解服務器運行狀態(tài)。登錄HDMWeb界面，具體操作請參見《HDM圖5-130天的SDS日志。在“默認下載”欄中，自定義日志范圍可點擊SDS日志。不支持多用戶同時下載SDSSDSUTC時間的日志，HDMNTPSDS日志時HDMUTC時間，兩者之間可能存在時間差。服務器若配置雙節(jié)點，則主從節(jié)點的SDS當服務器操作系統(tǒng)發(fā)生崩潰、重啟或關(guān)機時，HDM會自動錄制事件發(fā)生前的錄像。用戶可以通過登錄HDMWeb界面，具體操作請參見《HDM圖5-2收集存儲控制卡陣列配置信息（OS內(nèi)PMCPMC的存儲控制卡；LSI存儲控制卡，指廠商為LSI的存儲控制卡。ArcconfPMCArcconf使用手冊。不同操作系統(tǒng)下，操作完全一致，具體的命令行請參見PMCArcconf使用手冊。WindowsWIN+Rcmd進入Windows操arcconf進入Arcconf命令行工具。除Windows操作系統(tǒng)外：無需輸入任何命令，Arcconf本章節(jié)以P430Linux操作系統(tǒng)下為例，介紹如何收集存儲控制卡的陣列配置信arcconf[root@localhost~]#./arcconflistControllersfound:1ControllerControllerID :Status,Slot,Mode,Name,SerialNumber,Controller1:Optimal,Slot10,RAID(ExposeRAW),PM8060-RAID,70532000,arcconfgetconfigcontroller_id表5-3存儲控制卡的[root@localhost~]#./arcconfgetconfig1ADControllersfound:1ControllerController :Controller :RAID(ExposeChannel :Controller :PM8060-ControllerSerial :ControllerWorldWide :Controller : :71C/159FInstalled :2048 :7.16-0 :7.16-0 :1.2-1Boot :7.16-0arcconfgetconfigcontroller_idPD表5-4存儲控制卡的物理盤的[root@localhost~]#./arcconfgetconfig1PDControllersfound:1PhysicalDevice

DeviceDeviceisaHard :Block :512 :ProgrammedMax :SAS12.0TransferSpeed :SAS12.0Gb/sReportedChannel,Device(T:L) :0,10(10:0)Reported :Enclosure0,Slot2(Connector0,Reported : : : :Serial :HardwareError :MediumError :ParityError :LinkFailure :AbortedCommand :SMARTWarning :arcconfgetconfigcontroller_idLD表5-5存儲控制卡的邏輯盤的[root@localhost~]#./arcconfgetconfig1LDControllersfound:1LogicaldeviceLogicalDevicenumberLogicalDevice :LogicalDrvBlockSizeofmember :512RAID :Unique :StatusofLogical :Additional :Initializedwith :1014Parity :1024Stripe-unit :256Interface :Device :Read-cache :Read-cache :Write-cache :Write-cache : :ProtectedbyHot- : :Failed :Power :LogicalDevicesegmentGroup0,Segment0 :Present(572325MB,SAS,HDD,Enclosure:0, Group0,Segment1 :Present(1716957MB,SAS,HDD,Enclosure:0, Group1,Segment0 :Present(3815447MB,SATA,HDD,Enclosure:0, Group1,Segment1 :Present(3815447MB,SATA,HDD,Enclosure:0, arcconfgetstatus[root@localhost~]#./arcconfgetstatus1Controllersfound:1LogicalDeviceLogical :Task :Current : :In :Percentagecomplete :0Commandcompletedsuccessfully.LSILSI存儲控制卡可通過LSIStorCLIStorCLILSIStorCLI使用手冊。不同操作系統(tǒng)下，工LSIStorCLI使用手冊。WindowsWIN+Rcmd進入Windows操storcliStorCLI命令行工具。除Windows操作系統(tǒng)外：無需輸入任何命令，StorCLILSI9460Linuxstorcli64[root@localhost/]#/opt/MegaRAID/storcli/storcli64showCLIVersion=007.1017.0000.0000May10,2019Operatingsystem=Linux3.10.0-957.el7.x86_64StatusCode=0Status=SuccessDescription=NoneNumberofControllers=HostName=OperatingSystem=Linux3.10.0-SystemOverviewCtl PortsPDsDGsDNOptVDsVNOptBBUsPRDSEHSASOs0 N/AOn storcli64/controller_id表5-6存儲控制卡的[root@localhost/]#/opt/MegaRAID/storcli/storcli64/c0showCLIVersion=007.1017.0000.0000May10,2019Operatingsystem=Linux3.10.0-957.el7.x86_64Controller=0Status=SuccessDescription=NoneProductName=SAS3108FWVersion=4.660.00-DriverName=megaraid_sasDriverVersion=07.705.02.00-rh1CurrentPersonality=RAID-ModeVendorId=0x1000DeviceId=0x5DSubVendorId=0x19E5SubDeviceId=0xD207HostInterface=PCI-EDeviceInterface=SAS-12GVirtualDrives=VDLISTDG/VDTYPEStateAccessConsistCacheCac Size RAID1Optl RWTD ON110.827PhysicalDrives=PDLIST:EID:SltDIDPISp 7110.827NU 9222.585NUstorcli64/controller_id/vallshow表5-7存儲控制卡的[root@localhost/]#/opt/MegaRAID/storcli/storcli64/c0/vallshowallCLIVersion=007.1017.0000.0000May10,2019Operatingsystem=Linux3.10.0-957.el7.x86_64Controller=0Status=SuccessDescription=NoneVirtualDrivesDG/VDTYPEStateAccessConsistCacheCac Size RAID1Optl RWTD ON110.827PDsforVD0EID:SltDIDState SizeIntfMedSEDPISeSz Sp 7 0110.827GBSATASSD N512BINTELSSDSC2BB120G6U 9 0222.585GBSATASSD N512BINTELSSDSC2KB240G7UVD0PropertiesStripSize=256NumberofBlocks=232421376VDhasEmulatedPD=YesSpanDepth=1NumberofDrivesPerSpan=WriteCache(initialsetting)=WriteBackDiskCachePolicy=Disk'sDefaultEncryption=NoneDataProtection=DisabledActiveOperations=NoneExposedtoOS=YesOSDriveName=/dev/sdaCreationDate=21-10-2020CreationTime=08:00:42AMEmulationtype=defaultCachebypasssize=Cachebypass-64kCachebypassMode=CachebypassIntelligentIsLDReadyforOSRequests=YesSCSINAAId=表5-8存儲控制卡的[root@localhost/]#/opt/MegaRAID/storcli/storcli64/c0/eall/sallshowCLIVersion=007.1017.0000.0000May10,2019Operatingsystem=Linux3.10.0-957.el7.x86_64Controller=0Status=Description=ShowDriveInformationSucceeded.DriveInformation:EID:SltDIDState SizeIntfMedSEDPISeSz Sp 7 0110.827GBSATASSD N512BINTELSSDSC2BB120G6U 9 0222.585GBSATASSD N512BINTELSSDSC2KB240G7U收集存儲控制卡陣列配置信息（OS外PMCPMC的存儲控制卡；LSI存儲控制卡，指廠商為LSI的存儲控制卡。登錄HDMWebRAIDRAIDRAID級別、超級電容的狀態(tài)等信息。圖5-3本章節(jié)以H460進入如5-4BIOSSetup界面。圖5-4BIOSSetup圖5-5圖5-6圖5-7表5-9DevicePCISlotPCIAddressHardwareSerialFirmwareFirmwarereleaseUEFIDriverUEFIDriverreleaseControllerMemoryModuleController本章節(jié)以P430服務器上電后，在BIOS啟動過程中，出現(xiàn)如5-8Ctrl+A圖5-8BIOS圖5-9進入5-10所示PMCRAID管理界面（操作選項說明請參見5-10ControllerSettingsEnter。圖5-10PMCRAID表5-10LogicalDeviceControllerDisk圖5-11ControllerSettings圖5-12ControllerConfiguration進入如5-13BIOSSetup界面（FrontDevice圖5-13BIOSSetup進入存儲控制器管理界面。如5-14Advanced頁簽，并選擇存儲控制器（BROADCOMMegaRAIDMegaRAID9560-8i4GB）Enter圖5-14Advanced圖5-15Main圖5-16圖5-17VitrualDriveManagement進入5-18ViewAssociatedDrivesEnterRAID的詳細信息（RAID名稱、級別，所含磁盤信息等）。圖5-18選擇ViewAssociated圖5-19BIOS圖5-20圖5-21RAID收集存儲控制卡陣列日志（OS內(nèi)PMCPMC的存儲控制卡；LSI存儲控制卡，指廠商為LSI的存儲控制卡。僅支持在操作系統(tǒng)下，通過存儲控制卡的管理工具，收集陣列日志。PMC官方推薦的存儲控ArcconfPMCArcconf使用手冊。不同操作系統(tǒng)下，操作完全一致，具體的命令行請參見PMCArcconf使用手冊。WindowsWIN+Rcmd進入Windows操arcconf進入Arcconf命令行工具。除Windows操作系統(tǒng)外：無需輸入任何命令，ArcconfLinux操作系統(tǒng)。arcconfsavesupportarchive命令收集PMC錄，如5-22所示，所有日志信息均保存在該目錄下。圖5-22收集PMC圖5-23查看多張PMCLSIStorCLILSIStorCLI使用手冊。不同操作系統(tǒng)下，工LSIStorCLI使用手冊。WindowsWIN+Rcmd進入Windows操storcliStorCLI命令行工具。除Windows操作系統(tǒng)外：無需輸入任何命令，StorCLI進入StorCLILinux操作系統(tǒng)為例進行介紹。Linux操作系統(tǒng)下，無需輸入任何命令，StorCLI命令行工具默認開啟。如圖524opegRDsocsoc64c0hwal>socshwalpegADsoli如圖54opegRDsocsoc64c0hweens>sceens命opegADsoli如5-24所示輸入/opt/MegaRAID/storcli/storcli64/c0showtermlogopt/MegaRAID/stor如5-24所示輸入/opt/MegaRAID/storcli/storcli64/c0showalilogstorcli.alilog命令，耐心等待后，信息輸出重定向到/opt/MegaRAID/storcli/storcli.alilog并保存。圖5-24LSI收集FCHBAQlogicFCHBAQlogicFCHBA卡的日志收集方法。QlogicFCHBAQlogicFCHBA卡，目前包括如下型號：QlogicFCHBA表5-11QlogicFCHBAMarvell官網(wǎng)或聯(lián)FCHBAdebugMarvell官網(wǎng)或聯(lián)系技術(shù)支持。#chmod+x#FCHBAQLE10000FCAFCMarvell官網(wǎng)或聯(lián)(.tgz)”VMware系統(tǒng)中的dump文件信息。EmulexFCHBA使用EmulexFCHBAOneCaptureFullCapture模式收集時，可能會停用該圖5-25BroadcomOneCapture圖5-26OneCapture日志收集工具CaptureEmulexHBACapture（OneCapture）是一個收集操作系統(tǒng)、EmulexEmulex適配器信息的設備驅(qū)動程序，可以使用這些收集到的信息來檢查驅(qū)動的功能是否正常。Capture工具的/doc/12399041。EmulexHBACaptureBasic、Full、Safe、MinimalCustom五種獲取BasicCapture工具默認選擇BasicCapture方式。通常，除非Broadcom技術(shù)支持指示使用其他類BasicCapture不會重置正在活動的適配器，也不會重新啟動未使用的適配器。也就是說，該模式下所有適配器狀態(tài)保持不變。如果可能中斷業(yè)務，BasicCapture將不會立即啟動固件獲取部分類型適配器上的閃存保留的dump文件（如果存在Full獲取部分類型適配器上的閃存保留的dump文件（如果存在Safedump文件。MinimalLinuxVMwareSolaris不支持此模式。在Windows中，可以通dump文件。CustomCustomCapture允許用戶從各種獲取參數(shù)中選擇所需的內(nèi)容?？梢栽诠ぞ唔撁鎻瓦x框列表中CLI中的/Component參數(shù)選擇要獲取的組件。GUI方式運行EmulexHBACapture以管理員身份運行EmulexHBACapture工具，不需要任何特殊步驟。可以不受限制地查看要以具有管理員特權(quán)的用戶身份運行EmulexHBACapture工具，GUI會提示您輸入管理員從下拉菜單中，選擇要使用的CaptureBasic、Safe、FullCustom。對5.8.23.日志收集工具Capture介紹。圖5-27FullCapture選擇需要獲取的特定項目。例如，在“AdapterDumpInformtion”下，您可以選擇以下選AdapterBasicInformation執(zhí)行BasicCaptureHBAResidentDumpdumpHBAFirmwareDowndump圖5-28圖5-29“CaptureCompletedSuccessfullyHBAFirmwareDown驗證是否為每個請求的適配器都創(chuàng)建了.bin文件。HBAResidentDumpdump文件?！癈loseEmulexHBACapture5.8.256)日志文件說明使用CLIEmulexHBACapture以管理員身份運行EmulexHBACapture工具，不需要任何特殊步驟。可以不受限制地查看要以具有管理員特權(quán)的用戶身份運行EmulexHBACapturecmd，并輸入管理員用戶名和密碼?？梢圆皇芟拗频卦L問所有輸出文件。對于非管理員，請使用“以管理員身份運行”啟動cmd，然后輸入管理員用戶名和密碼。查此文件夾位于\Users\Administrator\Documents\Emulex中。/?or/Hor/Lor列出發(fā)現(xiàn)的適配器。list參數(shù)顯示每個適配器的適配器編號（0、1，...），dump命令中用于指定/Adapters參數(shù)。/Quietor指定CapturezipCLI/Filename=<OutputFilename>orzipOneCapture_Windows_<date-time>.zip/BasicCaptureor/SafeCaptureorFullCapture模式，需要配合/Adapters參數(shù)。請注意此參數(shù)可以臨時中斷正在活動的I/O，并且可以強制使正在活動適配器脫機，請確保不會影響業(yè)務時執(zhí)行該操作。/Adapters=<AdapterNumber|<list>|/Components=<<component>|<list>>or/Components=<<component>|默認情況下，EmulexHBACapture工具收集多種類型的組件，例如驅(qū)動程序信息和磁盤信息。OneCapture.exe/FullCapture/Adapters=ALLCapture圖5-30OneCapture-<Operating_System>.html是獲取的組件的可導航目錄。在瀏覽器中打開此文dumpdump/CoreDump的目錄中。通常，用戶無需單獨檢查這些文請確保CoreDump目錄中的適配器dump的.txt文件也位于同一目錄中，您可以通過此文件驗證是否已包含對應的適配器信息。必須安裝以下庫文件才能運行EmulexHBACapture通過SSH或其他方法將OneCapture_Linux_<version>.tgz工具上傳到系統(tǒng)上，然后解壓縮得OneCapture_Linux.sh文件。chmod777shell腳本。有關(guān)參數(shù)，請參見“Linux，CitrixCLI參數(shù)”。圖5-31EmulexHBACapture工具將創(chuàng)建一個包含所有獲取到的組件信息的.tgz文件。該.tgz文件名OneCapture_<Operating_System>_<date-time>.tgzEmulexHBACapture工具的工作目錄中。請確保CoreDump目錄中的適配器dump的.txt文件也位于同一目錄中，您可以通過此文件驗證是否已包含對應的適配器信息。圖5-32LPe12000系列適配器，適配器上的每個端口都顯示為單獨的適配器。因此，如果適配不收集varcrashdumpMinimalCaptureBasicCapture或FullCapture一起使用?？蒑inimalCapture模式來獲取以下項目：-A=<AdapterNumber|<list>|all>or--Adapters=<AdapterNumber|<list>|./OneCapture_Linux.sh-A=All-M-VMwareESXiEmulexHBACapture實用程序之前，必須通過執(zhí)行以下操作啟ESXiShell：EnableESXishell啟用ESXiShell-./OneCapture_ESX.sh[-T|--圖5-33您可以通過鍵入[-V|Volume]volume_iddump的目標卷，為了獲得最佳效圖5-34使用指定的選項運行相應系統(tǒng)的Shell圖5-35EmulexHBACapture工具將創(chuàng)建一個壓縮的tarball文件。該文件放置在指定的卷中。打開文圖5-36以下CLIESXi-h或T或---L或---Q或B或F或--FullCaptureI/O，并且可以-S或A=|all>or--Adapters=|此選項使Capturevm-support表5-12GPUHDMWeb通過定制化運維工具盤deltaFPGAipmitool工具收集ipmimessages和dmesg的文件及文件夾NVIDIAGPU操作系統(tǒng)下執(zhí)行NVIDIAGPU操作系統(tǒng)下執(zhí)行命令nvidia-smi>-aNVIDIAGPU的FM服務運行狀態(tài)、systemctl>journaltcl-nvidia-fabricmanager>FMprorpm-qa|grep-ilspcilspci-tv>>lspci-nnvvv>>lspci-xxxx>>以不同維度收集鏈路信息logs請參見5.9.2PCIeGPUFieldDiagMODSversionnumberPCIeGPUFieldDiagFieldDiagnvidiaGPU報出硬件錯誤時，可用此工具進行診PCIeGPU（HGXGPU使用工具版本不通用。GPU在FieldDiagLinuxkernel2.6.16orlater（2.6.29或更高版本的內(nèi)核。該工具已2.6.162.6.35中進行了測試。）blacklistoptionsnouveaucat/etc/modprobe.d/blacklist-mv/boot/initramfs-$(uname-r).img/boot/initramfs-$(uname-dracut-v/boot/initramfs-$(uname-r).img$(uname-dracutforce命令，重啟lsmod|grep-i多實例圖形處理器(MIG)A100FieldDiag時應該關(guān)閉。nvidia-smiiGPUIDs>mig1（MIG模式nvidia-smiiGPUIDs>mig0（MIG模式）mkdircd./install_module.sh-出現(xiàn)modprobemods執(zhí)行FieldDiag工具，在FieldDiag圖5-37FiledDiag“RunningtestXonGPUn-Ytestsremaining|=======|ZnGPUYZ如Runningtest208onGPU0118testsremaining|===========|64PASSFAIL，且會在當前文件夾下生成診斷l(xiāng)og，默認情況下，F(xiàn)ieldDiag會生成一個二進制日志文件。PASSRETEST診斷的預檢查部分硬件設置失敗，出現(xiàn)一條描述問題的警告消息。根據(jù)預檢查圖5-38errorcodeGPUconfigurationMODSversionMODSkerneldriverLinuxkernelECCerrorsandretired日志文件中沒有客戶數(shù)據(jù)、系統(tǒng)配置信息、系統(tǒng)上運行的進程，也沒有來自MODS文件夾以FieldDiag_<PASS/FAIL/CONFIG>_<serialnumber>.logHGXGPUFieldDiagHGXH800GPUFieldiagISO鏡像方式進行測試，此方式最為簡便不依賴于系統(tǒng)。其他HGX步驟與此一致，但是測試使用的工具包不一樣，請注意區(qū)分在服務器KVMFieldiagISOFieldiagISO圖5-39選擇VirtualCD-進入FieldiagISO系統(tǒng)，進入/mnt/nv/tiny圖5-40進入FieldiagISO629-24287-XXXX-FLD-39387.tgz拷貝至/root目錄圖5-41root目錄下，輸入“tarzxvf629-24287-XXXX-FLD-39387.tgz”解壓文件，并進入解629ls”查看內(nèi)容。圖5-42----測試完成后在629-24287-XXXX-FLD-38379目錄下可看到一個logsIntel0=1=2=3=4=如果懷疑異常情況可能屬于5-13中包含的事件類別，可以設置在固件日志中輸出相應模塊更多表5-13LinkLinkLinkControlTxQueueAQAdminPFModuleTime下文中日志收集方法僅適用于Intel?Ethernet800WindowsPowerShellIntelEthernetcmdlets對固件日志進行配置訪問intelEthernet_cmdlets.zipEthernet_Cmdlets.exe進C:\>Get-圖5-43C:\>Set-IntelEthernetLogConfig-Name"Intel(R)EthernetNetworkAdapterE810-XXV--Module"LinkManagement"-LevelCStart-IntelEthernetLogName設備名"圖5-44收集固件日志C:\>Stop-icedmesg日志中，可以通過fwlog_eventsfwlog_events取值情況如5-15所示：表5-14fwlog_events00000001(Bit00000002(BitLink00000004(BitLinkTopology00000008(BitLinkControl00000010(Bit00000020(Bit00000040(Bit00000080(BitAdmin00000100(BitHost00000200(Bit00000400(Bit00000800(Bit00001000(Bit00002000(Bit00004000(Bit00008000(BitVPD(VitalProduct00010000(BitIOSF(IntelOnChipSystemFabric)00020000(Bit00040000(Bit00080000(Bit00100000(BitTXQueue00200000(BitACL(AccessControl00400000(Bit00800000(Bit01000000(BitTask02000000(Bit04000000(Bit08000000(Bit10000000(BitTime20000000(BitPF40000000(BitModule80000000(Bit可以通過fwlog_level#rmmod#dmesg-w>#modprobeicedyndbg="+p"fwlog_events=<bitmask>fwlog_level=<0-執(zhí)行必要步驟復現(xiàn)問題，固件日志將保存到firmware.logvmwareesxcfg-moduledmesg中，F(xiàn)WLOG。#esxcfg-moduleicen-s'FWLogEnable=1FWLogEvents=<bitmask>FWLogLevel=<0-PFPF0PF1dmesg日志中，可以通過如下命令dmesgfirmware.log中：#dmesg>#esxcfg-moduleicen-s'FWLogEnable=0FWLogEvents=06.智能網(wǎng)卡日志收集方法（SOC內(nèi)部。圖5-45Bluefield圖5-46Mellanox網(wǎng)卡日志收集工具，如5-15所示。需要注意的是，該工具僅用于日志信息收集，不會表5-15Mellanoxcmdmft工具目錄下，默認路徑為：\ProgramFiles\Mellanox\WinMFTmststatusMSTdevices信息；Mellanox驅(qū)動安裝目錄，默認路徑為：\ProgramMLNX_System_SnapshotSettargetfile設置日志保留路徑及文件名，點GenerateSystem-Snapshot生成系統(tǒng)快照日志。日志收集完成之后桌面提示snapshotfile***createdsuccessfully圖5-47MellanoxmstMSTdevicesmstsysinfoFW版本，驅(qū)動日志OFED包，則該工具已自動安裝，存在于/usr/sbin/目錄下，sysinfo-snapshot.py腳本即可。如果沒有OFED驅(qū)動，則可按如下方式下載后執(zhí)行腳tar-zxvfsysinfo-snapshot-,圖5-48sysinfodumpmststart&mststatusmstdump<MSTdevice>>***1.dmpmstdump<MSTdevice>>***2.dmpmstdump<MSTdevice>>***3.dmptar–cvfdumps.tarmstdump*圖5-49dump使用VMwarevm-supportos下日志，收集完成之后會生成已esx-***.tgz文圖5-50vm-support收集os圖5-51vmkernel.logdump/opt/mellanox/bin/mstdump<MSTdevice>>***/opt/mellanox/bin/mstdump<MSTdevice>>***/opt/mellanox/bin/mstdump<MSTdevice>>***3.dmptar-cvfdumps.tarmstdump*圖5-52dumpsysinf-snapshotdump日志外，還需要登錄智能網(wǎng)卡的armsysinfo-snapshot.py腳本和mstdumparmHostipaddradd/30devtmfifo_net0sshubuntu@ssharm系統(tǒng)，輸入賬號密碼；注ubuntu是以mellanoxarmos的用戶名為例。圖5-53armlinux系統(tǒng)相同進入/usr/sbin/sysinfo-snapshot.py，然后使用mstdump3dump15s。Broadcom網(wǎng)卡的日志收集方法。BroadcomBroadcom的以太需要通過執(zhí)行腳本來收集日志信息。腳本工具獲取、日志收集的方法，均請參見Broadcom官網(wǎng)或圖5-54Windowscmd并進入AutoUpgrade_windows_xxx_H3C_xxx_xxx\niccli-xxx-winniccli_x64.exelist查Broadcomindex。圖5-55windows使用niccliniccli_x64.exeiindex>coredump在當前文件夾生成.core圖5-56windows使用niccli圖5-57windows使用bnxtnvm-圖5-58windows使用bnxtnvm需要通過執(zhí)行腳本來收集日志信息。腳本工具獲取、日志收集的方法，均請參見Broadcom官網(wǎng)或dmesgdmesg>ethtool-iethtool-Sehtool-methtoolethtool-iens|grep'bus-lspcisbus號x86_64和aarch64x86_64工具為例），cdchomd777-R*--./niccli.x86_64-i<index>圖5-59Linuxnicclibnxtnvm工具收集（218~228版本固件包獲取工具：nvmUpgrade_xxx_H3C_Vxx_xxx/utils目錄下運行命令：#chomd777-R./bnxtnvm.x86_64listdevDeviceInterface./bnxtnvm.x86_64-dev=<DeviceInterfaceName>ARMbnxtnvm.aarch64bnxtnvm.x86_64。(pkg)x86_64bnxtnvm。圖5-60Linuxbnxtnvm需要通過執(zhí)行腳本來收集日志信息。腳本工具獲取、日志收集的方法，均請參見Broadcom官網(wǎng)或VMware下設置命令“esxcfg-modulessdebug=0x7FFFFFFF’dmesgdmesgESXi8將固件包上傳到/vmfs/volumes/datastore1esxclisoftwarevibinstall-vniccli-xxx.vib--no-sig-check–圖5-61VMwareniccli-<圖5-62VMwareniccliESXi7/chomd777-R–收集日志，執(zhí)行./niccliiindexbnxtnvm工具收集（218~228版本固件包獲取工具，僅適用于ESXi7：chomd777-R./bnxtnvm-dev=vmnic0執(zhí)行該腳本前確保系統(tǒng)已安裝python執(zhí)行完成后，會在本地打包一個wangxun_debug_info字樣的文件夾，文件夾里面涵蓋了系圖5-63SP600、SP500系列網(wǎng)卡日志的收集方法（SP300系列網(wǎng)卡暫不支持：進入固件包的“/tools’’chomd777R*圖5-64hinicadm3執(zhí)行./hinicadm3logidevicename>a圖5-65hinicadm3-圖5-66hinicadmhinicadmlogidevicename>a圖5-67hinicadm本章節(jié)介紹如下云芯智聯(lián)網(wǎng)卡的日志收集方法。云芯智聯(lián)網(wǎng)卡指生產(chǎn)廠家為云芯智聯(lián)的以太網(wǎng)卡,sssnic_log_collect.sh腳本下載地址：/download.htmlsssnictool工具已包含在固件包中，請下載對應網(wǎng)卡固件包獲取：sssnictoolOS組件：psmisc、net-tools（OS組件可通過sssnic_log_collect.sh腳本拷貝至系統(tǒng)下，然后執(zhí)行chomd777R*-圖5-68sssnic圖5-69本章節(jié)介紹如下中科馭數(shù)網(wǎng)卡的日志收集方法。中科馭數(shù)網(wǎng)卡指生產(chǎn)廠家為中科馭數(shù)的以太網(wǎng)卡,收集日之前請確保已安裝中科馭數(shù)網(wǎng)卡驅(qū)動包SWIFT-XXX.tar，支持在執(zhí)行具體命令后出現(xiàn)異常的iperf工具測試場景收集日志的方法舉例：使用instanta_preload執(zhí)行iperfinstanta_preload圖5-70使用instanta_preload圖5-71本章節(jié)介紹如下云脈芯聯(lián)網(wǎng)卡的日志收集方法。云脈芯聯(lián)網(wǎng)卡指生產(chǎn)廠家為云脈芯聯(lián)的以太網(wǎng)卡,yundump工具收集日志（MCRscripts中）yundump工具包已含在固件包中，請下載對應網(wǎng)卡固件包獲?。哼M入固件包的mcr_xxx_kernel_xxx/scripts目錄下執(zhí)行命令給腳本工具賦權(quán)：chomd777圖5-72yundump收集后日志信息自動存放在/tmp目錄下，此收集好的日志文件會包含：env環(huán)境信息收集，包括BIOS版本，BMC版本，系統(tǒng)版本等；logdmesg，hwconfig，yuncli.log等；systemMACVPD等信息；counterrdmacounter信息圖5-73Linuxsosreport工具收集日志，則需要按照收集網(wǎng)卡相關(guān)日志（Linux操作系統(tǒng)）章節(jié)操作。ipaddress>ip-slinkshow>ethtool網(wǎng)口名ethtoolm網(wǎng)口名ethtooli“網(wǎng)口名ethtoolk網(wǎng)口名ethtoolS網(wǎng)口名ethtoolc網(wǎng)口名ethtoolx網(wǎng)口名ethtoolshow-fec網(wǎng)口名ethtoola網(wǎng)口名lspci-vvvxxx>lscpi-vt>tar-zcvfethtool_log.tar.gzSwitchtftplogfile文件夾。管理命令行輸入“displaylogfilebuffer”后，可在管理命令行查看當前BufferSwitch管理命令行輸入“diagnostic-logfilesavetftp工具可直有診斷日志信息，通過tftp工具可直接傳出診斷日志。HDMWeb界面，了解服務器的整體健CRC（CyclicRedundancyCheck，循環(huán)冗余檢查）校驗錯誤等問題，先整體梳理硬4.4明確服務器最小化硬件配置提供的最小化硬件配置進行測試，查看4.2準備軟件工具登錄HDMWeb界面，查看服務器整體概況，如圖6-1圖6-1圖6-2圖6-3HDM若故障依舊無法解決，請收集HDMSDS日志，并記錄詳細故障信息（故障的時間、頻率、報錯截屏等）HDMSDS5.3HDMSDS圖6-4Health指示燈，確認服務器是否出現(xiàn)故障，Health指示燈的含義請參見服務器用戶指南。對于大部分服務器，Health指示燈的含義如6-1所示。表6-1Health界面中健康狀態(tài)顯示為“正常綠燈閃爍HDM正在初始化。此狀態(tài)下，HDMWeb界面中健康狀態(tài)顯示為“正?！背葻糸W爍系統(tǒng)出現(xiàn)嚴重錯誤告警。此狀態(tài)下，HDMWeb界面中健康狀態(tài)顯示為“嚴重”紅燈閃爍系統(tǒng)出現(xiàn)緊急錯誤告警。此狀態(tài)下，HDMWeb界面中健康狀態(tài)顯示為“緊急”HDM事件日志確認故障位置，如6-5圖6-5HDM結(jié)合指示燈現(xiàn)象，進一步定位故障，詳細說明請參見表6-2表6-2HDMWeb界HDM事件CPU“7.12CPU問題”HDMWeb界HDM事件并參考“7.3電源問Present/Active參考“6.4.11物理硬Fault/UID指示Present/ActiveFault/UID指示Present/Active參考“6.4.11物理硬OCP網(wǎng)卡時，OCP網(wǎng)卡時，10秒內(nèi)下ATTNBUTTON按電源故障影響的子系統(tǒng)，具體對應關(guān)系如6-3所示。H3CUniServerE3300G6表6-3前面板掛耳指示燈電源故障說明（G3產(chǎn)品表6-4前面板掛耳指示燈電源故障說明（G5/G6產(chǎn)品HDM系統(tǒng)中的圖6-6LCD可觸摸智能管理模塊，用戶可以查看服務器的常用信息、告警信息和實時監(jiān)控信息，并LCD可觸摸智能管理模塊顯示服務器產(chǎn)生告警信息，如6-7HDMWeb界面查看告警詳情，并參考《HDM告警日志信息參考手冊》排除故障，使服務器各組件和系統(tǒng)保持圖6-7LCD參考《HDM告警日志信息參考手冊》排除故障，使服務器各組件和系統(tǒng)保持良好的運行狀況。圖6-8表6-5iFISTGPU圖6-96.4.5開機故障流程圖POST6.4.6POST故障流程圖6.4.12邏輯硬盤故障流程圖6.4.13網(wǎng)卡故障流程圖GPU6.4.14GPU故障診斷流程圖.Health指示燈紅燈或橙燈閃爍。HDMSDS5.3收集HDMSDS日志圖6-106.4.5開機故障流程圖4.2準備軟件工具圖6-11圖6-12POST服務器未完成POST服務器完成了POST開始嘗試訪問啟動設備時，表示POST圖6-13POST圖6-14iFIST查看BIOSHDMBIOSPOST界面查看。BIOSiFIST的版本配套關(guān)iFIST版本說明書里的“版本配套表”。圖6-15iFIST圖6-16圖6-17表6-6LSIIT/IRMRPMCPMC的存儲控制卡。LSI存儲控制卡，指廠商為LSI的存儲控制圖6-18表6-7故障情況橙色閃爍常亮/閃爍故障情況常亮/閃爍故障情況圖6-19HDMSDS5.3收集HDMSDS日志；操作系統(tǒng)日志的收集方法，請參5.2收集操作系統(tǒng)日志；硬盤日志的收集方法，請聯(lián)系技術(shù)支持。圖6-20圖6-21網(wǎng)卡故障流程圖（上圖6-22網(wǎng)卡故障流程圖（下圖6-23GPU圖6-24串口&DSDSwitchH3CUniServerE3300G6Switch交換板模塊，Switch交換板故障診斷流程如圖6-25檢查系統(tǒng)能否識別該部件，并確保部件的固件和驅(qū)動，均更新為H3C4.4明確服務器最小化硬件配置。H3C購買，但和出現(xiàn)問題的服務器不兼容。服務器和部件的兼容性請通過服務器兼容的部件/服務器在BIOSPOST階段報錯，報錯示例如7-1圖7-1BIOSPOST圖7-2圖7-3LinuxNVMe圖7-4LinuxNVMe的固件和驅(qū)動軟件等。BIOSH3C官網(wǎng)進行獲取?！癙owerSupplyinputlostAC/DC)”，且無其他異常日志，請先檢查服務器的外部供電是否圖7-5HDM圖7-6PowerButtonpressed表7-1PowerButtonpressedPowerButtonpressedPhysicalbuttonButtonPowerButtonpressedVirtualbuttonPowercyclePowerButtonpressedVirtualbuttonPoweroffPowerButtonpressedVirtualbuttonSoftoffResetButtonpressedVirtualbuttonResetHDM事件日志，查看日志中是否有記錄部件溫度過高的報警信息，部件溫度過高可能會導致服務器自動關(guān)機。若是，處理方法請參見《H3CHDM告警日志信息參考手冊》；分析Dmesg、Message制卡、網(wǎng)卡、GPU、FCHBA卡等的固件與驅(qū)動版本，是否和當前操作系統(tǒng)兼容。兼容性可通過OS兼容性查詢工具進行查詢。若是，請確保該部件的固件與驅(qū)動版本已升級至H3C官網(wǎng)最新版本；若否，請執(zhí)行步驟(8)。R5500G5服務器，PCIeswitch板之間的線纜是否安裝到位，確保線纜穩(wěn)固無松動。圖7-7HDMWeb（4Hz：HDM（1Hz（1Hz（1Hz圖7-8HDMR5500G5若問題仍然存在，則說明主板上對應的風扇接口異常，對于R5500G5服務器，還需要檢查主板和PCIeswitch表7-2(3)如7-9HDMWeb界面，查看電源溫度傳感器溫度，參考閾值確認當前讀數(shù)是否圖7-9查看HDMWeb界面，查看電源模塊“當前總功率”是否已超出“總功率告警閾值”，若已圖7-10（1Hz圖7-11查看HDMWeb界面，若存在如下任意一條異常信息，請更換報錯信息對應的電源模塊，確PowersupplyinputlostAC/DC)Powersupplyinputout-of-rangebutpresentPowersupplypredictiveFailure圖7-12查看電源模塊事件日志（示例圖7-13如7-14HDMWeb界面，查看電源溫度傳感器溫度，參考閾值確認當前讀數(shù)是圖7-14圖7-15RedundancyLost圖7-16HDM事件日志提示電源模塊“Vendor如7-18所示，HDMWeb界面上，傳感器信息頁面，電源狀態(tài)為輕微，當前讀數(shù)顯示errorConfigurationerrorPowersupplyratingmismatch圖7-17圖7-18圖7-19HDM電源信息頁面，確認問題是否解決。NoVGA顯示器黑屏，KVM顯示NoSignal，如7-20圖7-20KVM顯示No服務器硬件故障或BIOSHDMWeb頁面，查看事件日志中是否有硬件故障提示，如果有硬件錯誤提示，請排查（注意，清除CMOS后BIOS將恢復缺省設置），CMOS清除后將紐扣電池裝回原位置，重AC上電操作，查看故障是否解決；若未解決執(zhí)行步驟(3)。升級BIOSHDM版本查看問題是否解決，若未解決執(zhí)行步驟(4)4.4明確服務器最小化硬件配置章節(jié)，如果EarlyPOST階段掛死（HygonCPU的服務器BIOSSetup。圖7-21EarlyPOST對于BIOSUPIInitializing對于BIOSMemoryInitializing階段發(fā)生重啟或者掛死的現(xiàn)象，可能由于內(nèi)存安裝不穩(wěn)對于BIOSPCIDeviceEnumeratingHDMWeb頁面，查看事件日志中是否有相應的故障日志信息，如有事件日志或傳感器根據(jù)EarlyPOST請移除電源，移除CMOS以上操作仍然無法正常啟動，強制覆蓋配置升級BIOSCPU1CPU故障。若系統(tǒng)掛死在“MemoryInitializingHDM的[健康診斷/事件日志]頁面上PCIe設備故障。POST系統(tǒng)上電后在BIOSPOSTBIOSSetup升級BIOS和BMC版本查看問題是否解決，若未解決執(zhí)行步驟(4)SATA/SAS硬盤，逐步移除硬盤設備后重啟確認是否故障解除，通過4.4明確服務器最小化硬件配置章節(jié)，如果服務圖7-22硬件設備接觸故障，如NVMe硬盤接觸故障導致POSTNVMeUEFI驅(qū)動執(zhí)行調(diào)用異常導致POST階段紅屏打印。圖7-23PXE圖7-24DHCP進入BIOSSetup的DriverHealthDHCP服務器正常，執(zhí)行步驟(3)。PXEPXE圖7-25PXEPXEBootBIOSSetup中PXEPXE網(wǎng)卡BootProtocolPXEPXEAbove4GBDecoding設置為Disabled網(wǎng)絡環(huán)境中的PXEPXEPXEBoot的網(wǎng)卡。進入BIOSSetupPXE進入Advanced7-26NetworkConfiguration圖7-26NetworkConfigurationIPv4PXESupportIPv6PXESupport（如需使用IPv6）是否啟用，如7-27所示。圖7-27NetworkStackConfigurationPCIENICConfiguration界面中確認網(wǎng)口的PXE7-28Enabled。圖7-28NetworkPXEControl如對BIOSF4PXE。圖7-29OptionROM圖7-30圖7-31MBABootProtocol為PXE，如7-32圖7-32配置Legacy模式下，在BIOSSetup下的AdvancedPCISubsystemSettings菜單頁面，如7-33所示。圖7-33Advanced圖7-34PCISubsystemSettingsPXE進入PXE圖7-35PXE硬盤Fault/UID指示燈含義如7-3、7-4、表7-5表7-3SAS/SATA橙色閃爍常亮/閃爍常亮/閃爍常亮/閃爍閃爍表7-4NVMe/藍色（綠色橙色閃爍橙色閃爍常亮/閃爍常亮/閃爍閃爍僅在BIOS下enableVMD且有NVMeVROCKey的情況下，支持對NVMe表7-5E1.S指示燈（綠色橙色閃爍橙色閃爍常亮/閃爍(4橙色閃爍常亮/閃爍(4常亮/閃爍閃爍硬盤在位，有數(shù)據(jù)讀寫操作或正在進行陣列遷移/HDMDriveFaultOffline如7-37所示，HDMWebRAID視圖頁面，查看存儲控制卡信息，發(fā)現(xiàn)故障硬圖7-36圖7-37OS或者BIOSHDMBIOSH3C官網(wǎng)最新版本，檢查硬盤狀態(tài)是否正常。若可以識別，則執(zhí)行步驟(4)；若不能識別，（Fail邏輯盤降級（Degraded）：PMC存儲控制卡可以重新插拔硬盤嘗試恢復；LSI存儲控（Offline圖7-38件至H3C官網(wǎng)最新版本。errorError[3296734.898693]sd0:0:67:0:[sde]tag#46FAILEDResult:hostbyte=DID_ABORT[3296734.898695]sd0:0:67:0:[sde]tag#0FAILEDResult:hostbyte=DID_ABORT[3296734.898701]sd0:0:67:0:[sde]tag#0CDB:Write(16)8a00000000015d46ced800002800[3296734.898708]sd0:0:67:0:[sde]tag#46CDB:Write(16)8a00000000000000080000000800[3296734.898711]blk_update_request:I/Oerror,devsde,sectorMar815:49:31A07-R18-I9-5-5002500kernel:sd0:0:0:0:[sda]FAILEDResult:hostbyte=DID_OKMar815:49:31A07-R18-I9-5-5002500kernel:sd0:0:0:0:[sda]SenseKey:HardwareErrorMar815:49:31A07-R18-I9-5-5002500kernel:sd0:0:0:0:[sda]Add.Sense:InternaltargetMar815:49:31A07-R18-I9-5-5002500kernel:sd0:0:0:0:[sda]CDB:Write(10)2a000268e0000010Mar815:49:31A07-R18-I9-5-5002500kernel:blk_update_request:criticaltargeterror,devsda,sector35023072[206109.776549]blk_update_request:criticalmediumerror,devsdl,sector[206112.336004]sd0:0:74:0:[sdl]tag#2FAILEDResult:hostbyte=DID_OK[206112.336009]sd0:0:74:0:[sdl]tag#2SenseKey:MediumError[current][descriptor][206112.336011]sd0:0:74:0:[sdl]tag#2Add.Sense:Unrecoveredreaderror[206112.336013]sd0:0:74:0:[sdl]tag#2CDB:Read(16)88000000000262000d0000000800圖7-39Smart圖7-40HDMPresent/Active指示燈，指示燈常亮/閃爍，說明硬盤背板供電正常；否則，請通過HDMBIOS下的存儲控制卡管理界面，確認當前硬盤是否可以被存儲控制卡識別。EnableVMD時，RHEL7.6/RHEL8.0/SUSE15/SUSE15SP1/SUSE12SP4Echo使能VMDledmonSUSE15ledmon.service文件，導致無圖7-41Ledmon.servic