IBM小型機維護指導(dǎo)書V11.0_第1頁
IBM小型機維護指導(dǎo)書V11.0_第2頁
IBM小型機維護指導(dǎo)書V11.0_第3頁
IBM小型機維護指導(dǎo)書V11.0_第4頁
IBM小型機維護指導(dǎo)書V11.0_第5頁
已閱讀5頁,還剩36頁未讀, 繼續(xù)免費閱讀

下載本文檔

版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進行舉報或認領(lǐng)

文檔簡介

/江西建行IBM小型機日常維護第一篇:日常維護部分第二篇:故障處理部分第三篇:安圖特公司技術(shù)支持電話第一篇日常維護部分目錄TO(shè)C\o"1-3"\u第1章 AIX系統(tǒng)管理日常工作(檢查篇)?PAGEREF_Toc107134961\h11.1?常用的命令?PAGEREF_Toc107134962\h11.2?語法介紹?PAGEREF_Toc107134963\h11.2.1 vmstat(yī):檢查內(nèi)存、CPU、進程狀態(tài) PAGEREF_Toc107134964\h11。2.2?sar:檢查CPU、IO PAGEREF_Toc107134965\h21.2.3?PS:檢查進程狀態(tài)命令?PAGEREF_Toc107134966\h31.2.4?svmon:顯示進程占用內(nèi)存 PAGEREF_Toc107134967\h31.2.5 iostat:顯示磁盤IO PAGEREF_Toc107134968\h41。2。6?netstat,entstat:顯示網(wǎng)卡信息?PAGEREF_Toc107134969\h41.2.7?no:顯示tcpip參數(shù)設(shè)置 PAGEREF_Toc107134970\h51。2.8 其它命令 PAGEREF_Toc107134971\h5第2章?AIX系統(tǒng)管理日常工作(LV篇) PAGEREF_Toc107134972\h62。1 IBMAIX系統(tǒng)管理的日常工作 7134973\h62。1。1 開關(guān)機步驟?PAGEREF_Toc107134974\h62。1。2 用戶組及用戶管理?PAGEREF_Toc107134975\h62。1.3 文件系統(tǒng)維護 PAGEREF_Toc107134976\h62.1。4?系統(tǒng)日常管理 PAGEREF_Toc107134977\h72.1.5 系統(tǒng)備份 PAGEREF_Toc107134978\h72。1。6?定時清洗磁帶機?PAGEREF_Toc107134979\h72。1。7 定時檢查設(shè)備指示燈狀態(tài) PAGEREF_Toc107134980\h72.1。8 簡單故障的判斷 PAGEREF_Toc107134981\h72.1。9 熟悉ibmaix操作系統(tǒng)?PAGEREF_Toc107134982\h72。2?關(guān)于IBMAIX的邏輯卷管理?PAGEREF_Toc107134983\h72.3?LVM命令 134984\h8第3章 AIX系統(tǒng)管理日常工作(關(guān)鍵參數(shù)檢查篇)?PAGEREF_Toc107134985\h103.1?AIO參數(shù)檢查 PAGEREF_Toc107134986\h103.2 磁盤陣列queue_depth參數(shù)檢查?PAGEREF_Toc107134987\h113.3?用戶參數(shù)檢查?PAGEREF_Toc107134988\h113。4?激活SSAFast-WriteCache?PAGEREF_Toc107134989\h123.5 IO參數(shù)設(shè)置?PAGEREF_Toc107134990\h123。6 syncddaemon的數(shù)據(jù)刷新頻率?PAGEREF_Toc107134991\h123.7?檢查系統(tǒng)硬盤的鏡像?PAGEREF_Toc107134992\h12第4章 AIX系統(tǒng)管理日常工作(性能分析篇)?PAGEREF_Toc107134993\h134.1?性能瓶頸定義 134994\h134.2 性能范圍 PAGEREF_Toc107134995\h14第5章 AIX系統(tǒng)管理日常工作(SHUTDOWN篇)?PAGEREF_Toc107134996\h145.1?概念?PAGEREF_Toc107134997\h145.2 關(guān)機命令?PAGEREF_Toc107134998\h14第6章 AIX系統(tǒng)管理日常工作(備份與恢復(fù)篇) PAGEREF_Toc107134999\h156。1?用SMIT備份?PAGEREF_Toc107135000\h156。2 手工備份?PAGEREF_Toc107135001\h156.3 恢復(fù)系統(tǒng)?PAGEREF_Toc107135002\h15第7章 HACMP的雙機系統(tǒng)的管理和維護 PAGEREF_Toc107135003\h157.1?HACMP雙機系統(tǒng)的啟動?PAGEREF_Toc107135004\h157。2?HACMP雙機系統(tǒng)的關(guān)閉 PAGEREF_Toc107135005\h167.3?察看雙機系統(tǒng)的當(dāng)前狀態(tài)?PAGEREF_Toc107135006\h167.4?HACMP環(huán)境下的排錯 PAGEREF_Toc107135007\h177.4.1 了解問題的存在?PAGEREF_Toc107135008\h177.4.2?判斷問題的出處?PAGEREF_Toc107135009\h18AIX系統(tǒng)管理日常工作(檢查篇)常用的命令CPUMemoryDiskNetwork標(biāo)準UNIX命令(包括HP、SUN等)vmstat,sar,psvmstat,psiostat,sar,vmstat,netstat,nfsstatAIX詳細輸出Tprofsvmon,rmss,entstatAIX非常詳細輸出syscalls,trace,emstattracetracetrace,iptrace分析工具topastopastopasTopas語法介紹vmstat(yī):檢查內(nèi)存、CPU、進程狀態(tài)#vmstat115kthrmemorypagefaultscpu—--——---—-—————-——-——---------—-----—-—--——-——--—----——--—--rbavmfrerepipofrsrcyinsycsussyidwa102813281277000000132375676513402028132812770000001273381319900020281328127700000013231613199000202813281277000000120317126990002028132812770000001463161279900020281328127700000013031712599000202813281277000000135316127990002028132812770000001293171249900020281328127700000013330412799000r:正在運行的進程b:被阻擋的進程avm:活動的虛內(nèi)存,單位4kbfre:自由列表,位4kbpo:頁換出pi:頁換入sy:系統(tǒng)占用CPUid:空閑CPUwa:等待的CPUsar:檢查CPU、IO例如:sar-u130sar-PALL110語法:sar-[abckmqruvwyA]intevalrepetition-bbuffer活動-c系統(tǒng)調(diào)用—k內(nèi)核進程統(tǒng)計.—m消息及信號量活動-q正在運行的隊列數(shù)及等待隊列數(shù)—r頁交換統(tǒng)計-uCPU利用-PCPU負載。PS:檢查進程狀態(tài)命令ps:顯示當(dāng)前SHELL重所有進程ps-ef:顯示系統(tǒng)中所有進程,—f顯示更詳細信息ps-uoracle:顯示oracle用戶進程ps–emoTHREAD:顯示線程信息psau;psvg:按使用時間顯示進程(最近一次調(diào)用)psaux:按使用時間顯示進程(進程啟動)svmon:顯示進程占用內(nèi)存svmon–G:顯示系統(tǒng)占用內(nèi)存svmon-Ccommand_name:顯示某個用戶進程占用內(nèi)存svmon-Ppid顯示某個進程占用內(nèi)存svmon–S:顯示段占用內(nèi)存iostat:顯示磁盤IOtty:tintoutavg-cpu:%user%sys%idle%iowait0。04。00.91.395。42.5Disks:%tm_actKbpstpsKb_readKb_wrtnhdisk058.4218.341.2172920hdisk116。885.621。44280hdisk250.6223。955。6110020hdisk316.885.621.44280hdisk40.00。00。000hdisk543.4279.169.813960hdisk60.00.00。000hdisk716.427.220.20136hdisk80。00.00.000hdisk99。4156.011.40780hdisk1016。427。220.20136cd00。00.00。000netstat,entstat:顯示網(wǎng)卡信息netstaten0:顯示en0信息netstat–s:顯示網(wǎng)絡(luò)信息netstat-m顯示網(wǎng)絡(luò)buffers.netstat-i顯示網(wǎng)卡狀態(tài)netstat-Ien01顯示eno網(wǎng)卡塞(1秒間隔)no:顯示tcpip參數(shù)設(shè)置no–a:顯示tcpip所有參數(shù)當(dāng)前設(shè)置no-otcp_keepalivetime=7200000設(shè)置tcp_keepalivetime等于3600000秒no-d恢復(fù)默認值注:該方法在重啟后失效其它命令檢查文件系統(tǒng)df-k檢查設(shè)備lsdev—C檢查物理卷lspv檢查交換區(qū)lsps-a檢查配置lscfg-vp檢查軟件lslpp-l檢查用戶whoAIX系統(tǒng)管理日常工作(LV篇)IBMAIX系統(tǒng)管理的日常工作系統(tǒng)管理員對小型機系統(tǒng)的正確管理是系統(tǒng)穩(wěn)定運行的保障,作為系統(tǒng)管理員應(yīng)注意以下幾個方面:開關(guān)機步驟在系統(tǒng)管理員控制下進行正確的操作。(第5章有專門介紹)用戶組及用戶管理文件系統(tǒng)維護發(fā)現(xiàn)文件系統(tǒng)已滿,應(yīng)及時刪除無用文件或擴大文件系統(tǒng)。查看文件系統(tǒng)使用率命令:df–k,查看%Used和%Iused1024-blocksFree%UsedIused%IusedMountedon/dev/hd4327682018039%207013%//dev/hd22293760123098447%330456%/usr/dev/hd9var327681583252%3675%/var/dev/hd3327682330029%1102%/tmp/dev/hd132768313845%721%/home/dev/informixlv52428819906063%35213%/home/informix注意系統(tǒng)文件系統(tǒng)中的//var/tmp使用率不要超過90%系統(tǒng)日常管理系統(tǒng)管理員最好用smit來進行系統(tǒng)管理。Smit是以菜單方式工作的工具包,它包括了日常管理工作的所有命令,操作簡便。系統(tǒng)備份備份是保護用戶數(shù)據(jù)不丟失的重要手段。一般系統(tǒng)備份的要求如下:A.每一臺機器的操作系統(tǒng)至少有一個全備份。B.每天備份用戶數(shù)據(jù).C.操作系統(tǒng)配置修改后重新備份操作系統(tǒng)。(系統(tǒng)備份方法在第六章專門介紹)定時清洗磁帶機可以每月定時清洗一次,將清洗帶插入磁帶機,清洗完畢后會自動退出磁帶。當(dāng)磁帶機需要清洗時,磁帶機左邊第一個起綠色指示燈會亮。定時檢查設(shè)備指示燈狀態(tài)RS6000小型機出現(xiàn)硬件故障時,系統(tǒng)前面板上會亮一個橙色的告警燈。液晶面板上面會有顯示錯誤代碼簡單故障的判斷詳細信息見“第二部分:故障處理指導(dǎo)書”熟悉ibmaix操作系統(tǒng)關(guān)于IBMAIX的邏輯卷管理IBMAIX存儲管理的五個基本概念:物理卷PhysicalVolume,稱為PV:指物理上硬盤,一個硬盤就是一個PV,名字為HDISK0、HDISK1。物理分區(qū)(PhysicalPartitions):物理卷被劃分成大小一樣的物理分區(qū)PPs邏輯卷組LogicalVolumeGroup,稱為VG:一個VG包含整數(shù)個PV,可理解為一個大硬盤。邏輯卷LogicalVolume,稱為LV:相當(dāng)于對大硬盤進行邏輯分區(qū),一個VG里可有若干個LV,對用戶講,LV上的數(shù)據(jù)是連續(xù)的,但PV上的數(shù)據(jù)可能是分散的。邏輯分區(qū)(LogicalPartitions):每個LV有若干邏輯分區(qū)(LPs)組成,每個邏輯分區(qū)至少有一個PV組成.文件系統(tǒng):在邏輯卷的基礎(chǔ)上,可建立文件系統(tǒng)JFS,然后MOUNT到一個目錄下,這樣就可以文件存取的方式來使用這塊硬盤了。當(dāng)然,您也可以不建文件系統(tǒng),而直接把LV當(dāng)作裸設(shè)備,以TRUNK方式來存取數(shù)據(jù),許多數(shù)據(jù)庫都是用這種方式存取數(shù)據(jù)。LVM的關(guān)系如下圖:LVM命令一般采用smit命令可對PV、VG、LV、JFS等進行圖形化管理,命令如下:smitlvm屏幕顯示如下:AddaLogicalVolumeLogicalvolumeNAME[scratch]*VOLUMEGROUPnametestvg*NumberofLOGICALPARTITIONS[64]#PHYSICALVOLUMEnames[hdisk1hdisk2hdisk3]+LogicalvolumeTYPE[jfs]POSITIONonphysicalvolumemiddle+RANGEofphysicalvolumesminimum+MAXIMUMNUMBERofPHYSICALVOLUMES[]#touseforallocationNumberofCOPIESofeachlogical2+partitionMirrorWriteConsistency?yes+Allocateeachlogicalpartitioncopyyes+onaSEPARATEphysicalvolume?RELOCATEthelogicalvolumeduringyes+reorganizat(yī)ion?LogicalvolumeLABEL[]MAXIMUMNUMBERofLOGICALPARTITIONS[512]#EnableBADBLOCKrelocat(yī)ion?yes+SCHEDULINGPOLICYforreading/writingparallel+logicalpartitioncopiesEnableWRITEVERIFY?no+ALLOCATIONMAP[]StripeSize?[64K]行命令:?.lsvg:查看vg名字查看vg詳細信息: lsvg<vgname>查看vg內(nèi)的LVs:?lsvg-l<vgname>查看vg內(nèi)的PV:?lsvg—p〈vgname>查看激活的VG:lsvg–o。lspv:查看物理卷組pg名字查看PV詳細信息:? ?lspvhdiskN查看PV內(nèi)的LVs ?lspv-lhdiskN查看PV內(nèi)的PP:? ??lspv-phdiskN。lslv:查看LV的信息查看LV名字: lsvg-l<vgname>查看LV詳細信息:?? lslv〈lvname〉查看PV內(nèi)的LVs: ?lslv-l〈lvname>查看PV內(nèi)的PP: ?lslv—p〈pvname〉查看鏡像的LV: lslv-m<lvname〉AIX系統(tǒng)管理日常工作(關(guān)鍵參數(shù)檢查篇)AIO參數(shù)檢查#lsattr-Elaio0minserversXMINIMUMnumberofserversTruemaxservers80MAXIMUMnumberofserversTruemaxreqs4096MaximumnumberofREQUESTSTruekprocprio39ServerPRIORITYTrueautoconfigavailableSTATEtobeconfiguredatsystemrestartTruefastpathenableStateoffastpathTrueMaxServers=10*numberofdisksMinServers=MaxServers/2其中MaxServers最大為80可用命令#smittyaioChange/ShowCharacteristicsofAsynchronousI/O修改相應(yīng)的值。磁盤陣列queue_depth參數(shù)檢查假設(shè)DATAVG的RAID盤為hdisk2#lsattr-Elhdisk2pvid00019081a0dc91ea00000PhysicalvolumeidentifierFalqueue_depth8QueuedepthTruequeue_depth值設(shè)置為7133硬盤個數(shù)可用命令#chdev–lhdisk2–aqueue_depth=x修改,但VG必須為VARYOFF狀態(tài)。用戶參數(shù)檢查#smittychlicense修改MaximumnumberofFIXEDlicenses為10#lsattr—Elsys0|grepmaxuprocmaxuproc200MaximumnumberofPROCESSESallowedperuserTrue用#smittychgsys修改利用lsattr—Elsys0檢查maxuproc,minpout,maxpout等參數(shù)的大小。maxuproc為每個用戶的最大進程數(shù),當(dāng)應(yīng)用涉及大量的順序讀寫而影響前臺程序響應(yīng)時間時,可考慮將maxpout設(shè)為33,minpout設(shè)為16,利用smittychgsys來設(shè)置。激活SSAFast-WriteCache利用smittyssafastw來激活每一個邏輯盤hdiskn的Fast—WriteCache:選擇硬盤后,把EnableFast-Write一項改為Yes后回車即可.對于OPS必須關(guān)閉,對于GAILOVER或單機必須打開。IO參數(shù)設(shè)置Highwat(yī)ermarkforpendingwriteI/Osper)和LowwatermarkforpendingwriteI/Osperfile它們?nèi)笔≈禐椋?在雙機環(huán)境中一般應(yīng)設(shè)Highwat(yī)ermark為33,Lowwatermark為24,這兩個參數(shù)可用smittychgsys來設(shè)置.syncddaemon的數(shù)據(jù)刷新頻率該值表示刷新內(nèi)存數(shù)據(jù)到硬盤的頻率,缺省為60,一般可改為20,也可根據(jù)實際情況更改。該參數(shù)通過vi/sbin/rc.boot更改,其中一行如下:nohup/usr/sbin/syncd60〉/dev/null2〉&1&改為:nohup/usr/sbin/syncd20〉/dev/null2>&1&檢查系統(tǒng)硬盤的鏡像#lsvg–lrootvgrootvg:LVNAMETYPELPsPPsPVsLVSTATEMOUNTPOINThd5boot122closed/syncdN/Ahd6paging48962open/syncdN/Apaging00paging32642open/syncdN/Ahd8jfslog122open/syncdN/Ahd4jfs122open/syncd/hd2jfs32642open/syncd/usrhd9varjfs5102open/syncd/varhd3jfs482open/syncd/tmphd1jfs122open/syncd/home注意:PPs為LPs的兩倍,PVs為2如果系統(tǒng)盤未鏡像,而系統(tǒng)盤為18G盤,用命令鏡像#mirrorvgrootvghdisk0hdisk1(對rootvg進行鏡像)#bosboot–a(在兩塊盤上重建bootimage)#bootlist–mnormalhdisk0hdisk1(設(shè)置機器的啟動順序)AIX系統(tǒng)管理日常工作(性能分析篇)性能瓶頸定義項目檢查命令判斷標(biāo)準CPU?vmstat(yī)?%user+%sysgreater大于75%DiskI/O vmstat %iowait大于30%(AIX4.3。3orlat(yī)er)應(yīng)用程序磁盤iostat?%tm_act大于60%交換區(qū)lsps—a?大于60%頁交換數(shù)量?iostatvmstat(yī)大于10×CPU數(shù)量性能范圍好壞極差CPU60%75%90%+Disk<30%〈40%<50%+Memory010pages/秒CPU>50AIX系統(tǒng)管理日常工作(SHUTDOWN篇)概念I(lǐng)BMAIX的啟動分為多用戶(normal)和單用戶(service)模式,在正常情況下,一般選擇多用戶模式.關(guān)機命令快速關(guān)機,不警告用戶shutdown-F;halt快速關(guān)機并重啟shutdown–Fr;reboot警告一分鐘后關(guān)機并重啟shutdown-r發(fā)送關(guān)機命令,但不關(guān)機shutdown-k關(guān)機并警告用戶推出Shutdownnow關(guān)機到單用戶模式Shutdown-m;inits;telinitsAIX系統(tǒng)管理日常工作(備份與恢復(fù)篇)用SMIT備份#smittymksysb進行系統(tǒng)備份當(dāng)COMMANDSTATUS頁面中Command:OK出現(xiàn)后,表示備份成功。取出制作完畢的磁帶,在磁帶上的標(biāo)簽上注明備份機器的名稱和序列號手工備份#mksysb–i/dev/rmt0恢復(fù)系統(tǒng)#bootinfo–e檢查系統(tǒng)所帶的磁帶機是否能啟動系統(tǒng),如果返回值是1,表示該磁帶機支持啟動系統(tǒng),如果返回值是0,就是不支持.插入備份帶,檢查設(shè)備啟動順序:#bootlist-mservice-o如果需要,將啟動順序改為從磁帶啟動:#bootlist—mservicermt0重啟機器,系統(tǒng)從磁帶讀數(shù)據(jù),根據(jù)提示恢復(fù)系統(tǒng)。HACMP的雙機系統(tǒng)的管理和維護HACMP雙機系統(tǒng)的啟動要啟動HACMP雙機系統(tǒng)必須要有root用戶的特權(quán)分別進入到系統(tǒng)各節(jié)點主機在命令行上執(zhí)行下述命令即可。#smitclstart或#/usr/sbin/cluster/etc/rc.cluster—boot-N-i注:在雙機系統(tǒng)中HACMP雙機軟件先啟動的節(jié)點將成為主節(jié)點擁有資源,后啟動的節(jié)點將成為備用節(jié)點.HACMP雙機系統(tǒng)的關(guān)閉要關(guān)閉某節(jié)點上的HACMP雙機軟件必須要有該節(jié)點root用戶的特權(quán),以root用戶進入到該節(jié)點主機在命令行上執(zhí)行下述命令即可。#smitclstop或#clstop-gr說明:若該節(jié)點是主節(jié)點并且備節(jié)點上的HACMP軟件亦正常運行,則clstop關(guān)閉模式的三種選項行為不同.。forced:是指立即關(guān)閉雙機軟件不調(diào)用任何客戶應(yīng)用的善后處理例程。。graceful是指在關(guān)閉雙機軟件時將調(diào)用客戶應(yīng)用預(yù)定義的善后處理例程。.takeover是指該節(jié)點將關(guān)閉雙機軟件并釋放資源請求備節(jié)點進行接管。檢查HACMP雙機軟件在該節(jié)點是否已啟,動命令如下:#lssrc-gcluster若是系統(tǒng)顯示出下面類似的信息則說明HACMP雙機軟件已正常啟動.SubsystemGroupPIDStatusClstrmgrcluster22500activeClsmuxpdcluster23674activeClinfocluster28674active察看雙機系統(tǒng)的當(dāng)前狀態(tài)#/usr/sbin/cluster/clstat-a如果雙機系統(tǒng)一切工作正常則系統(tǒng)將顯示下述類似信息:clstat(yī)—HACMPforAIXClusterStatusMonitor——---———------—---—-—--——-—-—-——-----——-—---——--—-—-—--——-—-—Cluster:cluster(80)ThuJan2008:45:17TAIST2000State:UPNodes:2SubStat(yī)e:STABLENode:oracle1Interface:oracle1_svc(0)Address:10.75.9.41State:UPInterface:oracle1_tty(1)Address:0.0.0.0State:UPNode:oracle2Interface:oracle2_svc(0)Address:10.75.9.41State:UPInterface:oracle2_tty(1)Address:0。0。0。0State:UPHACMP環(huán)境下的排錯在一般情況下,HACMP軟件很少需要手工干預(yù),但一旦有問題發(fā)生,診斷和恢復(fù)的技巧是很重要的。需要能很快地斷定問題然后運用你對HACMP的理解來恢復(fù)HACMP的正常運作。一般地,HACMP環(huán)境下的排錯包括:.了解問題的存在..判斷問題的出處..解決問題。了解問題的存在您可以通過以下途徑了解到一個CLUSTER環(huán)境下出現(xiàn)了問題.。最終用戶的投訴,他們無法訪問應(yīng)用程序.??刂婆_上出現(xiàn)一些HACMP的信息.1.應(yīng)用服務(wù)無法訪問最終用戶的抱怨通常預(yù)示CLUSTER出現(xiàn)了問題.他們無法正常執(zhí)行應(yīng)用或是無法登錄到系統(tǒng).我們必須采集到詳細的信息以判斷到底那里出現(xiàn)了問題.是否有錯誤的信息提示?如果可能的話,讓用戶重復(fù)步驟以確定那里是錯誤的開始.您也可以在自己的系統(tǒng)上重復(fù).要知道用戶應(yīng)用不可用并不代表HACMP有問題。問題可能出現(xiàn)在應(yīng)用程序本身或是它的啟動或終止腳本出現(xiàn)了問題.因此應(yīng)用程序本身的排錯也應(yīng)是HA排錯的一部分.2??刂婆_上出現(xiàn)一些HACMP的信息在HACMP啟動,終止或出錯時,控制臺上會出現(xiàn)一些HACMP的信息,同時也會寫入相應(yīng)的文件中。判斷問題的出處當(dāng)錯誤出現(xiàn)時,我們應(yīng)嘗試發(fā)現(xiàn)錯誤的所在.但我們常常被錯誤的表面所誤導(dǎo).以下的步驟可以使我們得到更詳細的信息。1.保存好一些LOG文件.(/tmp/hacmp。out&/tmp/cm.log).因為它們可能被覆蓋。2。仔細檢查HACMP所產(chǎn)生的LOG文件。它們能提供最初的判斷線索。3。用HACMP的工具和AIX的命令來檢查HACMP的部件是否正常.4.打開HACMP的跟蹤工具來產(chǎn)生更詳細的信息。.HACMP的LOG文件:以下文件都是文本文件,可以用VI來看.每個日志文件都含有每個信息的產(chǎn)生時間./usr/adm/cluster.log:記錄了HACMP的狀態(tài),由HA的守護進程所產(chǎn)生./tmp/hacmp.out:記錄了HA的詳細腳本./usr/sbin/cluster/history/cluster.mmdd:記錄了HA的各個事件的發(fā)生./tmp/cm。log:由clstrmgr進程產(chǎn)生,每次HA重起時會被覆蓋..HACMPFORAIX的結(jié)構(gòu)應(yīng)用層HACMP軟件層LVM&TCPIP層AIX層物理網(wǎng)絡(luò)層物理硬盤層硬件層在物理網(wǎng)絡(luò)層,物理硬盤層,硬件層,LVM&TCPIP層,AIX層我們可以用AIX系統(tǒng)命令來看是否硬件和系統(tǒng)出現(xiàn)了問題。一般地,在用errpt命令來看沒有類型為PH的錯誤,lsvg-o來看我們所須的VG已varyon,mount來看我們所須的文件系統(tǒng)已安裝,netstat-i來看我們所須的serviceIP是UP的狀態(tài)(或用ifconfigen*),clusternode之間的service與serviceIP,standby與standbyIP互相可以ping通.在各個節(jié)點上執(zhí)行stty<〈/dev/tty*有相應(yīng)的信息出現(xiàn)。說明硬件層,LVM&TCPIP層,AIX層沒有問題,問題可能出現(xiàn)在應(yīng)用層與HACMP軟件層上。否則問題就出現(xiàn)在相應(yīng)的層次上。在HACMP軟件層上,我們可以用vi/tmp/hacmp.out來看,如果出現(xiàn)eventfailed的字段,則有可能問題出現(xiàn)在該層,如果在問題出現(xiàn)的時段,hacmp。out無信息出現(xiàn),則問題可能出現(xiàn)在應(yīng)用層.以下是HA排錯的一些守則:.在第一時間保存好相關(guān)的日志文件,特別是那些會被覆蓋的文件..嘗試去重復(fù)問題的出現(xiàn).不要被用戶所反映的問題迷惑..漸進地去重復(fù)問題,如果有多個可能導(dǎo)致問題的出現(xiàn),一個一個地去重復(fù),而不要一次重復(fù)多個可能.。不要憑經(jīng)驗來判斷問題,而是要在各種測試后,由結(jié)果來判斷。.隔離問題的來源,根據(jù)我們上面所敘述的層次關(guān)系,至頂向下地診斷。.由簡到繁地做測試,我們先從一個簡單的環(huán)境來做測試,不要嘗試在一個復(fù)雜的環(huán)境中測試..一次做一次改動,否則我們無法知道是那個改動解決了問題..不要忽略各種可能,因小可失大,留心系統(tǒng)的每一個細節(jié),包括電源,插頭,連線等.。保持各種測試的記錄以及解決的步驟,用做將來排錯的參考.。撥打技術(shù)支持工程師電話,到現(xiàn)場解決問題。第二篇:故障處理部分目錄TOC\o"1—3"\u第1章?故障的定義 PAGEREF_Toc107132735\h21第2章?故障信息的收集 PAGEREF_Toc107132736\h222。1 收集故障信息對于判斷診斷故障原因修復(fù)系統(tǒng)非常重要 PAGEREF_Toc107132737\h222.2 系統(tǒng)故障記錄(errorlog)?PAGEREF_Toc107132738\h222。3 控制面板上的LED代碼 PAGEREF_Toc107132739\h242.4?SMS(SystemManagementService)故障記錄 PAGEREF_Toc107132740\h252.5?MAIL?PAGEREF_Toc107132741\h252.6?運行故障診斷程序(Diagnostic)對系統(tǒng)硬件進行檢查和診斷 PAGEREF_Toc107132742\h252.7?其他用于收集系統(tǒng)信息的命令?PAGEREF_Toc107132743\h25第3章?硬件故障定位方法 PAGEREF_Toc107132744\h283.1?IPL流程 PAGEREF_Toc107132745\h283.2?系統(tǒng)的啟動順序: PAGEREF_Toc107132746\h293.3 系統(tǒng)不能啟動 PAGEREF_Toc107132747\h303.4?系統(tǒng)停在551555或557 \h303.5?CDE圖形界面掛死 PAGEREF_Toc107132749\h313.6 系統(tǒng)dump?PAGEREF_Toc107132750\h32第4章 7133-D40SSA磁盤柜的故障定位?PAGEREF_Toc107132751\h33第5章?軟件故障定位方法?PAGEREF_Toc107132752\h345.1 文件系統(tǒng)空間不夠 PAGEREF_Toc107132753\h345.2 檢查文件系統(tǒng)的完整性?PAGEREF_Toc107132754\h355.3 查看卷組信息(lsvg-lvg_name) PAGEREF_Toc107132755\h355.4 檢查內(nèi)存交換區(qū)(pagingspace)使用率(lsps—s) PAGEREF_Toc107132756\h355。5?小型機內(nèi)存泄漏問題 PAGEREF_Toc107132757\h35第6章 常用的系統(tǒng)狀態(tài)查詢命令?PAGEREF_Toc107132758\h37第7章?網(wǎng)絡(luò)故障定位方法?PAGEREF_Toc107132759\h387.1 網(wǎng)絡(luò)不通的診斷過程 PAGEREF_Toc107132760\h387。2?網(wǎng)絡(luò)配置的基本方法 PAGEREF_Toc107132761\h38第8章?HACMP環(huán)境下的排錯?PAGEREF_Toc107132762\h398。1?了解問題的存在 PAGEREF_Toc107132763\h398.2 判斷問題的出處?07132764\h40第9章 附常用命令列表 PAGEREF_Toc107132765\h錯誤!未定義書簽。故障的定義根據(jù)以下這些方面來考慮故障定位:弄清楚系統(tǒng)發(fā)生了什么問題系統(tǒng)現(xiàn)在能做什么不能做什么故障什么時候發(fā)生的有沒有做平時不同的操作故障有沒有規(guī)律定時還是不定時發(fā)生的頻率有多高是一臺機器出現(xiàn)故障還是多臺機器故障故障現(xiàn)象是否相同最近有沒有做改動如安裝了新的硬件軟件改變了系統(tǒng)的一些設(shè)置故障信息的收集收集故障信息對于判斷診斷故障原因修復(fù)系統(tǒng)非常重要系統(tǒng)故障記錄(errorlog)errdemon進程在系統(tǒng)啟動時自動運行記錄包括硬件軟件及其他操作信息故障記錄文件為/var/adm/ras/errlog可備份下來或拷貝到別的機器上分析errpt命令的使用(普通用戶權(quán)限也可使用)#errpt|more列出簡短出錯信息ERROR_IDTIMESTAMPTCRESOURCE_NAMEERROR_DESCRIPTION192AC0E017ED10720131000PHmem2Memoryfailure9DBCFDEE0701000000T0errdemonErrorloggingturnedon038F25800624131000UHscdisk0UNDETERMINEDERRORAA8AB2410405130900TOOPERATOROPERATORNOTIFICATIONTIMESTAMP:MMDDHHMMYY(月日時分年T類型:P永久;T臨時;U未知永久性的錯誤應(yīng)引起重視C分類:H硬件;S軟件;O用戶;U未知#errpt-dH列出所有硬件出錯信息#errpt—dS列出所有軟件出錯信息#errpt-ajERROR_ID列出詳細出錯信息#errpt—aj0502f666<——-ERROR_ID用大小寫均可例LABEL:SCSI_ERR1ID:0502F666Date/Time:Jun1922:29:5SequenceNumber:95MachineID:123456789012NodeID:host1Class:HType:PERMResourceName:scsi0ResourceClass:adapterResourceType:hscsiLocat(yī)ion:00-08VPD:<---VirtalProductDataDeviceDriverLevel00DiagnosticLevel00DisplayableMessageSCSIECLevelC25928FRUNumber30F8834ManufacturerIBM97FPartNumber59F4566SerialNumber00002849ROSLevelandID24Read/WriteRegisterPtr0120DescriptionADAPTERERRORProbableCausesADAPTERHARDWARECABLECABLETERMINATORDEVICEFailureCausesADAPTERCABLELOOSEORDEFECTIVERecommendedActionsPERFORMPROBLEMDETERMINATIONPROCEDURESCHECKCABLEANDITSCONNECTIONSDetailDataSENSEDATA000000000000000000000000000000000000000000000000控制面板上的LED代碼8位代碼通常系統(tǒng)故障燈會同時亮起某些機型還會同時顯示故障設(shè)備位置代碼4位代碼通常是Exxx3位代碼通常為0yyy只看后3位8位和4位代碼可查看系統(tǒng)服務(wù)手冊(ServiceGuide)3位代碼可查看系統(tǒng)診斷手冊(DiagnosticInformationforMultipleBusSystem)閃動的888,系統(tǒng)崩潰硬件或軟件原因造成按reset鍵會顯示更多內(nèi)容888—102一般為軟件故障888—102-207例外系統(tǒng)會產(chǎn)生一個dump888-102-xxx—0C9系統(tǒng)正在做dump,請等待888-102—xxx-0C0系統(tǒng)dump完成可關(guān)電重啟888—103或105硬件故障一般有SRN代碼及位置代碼SMS(SystemManagementService)故障記錄如何進入SMS菜單當(dāng)主控臺出現(xiàn)鍵盤圖標(biāo)后(LED顯示E1F1時)按1選擇”Utilities"選擇”ErrorLog",抄下8位故障代碼在SMS中還可以更改系統(tǒng)啟動順序表MAIL#mail系統(tǒng)會向root用戶發(fā)mail報告出錯信息通常系統(tǒng)出現(xiàn)故障后沒有進行檢查修復(fù)系統(tǒng)會定時提醒root運行故障診斷程序(Diagnostic)對系統(tǒng)硬件進行檢查和診斷當(dāng)發(fā)現(xiàn)有硬件故障時應(yīng)立即使用diag#diag>選高級診斷AdvanceDiagnostic)>選問題診斷ProblemDetermination)或選系統(tǒng)檢查SystemVerification)(選PD會對系統(tǒng)錯誤記錄進行分析)diag運行后會給出SRN代碼故障設(shè)備名稱及百分比地址代碼等對于PCI機型應(yīng)在系統(tǒng)報錯7天之內(nèi)運行diag程序?qū)Τ鲥e記錄里的sense數(shù)據(jù)進行分析其他用于收集系統(tǒng)信息的命令lsdev—C系統(tǒng)設(shè)備信息#lsdev-Ccdiskhdisk0Available00-06-00—2,045GB16BitSCSIDiskDrivehdisk1Available00—06-00-1,045GB16BitSCSIDiskDrivehdisk2Defined00-06-00—4,016BitSCSIDiskDrivelspv查看物理卷信息#lspvhdisk00007821160af3d76rootvghdisk1000782117f57hdisk20000000045c45bdedatavglsvg查看卷組信息#lsvgdatavgVOLUMEGROUP:datavgVGIDENTIFIER:0000000055e2458bVGSTATE:activePPSIZE:4megabyte(s)VGPERMISSION:read/writeTOTALPPs:2169(8676megabytMAXLVs:256FREEPPs:1(4megabytes)LVs:3USEDPPs:2168(8672megabytOPENLVs:2QUORUM:2TOTALPVs:1VGDESCRIPTORS:2STALEPVs:0STALEPPs:0ACTIVEPVs:1AUTOON:yesMAXPPsperPV:2032MAXPVs:16#lsvg—lrootvgrootvg:LVNAMETYPELPsPPsPVsLVSTATEMOUNTPOINThd5boot111closed/syncdN/Alv00jfs511021closed/stale/ibmcxxlv01jfs111open/syncd/cics_regionslv02jfs441open/syncd/var/mqmlslpp查看文件組信息#lslpp-L|grep23100020devicespci23100020rte4327CIBMPCI10/100EthernetAdapt看某個文件組是否已安裝如以太網(wǎng)卡驅(qū)動也用于查詢補丁程序的版本lsattr查看設(shè)備參數(shù)設(shè)置#lsat(yī)tr—Elent2busio0x7fffc00BusI/OaddressFalsebusintr9BusinterruptlevelFalseintr_priority3InterruptpriorityFalsetx_que_size512TRANSMITqueuesizeTruerx_que_size256RECEIVEqueuesizeTruerxbuf_pool_size384RECEIVEbufferpoolsizeTruemedia_speed10_Half_DuplexMediaSpeedTrueuse_alt_addrnoEnableALTERNATEETHERNETaddressTruealt_addr0x0ALTERNATEETHERNETaddressTrueip_gap96Inter-PacketGapTruelscfg查看VPD信息VirtualProductData)#lscfg-vlssa1DEVICELOCATIONDESCRIPTIONssa130-68IBMSSAEnhancedRAIDAdapter(14104500)PartNumber097H0645FRUNumber097H0645<-—備件號SerialNumberC8217227ECLevel0000F20825ManufacturerIBM053ROSLevelandID7201〈—-微碼版本LoadableMicrocodeLevel04DeviceDriverLevel00DisplayableMessageSSA—ADAPTERDeviceSpecific(Z0)DRAM=032DeviceSpecific(Z1)CACHE=0DeviceSpecific(Z2)5dab2DeviceSpecific(YL)P2-I7<-—槽號不同的硬件設(shè)備有不同的VPD所含的格式和信息都不一樣通常備件號和微碼版本最有參考價值注FRU(FieldReplaceUnit)才是真正的備件號硬件故障定位方法IBM小型機故障定位方法包括小型機I/O柜上的顯示面板上的Checkpoints信息ErrorCode和SRNsCheckpoints檢查點是系統(tǒng)加電CMOS初始化程序(initialprogramload(IPL))運行后顯示在I/O柜的顯示面板上一系列信息IPL流程當(dāng)交流電源接到系統(tǒng)后IPL流程就開始了IPL流程包括四個步驟Phase1:ServiceProcessor的初始化Phase1開始于交流電源接到系統(tǒng)后直到OK顯示在I/O柜上的顯示面板上為止在這個步驟會顯示8xxx或9xxxcheckpoints代碼Phase2:由ServiceProcessor引導(dǎo)的硬件初始化Phase2開始于按下I/O柜上的白色電源開關(guān)在這個步驟會顯示9xxxcheckpoints91FF是最后的代碼標(biāo)志著第三步驟的開始Phase3:系統(tǒng)固件的初始化在Phase3,一個系統(tǒng)處理器接管控制并繼續(xù)初始化系統(tǒng)資源在這個步驟會顯示ExxxE105是最后的代碼標(biāo)志著第四步驟AIX啟動的開始在這個過程中還會顯示各種位置碼位置碼代表著系統(tǒng)的每一個部分Phase4:AIX啟動當(dāng)AIX開始啟動時顯示面板上的代碼為0xxx同時位置碼會出現(xiàn)在第二行當(dāng)AIX的登錄窗口出現(xiàn)在控制臺上時第四步驟結(jié)束同時顯示面板上再無任何信息出現(xiàn)ErrorCode當(dāng)系統(tǒng)運行有錯誤發(fā)現(xiàn)時一個8位碼會顯示在顯示面板上同時在第二行顯示相對應(yīng)問題硬件的位置碼SRNsServicerequestnumbers,服務(wù)請求碼當(dāng)系統(tǒng)運行有錯誤發(fā)現(xiàn)時SRNs碼會以xxx-xxx的形式顯示在顯示面板上同時在AIX的errorlog中也會有記載以上所有代碼都會有相應(yīng)的步驟解決由于代碼繁多請在出現(xiàn)問題后記錄下代碼并致電IBM服務(wù)熱線系統(tǒng)的啟動順序:系統(tǒng)不能啟動系統(tǒng)停在Stage1可能為電源系統(tǒng)板CPU內(nèi)存等硬件故障記錄故障代碼通知IBM工程師系統(tǒng)停在Stage2可能是啟動順序表(bootlist)損壞或I/O子系統(tǒng)故障可嘗試進入SMS菜單檢查啟動順序表并修改若在選擇bootlist時沒有硬盤設(shè)備可選或顯示的硬盤信息不正確則可能是硬盤故障若根本沒有SCSI設(shè)備可選則鏈路有問題系統(tǒng)停在Stage3可能是硬盤數(shù)據(jù)損壞系統(tǒng)設(shè)置文件出錯或I/O子系統(tǒng)故障系統(tǒng)停在551555或557發(fā)生在系統(tǒng)啟動的第三階段(Stage3)可能是文件系統(tǒng)損壞文件系統(tǒng)日志(jfslog)損壞rootvg中有壞硬盤修復(fù)方法用系統(tǒng)光盤或系統(tǒng)備份帶啟動必須與硬盤中的操作系統(tǒng)版本一致啟動后選擇選項3"StartMaintenanceModeforSystemRecovery"〉"AccessaRootVolumeGroup">"Accessthisvolumegroupandstartashellbeforemountingthe"格式化文件系統(tǒng)日志(jfslog)#/usr/sbin/logform/dev/hd8檢查修復(fù)文件系統(tǒng)#fsck-y/dev/hd1/home文件系統(tǒng)#fsck—y/dev/hd2/usr文件系統(tǒng)#fsck-y/dev/hd3/tmp文件系統(tǒng)#fsck—y/dev/hd4/文件系統(tǒng)#fsck-y/dev/hd9var/var文件系統(tǒng)用exit命令退出文件系統(tǒng)會自動mount起來重建bootimage#lslv–mhd5找出bootimage所在的硬盤如hdisk0#bosboot–ad/dev/hdisk0#bootlist–mnormal/dev/hdisk0重建啟動順序表重啟動系統(tǒng)#shutdown—Fr如上述步驟不奏效用系統(tǒng)備份帶恢復(fù)系統(tǒng)如備份帶不能恢復(fù)用診斷光盤DiagnosticCDROM檢查是否壞硬盤CDE圖形界面掛死CDE運行時不要更改網(wǎng)絡(luò)參數(shù)如主機名和IP地址更改網(wǎng)卡設(shè)置請先退出CDE圖形環(huán)境選擇命令行方式登錄在字符界面下更改如CDE已經(jīng)掛死遠程telnet登錄找出所有dt有關(guān)的進程用kill命令殺掉#ps—ef|grepdt#killPID檢查當(dāng)前主機名#hostnametscf50查看主機名是否對應(yīng)有效的IP地址#netstat—i|greptscf50tr0*1500918540tscf54700更改主機名或IP地址使主機名與當(dāng)前有效的IP地址存在對應(yīng)關(guān)系#smittytcpip重新啟動CDE界面#/etc/rcdtHACMP環(huán)境下可把主機名alias到127001上#cat/etc/hosts127001_loopbacklocalhosttscf50#loopback(lo0)name/addressbvg系統(tǒng)dump發(fā)生在系統(tǒng)崩潰時AIX會做dump(系統(tǒng)內(nèi)存的快照)此時機器會顯示閃動的888102xxx0cx代碼0c9系統(tǒng)dump進行中0c9狀態(tài)可能會維持超過2分鐘不要關(guān)電和按reset,等待dump做完0c0dump成功完成這時可以斷電重起0c2手動啟動dump功能0c4dump設(shè)備空間不足只有部分信息保存下來0c5不明原因?qū)е拢鋟mp失敗一般dump是由于軟件出錯引起(888—102—207除外)機器通??梢灾貑⒅貑r可能提示用戶插入磁帶拷貝dump文件不要選擇退出這樣會丟失重要的故障信息dump的有關(guān)設(shè)置估算系統(tǒng)dump的大小在系統(tǒng)最繁忙時內(nèi)存使用最多#sysdumpdev-e0453-041Estimateddumpsizeinbytes:53477376#lsps-aPageSpacePhysicalVolumeVolumeGroupSize%UsedActivepaging00hdisk0rootvg480MB1yeshd6hdisk1rootvg544MB1yes當(dāng)前的設(shè)置#sysdumpdev—lprimary/dev/hd6<-—dump的主設(shè)備secondary/dev/sysdumpnullcopydirectory/var/adm/ras<--dump拷貝的目錄forcedcopyflagTRUEalwaysallowdumpTRUEhd6應(yīng)比估算值稍大/var/adm/ras是默認的dump拷貝目錄比較估算值保證/var文件系統(tǒng)有足夠的剩余空間拷貝dump文件否則機器重起時會提示用戶插入磁帶dump文件名為vmcore#對PCI機型如要手動做dump須把"alwaysallowdump"先設(shè)成true#sysdumpdev-Kdump打包#snap–a-o/dev/rmt?;?snap–a-c把/tmp/ibmsupt目錄做成一個壓縮文件snaptarZ如果/tmp文件系統(tǒng)空間不夠可用—ddirectory參數(shù)指定別的目錄代替/tmp/ibmsupt7133-D40SSA磁盤柜的故障定位當(dāng)SSA磁盤柜出現(xiàn)故障時在磁盤柜前面板的液晶顯示屏上會顯示相應(yīng)的SRNs,同時黃色的顯示燈會閃動在AIX的errorlog中也會有記載錯誤信息如DISK_ERR1DISK_ERR4SSA_ARRAY_ERROR等請在出現(xiàn)問題后記錄下代碼并致電IBM服務(wù)熱線軟件故障定位方法軟件故障情況錯綜復(fù)雜下面列舉幾個常見案例的故障處理方法文件系統(tǒng)空間不夠查看有沒有_滿_的文件系統(tǒng)特別是//var/tmp不要超過90%文件系統(tǒng)滿可導(dǎo)致系統(tǒng)不能正常工作尤其是AIX的基本文件系統(tǒng)如/(根文件系統(tǒng))滿則會導(dǎo)致用戶不能登錄用df_k查看#df—k(查看AIX的基本文件系統(tǒng))/dev/hd424576145295%259922%//dev/hd26144002806896%2296715%/usr/dev/hd9var8192454045%64932%/var/dev/hd31679361579686%891%/tmp/dev/hd116384533268%140235%/home除/usr文件系統(tǒng)其他文件系統(tǒng)都不應(yīng)太滿一般不超過80%處理方法1刪除垃圾文件#du—sk*|sort-rn|head查找出當(dāng)前目錄下占空間最大的子目錄逐層往下直到找出占空間最大的文件要區(qū)分哪些目錄是文件系統(tǒng)的mountpoint哪些是文件系統(tǒng)的子目錄刪除文件釋放空間有時刪除文件后空間并不馬上釋放這是由于你刪除的文件正被某個程序打開只有當(dāng)這個程序停止后空間才釋放有時甚至需要重起系統(tǒng)處理方法2增加文件系統(tǒng)大小#smittychjfs文件系統(tǒng)可以在任何時候加大前提是卷組(VG)中有剩余空間檢查文件系統(tǒng)的完整性#umount#fsck–y注意文件系統(tǒng)必須先umount再做檢查和修復(fù)否則可導(dǎo)致未知的后果查看卷組信息(lsvg—lvg_name)有沒有”stale"狀態(tài)的邏輯卷若有用syncvg命令修復(fù)”stale"邏輯卷檢查內(nèi)存交換區(qū)(pagingspace)使用率(lsps-s)使用率是否超過70%若有則用chps_sXpgname增加X個PP或用mkps–a-n-sXmyvg在myvg上增加一個PP數(shù)為X的內(nèi)存交換區(qū)小型機內(nèi)存泄漏問題小型機出現(xiàn)內(nèi)存泄漏即系統(tǒng)或應(yīng)用進程無法將使用過的內(nèi)存釋放使可用內(nèi)存的容量逐漸減少如果可用內(nèi)存降到某最小值將造成系統(tǒng)或應(yīng)用程序無法FORK子進程就會造成系統(tǒng)癱瘓通常我們可以用ps和sar命令來查看小型機內(nèi)存和CPU占用率的大概情況以及各進程的內(nèi)存和CPU占用率的發(fā)展趨勢(a)ps#psgv|head-n1;psgv|egrep—v"RSS"|sort+6b—7—n—r|head—n5PIDTTYSTATTIMEPGINSIZERSSLIMTSIZTRS%CPU%MEMCOMMAND15674pts/11A0:723276852406240/tctestp22742pts/11A0:123276852400140/backups10256pts/1A0:110/tctestp2064—A2:135646448xx063920040kproc1806-A0:200166408xx063920040kprocSIZEvirtualsize(inthepagingspace),inkilobytes,RSSreal—memory(residentset)sizeinkilobytesoftheprocess通過不同時間輸出的比較就能觀察出內(nèi)存和CPU占用率的基本情況找出其中占用內(nèi)存數(shù)不斷變大的進程這個進程可能就已經(jīng)發(fā)生了內(nèi)存泄漏(b)sar指令也可以查看CPU占用率但統(tǒng)計的結(jié)果不是很準確通常使用sar令的格式為#sar–PALL21009:29:37cpu%usr%sys%wio%idle09:29:39000495110495-0049509:29:41002692134291-2349209:29:43031294122295-2129409:29:45022790145686—336

溫馨提示

  • 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
  • 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
  • 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
  • 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
  • 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責(zé)。
  • 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
  • 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。

評論

0/150

提交評論