




已閱讀5頁(yè),還剩157頁(yè)未讀, 繼續(xù)免費(fèi)閱讀
版權(quán)說(shuō)明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請(qǐng)進(jìn)行舉報(bào)或認(rèn)領(lǐng)
文檔簡(jiǎn)介
.X86服務(wù)器虛擬化實(shí)施方案XX信息部年 月目 錄1VMware實(shí)施計(jì)劃41.1實(shí)施計(jì)劃41.2實(shí)施系統(tǒng)拓?fù)鋱D52實(shí)施規(guī)劃62.1集群規(guī)劃62.2硬件規(guī)劃72.3網(wǎng)絡(luò)規(guī)劃72.4相關(guān)軟件說(shuō)明83安裝ESXi server83.1相關(guān)設(shè)置規(guī)劃表83.2安裝前準(zhǔn)備工作83.3ESXi安裝104安裝VC194.1前提條件194.2安裝DB2204.3配置ODBC294.4安裝VC324.5安裝VClient405創(chuàng)建數(shù)據(jù)中心435.1創(chuàng)建數(shù)據(jù)中心435.2配置主機(jī)435.2.1添加主機(jī)435.2.2配置時(shí)間和NTP服務(wù)465.3配置license485.3.1配置ESX License485.3.2檢查Vmware License495.3.3配置vCenter Server License505.4網(wǎng)絡(luò)設(shè)置525.4.1VMware 網(wǎng)絡(luò)介紹525.4.2管理網(wǎng)絡(luò)設(shè)置525.4.3虛擬機(jī)網(wǎng)絡(luò)設(shè)置555.4.4VMotion Kernel網(wǎng)絡(luò)設(shè)置565.5存儲(chǔ)設(shè)置595.5.1存儲(chǔ)和交換機(jī)設(shè)置595.5.2添加存儲(chǔ)配置595.5.3存儲(chǔ)擴(kuò)容配置635.6創(chuàng)建主機(jī)群集645.6.1配置主機(jī)通信645.6.2配置網(wǎng)絡(luò)環(huán)境645.6.3配置集群655.6.4測(cè)試685.7創(chuàng)建只讀用戶appmon696虛擬機(jī)部署716.1新建虛擬機(jī)716.1.1創(chuàng)建虛擬機(jī)716.1.2安裝操作系統(tǒng)786.1.3設(shè)置虛擬機(jī)自動(dòng)啟動(dòng)816.2模板部署虛擬機(jī)836.2.1創(chuàng)建模板836.2.2模板部署虛擬機(jī)866.2.3自定義規(guī)則886.3克隆部署虛擬機(jī)957converter 4.3軟件使用957.1VMware converter standalone軟件安裝967.2P2V 物理服務(wù)器至虛擬化架構(gòu)1017.2.1熱P2V Windows 2003物理服務(wù)器1027.2.2熱P2V LINUX物理服務(wù)器1127.2.3冷P2V Windows 2003物理服務(wù)器1227.2.4冷P2V Linux物理服務(wù)器1341 VMware實(shí)施計(jì)劃1.1 實(shí)施計(jì)劃VMware 的實(shí)施與傳統(tǒng)系統(tǒng)的搭建不同,包括基礎(chǔ)環(huán)境的搭建和虛擬機(jī)的實(shí)施;同時(shí),VMware內(nèi)置了虛擬機(jī)交換機(jī)和存儲(chǔ)多路徑軟件,可以靈活實(shí)現(xiàn)虛擬化系統(tǒng)中網(wǎng)絡(luò)環(huán)境和存儲(chǔ)環(huán)境的共享和隔離。表1、實(shí)施計(jì)劃表序號(hào)項(xiàng)目?jī)?nèi)容備注1實(shí)施前相關(guān)硬件設(shè)備準(zhǔn)備設(shè)備到場(chǎng)就位、完成設(shè)備上架上電、網(wǎng)絡(luò)環(huán)境準(zhǔn)備、存儲(chǔ)環(huán)境準(zhǔn)備等2編寫(xiě)設(shè)計(jì)文檔詳細(xì)規(guī)劃數(shù)據(jù)中心、群集、資源池、主機(jī)、網(wǎng)絡(luò)、存儲(chǔ)等3基礎(chǔ)環(huán)境實(shí)施ESXi服務(wù)器安裝vCenter Server服務(wù)器安裝添加主機(jī),配置主機(jī)網(wǎng)絡(luò)、存儲(chǔ)配置虛擬架構(gòu)集群4虛擬機(jī)實(shí)施創(chuàng)建虛擬機(jī),安裝虛擬機(jī)操作系統(tǒng)通過(guò)模板部署虛擬機(jī)P2V實(shí)施物理機(jī)到虛擬機(jī)轉(zhuǎn)換5完成實(shí)施文檔完成實(shí)施文檔1.2 實(shí)施系統(tǒng)拓?fù)鋱D 我行虛擬化環(huán)境中,采用VMware HA技術(shù)構(gòu)架高可用集群,其中關(guān)鍵要素有:1. 共享存儲(chǔ): 只有將VMware的虛擬機(jī)部署在共享存儲(chǔ)上,(包括操作系統(tǒng)即其他數(shù)據(jù)盤),才能實(shí)現(xiàn)VMware的高可用。2. 主機(jī)配置:需要物理配置相同的主機(jī),進(jìn)行相同的網(wǎng)絡(luò)配置和存儲(chǔ)配置,才能構(gòu)成可實(shí)現(xiàn)在線遷移的高可用集群。3. VCenter管理:必須將所有主機(jī)和虛擬機(jī)使用相同的VCenter管理,才能實(shí)現(xiàn)高可用集群。2 實(shí)施規(guī)劃2.1 集群規(guī)劃我行虛擬化環(huán)境,主要使用VMware HA 技術(shù),組成多個(gè)VMware 集群,滿足新系統(tǒng)上線和單點(diǎn)改造的需求。已經(jīng)上線的集群包括:1. APP01 : 生產(chǎn)環(huán)境,第一個(gè)APP服務(wù)器集群2. APP02: 生產(chǎn)環(huán)境,第二個(gè)APP服務(wù)器集群3. WEB01:生產(chǎn)環(huán)境,第一個(gè)WEB服務(wù)器集群4. IAM-CLUSTER:集中用戶管理的服務(wù)器集群5. OFFICE01:辦公環(huán)境,第一個(gè)服務(wù)器集群每個(gè)集群中,使用3-4臺(tái)高配置聯(lián)想服務(wù)器,通過(guò)VMware HA技術(shù),組成VMware集群。具體要求如下:1. 硬件設(shè)置:這四臺(tái)主機(jī)具有相同的CPU、內(nèi)存、內(nèi)置網(wǎng)卡、外置網(wǎng)卡、光纖卡設(shè)置。2. 網(wǎng)絡(luò)設(shè)置:四臺(tái)主機(jī)連接相同數(shù)量的網(wǎng)線,物理交換機(jī)上配置相同的IP和信息點(diǎn);虛擬交換機(jī)上配置相同的虛擬交換機(jī)和相同名稱的端口組。3. 存儲(chǔ)設(shè)置:規(guī)劃一個(gè)1T的共享存儲(chǔ)上的LUN; 在交換端,為這四臺(tái)主機(jī)和共享存儲(chǔ)劃分相同的Zone;在存儲(chǔ)端,將這四臺(tái)主機(jī)配置為一個(gè)主機(jī)組,并mapping以上的主機(jī)。 2.2 硬件規(guī)劃使用四臺(tái)聯(lián)想公司的R680,型號(hào)lenovo WQ R680 G7。CPU: 4C個(gè)E4807 CPU,每個(gè)CPU 6核,共24核內(nèi)存:128G內(nèi)存HBA卡: 2個(gè)雙口HBA卡網(wǎng)卡: 每臺(tái)服務(wù)器內(nèi)置1個(gè)四口的網(wǎng)卡, 外置6塊雙口的網(wǎng)卡,共16個(gè)網(wǎng)口。本地硬盤: 5個(gè)600G本地硬盤,配置為RAID5存儲(chǔ)設(shè)備:IBM XIV2.3 網(wǎng)絡(luò)規(guī)劃ESXi server物理機(jī):lenovo WQ R680 G7每臺(tái)服務(wù)器內(nèi)置1個(gè)四口的網(wǎng)卡, 外置6塊雙口的網(wǎng)卡,共16個(gè)網(wǎng)口,對(duì)應(yīng)16個(gè)虛擬網(wǎng)卡,以下已MIS01為例,說(shuō)明虛擬交換機(jī)的配置:Vmnic0(內(nèi)置的第一個(gè)網(wǎng)口)+ Vmnic4(外置第一塊網(wǎng)卡的上口): 管理網(wǎng)絡(luò)和VMotion(遷移網(wǎng)絡(luò))21.244.20.*Vmnic1(內(nèi)置的第二個(gè)網(wǎng)口)+ Vmnic5(外置第一塊網(wǎng)卡的下口):業(yè)務(wù)網(wǎng)段 21.244.72.* Vmnic2(內(nèi)置的第三個(gè)網(wǎng)口)+ Vmnic6(外置第二塊網(wǎng)卡的上口):業(yè)務(wù)網(wǎng)段 21.244.40.* vCenter Server服務(wù)器:虛擬機(jī) vClient服務(wù)器:虛擬機(jī) 002.4 相關(guān)軟件說(shuō)明軟件產(chǎn)品版本ESXi server4.1 Update1vCenter Server4.1Vmware converter standalone4.33 安裝ESXi server3.1 相關(guān)設(shè)置規(guī)劃表ESXi server 安裝在4臺(tái)lenovo WQ R680 G7服務(wù)器上。表2、服務(wù)器配置規(guī)劃表說(shuō)明設(shè)備安裝軟件主機(jī)名App01lenovo WQ R680 G7ESXi 4.1U1esx01lenovo WQ R680 G7ESXi 4.1U1esx02H lenovo WQ R680 G7ESXi 4.1U1esx03lenovo WQ R680 G7ESXi 4.1U1esx04VC虛擬機(jī)Windows 2003 DB2 9.7vCenter Servervca0013.2 安裝前準(zhǔn)備工作1、設(shè)置主機(jī)BIOS,升級(jí)至最新BIOS2、服務(wù)器啟動(dòng),配置RAID對(duì)于有2塊硬盤的服務(wù)器,建議配置為RAID 1. 對(duì)于多于2塊硬盤的服務(wù)器,建議配置為RAID 5. 3、對(duì)于聯(lián)想服務(wù)器,關(guān)閉CPU節(jié)能開(kāi)關(guān)R680 G7: BIOSAdvancedProcessor Confguration: 關(guān)閉以下開(kāi)關(guān): CPU C State、Processor C3、Processor C6; R525 G3: BIOSAdvancedCPU Confguration: 關(guān)閉以下開(kāi)關(guān):C1E Support、Intel C-STATE tech、C State package limit setting、C1 Auto Demotion、C3 Auto Demotion;4、打開(kāi)CPU 的VT(Virtualization Technology) 這是必須的對(duì)于聯(lián)想525,使用了Intel CPU。VMware 要求必須打開(kāi)VT開(kāi)關(guān),以支持64位操作系統(tǒng)。方法:進(jìn)入BIOS - Advanced - Processor - Virtualization Technology - 設(shè)置為enable。5、關(guān)閉內(nèi)存NUMA開(kāi)關(guān)(僅對(duì)聯(lián)想R680等機(jī)型)這是必須的對(duì)于聯(lián)想680,如果配置了128G內(nèi)存, 需要關(guān)閉NUMA開(kāi)關(guān),否則報(bào)錯(cuò)不能識(shí)別內(nèi)存。方法:進(jìn)入BIOS - Advanced - Memory - Memory RAS - NUMA Optimized Enabled - 設(shè)置為disable。3.3 ESXi安裝提前準(zhǔn)備好ESXi安裝介質(zhì),在ESXi安裝期間,必須要拔掉所有與存儲(chǔ)連接的光纖線1、使用ESXi Server4.1U1的安裝光盤引導(dǎo)服務(wù)器。在顯示初始引導(dǎo)屏幕時(shí)按【Enter】鍵開(kāi)始進(jìn)行安裝2、單擊F11繼續(xù)3、選擇一塊本地硬盤,然后單擊Enter繼續(xù)。 由于VMware有2T磁盤大小的限制,如果內(nèi)置硬盤大于2T,將顯示為2塊硬盤。4、點(diǎn)擊F11開(kāi)始安裝5、安裝完成后點(diǎn)擊Enter重新啟動(dòng)6、在主頁(yè)面點(diǎn)擊F27、輸入root的密碼,默認(rèn)為空,點(diǎn)擊Enter8、進(jìn)入ESX的配置主界面,選擇Configure password:修改esxi主機(jī)密碼;9、選中Configure Management Network,點(diǎn)擊Enter選擇Network Adapters: 將看這臺(tái)服務(wù)器的網(wǎng)卡清單。 這里,一個(gè)網(wǎng)口對(duì)應(yīng)一個(gè)VMware網(wǎng)卡,名稱是“vmnicN”的形式,從0開(kāi)始編號(hào)。 連接了網(wǎng)絡(luò)的網(wǎng)卡,將顯示為“Connected”,否則顯示為“disconnected”。Device Name Hardware Label Status vmnic0 NAe8:e9:0f:bd:d2:88 Connected vmnic1 NAe8:e9:0f:bd:d2:88 disconnected vmnic2 NAe8:e9:0f:bd:d2:88 disconnected vmnic3 NAe8:e9:0f:bd:d2:88 Connected vmnic4 NAe8:e9:0f:bd:d2:88 disconnected可以通過(guò)一根網(wǎng)線,同時(shí)連接兩個(gè)網(wǎng)口,得到vmware網(wǎng)卡和物理網(wǎng)絡(luò)的對(duì)照關(guān)系。9、選中IP Configuration,點(diǎn)擊Enter10、輸入相關(guān)IP地址11、選中DNS Configuration,點(diǎn)擊Enter12、輸入相關(guān)DNS(如果有),同時(shí)輸入事先規(guī)劃好的主機(jī)名13、選中Troubleshooting Options,點(diǎn)擊Enter14、點(diǎn)擊Enter,可以分別開(kāi)啟本地命令行模式和遠(yuǎn)程SSH登錄模式選擇Enable Remote Tech Support(SSH)按修改,將打開(kāi)esxi遠(yuǎn)程SSH服務(wù)選擇Enable Local Tech Support按修改,將打開(kāi)esxi本地SSH服??梢酝ㄟ^(guò)按“Alt + F1”鍵,進(jìn)行文字型的管理界面,按“Alt + F2”鍵,將切換回圖形化的管理界面。4 安裝VC4.1 前提條件1、在群集Cluster中創(chuàng)建一個(gè)虛擬機(jī),分配2個(gè)虛擬CPU,4G內(nèi)存,60G硬盤空間,安裝windows 2003 R2操作系統(tǒng),安裝DB2數(shù)據(jù)庫(kù),配置好相關(guān)網(wǎng)絡(luò)連接。2、準(zhǔn)備好VC安裝介質(zhì),安裝到虛擬機(jī)上3、在VC中使用的用戶名和密碼都是安裝VC的這臺(tái)服務(wù)器windows操作系統(tǒng)的administrator用戶和它的密碼。4.2 安裝DB21、以Administrator用戶身份登錄Virtual Center系統(tǒng)(也就是剛剛安裝的windows2003)2、把DB2安裝介質(zhì)載入光驅(qū),開(kāi)始安裝DB2。3、點(diǎn)擊下一步4、選擇典型安裝,點(diǎn)擊【下一步】5、選擇安裝文件夾,然后點(diǎn)擊【下一步】6、設(shè)置用戶信息,點(diǎn)擊【下一步】7、配置DB2對(duì)象啟用系統(tǒng)安全性,然后點(diǎn)擊【下一步】8、開(kāi)始安裝DB2,安裝完成后點(diǎn)擊完成9、增加vcx用戶,設(shè)置密碼。注意,密碼中不能有“;”等特殊字符。10、新增DBSYSMON組,并把vcx用戶加入到這個(gè)組中, 同時(shí)把vcx加DB2USERS DB2ADMIN用戶組12、打開(kāi)DB2命令工具13、運(yùn)行以下命令db2 update dbm cfg using sysmon_group dbsysmondb2startdb2set DB2_ATS_ENABLE=YESdb2set DB2_SKIPINSERTED=ONdb2set DB2_EVALUNCOMMITTED=ONdb2set DB2_SKIPDELETED=ONdb2stop forcedb2startdb2set DB2CODEPAGE=120814、使用DB2腳本創(chuàng)建VCDB數(shù)據(jù)庫(kù):notepad C:Program FilesIBMSQLLIBBINvcdbcreate.sq15、把下面內(nèi)容復(fù)制到vcdbcreate.sql文件中,并運(yùn)行db2 svtf vcdbcreate.sqlCREATE DATABASE VCDB AUTOMATIC STORAGE YES ON C: DBPATH ON C: USING CODESET UTF-8 TERRITORY US COLLATE USING SYSTEM PAGESIZE 4096; UPDATE DB CFG FOR VCDB USING AUTO_MAINT ON; UPDATE DB CFG FOR VCDB USING AUTO_TBL_MAINT ON; UPDATE DB CFG FOR VCDB USING AUTO_RUNSTATS ON; UPDATE DB CFG FOR VCDB USING logprimary 32 logsecond 6 logfilsiz 2048; UPDATE ALERT CFG FOR DATABASE ON VCDB USING db.db_backup_req SET THRESHOLDSCHECKED YES; UPDATE ALERT CFG FOR DATABASE ON VCDB USING db.tb_reorg_req SET THRESHOLDSCHECKED YES; UPDATE ALERT CFG FOR DATABASE ON VCDB USING db.tb_runstats_req SET THRESHOLDSCHECKED YES; CONNECT TO VCDB; grant select on sysibmadm.applications to user vcx; CREATE BUFFERPOOL VCBP_8K IMMEDIATE SIZE 250 AUTOMATIC PAGESIZE 8K; CREATE LARGE TABLESPACE VCTS_8k PAGESIZE 8K MANAGED BY AUTOMATIC STORAGE EXTENTSIZE 32 OVERHEAD 12.67 PREFETCHSIZE 32 TRANSFERRATE 0.18 BUFFERPOOL VCBP_8K; CREATE BUFFERPOOL VCBP_16K IMMEDIATE SIZE 250 AUTOMATIC PAGESIZE 16K; CREATE LARGE TABLESPACE VCTS_16k PAGESIZE 16K MANAGED BY AUTOMATIC STORAGE EXTENTSIZE 32 OVERHEAD 12.67 PREFETCHSIZE 32 TRANSFERRATE 0.18 BUFFERPOOL VCBP_16K; CREATE BUFFERPOOL VCBP_32K IMMEDIATE SIZE 250 AUTOMATIC PAGESIZE 32K; CREATE LARGE TABLESPACE VCTS_32k PAGESIZE 32K MANAGED BY AUTOMATIC STORAGE EXTENTSIZE 32 OVERHEAD 12.67 PREFETCHSIZE 32 TRANSFERRATE 0.18 BUFFERPOOL VCBP_32K; CREATE TABLESPACE SYSTOOLSPACE IN IBMCATGROUP MANAGED BY AUTOMATIC STORAGE EXTENTSIZE 4; CREATE USER TEMPORARY TABLESPACE SYSTOOLSTMPSPACE IN IBMCATGROUP MANAGED BY AUTOMATIC STORAGE EXTENTSIZE 4; CREATE SYSTEM TEMPORARY TABLESPACE VCTEMPTS_8K PAGESIZE 8K MANAGED BY AUTOMATIC STORAGE BUFFERPOOL VCBP_8K; CREATE SYSTEM TEMPORARY TABLESPACE VCTEMPTS_16K PAGESIZE 16K MANAGED BY AUTOMATIC STORAGE BUFFERPOOL VCBP_16K; CREATE SYSTEM TEMPORARY TABLESPACE VCTEMPTS_32K PAGESIZE 32K MANAGED BY AUTOMATIC STORAGE BUFFERPOOL VCBP_32K; GRANT USE OF TABLESPACE VCTS_16K TO USER vcx WITH GRANT OPTION; GRANT USE OF TABLESPACE VCTS_32K TO USER vcx WITH GRANT OPTION; GRANT USE OF TABLESPACE VCTS_8K TO USER vcx WITH GRANT OPTION; commit work; connect reset; terminate;4.3 配置ODBC1、在VC系統(tǒng)中,從Windows工具欄單擊【開(kāi)始】【管理工具】【數(shù)據(jù)源(ODBC)】。2、屏幕上將顯示【ODBC數(shù)據(jù)源管理器】對(duì)話框。選擇【系統(tǒng)DSN)】選項(xiàng)卡。單擊【添加】,選擇【DB2COPY1 】。3、彈出創(chuàng)建DB2的新數(shù)據(jù)源窗口,在【名稱】里面輸入【vcdb】(數(shù)據(jù)源名稱,可自己定義),服務(wù)器選擇DB2服務(wù)器。然后點(diǎn)擊【確認(rèn)】。4、輸入描述和建立好的用戶名和密碼,點(diǎn)擊點(diǎn)擊,測(cè)試成功后完成配置4.4 安裝VC1、設(shè)置完成ODBC以后,重啟動(dòng)windows2003操作系統(tǒng),然后把VC安裝光盤載入到光驅(qū),安裝程序會(huì)自動(dòng)運(yùn)行,如沒(méi)有自動(dòng)運(yùn)行,就要進(jìn)入光驅(qū),雙擊根目錄下的autorun.exe進(jìn)行安裝,單擊vCenter Server。2、選擇安裝語(yǔ)言,默認(rèn)是中文。點(diǎn)擊【確定】,開(kāi)始安裝。3、顯示【歡迎使用】,單擊【下一步】,顯示【許可證協(xié)議】屏幕中,選擇【接受該許可證協(xié)議】。單擊【下一步】4、在【客戶信息】屏幕中輸入信息,其中密鑰可在此時(shí)輸入,也可在安裝完成后單獨(dú)編輯設(shè)置(評(píng)估模式)。單擊【下一步】。5、在下圖中首先選擇【使用現(xiàn)有的數(shù)據(jù)庫(kù)服務(wù)器】,然后在下面選擇我們?cè)凇窘DBC連接】中設(shè)置的【數(shù)據(jù)源名稱(DSN)】完成后單擊【下一步】。6、在顯示下圖時(shí),保持默認(rèn)直接單擊【下一步】。7、VC服務(wù),帳戶信息,保持默認(rèn),直接單擊【下一步】。8、選擇安裝文件夾,默認(rèn)就可以。9、vCenter Server 鏈接模式,選擇【創(chuàng)建獨(dú)立的VMware vCenter Server實(shí)例】。單擊【下一步】。10、顯示下圖時(shí),更改鏈接使用端口,建議保持默認(rèn),直接單擊【下一步】。11、選擇默認(rèn),直接單擊【下一步】12、配置完成后,顯示如下圖,直接單擊【安裝】。進(jìn)行正式安裝。13、進(jìn)入正式安裝后,根據(jù)服務(wù)器配置,安裝所需時(shí)間長(zhǎng)短不定,請(qǐng)耐心等待安裝完成。14、重新啟動(dòng)windows操作系統(tǒng),重新啟動(dòng)完成后,在windows操作系統(tǒng)的服務(wù)功能里面,查看VMware VirtrualCenter Management Webservices和VMware VirtualCenter Server服務(wù)。這兩個(gè)服務(wù)是VC的關(guān)鍵進(jìn)程,必需要啟動(dòng)。4.5 安裝VClient 安裝VClient前,將自動(dòng)安裝.net framework 3.0,依次將出現(xiàn)以下界面。其中關(guān)于“正在下載”、“安裝過(guò)程中遇到問(wèn)題”兩個(gè)提示信息可以忽略。提示Framework安裝完成。 提示VClient安裝完成。5 創(chuàng)建數(shù)據(jù)中心5.1 創(chuàng)建數(shù)據(jù)中心使用VMware Client,文件菜單中,選擇新建數(shù)據(jù)中心,輸入數(shù)據(jù)中心名字。5.2 配置主機(jī)5.2.1 添加主機(jī)1、根據(jù)IP添加主機(jī),輸入主機(jī)的用戶名和密碼 忽略以下的安全提示。2、點(diǎn)擊下一步3、分配相關(guān)許可密鑰,點(diǎn)擊下一步,完成5.2.2 配置時(shí)間和NTP服務(wù)1. 開(kāi)通VMware管理網(wǎng)絡(luò)到NTP服務(wù)器的訪問(wèn)控制。2. Vclient連接虛擬機(jī)后,點(diǎn)中ESX服務(wù)器,“配置”頁(yè)面中, 選擇“時(shí)間配置”,點(diǎn)擊“屬性”。 點(diǎn)擊“屬性”, 可以設(shè)置時(shí)間和NTP。在NTP配置中,點(diǎn)擊選項(xiàng), 可以設(shè)置NTP。 5.3 配置license5.3.1 配置ESX License點(diǎn)中ESX虛擬機(jī),在“配置”頁(yè)中,選擇“已獲得許可的功能”,點(diǎn)擊“編輯”,可以添加License。 5.3.2 檢查Vmware License 點(diǎn)中ESX虛擬機(jī),在“配置”頁(yè)中,選擇“已獲得許可的功能”,將看到當(dāng)前的License類型。 對(duì)于Enterprise Plus版本,包含以下功能: 產(chǎn)品功能: 最大內(nèi)存為 256 GB 最多 8 路虛擬 SMP ESX Server 的 vCenter 代理 vStorage API VMsafe DVfilter VMware HA 可熱插拔的虛擬硬件 vMotion VMware FT Data Recovery vShield Zones VMware DRS Storage vMotion MPIO/第三方多路徑 遠(yuǎn)程虛擬串行端口集中器5.3.3 配置vCenter Server License1、登錄vCenter Server,點(diǎn)擊主頁(yè)2、點(diǎn)擊vCenter Server 設(shè)置3. 選擇“向vCenter Server分配新的許可證密鑰”4、點(diǎn)擊輸入密鑰,輸入相應(yīng)的license,點(diǎn)擊確定,即可激活vCenter Server5.4 網(wǎng)絡(luò)設(shè)置5.4.1 VMware 網(wǎng)絡(luò)介紹VMware ESXi有三種網(wǎng)絡(luò)類型:管理網(wǎng)絡(luò),VMkernel網(wǎng)絡(luò),虛擬機(jī)網(wǎng)絡(luò)。1. 管理網(wǎng)絡(luò):虛擬機(jī)默認(rèn)的網(wǎng)絡(luò),用于內(nèi)部管理,默認(rèn)未開(kāi)啟vmotion功能。2. VMkernel網(wǎng)絡(luò):是VMware 實(shí)現(xiàn)連接iscsi存儲(chǔ)、vMotion功能的基礎(chǔ)網(wǎng)絡(luò)類型,要實(shí)現(xiàn)以上功能先創(chuàng)建此網(wǎng)絡(luò)類型。3. 虛擬機(jī)網(wǎng)絡(luò):虛擬機(jī)對(duì)外通信的網(wǎng)絡(luò),如果要為生產(chǎn)虛擬機(jī)提供網(wǎng)絡(luò)連接,則必須要?jiǎng)?chuàng)建該類型的端口組。對(duì)于我行系統(tǒng),為了簡(jiǎn)化管理,將“管理網(wǎng)絡(luò)”的“將此端口組用于Vmotion”的開(kāi)關(guān)打開(kāi),從而避免創(chuàng)建單獨(dú)的“VMkernel網(wǎng)絡(luò)”。5.4.2 管理網(wǎng)絡(luò)設(shè)置1. 修改網(wǎng)絡(luò)標(biāo)簽,從“VM Network”, 修改為“Internal”,以區(qū)別于用于生產(chǎn)的業(yè)務(wù)網(wǎng)絡(luò)。2. 選中“將此端口組用于Vmotion” 3. 設(shè)置網(wǎng)卡雙活。1) 選擇主機(jī),點(diǎn)擊配置,選擇網(wǎng)絡(luò)2) 在虛擬交換機(jī)旁,點(diǎn)擊屬性。3) 選擇vSwitch, 點(diǎn)擊“編輯”4) 選擇“網(wǎng)卡綁定”,通過(guò)上移按鈕,將兩塊網(wǎng)卡都放置在“活動(dòng)的適配器”下。5) 修改后,將看到兩塊網(wǎng)線都顯示為“全雙工”。 5.4.3 虛擬機(jī)網(wǎng)絡(luò)設(shè)置1、點(diǎn)擊添加網(wǎng)絡(luò),選擇虛擬機(jī):2、輸入相關(guān)網(wǎng)絡(luò)標(biāo)簽和VLAN ID,點(diǎn)擊下一步 我行系統(tǒng)中使用該網(wǎng)絡(luò)的網(wǎng)段做為標(biāo)簽名,比如“-255” “-255” VLAN ID,是當(dāng)物理交換機(jī)做了trunk時(shí)才設(shè)置。3、點(diǎn)擊完成5.4.4 VMotion Kernel網(wǎng)絡(luò)設(shè)置說(shuō)明: 我行系統(tǒng)中,將管理網(wǎng)絡(luò)中打開(kāi)了“Vmotion”功能,所以一般不需要再單獨(dú)創(chuàng)建VMKernel網(wǎng)絡(luò)。1、 點(diǎn)擊添加網(wǎng)絡(luò),選擇VMkernel2、輸入網(wǎng)絡(luò)標(biāo)簽,勾選將此端口組用于vMotion3、輸入IP地址和相應(yīng)子網(wǎng)掩碼,點(diǎn)擊下一步4、點(diǎn)擊否,完成5.5 存儲(chǔ)設(shè)置5.5.1 存儲(chǔ)和交換機(jī)設(shè)置1. VMware中,選擇主機(jī) 屬性 存儲(chǔ)卡,記錄該主機(jī)的WWN號(hào)。2. 將準(zhǔn)備配置成集群的主機(jī)都接入相同的2臺(tái)光纖交換機(jī)中,在交換機(jī)中,將以上主機(jī)劃入相同的zone中。3. 在存儲(chǔ)中,將以上主機(jī)化為一組,進(jìn)行相同的mapping。劃分LUN,為L(zhǎng)UN同一命名,比如ESXA_OS_LUN_1, 記錄LUN號(hào)。5.5.2 添加存儲(chǔ)配置1、在以上的主機(jī)組中,選取一臺(tái)主機(jī),選擇添加存儲(chǔ)器,選定磁盤/LUN 2、選擇相應(yīng)的LUN,注意顯示的“LUN號(hào)” 應(yīng)該為存儲(chǔ)中顯示的LUN號(hào)相同。3、擇下一步4、 此時(shí),該LUN是空白的,將提述輸入存儲(chǔ),建議和存儲(chǔ)中定義的LUN名相同。5、選擇相應(yīng)的塊大小,默認(rèn)大小為1M, 支持的最大單個(gè)文件為256G,根據(jù)所需單個(gè)文件的最大值,來(lái)選擇相應(yīng)的塊大小。1. 1M的塊支持的單個(gè)文件最大為256G2. 2M的塊支持的單個(gè)文件最大為512G3. 4M的快支持的單個(gè)文件最大為1TB4. 8M的塊支持的單個(gè)文件最大為2TB6、擊完成,完成添加存儲(chǔ)器6、檢查集群中的其他主機(jī),確認(rèn)其他主機(jī)可以看到相同的LUN。5.5.3 存儲(chǔ)擴(kuò)容配置 VMware中,可以將原有的LUN進(jìn)行擴(kuò)容,即將2個(gè)存儲(chǔ)的LUN進(jìn)行合并。1、點(diǎn)擊主機(jī),點(diǎn)擊配置,選擇將要擴(kuò)容的存儲(chǔ),點(diǎn)擊屬性2、點(diǎn)擊增加3、選擇增加的LUN,點(diǎn)擊下一步,直到完成,完成對(duì)存儲(chǔ)的擴(kuò)容5.6 創(chuàng)建主機(jī)群集5.6.1 配置主機(jī)通信配置VMware 集群前,必須保障集群內(nèi)的所有主機(jī),可以通過(guò)主機(jī)名相互識(shí)別,有兩種配置方法,我行使用的是第一種方法。方法1: 將配置為一個(gè)VMware集群的主機(jī)作為一組,修改該組內(nèi)所有主機(jī)的hosts表,將該組的所有主機(jī)的主機(jī)名和IP將加入hosts表中。方法2: 所有主機(jī)中,配置相同的NDS服務(wù)器。在DNS服務(wù)器,記錄所有主機(jī)的信息。5.6.2 配置網(wǎng)絡(luò)環(huán)境逐臺(tái)設(shè)置主機(jī)的網(wǎng)絡(luò)設(shè)置。設(shè)置為以下的虛擬交換機(jī)。網(wǎng)絡(luò)交換機(jī)端口組網(wǎng)卡vSwitch0InternalVmnic0,Vmnic4vSwitch-255Vmnic1,Vmnic5vSwitch-255Vmnic2,Vmnic6 以上虛擬網(wǎng)卡對(duì)應(yīng)以下位置的物理網(wǎng)卡:Vmnic0(內(nèi)置網(wǎng)卡的第一個(gè)網(wǎng)口)Vmnic1(內(nèi)置網(wǎng)卡的第二個(gè)網(wǎng)口)Vmnic2(內(nèi)置網(wǎng)卡的第三個(gè)網(wǎng)口)Vmnic2(內(nèi)置網(wǎng)卡的第四個(gè)網(wǎng)口)Vmnic4(外置第一塊網(wǎng)卡的上口)Vmnic5(外置第一塊網(wǎng)卡的下口)Vmnic6(外置第二塊網(wǎng)卡的上口)5.6.3 配置集群在新建的數(shù)據(jù)中心上,點(diǎn)擊鼠標(biāo)右鍵,選擇新建群集,輸入群集名稱,選擇“打開(kāi)VMware HA”,不選擇“打開(kāi)VMware DRS” 選擇打開(kāi)“啟動(dòng)主機(jī)監(jiān)控”取消“虛擬機(jī)監(jiān)控”虛擬機(jī)重新啟動(dòng)優(yōu)先級(jí),選擇“中等”。該設(shè)置表示,主機(jī)發(fā)生故障等問(wèn)題時(shí),虛擬機(jī)將切換到其他主機(jī),并通過(guò)重新啟動(dòng)操作系統(tǒng)來(lái)進(jìn)行恢復(fù)。主機(jī)隔離級(jí)別,選擇“保持啟動(dòng)”。該設(shè)置表示,當(dāng)管理網(wǎng)絡(luò)發(fā)生不能聯(lián)通時(shí),主機(jī)不發(fā)生重啟。5.6.4 測(cè)試配置集群后,進(jìn)行如下測(cè)試: 1. 切換主機(jī)測(cè)試方法:選擇虛擬機(jī),選擇“遷移”“更改主機(jī)”,從一臺(tái)主機(jī)遷移到其他主機(jī)。測(cè)試結(jié)果:觀察遷移過(guò)程中虛擬機(jī)可以繼續(xù)對(duì)外提供服務(wù)。2. 切換存儲(chǔ):測(cè)試方法:選擇虛擬機(jī),選擇“遷移”“更改數(shù)據(jù)存儲(chǔ)”,從一個(gè)共享存儲(chǔ)遷移到其他共享存儲(chǔ)。測(cè)試結(jié)果:觀察遷移過(guò)程中虛擬機(jī)可以繼續(xù)對(duì)外提供服務(wù)。3. 異常宕機(jī)測(cè)試方法:通過(guò)關(guān)閉電源的方法關(guān)閉一臺(tái)主機(jī),模擬異常宕機(jī)。測(cè)試結(jié)果:觀察虛擬機(jī)自動(dòng)切換到其他主機(jī)。此時(shí),操作系統(tǒng)有一個(gè)重啟動(dòng)作。5.7 創(chuàng)建只讀用戶appmonvCenter所在操作系統(tǒng)的Administrator用戶是VMware默認(rèn)的管理用戶,按照我行的管理要求,還需要?jiǎng)?chuàng)建只讀用戶appmon。1. 操作系統(tǒng)中增加用戶appmon。該用戶需要增加到remote desktop用戶組。2. 在vCenter,設(shè)置appmon為只讀用戶角色。1)點(diǎn)擊主頁(yè),點(diǎn)擊主機(jī)和群集,選中根,也就是vCenter,然后選中權(quán)限2)、右鍵選擇空白處,選擇添加權(quán)限,彈出以下窗口3)、分配的角色選中只讀,在用戶和組的選框中點(diǎn)擊添加、選中appmon用戶,點(diǎn)擊確定4)點(diǎn)擊確定后完成對(duì)appmon用戶的授權(quán)6 虛擬機(jī)部署6.1 新建虛擬機(jī)6.1.1 創(chuàng)建虛擬機(jī)新建虛擬機(jī),用安裝光盤或者iso文件安裝虛擬機(jī)操作系統(tǒng)。1、右鍵ESXiserver,選擇新建虛擬機(jī):2、彈出提示窗口:3、為虛擬機(jī)命名,并且選擇存在的數(shù)據(jù)中心: 注意,虛擬機(jī)名稱最多80個(gè)字符,并且需要是唯一的。4、如果已經(jīng)建立了資源池,則系統(tǒng)會(huì)讓您選擇虛擬機(jī)運(yùn)行的資源池:5、選擇虛擬機(jī)存放的存儲(chǔ)位置:6、設(shè)置虛擬機(jī)要部署的操作系統(tǒng)類型,以及操作系統(tǒng)版本:7、設(shè)置虛擬機(jī)vcpu的數(shù)量:(若安裝linux系統(tǒng),則選擇2,目的是為安裝上多cpu支持包)8、設(shè)置虛擬機(jī)使用內(nèi)存的大小:9、設(shè)置虛擬機(jī)網(wǎng)絡(luò),虛擬網(wǎng)卡數(shù)量以及連接位置: 這里所選的“網(wǎng)絡(luò)”,對(duì)應(yīng)主機(jī)網(wǎng)絡(luò)設(shè)置中的 “端口組”10、設(shè)置虛擬機(jī)存儲(chǔ)適配器類型,建議根據(jù)安裝的系統(tǒng)具體選擇:11、創(chuàng)建新的虛擬磁盤:12、設(shè)置虛擬磁盤的大小:13、查看設(shè)置信息,點(diǎn)擊完成,完成虛擬機(jī)的創(chuàng)建:6.1.2 安裝操作系統(tǒng)完成虛擬機(jī)創(chuàng)建工作后,啟動(dòng)虛擬機(jī),選擇上方光驅(qū)連接,可以選擇本地光驅(qū)或者本地的iso文件,完成操作系統(tǒng)的部署。具體設(shè)置同物理機(jī)部署操作系統(tǒng)。1、右鍵點(diǎn)擊創(chuàng)建好的虛擬機(jī),點(diǎn)擊編輯配置,彈出如下窗口2、選擇CD/DVD驅(qū)動(dòng)器,可以選擇主機(jī)設(shè)備,并勾選“已連接”“打開(kāi)電源時(shí)連接”選項(xiàng)。3、也可以選擇數(shù)據(jù)存儲(chǔ)ISO文件,并找到存儲(chǔ)中相應(yīng)的ISO文件,勾選已連接,打開(kāi)電源時(shí)連接4. 上傳ISO文件到主機(jī)本地磁盤的操作步驟如下:1)、通過(guò)vSphere Client登錄主機(jī)后點(diǎn)擊主機(jī)、配置,選擇本地存儲(chǔ)2)、右鍵本地存儲(chǔ),點(diǎn)擊瀏覽存儲(chǔ)器,彈出以下圖示,選擇上載文件3)、選中指定的ISO文件,點(diǎn)擊打開(kāi),彈出提示框,點(diǎn)擊是4)介質(zhì)開(kāi)始上傳,直到上傳完畢會(huì)自動(dòng)關(guān)閉窗口6.1.3 設(shè)置虛擬機(jī)自動(dòng)啟動(dòng)默認(rèn)虛擬機(jī)是手動(dòng)啟動(dòng),根據(jù)需要可以設(shè)置為自動(dòng)啟動(dòng)。對(duì)于VMwareHA中的虛擬機(jī),不需要設(shè)置;對(duì)于單機(jī)上的虛擬機(jī),建議設(shè)置為自動(dòng)啟動(dòng)。方法是選中一臺(tái)主機(jī),點(diǎn)擊配置,選擇“虛擬機(jī)啟動(dòng)/關(guān)機(jī)” 通過(guò)“上移”按鈕,將需要自動(dòng)重啟的虛擬機(jī)調(diào)整到“自動(dòng)啟動(dòng)”下。 6.2 模板部署虛擬機(jī)6.2.1 創(chuàng)建模板模板:模板是虛擬機(jī)的副本,可用于創(chuàng)建新虛擬機(jī),通常包含指定的操作系統(tǒng)和配置。1、右鍵虛擬機(jī),選擇clone為模板,彈出如下界面:為模板命名,并且選擇模板存放的數(shù)據(jù)中心:2、選擇模板存放的主機(jī):3、選擇模板存放的存儲(chǔ)空間:4、選擇模板的存放格式:5、查看模板的信息,確認(rèn)后點(diǎn)擊完成退出,任務(wù)欄回顯示進(jìn)度:6.2.2 模板部署虛擬機(jī)模板在默認(rèn)的“虛擬機(jī)”視圖中不可見(jiàn)。要查看模版,需要點(diǎn)擊清單,選擇“虛擬機(jī)和模板”,顯示出目前數(shù)據(jù)中心中所有的虛擬機(jī)和模板。1、右鍵選擇模板,選擇從該模板部署虛擬機(jī):2、填寫(xiě)要?jiǎng)?chuàng)建虛擬機(jī)的名,選擇數(shù)據(jù)中心:3、選擇虛擬機(jī)運(yùn)行的ESXI server:4、選擇虛擬機(jī)存放的存儲(chǔ)空間:5、選擇操作系統(tǒng)用戶定制項(xiàng): 自定義規(guī)則用于改變虛擬機(jī)的主機(jī)名,IP,時(shí)區(qū)等信息。其中每一個(gè)window系統(tǒng)都有自己的SID,需要通過(guò)“自定義規(guī)則”來(lái)虛擬機(jī)生成新的SID。6.2.3 自定義規(guī)則自定義規(guī)則用于改變虛擬機(jī)的主機(jī)名,IP,時(shí)區(qū)等信息。其中每一個(gè)window系統(tǒng)都有自己的SID,需要通過(guò)“自定義規(guī)則”使虛擬機(jī)生成新的SID。1、點(diǎn)擊主頁(yè),點(diǎn)擊自定義規(guī)范管理器2、選擇新建,彈出以下窗口3、輸入名稱,點(diǎn)擊下一步4、輸入名稱和單位,點(diǎn)擊下一步5、選擇主機(jī)名稱,點(diǎn)擊下一步6、輸入windows許可信息,選擇每臺(tái)服務(wù)器的最大連接數(shù),點(diǎn)擊下一步7、輸入管理員的密碼,點(diǎn)擊下一步8、選定時(shí)區(qū),點(diǎn)擊下一步9,點(diǎn)擊下一步10、選擇典型設(shè)置,點(diǎn)擊下一步11、選擇工作組或域、點(diǎn)擊下一步12、勾選生成新的SID、點(diǎn)擊下一步13、點(diǎn)擊完成,完成自定義規(guī)范的創(chuàng)建6.3 克隆部署虛擬機(jī)選擇一個(gè)虛擬機(jī),選擇“克隆”,將生成一個(gè)新的虛擬機(jī),配置方法方法同模板部署虛擬機(jī)。7 converter 4.3軟件使用VMware converter 是用于將實(shí)體機(jī)遷移成虛擬機(jī)的工具。支持window,linux的遷移。該工具需要和VCenter安裝在一個(gè)操作系統(tǒng)中。遷移分為熱遷移和冷遷移兩種方式。熱遷移:源操作系統(tǒng)啟動(dòng)時(shí)進(jìn)行遷移。冷遷移:源操作系統(tǒng)關(guān)機(jī)時(shí)進(jìn)行遷移。7.1 VMware converter standalone軟件安裝1、雙擊運(yùn)行vmware converter standalone安裝程序2、選擇語(yǔ)言安裝類型3、單擊下一步繼續(xù)4、單擊下一步繼續(xù)5、接受許可協(xié)議,單擊下一步繼續(xù)6、若要更改vmware converter standalone的安裝目錄。單擊“更改”,選擇相應(yīng)的安裝目錄。 單擊下一步繼續(xù)7、選擇“本地安裝”模式,單擊下一步繼續(xù)8、單擊“安裝”9、若要立即執(zhí)行vmware converter standalone程序,請(qǐng)勾選“立即運(yùn)行Client”。 單擊“完成”。10、檢查vmware converter standalone是否安裝成功。程序安裝成功會(huì)在桌面上創(chuàng)建快捷方式。7.2 P2V 物理服務(wù)器至虛擬化架構(gòu)11、雙擊桌面上“vmware converter standalone”圖標(biāo)運(yùn)行程序12、彈出vmware converter standalone 界面7.2.1 熱P2V Windows 2003物理服務(wù)器13、點(diǎn)擊“轉(zhuǎn)換計(jì)算機(jī)”14、選擇源類型為“已啟動(dòng)的計(jì)算機(jī)”。如果是做V2V,請(qǐng)選擇“vmware infrastructure 虛擬機(jī)”。15、輸入要P2V Windows2003物理服務(wù)器的的IP地址、管理員帳號(hào)和密碼。選擇“操作系統(tǒng)系列”為Windows。單擊下一步繼續(xù)16、選擇“稍后我將手動(dòng)卸載這些文件”,單擊“是”繼續(xù)17、選擇“目標(biāo)類型”為VMware Infrastructure 虛擬機(jī)。輸入虛擬化架構(gòu)中vCenter或ESXI主機(jī)的IP地址、管理員帳號(hào)和密碼。18、點(diǎn)擊“忽略”繼續(xù)19、輸入P2V至虛擬化架構(gòu)中的Windows2003物理服務(wù)器的顯示名稱(非系統(tǒng)內(nèi)部計(jì)算機(jī)名稱)。單擊下一步繼續(xù)20、選擇虛擬機(jī)文件存放的數(shù)據(jù)存儲(chǔ)。選擇虛擬機(jī)的版本為7。單擊下一步繼續(xù)21、若要對(duì)磁盤分區(qū)進(jìn)行更改,選擇“要復(fù)制的數(shù)據(jù)”,點(diǎn)擊右側(cè)對(duì)應(yīng)的“編輯”22、點(diǎn)擊“目標(biāo)大小”的下拉菜單。選擇“以GB為單位”,輸入要更改的磁盤大小。點(diǎn)擊右側(cè)的關(guān)閉按鈕。23、點(diǎn)擊“是”繼續(xù)24、若要對(duì)虛擬機(jī)硬件進(jìn)行更改。選擇“設(shè)備”,點(diǎn)擊右側(cè)相應(yīng)的“編輯”。更改完成后,單擊下一步繼續(xù)25、單擊“完成”26、檢查P2V任務(wù)是否運(yùn)行27、檢查P2V是否成功7.2.2 熱P2V LINUX物理服務(wù)器28、點(diǎn)擊“轉(zhuǎn)換計(jì)算機(jī)”29、選擇源類型為“已啟動(dòng)的計(jì)算機(jī)”。輸入要P2V LINUX物理服務(wù)器的的IP地址、管理員帳號(hào)和密碼。選擇“操作系統(tǒng)系列”為L(zhǎng)INUX。單擊下一步繼續(xù)30、選擇“目標(biāo)類型”為VMware Infrastructure 虛擬機(jī)。輸入虛擬化架構(gòu)中vCenter或ESXI主機(jī)的IP地址、管理員帳號(hào)和密碼。單擊下一步繼續(xù)31、點(diǎn)擊“忽略”繼續(xù)32、輸入P2V至虛擬化架構(gòu)中的虛擬機(jī)現(xiàn)實(shí)名稱(非系統(tǒng)內(nèi)部計(jì)算機(jī)名稱),單擊下一步繼續(xù)33、選擇存放虛擬機(jī)文件的數(shù)據(jù)存儲(chǔ)。選擇虛擬機(jī)版本為7。單擊下一步繼續(xù)34、若要對(duì)磁盤分區(qū)進(jìn)行更改,選擇“要復(fù)制的數(shù)據(jù)”,點(diǎn)擊右側(cè)對(duì)應(yīng)的“編輯” 35、點(diǎn)擊“目標(biāo)大小”的下拉菜單。選擇“以GB為單位”,輸入要更改的磁盤大小。點(diǎn)擊右側(cè)的關(guān)閉按鈕。36、單擊“是”繼續(xù)37、若要對(duì)虛擬機(jī)硬件進(jìn)行更改。選擇“設(shè)備”,點(diǎn)擊右側(cè)相應(yīng)的“編輯”。38、選擇“助手虛擬機(jī)網(wǎng)絡(luò)”,點(diǎn)擊右側(cè)對(duì)應(yīng)的“編輯”39、選擇“使用下面的IP地址”并輸入一個(gè)P2V LINUX系統(tǒng)物理服務(wù)器過(guò)程使用的臨時(shí)IP。 點(diǎn)擊“關(guān)閉”按鈕40、點(diǎn)擊“是”繼續(xù)41、單擊下一步繼續(xù)42、單擊“完成”43、檢查P2V任務(wù)是否運(yùn)行44、檢查P2V是否成功7.2.3 冷P2V Windows 2003物理服務(wù)器45、使用vmware converter coldclone光
溫馨提示
- 1. 本站所有資源如無(wú)特殊說(shuō)明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請(qǐng)下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請(qǐng)聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁(yè)內(nèi)容里面會(huì)有圖紙預(yù)覽,若沒(méi)有圖紙預(yù)覽就沒(méi)有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫(kù)網(wǎng)僅提供信息存儲(chǔ)空間,僅對(duì)用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對(duì)用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對(duì)任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請(qǐng)與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時(shí)也不承擔(dān)用戶因使用這些下載資源對(duì)自己和他人造成任何形式的傷害或損失。
最新文檔
- 農(nóng)學(xué)專業(yè)知識(shí)試題及答案
- 孕嬰師中級(jí)試題及答案
- 2024年紡織工程師考試學(xué)習(xí)交流試題及答案
- 2024年廣告設(shè)計(jì)師職業(yè)規(guī)劃 試題及答案
- 醫(yī)院設(shè)備科筆試題及答案
- 云南專升本測(cè)試題及答案
- 商業(yè)美術(shù)設(shè)計(jì)師2024年考試解析資料及答案
- 云南德宏單招試題及答案
- 研究廣告設(shè)計(jì)的綜合市場(chǎng)策略 試題及答案
- 建筑專業(yè)面試題及答案
- 海洋機(jī)器人與人工智能知到智慧樹(shù)章節(jié)測(cè)試課后答案2024年秋哈爾濱工程大學(xué)
- 上海市境內(nèi)旅游合同 示范文本(2013版)
- 鋼構(gòu)制品加工協(xié)議
- “煎炒烹炸”與中藥療效(安徽中醫(yī)藥大學(xué))知道智慧樹(shù)章節(jié)答案
- 病毒蛋白相互作用
- 一年級(jí)數(shù)學(xué)下冊(cè)100以內(nèi)加減法口算題一
- 2024年新人教版四年級(jí)數(shù)學(xué)下冊(cè)《第6單元第2課時(shí) 小數(shù)加減法》教學(xué)課件
- 2024年動(dòng)物疫病防治員(高級(jí))技能鑒定理論考試題庫(kù)(含答案)
- 四川省2024年全國(guó)高中數(shù)學(xué)聯(lián)賽(預(yù)賽)試題(解析版)
- 江蘇省南京市江寧區(qū)2023-2024六年級(jí)下學(xué)期期末數(shù)學(xué)試卷及答案
- 2024年新課標(biāo)高考?xì)v史試卷(適用云南、河南、新疆、山西地區(qū) 真題+答案)
評(píng)論
0/150
提交評(píng)論