




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
1、HCNP-Cloud-FCDC實(shí)驗(yàn)操作手冊文檔版本發(fā)布日期1.12015.12技術(shù)所有 非經(jīng)本公司式。技術(shù),任何2015。 保留一切權(quán)利。和個人不得擅自摘抄、本文檔內(nèi)容的部分或全部,并不得以任何形商標(biāo)本文檔提及的其他所有商標(biāo)或商標(biāo),由各自的所有人擁有。注意您的、服務(wù)或特性等應(yīng)受公司商業(yè)合同和條款的約束,本文檔中描述的全部或部分、服務(wù)或特性可能不在您的或使用范圍之內(nèi)。除非合同另有約定,公司對本文檔內(nèi)容不做任何明示或暗示的或保證。由于版本升級或其他原因,本文檔內(nèi)容會不定期進(jìn)行更新。除非另有約定,本文檔僅作為使用指導(dǎo),本文檔中的所有陳述、信息和建議不構(gòu)成任何明示或暗示的擔(dān)保。技術(shù)地址:客戶服務(wù)郵箱:
2、市龍崗區(qū)坂田總部辦公樓:518129htt 客戶服務(wù):文檔版本錯誤!未知的文檔屬性名稱 (錯誤!未知的文檔屬性名稱)錯誤!未知的文檔屬性名稱i文檔密級言概述本文檔主要描述eLab功能與臺界面操作,用于指導(dǎo)實(shí)驗(yàn)參與者進(jìn)行定與操作。虛擬化實(shí)驗(yàn)預(yù)讀者對象本文檔主要適用于以下:eLab 學(xué)員eLab 講師ll修改文檔版本 01 (2015-12-08)第一次正式發(fā)布第 2 頁, 共 132 頁文檔密級目錄言2適用范圍712實(shí)驗(yàn)組網(wǎng)圖72.1 組網(wǎng)拓樸72.2 網(wǎng)絡(luò)參數(shù)規(guī)劃73實(shí)驗(yàn)二 使用pute73.1界面登錄73.1.1配置IE瀏覽器73.1.2配置火狐瀏覽器93.1.3登錄pute93.2創(chuàng)建虛擬
3、機(jī)103.2.1選擇創(chuàng)建位置103.2.2設(shè)置虛擬機(jī)屬性113.2.3設(shè)置網(wǎng)卡和磁盤123.2.4查看創(chuàng)建進(jìn)度133.3安裝虛擬機(jī)(Windows)133.3.1掛載光驅(qū)133.3.2安裝操作系統(tǒng)153.3.3卸載光驅(qū)153.3.4安裝Tools153.4制作模板163.4.1選擇模板創(chuàng)建方案163.4.2將虛擬機(jī)轉(zhuǎn)為模板173.4.3將虛擬機(jī)克隆為模板183.5使用模板創(chuàng)建虛擬機(jī)203.5.1 選擇創(chuàng)建位置203.5.2 設(shè)置虛擬機(jī)屬性20第 3 頁, 共 132 頁文檔密級3.5.3 設(shè)置網(wǎng)卡和磁盤213.5.4 創(chuàng)建虛擬機(jī)214實(shí)驗(yàn)一 創(chuàng)建計算集群224.1 實(shí)驗(yàn)步驟224.1.1 進(jìn)入
4、“創(chuàng)建集群”頁面224.1.2 設(shè)置基本配置224.1.3 設(shè)置HA配置254.1.4 設(shè)置調(diào)度264.1.5 設(shè)置IMC模式284.1.6 完成創(chuàng)建集群294.1.7 后續(xù)任務(wù)29實(shí)驗(yàn)二 在集群中添加主機(jī)3055.1 實(shí)驗(yàn)步驟305.1.1 選擇添加主機(jī)方式305.1.2 進(jìn)入“添加主機(jī)”頁面。305.1.3 添加主機(jī)315.1.4 獲取添加主機(jī)模板325.1.5 后續(xù)任務(wù)336實(shí)驗(yàn)三 配置主機(jī).336.1 實(shí)驗(yàn)步驟336.1.1 添加接口336.1.2 向站點(diǎn)添加6.1.3 向主機(jī)關(guān)聯(lián).37.396.1.4 掃描6.1.5 配置設(shè)備41設(shè)備446.1.6 添加數(shù)據(jù).516.1.7 創(chuàng)建磁盤
5、52實(shí)驗(yàn)四 網(wǎng)絡(luò)管理5677.1 實(shí)驗(yàn)步驟56第 4 頁, 共 132 頁文檔密級7.1.1 創(chuàng)建分布式交換機(jī)567.1.2 添加上行鏈路617.1.3 添加VLAN池647.1.4 添加子網(wǎng)657.1.5 創(chuàng)建端口組678 實(shí)驗(yàn)五pute備份與恢復(fù)718.1 實(shí)驗(yàn)步驟718.1.1 備份與恢復(fù)策略718.1.2 備份數(shù)據(jù)738.1.3 恢復(fù)數(shù)據(jù)769 實(shí)驗(yàn)二 安裝VSAM8310實(shí)驗(yàn)三配置告警上報8811管理90實(shí)驗(yàn)四11.1接入9011.1.1 創(chuàng)建分區(qū)9011.1.2 添加虛擬化環(huán)境9111.1.3 關(guān)聯(lián)集群到分區(qū)9311.1.4 創(chuàng)建可用分區(qū)9411.2 配置池9611.2.1 創(chuàng)建V
6、LAN池9611.2.2 創(chuàng)建外部網(wǎng)絡(luò)9811.2.3 創(chuàng)建VSA管理網(wǎng)絡(luò)100實(shí)驗(yàn)五 虛擬機(jī)和模板管理1021212.1 準(zhǔn)備虛擬機(jī)模板10212.1.1 導(dǎo)入VSA模板10212.1.2 創(chuàng)建虛擬機(jī)模板10612.2 創(chuàng)建VDC11312.3 創(chuàng)建VPC和網(wǎng)絡(luò)11512.3.1 創(chuàng)建VPC115第 5 頁, 共 132 頁文檔密級12.3.2 申請路由器11512.3.3 創(chuàng)建路由網(wǎng)絡(luò)116虛擬機(jī)11812.4.1 創(chuàng)建虛擬機(jī)11812.4.2 綁定彈性IP地址11912.4.3 添加ACL規(guī)則12012.413實(shí)驗(yàn)六 業(yè)務(wù).12213.1一個虛擬機(jī)12213.1.1 簡介122流程123
7、13.1.213.1.3 管理員需要完成的任務(wù)12313.1.4 租戶需要完成的任務(wù)126一個應(yīng)用實(shí)例12713.2.1 簡介12713.2流程12713.2.213.2.3 管理員需要完成的任務(wù)12813.2.4 租戶需要完成的任務(wù)131第 6 頁, 共 132 頁文檔密級1 適用范圍此文檔適用于 FusionSphere R5培訓(xùn),此文檔指導(dǎo)我們?nèi)绾螌?shí)驗(yàn)操作。2實(shí)驗(yàn)組網(wǎng)圖2.1 組網(wǎng)拓樸請根據(jù)具體的網(wǎng)絡(luò)拓?fù)溥M(jìn)行相關(guān)的操作2.2 網(wǎng)絡(luò)參數(shù)規(guī)劃具體的網(wǎng)絡(luò)參數(shù)請參考實(shí)際的組網(wǎng)場景。3實(shí)驗(yàn)二 使用pute3.1 界面登錄3.1.1 配置IE 瀏覽器12打開 IE 瀏覽器。在瀏覽器地址欄輸入節(jié)點(diǎn)的
8、IP 地址 ,按回車鍵。示例:3單擊“繼續(xù)瀏覽此(不推薦)”。pute登錄頁面。同意“最終用戶協(xié)議”,單擊“確定”,進(jìn)入第 7 頁, 共 132 頁文檔密級4在瀏覽器地址欄中,單擊“錯誤”,并在彈出的框中,單擊“查看”。彈出“”框。5單擊“安裝”。彈出“導(dǎo)入向?qū)А笨颉?進(jìn)入“”框。放入下列區(qū)”,并單擊“瀏覽”。7選中“將所有的彈出“選擇選擇“受信任的根”框。8頒發(fā)機(jī)構(gòu)”,并單擊“確定”??颉7祷亍啊?進(jìn)入“正在完成 單擊“完成”。 彈出“安全警告”單擊“是”。導(dǎo)入向?qū)А笨颉?0框。11彈出“導(dǎo)入成功”提示框。1213單擊“確定”,完成安裝。在“”框中,單擊“確定”。返回瀏覽器界面。按“Ctrl
9、+Shift+Delete”。14第 8 頁, 共 132 頁文檔密級彈出“刪除瀏覽的歷史”框。勾選如下項(xiàng)目:15llll保留收藏夾數(shù)據(jù)Internet 臨時文件Cookie歷史16單擊“刪除”。刪除瀏覽的歷史。17關(guān)閉并重新打開 IE 瀏覽器,登錄pute。3.1.2 配置火狐瀏覽器123打開 Firefox 瀏覽器。在瀏覽器地址欄輸入節(jié)點(diǎn)的 IP 地址,按回車鍵。展開“我已充分了解可能的風(fēng)險”,單擊“添加例外”。彈出“添加安全例外”界面。4確認(rèn)“保存此例外”勾選后,單擊“確認(rèn)安全例外”。完成Firefox瀏覽器的配置。3.1.3 登錄pute1在瀏覽器地址欄輸入進(jìn)入登錄頁面。節(jié)點(diǎn)的 IP
10、地址,按回車鍵。2輸入用戶名、,單擊登錄。示例:默認(rèn)用戶名:admin默認(rèn):CLOUD8!。pute管理系統(tǒng)。3首次登錄強(qiáng)制修改初始成功修改后,進(jìn)入第 9 頁, 共 132 頁文檔密級3.2 創(chuàng)建虛擬機(jī)3.2.1 選擇創(chuàng)建位置1在pute 中,選擇“虛擬機(jī)和模板”。2單擊“創(chuàng)建虛擬機(jī)”。進(jìn)入“創(chuàng)建位置”頁面。第 10 頁, 共 132 頁文檔密級3選擇虛擬機(jī)創(chuàng)建位置。示例:保持默認(rèn)設(shè)置。4進(jìn)入“屬性”頁面。3.2.2 設(shè)置虛擬機(jī)屬性1輸入虛擬機(jī)名稱,并選擇操作系統(tǒng)類型和版本。示例:虛擬機(jī)名稱:win2008r2-001Windows操作系統(tǒng)類型:操作系統(tǒng)版本號:Windows Server 2
11、008 R2 Datacenter 64bit2設(shè)置虛擬機(jī)硬件規(guī)格。示例: 內(nèi)存: 2GB其它配置保持默認(rèn)值,進(jìn)入“虛擬機(jī)設(shè)置”頁面。3第 11 頁, 共 132 頁文檔密級3.2.3 設(shè)置網(wǎng)卡和磁盤1設(shè)置每個網(wǎng)卡所屬的分布式交換機(jī)和端口組。示例: 保持默認(rèn)值。設(shè)置每個磁盤的屬性。示例:2保持默認(rèn)值。3進(jìn)入“信息確認(rèn)”頁面,核對創(chuàng)建任務(wù)信息。第 12 頁, 共 132 頁文檔密級456若要創(chuàng)建后立即啟動虛擬機(jī),則勾選“創(chuàng)建完成后直接啟動虛擬機(jī)”。單擊“完成”。開始創(chuàng)建虛擬機(jī)。3.2.4 查看創(chuàng)建進(jìn)度1在“提示”框中,單擊“點(diǎn)擊這里”。進(jìn)入“任務(wù)中心”頁面,查看創(chuàng)建進(jìn)度。3.3 安裝虛擬機(jī)(Wi
12、ndows)3.3.1 掛載光驅(qū)1在pute 中,選擇“虛擬機(jī)和模板”。2在左側(cè)導(dǎo)航欄選擇“虛擬機(jī)”,在待操作的虛擬機(jī)所在行,單擊“VNC 登錄”。說明:ll首次登錄需要選擇默認(rèn)使用 noVNC 還是 TightVNC,示例使用 TightVNC。如果瀏覽器了彈出窗口,請設(shè)置瀏覽器“總是允許來自此的彈出窗口”。然后重新單擊“VNC 登錄”。支持“noVNC”模式的瀏覽器有:lnInternet Explorer 10、11第 13 頁, 共 132 頁文檔密級nnFirefox 26 及以上版本chrome 21 及以上版本彈出VNC登錄窗口,進(jìn)入虛擬機(jī)界面。34單擊,在彈出的菜單中單擊“掛載
13、光驅(qū)(本地)”。選擇光驅(qū)所在路徑。示例:掛載ISO文件:選擇“文件”,單擊“瀏覽”,選擇ISO文件。56勾選“立即重啟虛擬機(jī),安裝操作系統(tǒng)”。單擊“確認(rèn)”。彈出提示框,提示掛載成功。單擊“確定”進(jìn)入操作系統(tǒng)安裝界面。7第 14 頁, 共 132 頁文檔密級3.3.2 安裝操作系統(tǒng)1請參考 Windows 操作系統(tǒng)相關(guān)文檔,在虛擬機(jī)界面,根據(jù)用戶需求完成操作系統(tǒng)的安裝和配置。3.3.3 卸載光驅(qū)1VNC 登錄窗口,單擊,在彈出的菜單中單擊“卸載光驅(qū)”。彈出框。2單擊“是”。3單擊“確定”。完成卸載光驅(qū)。3.3.4 安裝Tools1在pute 中,選擇“虛擬機(jī)和模板”。2 掛載 Tools”。在虛
14、擬機(jī)所在行,選擇“彈出框。第 15 頁, 共 132 頁文檔密級3單擊“確定”。45單擊“確定”。在待操作的虛擬機(jī)所在行,單擊“VNC 登錄”。彈出VNC登錄窗口,進(jìn)入虛擬機(jī)界面。在 VNC 登錄窗口的虛擬機(jī)操作系統(tǒng)界面,選擇“開始 計算機(jī)”。進(jìn)入“計算機(jī)”界面。右鍵單擊“CD 驅(qū)動器”,并選擇“打開”。6789右鍵單擊“Setup”,并選擇“以管理員根據(jù)提示重啟虛擬機(jī),使 Tools 生效。運(yùn)行”,根據(jù)界面提示完成軟件安裝。對于Windows Server 2008系統(tǒng)的虛擬機(jī),必須重啟兩次。3.4 制作模板3.4.1 選擇模板創(chuàng)建方案第 16 頁, 共 132 頁文檔密級1在pute 中,
15、選擇“虛擬機(jī)和模板”。2關(guān)閉虛擬機(jī)。在左側(cè)選擇“虛擬機(jī)”,在虛擬機(jī)所在行,選擇“關(guān)閉”。3根據(jù)實(shí)際需要,選擇對應(yīng)的創(chuàng)建方案。ll虛擬機(jī)轉(zhuǎn)為模板,執(zhí)行 4.4.2。模板或虛擬機(jī)克隆為模板,執(zhí)行 4.4.3。3.4.2 將虛擬機(jī)轉(zhuǎn)為模板1在pute 中,選擇“虛擬機(jī)和模板”。2在左側(cè)選擇“虛擬機(jī)”,在虛擬機(jī)所在行,選擇“ 轉(zhuǎn)為模板”。彈出框。3單擊“確定”。第 17 頁, 共 132 頁文檔密級4單擊“確定”。3.4.3 將虛擬機(jī)克隆為模板123pute 中,選擇“虛擬機(jī)和模板”。在在待克隆為模板的虛擬機(jī)所在行,選擇“克隆為模板”進(jìn)入“創(chuàng)建位置”頁面。45選擇模板創(chuàng)建位置。進(jìn)入“屬性”頁面。6輸入
16、模板名稱。示例:模板名稱:win2008r2-template第 18 頁, 共 132 頁文檔密級78設(shè)置虛擬硬件規(guī)格。進(jìn)入“模板設(shè)置”頁面。91011設(shè)置每個網(wǎng)卡所屬的分布式交換機(jī)和端口組。設(shè)置每個磁盤的屬性。進(jìn)入“信息確認(rèn)”頁面,核對創(chuàng)建任務(wù)信息。第 19 頁, 共 132 頁文檔密級12單擊“完成”。開始創(chuàng)建虛擬機(jī)模板。13在“提示”框中,單擊“點(diǎn)擊這里”。進(jìn)入“任務(wù)中心”頁面,查看創(chuàng)建進(jìn)度。3.5 使用模板創(chuàng)建虛擬機(jī)3.5.1 選擇創(chuàng)建位置1在pute 中,選擇“虛擬機(jī)和模板”。2在左側(cè)選擇“虛擬機(jī)”,在模板所在行,選擇“按模板部署虛擬機(jī)”。進(jìn)入“創(chuàng)建位置”頁面。34選擇虛擬機(jī)創(chuàng)建位
17、置。進(jìn)入“屬性”頁面。3.5.2 設(shè)置虛擬機(jī)屬性1輸入虛擬機(jī)名稱,并選擇操作系統(tǒng)類型和版本。示例:第 20 頁, 共 132 頁文檔密級23設(shè)置虛擬硬件規(guī)格。進(jìn)入“虛擬機(jī)設(shè)置”頁面。3.5.3 設(shè)置網(wǎng)卡和磁盤123設(shè)置每個網(wǎng)卡所屬的分布式交換機(jī)和端口組。設(shè)置每個磁盤的屬性。進(jìn)入“信息確認(rèn)”頁面,核對創(chuàng)建任務(wù)信息。3.5.4 創(chuàng)建虛擬機(jī)1單擊“完成”。第 21 頁, 共 132 頁文檔密級開始創(chuàng)建虛擬機(jī)。2在“提示”框中,單擊“點(diǎn)擊這里”。進(jìn)入“任務(wù)中心”頁面,查看創(chuàng)建進(jìn)度。-結(jié)束4實(shí)驗(yàn)一 創(chuàng)建計算集群4.1 實(shí)驗(yàn)步驟4.1.1 進(jìn)入“創(chuàng)建集群”頁面操作步驟步驟1 在pute 中,選擇“計算池”
18、。進(jìn)入“計算池”頁面。步驟2 在左側(cè)導(dǎo)航樹上右鍵單擊“站點(diǎn)名稱”,選擇“創(chuàng)建集群”。進(jìn)入“創(chuàng)建集群”頁面。-結(jié)束4.1.2 設(shè)置基本配置操作步驟步驟3 設(shè)置集群的名稱和描述。步驟4進(jìn)入“基本配置”頁面。第 22 頁, 共 132 頁文檔密級步驟5如需設(shè)置集群內(nèi)主機(jī)內(nèi)存復(fù)用,則將“主機(jī)內(nèi)存復(fù)用”項(xiàng)設(shè)置為“開啟”。設(shè)置主機(jī)內(nèi)存復(fù)用后,主機(jī)上創(chuàng)建的虛擬機(jī)內(nèi)存總數(shù)可以超過主機(jī)物理內(nèi)存,提高主機(jī)的虛擬度步驟6設(shè)置虛擬機(jī)啟動策略。 自動分配:虛擬機(jī)啟動時,在集群中滿足條件的節(jié)點(diǎn)中隨機(jī)進(jìn)行節(jié)點(diǎn)的選擇。 負(fù)載均衡:虛擬機(jī)啟動時,選擇 CPU 可用最大的節(jié)點(diǎn)。當(dāng)集群啟動計算調(diào)度時,該選項(xiàng)置灰,啟動策略默認(rèn)配置為
19、“負(fù)載均衡”。步驟7如需開啟 GuestNUMA 功能,則將“GuestNUMA”項(xiàng)設(shè)置為“開啟”。GuestNUMA 可以將 CNA 節(jié)點(diǎn)上的 CPU 和內(nèi)存拓?fù)浣Y(jié)構(gòu)呈現(xiàn)給虛擬機(jī),虛擬機(jī)用戶可根據(jù)該拓?fù)浣Y(jié)構(gòu)利用第軟件(Eclipse 等)對 CPU 和內(nèi)存進(jìn)行相應(yīng)的配置,從第 23 頁, 共 132 頁文檔密級性能的目的。GuestNUMA 功能生效有下面的提條件:l 虛擬機(jī) CPU 的內(nèi)核數(shù)必須為主機(jī) CPU 個數(shù)的整數(shù)倍或主機(jī)單個 CPU 線程數(shù)的整數(shù)倍。(在主機(jī)的“硬件 CPU”中可查看 CPU 個數(shù)和 CPU 線程數(shù)。)如果由于虛擬機(jī)所在主機(jī)的 CPU 規(guī)格發(fā)生變化(比如熱遷移或關(guān)機(jī)
20、后在其他節(jié)點(diǎn)上啟動),或虛擬機(jī)的 CPU 規(guī)格被修改后,GuestNUMA 功能可能會失效。不能開啟集群內(nèi)存復(fù)用功能。在主機(jī)的高級BIOS 設(shè)置中開啟NUMA Support 選項(xiàng)。(在主機(jī)高級BIOS 設(shè)置中, 選擇 advanced CPU configuration,將 NUMA Support 選項(xiàng)設(shè)置為 Enabled。)lll 設(shè)置集群 GuestNUMA 策略后,需將主機(jī)上的虛擬機(jī)重啟。步驟8 設(shè)置數(shù)據(jù)故障處理策略??刹捎谩安惶幚怼被颉瓣P(guān)閉虛擬機(jī)”的處理策略。步驟9 如需設(shè)置集群內(nèi)主機(jī)可以使用本地內(nèi)存盤,則將“本地內(nèi)存盤”項(xiàng)設(shè)置為“開啟”。設(shè)置本地內(nèi)存盤開啟后,可以在集群內(nèi)主機(jī)上
21、使用本地內(nèi)存盤。步驟10 單擊“下一步”進(jìn)入“HA 配置”頁面。第 24 頁, 共 132 頁文檔密級-結(jié)束4.1.3 設(shè)置 HA 配置操作步驟開啟集群HA,集群內(nèi)的虛擬機(jī)才可以開啟HA 功能。 是,執(zhí)行步驟 12。 否,單擊“下一步”,執(zhí)行步驟 14。步驟12 勾選“開啟”。步驟13 配置 HA 功能??稍O(shè)置為“HA預(yù)留”或“集群允許主機(jī)故障設(shè)置”。 HA預(yù)留:在整個集群內(nèi)按照配置的值預(yù)留 CPU 與內(nèi)存虛擬機(jī) HA 功能使用。,該僅用于 集群允許主機(jī)故障設(shè)置:設(shè)置集群內(nèi)允許指定數(shù)目的主機(jī)發(fā)生故障,系統(tǒng)定期檢查集群內(nèi)是否留有足夠的來對這些主機(jī)上的虛擬機(jī)進(jìn)行故障切換。當(dāng)不第 25 頁, 共 1
22、32 頁文檔密級足時、系統(tǒng)會自動上報告警、對用戶提出主機(jī)上的虛擬機(jī) HA。,以確保剩余主機(jī)的足夠故障插槽可理解為虛擬機(jī) CPU、內(nèi)存或“自定義分配”方式。的基本單元。插槽大小可設(shè)置為“自動分配” 自動分配:系統(tǒng)將根據(jù)集群中虛擬機(jī)的 CPU 和內(nèi)存要求,選擇最大值、計算出插槽大小。 自定義分配:根據(jù)用戶需要來設(shè)置插槽中 CPU 和內(nèi)存的大小。步驟14進(jìn)入“計算調(diào)度基本配置”頁面。-結(jié)束4.1.4 設(shè)置調(diào)度步驟15 是否需要開啟計算調(diào)度? 是,執(zhí)行步驟 16。 否,單擊“下一步”,執(zhí)行步驟 27。步驟16 勾選“開啟計算調(diào)度”。步驟17 選擇自動化級別。自動化級別包括: 手動:系統(tǒng)會根據(jù)目定是否遷
23、移虛擬機(jī)。負(fù)載情況,給出遷移虛擬機(jī)的建議,用戶根據(jù)建議決 自動:系統(tǒng)會自動遷移虛擬機(jī),保證系統(tǒng)步驟18 選擇衡量因素。的最優(yōu)利用。第 26 頁, 共 132 頁文檔密級衡量因素是調(diào)度。調(diào)度的依據(jù)。可根據(jù)集群內(nèi) CPU 或內(nèi)存的占用率判斷是否觸發(fā)衡量因素分為: CPU 內(nèi)存 CPU 和內(nèi)存步驟19 配置調(diào)度基線,可設(shè)置啟動調(diào)度策略的 CPU 和內(nèi)存閾值。步驟20 在遷移閾值中按時間段設(shè)置不同的閾值分為以下幾個級別: 保守:不干預(yù)集群的負(fù)載失衡。調(diào)度閾值和閾值周期。 較保守、中等、較激進(jìn)、激進(jìn):改善集群負(fù)載失衡,且改善均衡的程度逐漸增強(qiáng)。默認(rèn)全天采用“中等”閾值。閾值周期可配置為以下方式: 每天
24、按周:可選擇每周的固定某些天開啟。 按月:可選擇每月的固定某些天開啟。步驟21 配置虛擬機(jī)自動化。 勾選選項(xiàng)后,可在“虛擬機(jī)替代項(xiàng)”頁簽中啟用個別虛擬機(jī)自動化級別,為集群內(nèi)的虛擬機(jī)逐個設(shè)置自動化級別。 取消勾選后,則默認(rèn)和集群設(shè)置的自動化級別保持一致。步驟22 是否開啟電源管理自動化? 是,執(zhí)行步驟 23。 否,單擊“下一步”,執(zhí)行步驟 27。開啟電源管理自動化后,系統(tǒng)會根據(jù)主機(jī)的利用率,遷移主機(jī)上的虛擬機(jī),并對主機(jī)實(shí)行上下電。電源管理自動化使用 BMC管理主機(jī)電源,因此在啟動電源管理自動化,需要對每個主機(jī)配置步驟23 勾選“開啟電源管理”。BMC。電源管理依賴于計算調(diào)度,因此電源管理只有在開
25、啟計算調(diào)度,并且遷移閾值的設(shè)置不為“保守”時生效。步驟24 配置自動化級別。自動化級別包括:第 27 頁, 共 132 頁文檔密級 手動:應(yīng)用于對主機(jī)的上下電動作謹(jǐn)慎操作的場景。系統(tǒng)根據(jù)負(fù)載情況,給出主機(jī)上下電建議,由用戶自己手動進(jìn)行操作。 自動:系統(tǒng)根據(jù)負(fù)載情況,自動對主機(jī)進(jìn)行上電或下電操作。步驟25 在電源管理閾值中按時間段設(shè)置不同的電源管理閾值和閾值周期。閾值分為以下幾個級別: 保守:默認(rèn)不對主機(jī)進(jìn)行下電操作,僅在主機(jī)對集群內(nèi)的其他未上電主機(jī)進(jìn)行上電操作。平均利用率高于重載閾值時, 較保守、中等、較激進(jìn):如果主機(jī)平均利用率高于重載閾值時,對集群內(nèi)的其他未上電主機(jī)進(jìn)行上電操作;如果主機(jī)機(jī)進(jìn)
26、行下電操作。平均利用率低于輕載閾值時,對主 激進(jìn):默認(rèn)不對主機(jī)進(jìn)行上電操作,僅在主機(jī)對主機(jī)進(jìn)行下電操作。默認(rèn)全天采用“中等”閾值。各閾值對應(yīng)的輕載閾值和重載閾值如表 5-1 所示:平均利用率低于輕載閾值時,表4-1 各遷移閾值對應(yīng)的重載閾值和輕載閾值閾值周期可配置為以下方式: 每天 按周:可選擇每周的固定某些天開啟。 按月:可選擇每月的固定某些天開啟。步驟26進(jìn)入“IMC 配置”頁面。4.1.5 設(shè)置 IMC 模式步驟27 選擇是否啟用 IMC 模式。第 28 頁, 共 132 頁參數(shù)重載閾值輕載閾值保守63%-較保守72%23%中等81%45%較激進(jìn)90%54%激進(jìn)-63%文檔密級IMC 模
27、式可以確保集群內(nèi)的主機(jī)向虛擬機(jī)提供相同的 CPU 功能集,即使這些主機(jī)的實(shí)際 CPU 不同,也因 CPU 不兼容而導(dǎo)致遷移虛擬機(jī)失敗。集群的 IMC 模式需等同于集群中 CPU 功能集最小的主機(jī)的功能集,或?yàn)樵?CPU 功能集的子集。如果在已設(shè)置 IMC 的集群中添加主機(jī),則主機(jī)支持的 CPU 功能集必須等于或高于集群的 IMC 功能集。pute 目支持六種IMC 模式,其 CPU 功能集級別由小到大依次為: Merom Penryn Nehalem Westmere Sandy Bridge Ivy Bridge集群開啟 IMC 模式后,已加入或待加入該集群的主機(jī),需要在 BIOS 的 CP
28、U 高級選項(xiàng)中開啟“Execute Disable Bit”,即 CPU 硬件防步驟28 設(shè)置 IMC 模式和描述。功能,亦稱作NX 或 XD 功能。步驟29進(jìn)入“確認(rèn)信息”頁面。4.1.6 完成創(chuàng)建集群步驟30 單擊“創(chuàng)建”。步驟31 單擊“確定”。完成創(chuàng)建集群操作。4.1.7 后續(xù)任務(wù)向集群添加主機(jī)。-結(jié)束第 29 頁, 共 132 頁文檔密級5實(shí)驗(yàn)二 在集群中添加主機(jī)5.1 實(shí)驗(yàn)步驟5.1.1 選擇添加主機(jī)方式步驟1 選擇添加主機(jī)的方式。 使用模板批量添加主機(jī),執(zhí)行步驟 7。批量添加主機(jī)可在模板中設(shè)置所有主機(jī)信息,并多的場景。 手動逐個添加主機(jī),執(zhí)行步驟 2。導(dǎo)入,適用于主機(jī)數(shù)量較手動添
29、加主機(jī)操作簡單,但每次只能添加一臺主機(jī),適用于主機(jī)數(shù)量較少的場景。5.1.2 進(jìn)入“添加主機(jī)”頁面。步驟2在pute 中,選擇“計算池”。進(jìn)入“計算池”入門頁面。在左側(cè)導(dǎo)航樹中展開“站點(diǎn)名稱”,右鍵單擊待添加主機(jī)的集群,選擇“添加主機(jī)”。步驟3彈出框,如圖 6-1 所示。第 30 頁, 共 132 頁文檔密級圖5-1 添加主機(jī)5.1.3 添加主機(jī)步驟4輸入添加主機(jī)的各項(xiàng)參數(shù)。需設(shè)置的參數(shù)包括: 主機(jī)名稱 IP 地址 BMC IP 地址 BMC 用戶名 BMC 應(yīng)用站點(diǎn)時間同步配置:將站點(diǎn)配置的時間同步配置信息應(yīng)用到該主機(jī)。單擊“確定”。步驟5步驟6單擊“確定”。完成主機(jī)的添加。該步驟執(zhí)行完成后
30、,任務(wù)結(jié)束。第 31 頁, 共 132 頁文檔密級5.1.4 獲取添加主機(jī)模板步驟7在pute 中,選擇“計算池”。進(jìn)入“計算池”入門頁面。在左側(cè)導(dǎo)航樹中選擇“站點(diǎn) 集群”。進(jìn)入集群入門頁面。在頁面上方選擇“操作 批量添加主機(jī)”。步驟8步驟9進(jìn)入“批量添加主機(jī)”頁面,如圖 6-2 所示。圖5-2 批量添加主機(jī)步驟10 單擊“獲取批量添加主機(jī)模板”。彈出頁面。步驟11 將模板保存至本地 PC。批量添加主機(jī)模板默認(rèn)文件名為“HostYYYY-MM-DD HHMMSS.xls”。步驟12 打開模板文件,設(shè)置待添加主機(jī)的信息。需設(shè)置的主機(jī)信息如下: 主機(jī) IP:主機(jī)管理平面IP 地址。 主機(jī)名稱 描述
31、第 32 頁, 共 132 頁文檔密級 BMC IP:主機(jī) BMC IP 地址。如果主機(jī)需要設(shè)置電源管理自動化,則必須配置主機(jī) BMC 信息。 BMC 用戶名:如果主機(jī)需要設(shè)置電源管理自動化,則必須配置主機(jī) BMC 信息。 BMC:如果主機(jī)需要設(shè)置電源管理自動化,則必須配置主機(jī) BMC 信息。步驟13 完成所有待添加主機(jī)信息的設(shè)置后,保存并關(guān)閉模板文件。步驟14 在“批量添加主機(jī)”頁面單擊“導(dǎo)入模板”后的“瀏覽”。彈出框。步驟15選擇已設(shè)置的模板文件,單擊“打開”。步驟16單擊“確定”。步驟17單擊“確定”??稍凇跋到y(tǒng)管理 任務(wù)與日志 任務(wù)中心”中查看任務(wù)進(jìn)度。5.1.5 后續(xù)任務(wù)配置主機(jī)。-
32、結(jié)束6實(shí)驗(yàn)三 配置主機(jī)6.1 實(shí)驗(yàn)步驟6.1.1 添加接口步驟1 判斷添加主機(jī)接口方式。 批量添加主機(jī)接口。適用于主機(jī)數(shù)量較多或主機(jī)使用的場景。多路徑,需要為每臺主機(jī)添加多個接口 手動添加主機(jī)接口。適用于主機(jī)數(shù)量較少且未使用多路徑的場景。本手冊以手動添加主機(jī)接口為例。第 33 頁, 共 132 頁文檔密級步驟2在pute 中,選擇“計算池”。進(jìn)入“計算池”頁面。在左側(cè)導(dǎo)航樹中,選擇“站點(diǎn)名稱顯示“入門”頁簽。 集群名稱 主機(jī)名稱”。步驟3步驟4選擇“配置系統(tǒng)接口 添加接口”。進(jìn)入“添加接口”頁面,如圖 7-1 所示。圖6-1 添加接口步驟5在列表中選擇該主機(jī)連接平面的網(wǎng)卡所對應(yīng)的網(wǎng)口,網(wǎng)口名稱
33、“PORTX”對應(yīng)主機(jī)的物理網(wǎng)口“ethX”。進(jìn)入“連接設(shè)置”頁面,如圖 7-2 所示。第 34 頁, 共 132 頁文檔密級圖6-2 連接設(shè)置步驟6 按照網(wǎng)絡(luò)規(guī)劃,配置以下參數(shù): 名稱 描述 IP 地址:主機(jī)與設(shè)備的IP 互通的 IP 地址。除接口IP 地址外,該 IP 地址不能和同一主機(jī)的其他接口 IP 地址在同一網(wǎng)段。平面使用二層網(wǎng)絡(luò)時,設(shè)置為與平面互通的空閑 IP 地址,例如,設(shè)接備的IP 為 172.20.100.100,子網(wǎng)掩碼為 255.255.0.0,則可設(shè)置主機(jī)口 IP 地址為 172.20.。平面使用三層網(wǎng)絡(luò)時,設(shè)置為與設(shè)備的IP 互通的 IP 地址。第 35 頁, 共 1
34、32 頁文檔密級 子網(wǎng)掩碼: VLAN ID: 路由信息:平面子網(wǎng)掩碼。平面 VLAN ID。平面使用三層網(wǎng)絡(luò)通信時需要配置路由信息。主機(jī)平面使用智能網(wǎng)卡時,不支持配置三層路由網(wǎng)絡(luò)。目的網(wǎng)絡(luò):接口所連接的設(shè)備所在網(wǎng)段的首地址。例如:192.168.0.0目的網(wǎng)絡(luò)掩碼:接口所連接的設(shè)備所在網(wǎng)段的子網(wǎng)掩碼。路由網(wǎng)關(guān):接口的網(wǎng)關(guān),需要跟流量整形IP 在同一網(wǎng)段。平均帶寬(Mbit/s):某段時間內(nèi)允許通過端口的平均每秒位數(shù)。使用普通網(wǎng)卡時,在沒有突發(fā)大小可使用的情況量將穩(wěn)定在平均帶寬所設(shè)定的速率上。使用 iNIC 網(wǎng)卡時,平均帶寬是指在沒有網(wǎng)絡(luò)擁塞的情況下,保證能夠達(dá)到的速率。如果突發(fā)大小設(shè)置過小,
35、網(wǎng)絡(luò)帶寬吞吐量會變差。峰值帶寬(Mbit/s)流量突發(fā)時,每秒鐘允許通過端口的最大傳輸位數(shù)。峰值帶寬需要大于或等于平均帶寬。對某一類流量設(shè)置合適的峰值帶寬,可以防止因?yàn)樵擃惲髁窟^大導(dǎo)致其他虛擬機(jī)網(wǎng)絡(luò)擁塞。 使用 iNIC 網(wǎng)卡時,峰值帶寬是指在有突發(fā)大小可使用的情況下,突發(fā)大小使用完后,流量所能達(dá)到的最大帶寬值。帶寬空閑時,流量將穩(wěn)定在峰值帶寬左右。突發(fā)大小(Mbits):允許流量在平均帶寬的基礎(chǔ)上產(chǎn)生的突發(fā)流量的大小。步驟7進(jìn)入“確認(rèn)信息”頁面。步驟8確認(rèn)信息無誤后,單擊“添加”。步驟9是否完成規(guī)劃接口的添加? 是,執(zhí)行步驟 11。 否,執(zhí)行步驟 10。步驟10 單擊“繼續(xù)添加”,執(zhí)行步驟
36、5步驟 8 繼續(xù)添加其他接口。步驟11 單擊“確定”。完成該主機(jī)接口的添加。該步驟執(zhí)行完成后,任務(wù)結(jié)束。第 36 頁, 共 132 頁文檔密級6.1.2 向站點(diǎn)添加步驟1選擇“進(jìn)入“池”。池”頁面。步驟2單擊“添加”。彈出框。步驟3設(shè)置設(shè)備的設(shè)備類型。可選的設(shè)備類型如下: SAN:即普通 IP SAN Advanced SAN:即 XVE,例如 S5600、V1 版本的 S5500T 等。,例如 V2 版本的 S5500T。在不使用虛擬化的場景下,Advanced SAN較之 SAN,多支持快照、克隆等高級特性。 FusionStorage:即分布式,可用于 FusionCube 解決方案,或
37、使用Tecal RH2288H V2 服務(wù)器部署的 FusionSphere 解決方案。 NAS步驟4根據(jù)所選設(shè)備類型設(shè)置設(shè)備的參數(shù)。第 37 頁, 共 132 頁文檔密級 SAN:設(shè)置“廠家”、“名稱”、“管理 IP”及“端口”、“7-3 所示。IP”及“端口”,如圖圖6-3 SAN Advanced SAN:設(shè)置“名稱”、“管理 IP”及“端口”、“用戶名”、“7-4 所示?!保鐖D圖6-4 Advanced SAN FusionStorage:設(shè)置“名稱”及“管理 IP”,如圖 7-5 所示。圖6-5 FusionStorage NAS:設(shè)置“名稱”、“管理 IP”及“端口”、“IP”及
38、“端口”,如圖 7-6 所示。第 38 頁, 共 132 頁文檔密級圖6-6 NAS對于 HP P4300G2 型號的 SAN,每個 LUN 使用一條 iSCSI 鏈路與主機(jī)連接,對外僅體現(xiàn)一個 IP 地址。該 IP 地址可同時用作管理 IP 和IP。因此需要將“管理IP”和“個 IP 地址。步驟5 單擊“添加”。IP”填寫為同一個 IP 地址,并且“IP”僅能填寫這一步驟6 單擊“確定”。完成添加。-結(jié)束6.1.3 向主機(jī)關(guān)聯(lián)步驟1判斷關(guān)聯(lián) 批量關(guān)聯(lián)方式。適用于主機(jī)數(shù)量較多,或每臺主機(jī)需要關(guān)聯(lián)多個的場景。 手動關(guān)聯(lián)。適用于主機(jī)數(shù)量較少,且每臺主機(jī)僅需要關(guān)聯(lián)一個或少數(shù)的場景。本手冊以手動關(guān)聯(lián)為
39、例。步驟2在pute 中,選擇“計算池”。進(jìn)入“計算池”頁面。步驟3在左側(cè)導(dǎo)航樹中,選擇“站點(diǎn)名稱 集群名稱 主機(jī)名稱”。顯示“入門”頁簽。第 39 頁, 共 132 頁文檔密級步驟4在主機(jī)頁面選擇“配置 ”,單擊“關(guān)聯(lián)”。進(jìn)入“關(guān)聯(lián)”頁面,如圖 7-7 所示。圖6-7 關(guān)聯(lián)步驟5選擇需要關(guān)聯(lián)的,單擊“關(guān)聯(lián)”。彈出框。步驟6是否繼續(xù)關(guān)聯(lián)其他 是,執(zhí)行步驟 5。 否,執(zhí)行步驟 7。單擊“關(guān)閉”。?步驟7完成關(guān)聯(lián)。步驟8在主機(jī)的“配置”頁面中,選中已關(guān)聯(lián)的,在頁面下方的“詳細(xì)信息”區(qū)域框,查看是否有“關(guān)聯(lián)失敗 IP”。 是,執(zhí)行步驟 9。 否,任務(wù)結(jié)束。步驟9在所在行中,選擇“ 刪除會話”。彈出框
40、。步驟10在“IP 選項(xiàng)”中選擇“關(guān)聯(lián)失敗IP”,并在列表中選中關(guān)聯(lián)失敗的IP,單擊“確定”。步驟11如果存在多個關(guān)聯(lián)失敗 IP,重復(fù)執(zhí)行步驟 9步驟 10,將失敗的IP 分別刪除。步驟12在“池”頁面中,選擇“”。步驟13在已關(guān)聯(lián)所在行,單擊“修改”。彈出框。步驟14 在“修改”框中,檢查接口的 IP 地址配置,將配置錯誤的IP修改正確,單擊“修改”。第 40 頁, 共 132 頁文檔密級步驟15單擊“確定”。步驟16選擇“計算池”。在左側(cè)導(dǎo)航樹中,選擇“站點(diǎn)名稱 集群名稱 主機(jī)名稱”。步驟17步驟18在主機(jī)的“配置 ”頁面中,在已關(guān)聯(lián)所在行選擇“ 同步會話”。彈出框。步驟19 單擊“確定”
41、。同步的過程只是將未連接的鏈路重新連接,重新連接的過程影響到已連接的鏈路。該步驟執(zhí)行完成后,任務(wù)結(jié)束。6.1.4 掃描設(shè)備步驟1判斷設(shè)備類型。 iSCSI,執(zhí)行步驟 2。 光纖通道,執(zhí)行步驟 5。 其他在,執(zhí)行步驟 13。pute 選擇“計算池”。步驟2進(jìn)入“計算池”入門頁面。步驟3在左側(cè)導(dǎo)航樹上選擇“站點(diǎn) 集群進(jìn)入該主機(jī)入門頁面。 主機(jī)”。步驟4選擇“配置 ”,單擊“查看適配器”。彈出“件配置適配器”框,“WWN”,如圖7-8所示,然后登錄設(shè)備管理軟設(shè)備的啟動器。如用戶已統(tǒng)一規(guī)劃了主機(jī)的WWN值,可單擊“WWN”所在行的“修改”,自定義WWN值。配置設(shè)備的方法參考7.2.5配置設(shè)備。第 41
42、 頁, 共 132 頁文檔密級圖6-8適配器該步驟執(zhí)行完成后,執(zhí)行步驟 13。步驟5在pute 中,選擇“計算池”。進(jìn)入“計算池”頁面。步驟6在左側(cè)導(dǎo)航樹選擇“站點(diǎn)在右側(cè)選擇“配置 用戶集群 ”。主機(jī)”。步驟7進(jìn)入“”頁面。步驟8步驟9單擊“查看單擊“掃描”適配器”,彈出“適配器”框。步驟10 單擊“確定”。在“任務(wù)跟蹤”中查看,確認(rèn)掃描成功。步驟11 在“適配器”框主機(jī)對應(yīng)的WWN 值。FC SAN 場景下,主機(jī)的WWN 值不支持自定義。步驟12 根據(jù) WWN 值配置設(shè)備的 FC 啟動器。第 42 頁, 共 132 頁文檔密級需在設(shè)備的邏輯主機(jī)(組)的啟動器配置中,將的主機(jī) WWN 值添加為
43、新的啟動器。具體操作請參見設(shè)備的相關(guān)文檔。步驟13 在pute 中,選擇“計算池”。進(jìn)入“計算池”頁面。步驟14 在左側(cè)導(dǎo)航樹,選擇“站點(diǎn)名稱顯示“入門”頁簽。 集群名稱 主機(jī)名稱”。步驟15 選擇“配置 設(shè)備”。進(jìn)入設(shè)備頁面。步驟16 單擊“掃描”。步驟17 單擊“確定”。在“任務(wù)跟蹤”頁簽中,可以查看掃描進(jìn)度。掃描完成后,在“配置 設(shè)備”中顯示可用的設(shè)備。-結(jié)束第 43 頁, 共 132 頁文檔密級6.1.5 配置設(shè)備以下操作以O(shè)ceanStor S5300V3 為例,關(guān)于的具體操作,請參考設(shè)備相應(yīng)的文檔。步驟1登錄在“設(shè)備,在“OceanStor DeviceManager”窗口的右側(cè)導(dǎo)
44、航欄中,選擇“分配”,分配”頁面中,根據(jù)向?qū)D,完成設(shè)備和主機(jī)的配置。步驟2“選擇創(chuàng)建硬盤域”,根據(jù)實(shí)際需求,設(shè)置硬盤稱、選擇硬盤。第 44 頁, 共 132 頁文檔密級步驟3步驟4根據(jù)已獲取的主機(jī)WWN 值,勾選對應(yīng)的啟動器,單擊按鈕單擊“確定”,彈出“成功”提示框。步驟5單擊“確定”,完成硬盤域創(chuàng)建。步驟6在“分配”頁面中,選擇“創(chuàng)建池”。彈出“創(chuàng)建池”框。步驟7根據(jù)需求,設(shè)置池名稱、RAID 策略、容量,單擊“確定”。彈出“執(zhí)行結(jié)果”框。步驟8單擊“關(guān)閉”,完成創(chuàng)建池。步驟9在“分配”頁選擇“創(chuàng)建LUN”,彈出“創(chuàng)建LUN”框。第 45 頁, 共 132 頁文檔密級步驟10 根據(jù)需求,設(shè)
45、置 LUN 名稱、容量、數(shù)量,單擊“確定”。彈出“執(zhí)行結(jié)果”框。步驟11 單擊“關(guān)閉”,完成創(chuàng)建 LUN。步驟12 在“分配”頁面,選擇“創(chuàng)建 LUN 組”,彈出“創(chuàng)建 LUN 組”框。第 46 頁, 共 132 頁文檔密級步驟13 按照需求,添加對應(yīng)的 LUN 到 LUN 組中,單擊“確定”。彈出“執(zhí)行結(jié)果”提示框。步驟14 單擊“關(guān)閉”,完成創(chuàng)建 LUN 組。步驟15 在“分配”頁面,選擇“創(chuàng)建主機(jī)”。彈出“創(chuàng)建主機(jī)向?qū)А笨?。步驟16 單擊“下一步”,彈出“配置啟動器”框。第 47 頁, 共 132 頁文檔密級步驟17 根據(jù)在pute 中獲取的主機(jī) WWN 值,勾選對應(yīng)的啟動器,并添加到“
46、已選啟動器”中。單擊“下一步”,彈出“信息匯總”提示框。步驟18 單擊“完成”,彈出“”提示框。第 48 頁, 共 132 頁文檔密級步驟19步驟20勾選確認(rèn)信息,單擊“確定”。彈出“執(zhí)行結(jié)果”提示框。單擊“關(guān)閉”,完成創(chuàng)建主機(jī)。步驟21在“分配”頁面中,選擇“創(chuàng)建主機(jī)組”。彈出“創(chuàng)建主機(jī)組”框。-結(jié)束步驟22 設(shè)置主機(jī)組名稱,選擇對應(yīng)的主機(jī)添加到“已選主機(jī)”中。單擊“確定”,彈出執(zhí)行結(jié)果框。步驟23 單擊“關(guān)閉”,完成創(chuàng)建主機(jī)組。步驟24 在“分配”頁面,選擇“創(chuàng)建視圖”。彈出“創(chuàng)建視圖”框。第 49 頁, 共 132 頁文檔密級步驟25 設(shè)置視圖名稱,選擇對應(yīng)的 LUN 組和主機(jī)組,勾選“端口組”,選擇“創(chuàng)建”,彈出“創(chuàng)建端口組”框。步驟26 設(shè)置端口組名稱,勾選與主機(jī)通信的端口,添加到“已選端口”中。第 50 頁, 共 132 頁文檔密級單擊“確定”,彈出“執(zhí)行結(jié)果”單擊“關(guān)閉”,回到“創(chuàng)建框。視圖”步驟27框。單擊“確定”,彈出“”提示框。步驟28勾選確認(rèn)信息,單擊“確定”,彈出“執(zhí)行結(jié)果”提示框。步驟29單擊“關(guān)閉”,完成創(chuàng)建視圖。6.1.6 添加數(shù)據(jù)步驟1
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 無創(chuàng)呼吸機(jī)輔助通氣治療對重癥肺炎合并呼吸衰竭患者血清指標(biāo)及氧合功能的影響
- 高空作業(yè)安保協(xié)議書(2篇)
- 制作工廠操作指引
- 腦出血重癥治療
- 幼兒音樂教育活動教案
- 文本效果教程07描邊字效果
- 統(tǒng)計調(diào)查誤差控制策略全解-2025年大學(xué)統(tǒng)計學(xué)期末考試題庫解析
- 2025年成人高考語文高頻考點(diǎn)速記題庫:古詩詞鑒賞與意象理解試題
- 2025年物流師職業(yè)技能鑒定模擬試卷物流企業(yè)物流信息處理與分析試題
- 2025年消防員考試題庫:消防法律法規(guī)精解與消防安全意識試題
- 優(yōu)秀員工榮譽(yù)證書模板
- 神奇的電家長課堂
- 城南舊事讀書匯報教學(xué)課件
- 不銹鋼容器制造通用標(biāo)準(zhǔn)工藝守則
- 校園環(huán)境衛(wèi)生檢查及記錄表
- 合同能源管理合同范本模板
- Q∕SY 05006-2016 在役油氣管道 第三方施工管理規(guī)范
- 數(shù)值分析 第二章 代數(shù)插值解析
- 最新幼兒園中小學(xué)防溺水安全教育PPT課件(通用)
- 部編版四年級語文下冊第二單元全套精美課件(統(tǒng)編版)
- 《全過程工程咨詢服務(wù)合同》范本經(jīng)典版
評論
0/150
提交評論