浪潮云海云數(shù)據(jù)中心操作系統(tǒng)v3.系統(tǒng)快速部署指南

1、南Cathy-系統(tǒng)快速部署指南 V1.0(外傳)編寫：日期：2013-08-02檢查：日期：審核：日期：批準(zhǔn)：日期：系統(tǒng)部文檔版本A1密級商密 A項(xiàng)目來源南文檔變更Inspur (Beijing) Electronic Information Industry Co.,.序號變更（+/-）說明作者版本號日期批準(zhǔn)1初稿（Cathy_系統(tǒng)快速部署指南V1.5_20130704.doc）V1.02013-03-052添加 iVirtual 的相關(guān)內(nèi)容V1.02013-08-023添加重啟云海后部分服務(wù)無法啟動(dòng)的解決方法及部分注意事項(xiàng)V1.02013-11-11南目錄1.前言.1.3.

2、背景4適用范圍4術(shù)語表42.系統(tǒng)環(huán)境5物理拓?fù)?環(huán)境配置6系統(tǒng)部署103.1. vCenter..5.配置11部署 Cathy 環(huán)境11系統(tǒng)使用的注意事項(xiàng)19卸載 Cathy 環(huán)境19南1. 前言1.1. 背景本文檔是的簡要系統(tǒng)部署配置說明書，依據(jù)此說明書，可以完成 Cathy 系統(tǒng)正常運(yùn)行所依賴的基本環(huán)境。本文檔基于Cathy 系統(tǒng)快速部署指南而來。1.2. 適用范圍本文檔適用于設(shè)計(jì)、開發(fā)、測試以及系統(tǒng)實(shí)施等。1.3. 術(shù)語表序號術(shù)語說明性定義vCenterVMware 的，本文檔中通常簡寫為 VC。Cluster若干 ESX 物理主機(jī)的集合（主機(jī)上掛載）。i

3、Virtual浪潮自己的虛擬機(jī)管理南2. 系統(tǒng)環(huán)境2.1. 物理拓?fù)?.1.1. 簡單拓?fù)洌▎尉W(wǎng)環(huán)境）openAM服務(wù)iWorkflow服務(wù)iResource服務(wù)iManage服務(wù)iMonitor服務(wù)iCharge服務(wù)VNC控制臺(tái)iAuth服務(wù)iBase服務(wù)FTP數(shù)據(jù)主控節(jié)點(diǎn)vCenter/iVirtual 計(jì)算節(jié)點(diǎn)計(jì)算節(jié)點(diǎn)ICM服務(wù)ISM服務(wù)系統(tǒng)管理員組織圖 2.1.1）1- 主控節(jié)點(diǎn)各服務(wù)集中式部署2.1.2. 復(fù)雜拓?fù)洌p網(wǎng)1、典型部署 控制中心各服務(wù)集中式部署南openAM服務(wù)iWorkflow服務(wù)iResource服務(wù)iManage服務(wù)iMonitor服務(wù)iCharge服務(wù)vCent

4、er/iVirtual計(jì)算節(jié)點(diǎn)系統(tǒng)管理員iAuth服務(wù)iBase服務(wù)FTP數(shù)據(jù)主控節(jié)點(diǎn)ICM服務(wù)控制網(wǎng)VNC控制臺(tái)組織圖 2.1.2-1）2- 主控節(jié)點(diǎn)各服務(wù)分布式部署2.1.3. 復(fù)雜拓?fù)洌p網(wǎng)在資源較充足的情況下，控制中心各服務(wù)可以采用分布式部署方式，即，各服務(wù)分別部署到一臺(tái)物理機(jī)或虛擬機(jī)上，以減輕控制中心的壓力。2.2. 環(huán)境配置2.2.1. vCenter/iVirtual 及計(jì)算節(jié)點(diǎn)1、vCenter/Esxi 當(dāng)前支持版本為 5.0 或 5.1ISM服務(wù)業(yè)務(wù)網(wǎng)南2.2.2. 主控節(jié)點(diǎn)主控節(jié)點(diǎn)可以部署在物理機(jī)器上，也可以是一臺(tái)虛擬機(jī)。虛擬機(jī)方式。表 2.2.1-12.2.3. ISM

5、 節(jié)點(diǎn)對于單網(wǎng)環(huán)境下，ISM 同主控節(jié)點(diǎn)一樣，可以是物理服務(wù)器，也可以是虛擬機(jī)（擬機(jī)方式）；虛在雙網(wǎng)環(huán)境下，ISM 應(yīng)部署于物理服務(wù)器上，以保證雙網(wǎng)；對于物理服務(wù)器配置要求如下：ISM 節(jié)點(diǎn)詳細(xì)說明服務(wù)器硬件處理器隨部署拓?fù)錄Q定，至少 4 核網(wǎng)卡至少 2 塊網(wǎng)卡硬盤無要求內(nèi)存隨部署拓?fù)錄Q定，至少 4G 內(nèi)存網(wǎng)絡(luò)控制網(wǎng)、業(yè)務(wù)網(wǎng)操作系統(tǒng)Linux 系統(tǒng)，建議：CentOS 6.0 X86_64裝系統(tǒng)時(shí)，需要安裝以下包：JAVA 相關(guān)包；GCC、G+；xinetd 包；主控節(jié)點(diǎn)配置詳細(xì)說明硬件配置處理器隨部署拓?fù)錄Q定，至少 4 核網(wǎng)卡至少 2 塊網(wǎng)卡硬盤無要求內(nèi)存隨部署拓?fù)錄Q定，至少 4G 內(nèi)存網(wǎng)絡(luò)

6、控制網(wǎng)操作系統(tǒng)1、 Linux 系統(tǒng)，建議： CentOS 6.0 X86_642、 裝系統(tǒng)時(shí)，需要安裝以下包：JAVA 相關(guān)包；GCC、G+；xinetd 包；ssh 服務(wù)器/devel 包；ipmitool 包；snmp 包httpd 服務(wù)其他1、開放以下端口：22、8080、623、3306、80、21、8000 等；南表 2.2.2-12.2.4. FTP 數(shù)據(jù)用于存放 FTP 數(shù)據(jù)文件和配置文件用。該該是 NFS 類型的，可以通過物理服務(wù)器或虛擬機(jī)搭建而成。與主控節(jié)點(diǎn)和 ISM 節(jié)點(diǎn)之間的關(guān)系為：1、 對于簡單拓?fù)銷FS（/usr/local/proftpd）主控/ISM節(jié)點(diǎn)FTP數(shù)

7、據(jù)圖 2.2.3-12、 對于復(fù)雜拓?fù)?1NFS（/ sr/local/proftpd）主控節(jié)點(diǎn)FTP數(shù)據(jù)NFS（ usr/local/proftpd）ISM節(jié)點(diǎn)圖 2.2.3-23、 對于復(fù)雜拓?fù)?2ssh 包；南NFS（/ sr/local/proftpd）云資源節(jié)點(diǎn)FTP數(shù)據(jù)NFS（ usr/local/proftpd）ISM節(jié)點(diǎn)圖 2.2.3-32.2.5. VNC 控制臺(tái)VNC 控制臺(tái)，可以單獨(dú)部署于一臺(tái)節(jié)點(diǎn)，也可以部署于 ISM 節(jié)點(diǎn)上。它的作用就是在雙網(wǎng)環(huán)境下完成 VNC 控制臺(tái)轉(zhuǎn)發(fā)、信道加密功能。其基本原理就是通過 SSH 服務(wù)實(shí)現(xiàn)信道加密傳輸、數(shù)據(jù)包轉(zhuǎn)發(fā)。因此，部署時(shí)，只需要

8、相應(yīng)節(jié)點(diǎn)開始 SSH 服務(wù)即可。其具體配置要求為：VNC 控制臺(tái)節(jié)點(diǎn)詳細(xì)說明服務(wù)器硬件（或虛擬機(jī)）處理器無要求網(wǎng)卡至少 2 塊網(wǎng)卡硬盤無要求內(nèi)存無要求網(wǎng)絡(luò)控制網(wǎng)、業(yè)務(wù)網(wǎng)操作系統(tǒng)Linux 系統(tǒng)，建議：CentOS 6.0 X86_64裝系統(tǒng)時(shí)。需要安裝SSH服務(wù)器和相關(guān)devel包；需要開放相關(guān)端口；南3. 系統(tǒng)部署3.1. vCenter1、2、3、4、5、在虛擬機(jī)上安裝 Windows 2008 操作系統(tǒng)（默認(rèn)用戶名：administrator設(shè)置網(wǎng)絡(luò)配置：IP、網(wǎng)關(guān)、子網(wǎng)掩碼、DNS 等；：123456a?）；在虛擬機(jī)中安裝 vCenter；安裝 vCenter 成功后，使用 VMwar

9、e vSphere C nt 客戶端，在 vCenter 中新建數(shù)據(jù)中心；在數(shù)據(jù)中心中新建群集（對應(yīng) VCD 中的資源池），打開 vSphere DRS 功能，其它默認(rèn)：6、在“主機(jī)和群集”視圖，為群集添加主機(jī)，根據(jù)具體環(huán)境要求，可以靈活配置群集下主機(jī)的數(shù)量。配置完成后，結(jié)果如下圖：南3.2.配置1、 對于對 HA 要求高的客戶，希望把虛擬機(jī)文件全部存放在共享需要做如下配置：而非本地中，就如下圖，在“主機(jī)和群集”視圖，點(diǎn)擊左側(cè)主機(jī)（如“21”），選擇右側(cè)的“配置”，單擊“器”“刪除”，將不需要的本地刪除。3.3. 部署 Cathy 環(huán)境3.3.1. 適用于簡單拓?fù)涞牟渴鸱绞皆诤唵瓮負(fù)浣Y(jié)構(gòu)下，主

10、控節(jié)點(diǎn)、ISM 節(jié)點(diǎn)及 VNC 控制臺(tái)節(jié)點(diǎn)是部署在同一臺(tái)機(jī)器上的。. 虛擬機(jī)模板部署方式會(huì)提供一個(gè) VMWare/iVirtual ovf 格式的虛擬機(jī)模板文件。然后，直接在某一vCenter/iVirtual 上直接導(dǎo)入此模板即可。具體步驟為：1、 在 vCenter 中導(dǎo)入 Inspur_cathy_controlcenter_ism_deploy_v1.0.ovf 模板；2、 將事先搭建好的FTP 數(shù)據(jù)目錄下，使用的掛載命令為：NFS）掛載到主控/ISM 節(jié)點(diǎn)上的/usr/local/proftpd南mount t nfs 00:/mnt/stor /usr/local/proftpd

11、o nolock并將該命令寫入配置文件/etc/rc.local3、 做以下配置文件修改操作，主要涉及 iauth 服務(wù)以及 iresource 服務(wù)：1）、對于 iresource 服務(wù)修改/etc/hosts 文件，將上面的 NFS【EX】：00進(jìn)信息加入進(jìn)去；nfs-200入/opt/cathy_installer_make_envirement/cathy/modules/iresource/tools/proftpd 目錄下執(zhí)行其中的安裝【命令】：，完成 FTP 服務(wù)器的安裝./install.sh 1在/usr/local/proftpd 目錄下，建立一個(gè) systemvm 目錄；

12、【命令】：mkdir p /usr/local/proftpd/systemvm將系統(tǒng)虛擬機(jī)文件目錄 vRouter 上傳進(jìn)創(chuàng)建好的 systemvm 目錄下；入/usr/local/apache-tomcat-6.0.29/webapps/iresource/WEB-INF/classes 目錄下，修改配置文件 incloudCperties:修改 ftpStore 字【EX】：為上面搭建的 NFS 服務(wù)器地址；# ftp 數(shù)據(jù)ftpStore =修改 sshHost 字【EX】：配置:NFS/nfs ip/nfs po NFS/00/mnt/stor為主控節(jié)點(diǎn)的 IPsshHost = 2

13、修改 sshUser、sshPassword 字段為主控節(jié)點(diǎn)的 root 用戶名和其他字段默認(rèn)即可；2）、對于 iauth 服務(wù)進(jìn) 入 /usr/local/apache-tomcat-6.0.29/webapps/iauth/WEB-INF/classes目錄下，修改配置文件 incloudCperties 中的 opemamurl 地址字段。南. 安裝包部署方式1、 主控/ISM 節(jié)點(diǎn)配置要求：2、 安裝前的配置過程：1 ）、 將事 先搭 建好 的 FTP數(shù) 據(jù)（ NFS ） 掛 載到 主控/ISM節(jié)點(diǎn) 上的/usr/local/proftpd 目錄下（請先使用 mkdir p /usr/

14、local/proftpd 命令創(chuàng)建該目錄），使用的掛載命令為：mount t nfs 00:/mnt/stor /usr/local/proftpd o nolock并將該命令寫入配置文件/etc/rc.local（注意，/usr/local/proftpd 后面沒有”/”）2）、修改/etc/hosts 文件，將上面的 NFS【EX】：信息加入進(jìn)去；主控/ISM 節(jié)點(diǎn)配置詳細(xì)說明硬件配置處理器隨部署拓?fù)錄Q定，至少 4 核網(wǎng)卡至少 2 塊網(wǎng)卡硬盤無要求內(nèi)存隨部署拓?fù)錄Q定，至少 8G 內(nèi)存網(wǎng)絡(luò)控制網(wǎng)操作系統(tǒng)CentOS 6.0 X86_64 系統(tǒng)裝系統(tǒng)時(shí)，需要安裝以下包：JAVA 相關(guān)包；xi

15、netd 包；ssh 服務(wù)器/devel 包；httpd 服務(wù)libgcrypt 及l(fā)ibgcrypt-devel 包gcc也可以使用 yum 安裝：yum install libgcrypt-develyum install libgcryptyum installyum install-serveryum install-yum install javayum install xinetdyum install gcc其他開放以下端口：22、8080、623、3306、80、21、8000 等；南00nfs-2003）、在/usr/local/proftpd 目錄下，建立一個(gè) system

16、vm 目錄；【命令】：mkdir p /usr/local/proftpd/systemvm將 vmware 系統(tǒng)虛擬機(jī)文件目錄 vRouter 上傳創(chuàng)建好的 systemvm 目錄下；4 ）、 將 ivirtual 系 統(tǒng) 虛 擬 機(jī) 文 件 inspur-router.tar.gz 上傳 /usr/local/proftpd 目錄下；5）、修改系統(tǒng)中進(jìn)程所能打開的文件數(shù)目 a）、修改/root/.bashrc:# 添加如下的行ulimit n 65535b）、source /root/.bashrc至6）、修改系統(tǒng)中服務(wù)為系統(tǒng)服務(wù)chkconfig -level 35d on7）、將云海的

17、 tomcat 服務(wù)設(shè)置為開機(jī)自啟動(dòng)，將命令寫入配置文件/etc/rc.local：ulimit -n 65535/etc/init.d/inspurtomcat restart8）、關(guān)于貓的配置環(huán)境，請參考Linux發(fā)送功能配置總結(jié).doc3、 解壓安裝包EX：tar xzvf cathy-1.0.0-20130408.tar.gz4、 進(jìn)入解壓后的目錄 cathyEX:cd cathy5、 執(zhí)行安裝文件./install.sh6、 在安裝過程中，會(huì)提示選擇是否開啟 tomcat 雙向認(rèn)證，開啟后將使向認(rèn)證。whether to open the cntAuth, please making

18、 a choice: y or n7、 在安裝過程中，會(huì)檢測系統(tǒng)是否安裝并安裝新版本。，如果系統(tǒng)已安裝，會(huì)提示用戶是否覆蓋，Server has existed at system.So, do you want to use itdirectorly or reinstall a newer ver1 or 2? please making a choice:選擇 1 則使用系統(tǒng)已有版本，選擇 2 則需先進(jìn)行卸載，然后重新安裝。南8、 會(huì)依次提示是否需要安裝以下服務(wù)，全部選擇 【y】即可imonitor 服務(wù) iauth 服務(wù) ibase 服務(wù) imanage 服務(wù) iresource 服務(wù)

19、 icharge 服務(wù) iworkflow 服務(wù) icm 服務(wù)ism 服務(wù)9、 安裝完成后，會(huì)給出提示【finished！】【注意：】安裝過程較長，大約 20 分鐘左右，請耐心等待。安裝完成后，需要做如下配置：10、主要涉及 imonitor 服務(wù)以及 iresource 服務(wù)：1）、對于 iresource 服務(wù)進(jìn)入/usr/local/apache-tomcat-6.0.29/webapps/iresource/WEB-INF/classes 目錄下，修改配置文件 incloudCperties:修改 ftpStore 字【EX】：為上面搭建的 NFS 服務(wù)器地址；# ftp 數(shù)據(jù)ftpS

20、tore =修改 sshHost 字【EX】：配置:NFS/nfs ip/nfs po NFS/00/mnt/stor為主控節(jié)點(diǎn)的 IPsshHost = 2修改 sshUser、sshPassword 字段為主控節(jié)點(diǎn)的 root 用戶名和其他字段默認(rèn)即可；2）、對于 imonitor 服務(wù)啟動(dòng) httpd 服務(wù)/etc/init.d/httpd restart chkconfig -level 35 httpd on執(zhí)行以下命令：南如果/etc/init.d/shinken s態(tài)，就沒必要執(zhí)行下面令：/etc/init.d/shinken restart3）、對于 icharge 服務(wù)us

21、查看到 shinken 的各項(xiàng)服務(wù)都是開啟狀修改中英文配置：/usr/local/icharge/default_perties默認(rèn)：#語言種類為中文如果要輸出英文：lang=en_US #語言種類為英文添加貨幣種類：/usr/local/apache-tomcat-6.0.29/webapps/icharge/WEB-INF/classes/ icharge_perties默認(rèn)：#chiname, english name, currency sign元,yuan,￥,dollar,$4）、對于 iVirtual 虛擬化類型，需要額外配置 NFS，具體為兩種情況：iVirtual 是新部署的

22、，則iVirtual 需要使用 Cathy 的 NFS：iVirtual 管 理 節(jié) 點(diǎn) 第 一 次 啟 動(dòng) tomcat后 ，配 置 文 件 ：/usr/local/ivirtual/ivirtual-manager/apache-tomcat-6.0.35/webapps/ROOT/WEB-INF/classes/globa lCperties 的如下字段：nfsserver.exportPath=00:/mnt/stor其中 nfsserver.exportPath 改為 Cathy 的 nfs 路徑，修改完成后重啟 ivirtual 服務(wù)：/etc/init.d/ivirtual-ma

23、nager restart。iVirtual 已經(jīng)使用（存在客戶的虛擬機(jī)），這種情況下 Cathy 需要共用 iVirtual 管理節(jié)點(diǎn)的 NFS：進(jìn)入/usr/local/apache-tomcat-6.0.29/webapps/iresource/WEB-INF/classes目錄下，修改配置文件 incloudCperties:修改 ftpStore 字為上面搭建的 NFS 服務(wù)器地址；【EX】：# ftp 數(shù)據(jù)配置:NFS/nfs ip/nfs po ftpStore = NFS/00/nfs南其中 ip 為 iVirtual 管理節(jié)點(diǎn)的 IP，與 iVirtual 管理節(jié)點(diǎn)下usr/

24、local/ivirtual/ivirtual-manager/apache-tomcat-6.0.35/webapps/ROOT/WEB-INF/classes/globalCpertiess 文件中的 nfsserver.exportPath 路徑一致。注：iVirtual 與 VMware 中的集群能被Cathy 使用的前提是打開 DRS！3.3.2. 適用于復(fù)雜拓?fù)?1 的部署方式在此部署結(jié)構(gòu)下，主控節(jié)點(diǎn)和 ISM 節(jié)點(diǎn)是分開部署的，其中，主控節(jié)點(diǎn)只連接控制網(wǎng)絡(luò)，而 ISM 節(jié)點(diǎn)同時(shí)連接控制網(wǎng)絡(luò)和業(yè)務(wù)網(wǎng)絡(luò)。而 VNC 控制臺(tái)可以部署于 ISM 節(jié)點(diǎn)上，也可以單獨(dú)部署一個(gè)節(jié)點(diǎn)出來。. 虛

25、擬機(jī)模板部署方式對于主控節(jié)點(diǎn)，會(huì)提供一個(gè) VMWare/iVirtual ovf 格式的虛擬機(jī)模板文件，直接在vCenter/iVirtual 中部署即可。對于 ISM 節(jié)點(diǎn)，具體步驟為：會(huì)提供一個(gè)單獨(dú)的安裝包，執(zhí)行安裝即可。1、 在 vCenter/iVirtual 中導(dǎo)入 Inspur_cathy_controlcenter_deploy_v1.0.ovf 模板；2、 將事先搭建好的 FTP 數(shù)據(jù)（NFS）掛載到主控節(jié)點(diǎn)上的/usr/local/proftpd 目錄下，使用的掛載命令為：mount t nfs 00:/mnt/stor /usr/local/proftpd o nolock

26、3、 將事先搭建好的 FTP 數(shù)據(jù)（NFS）掛載到 ISM 節(jié)點(diǎn)上的/usr/local/proftpd目錄下，使用的掛載命令為：mount t nfs 00:/mnt/stor /usr/local/proftpd4、 做以下配置文件修改操作，主要涉及 iauth 服務(wù)以及 iresource 服務(wù)：1）、對于 iresource 服務(wù)o nolock修改主控節(jié)點(diǎn)和 ISM 節(jié)點(diǎn)上的/etc/hosts 文件，將上面的 NFS去；【EX】：信息加入進(jìn)00對于主控節(jié)點(diǎn)來說：nfs-200進(jìn)入/opt/cathy_installer_make_envirement/cathy/modules/i

27、resource/tools/proftpd 目錄下南執(zhí)行其中的安裝【命令】:，完成 FTP 服務(wù)器的安裝./install.sh 2在/usr/local/proftpd 目錄下，建立一個(gè) systemvm 目錄；【EX】：mkdir p /usr/local/proftpd/systemvm將系統(tǒng)虛擬機(jī)文件目錄 vRouter 上傳進(jìn)創(chuàng)建好的 systemvm 目錄下；入/usr/local/apache-tomcat-6.0.29/webapps/WEB-INF/classes目錄下，修改配置文件 incloudCperties:修改 ftpStore 字為上面搭建的 NFS 服務(wù)器地址

28、；【EX】：# ftp 數(shù)據(jù)配置:NFS/nfs ip/nfs poftpStore = NFS/00/mnt/stor修改 sshHost 字【EX】：為 VNC 控制臺(tái)的 IPsshHost = 2修改 sshUser、sshPassword 字段為 VNC 控制臺(tái)所在節(jié)點(diǎn)的 root用戶名和；其他字段默認(rèn)即可；2）、對于 iauth 服務(wù)進(jìn)入/usr/local/apache-tomcat-6.0.29/webapps/iauth/WEB-INF/c lasses 目錄下， 修改配置文件 incloudCperties 中的 opemamurl 地址字段。對于 ISM 節(jié)點(diǎn)來說：將 IS

29、M 安裝包 Inspur_cathy_ism_deploy_v1.0.tar.gz 解壓，比如：tar xzvf Inspur_cathy_ism_deploy_v1.0.tar.gz進(jìn)入解壓后的目錄，執(zhí)行 ./install.sh 即可完成自動(dòng)安裝；修改 perties 文件：tomcat 路徑/webapps/ism/WEB-INF/spring-configuration/perties請將jdbc.d數(shù)據(jù)庫的各種配置設(shè)置好（如下）：.:/主控節(jié)點(diǎn).jdbc.Driverjdbc.url=jdbc:IP:3306/cloudos_db?useUnicode=true&;character

30、Encodin南g=utf-8jdbc.username=rootjdbc.password=111111確保對 SSH 服務(wù)的影響；. 安裝包部署方式此種方式，同 節(jié)類似，只不過，需要根據(jù)自己的實(shí)際部署結(jié)構(gòu)來選擇安裝哪些服務(wù)包。3.3.3. 適用于復(fù)雜拓?fù)?2 的部署方式此種方式比較靈活，完全可以根據(jù)用戶所具有的計(jì)算資源是否充足來決定主控節(jié)點(diǎn)上各服務(wù)的分布式部署情況。此種情況下的具體 安裝過程同 3.3.2 節(jié)描述的一樣。不過，在安裝完成后，需要進(jìn)入各服務(wù)的以下目錄中修改各服務(wù)的配置文件 incloudCperties 以及 perties 文件。文件路徑：tomcat 路徑/webapps/服務(wù)名稱/WEB-INF/classes/incloudCpertiestomcat 路徑/webapps/服務(wù)名稱/WEB-INF/ spring-configuration/perties3.4. 系統(tǒng)使用的注意事項(xiàng)1、 修改各服務(wù)調(diào)試日志級別（以 ireso