cloudstack部署運(yùn)維手冊(cè)

CloudStack部署運(yùn)維手冊(cè)CloudStack部署運(yùn)維手冊(cè) 安裝 配置 制作Windows模 【1】無(wú)法成功添加VCenter中的ESXI主 【2】VMFS協(xié)議的主添加失 【3】基礎(chǔ)架構(gòu)中的系統(tǒng)VM一直處于starting狀 【4】多臺(tái)Cloudstack管理同一VCenter導(dǎo)致SSVM啟動(dòng)失 【5】集成XenServer，主報(bào)錯(cuò) 【6】集成XenServer，主報(bào)錯(cuò) 【7】集成KVM報(bào)錯(cuò)：`/mnt/xx':Invalid 【8】CloudStack4.1集成KVM，創(chuàng)建的實(shí)例不能夠被通【非啟動(dòng)失敗 【9】制作RHEL6.3模板：創(chuàng)建的實(shí)例網(wǎng)卡會(huì)變?yōu)?【10】新建項(xiàng)目中的虛擬機(jī)不能被 【11】主機(jī)重啟后部分實(shí)例顯示running，但是不 六．參數(shù)優(yōu) NVSphere（EXSi+phre套件進(jìn)行主機(jī)的管理，在很大程度上面還不能夠全方位的對(duì)整個(gè)架構(gòu)進(jìn)行統(tǒng)一的安全認(rèn)證，審控，導(dǎo)致整套IT基礎(chǔ)架構(gòu)的管理低效。本方案采用某公司自主開發(fā)的IT基礎(chǔ)架構(gòu)管理平臺(tái)，結(jié)合CloudStack本文為CloudStack+EXSi部署手冊(cè)，主要涉及CloudStack臺(tái)的安裝，ESXiCloudStack平臺(tái)任何功能實(shí)現(xiàn)的代碼語(yǔ)細(xì)概念的解釋請(qǐng)參考其手冊(cè)，任何部署過(guò)程中產(chǎn)生的疑問(wèn)均以手冊(cè)操作為在本文第四章，講述了如何安裝其他虛擬化平臺(tái)，如XenServer，KVM，以及如何通過(guò)配置讓CloudStack管理節(jié)點(diǎn)，第五章講述了在配置過(guò)程中遇到的各種問(wèn)題，包括不能添加主機(jī)，不能添加主等等。本章節(jié)列出該環(huán)境中涉及CloudStackyumCloudstackYUM IPESXI 2003StandardRHEL6.3RHEL6.3安裝配置主機(jī)名跟IP[root@cloud~]#cat[root@cloud~]#cat/etc/sysconfig/network-scripts/ifcfg-eth0[root@cloud~]#servicenetworkrestart//[root@cloud~]#echo“3 cloud”>>/etc/hosts//設(shè)置本地解析記錄[root@cloud~]#hostname YUM[root@cloud~]#cat/etc/yum.repos.d/yum.repo[root@cloud~]#mount/dev/sr0 [root@cloud~]#yumcleanall;yummakecache;yumrepolistNTPntp.conf文件中如下三行server0.server1.server2.[root@cloud~]#cat/etc/ntp.conf|grep'' #localclock stratumntp.confntpd[root@cloudstack~]#servicentpdrestartShuttingdown Starting reachreach17的時(shí)候，NTP服務(wù)器為可用狀態(tài)，否則，關(guān)閉跟[root@cloud~]#iptables-F;iptables-Z;iptables-X //清空iptables規(guī)則[root@cloud~]#serviceiptablessave //保存iptables規(guī)則iptables:Savingfirewallrulesto/etc/sysconfig/iptables:[ [root@cloud~]#serviceiptablesrestart //重啟iptablesiptables:Flushingfirewallrules: OK iptables:SettingchainstoACCEPT:filter iptables:Unloadingmodules: iptables:Applyingfirewall [root@cloud~]#geten//查看當(dāng)前狀態(tài)的selinux狀[root@cloud~]#sed-i's/enforcing/disabled/g'/ 修改selinux[root@cloud~]#cat/etc/selinux/config|grep -v'^#'|grep-v'^$'|grep修改selinux狀態(tài)后需要重啟生效，如下操作為設(shè)置當(dāng)前狀態(tài)為Permissive[root@cloud~]#seten [root@cloud~]#geten[root@cloud~]#rebootCloudStackcloudstack點(diǎn)擊CloudStack相關(guān)RPM將所有RPM括 至 [root@cloud~]#yuminstallcreaterepo[root@cloud~]# -p-d- [root@cloud~]#cat/etc/yum.repos.d/cloudstack.repo[root@cloud~]#yumcleanall;yummakecache;yumCloudstack[root@cloud~]#yuminstallcloud-–y//安裝cloudstack組[root@cloud~]#yuminstallmysql-server–y f的[mysqld]下添加如下字段[root@cloud~]#servicemysqld //Mysql[root@cloud~]#mysqladmin password123456mysql服務(wù)器[root@cloud~]#mysqlurootp123456eGRANTALLPRIVILEGESON*.*TOroot@'%'IDENTIFIEDBY'123456'"; //設(shè)置root登錄權(quán)限cloudstack[root@cloud~]#cloud-setup- cloud:123456@localhost--deploy-as=root:123456-efile-m123456-k其中其中cloud表示需要被創(chuàng)建的用戶，<dbpassword> cloud/mnt/secondary-uxenserver-s<optional-management-server-secret-key>-/mnt/secondary-uvmware-s<optional-management-server-secret-key>-/mnt/secondary-ukvm-s<optional-management-server-secret-key>-<encryption_type>：可選參數(shù)，通常有兩種類型:file以及web,都是用于傳遞數(shù) ，默認(rèn)為file<management_server_key>:可選參數(shù)，替換默認(rèn)密鑰，用于加密CloudStack屬性文件中 參數(shù)。默認(rèn)為password。強(qiáng)烈建議您更換一個(gè)更安全的價(jià)值>:在CloudStack環(huán)境中，有 跟輔 的概念，或者叫做一 跟二 并導(dǎo)入vmware的模板文件。節(jié)點(diǎn)IP：4主機(jī)名：yun_pt_4，NFS共享 [root@yun_pt_4~]#cat/etc/exports [root@yun_pt_4~]#service rpcbindrestart;serviernfs [root@yun_pt_4~]#chkconfigrpcbindonchkconfignfson設(shè)置開機(jī)啟動(dòng)注：此處 僅作為輔 使用，因?yàn)楸经h(huán)境的 使用 VMFS格式 CloudStack[root@cloud~]# [root@cloud~]#mount-tnfs VMForForFor本文環(huán)境中的虛擬化技術(shù)為VMWare，選擇ForvSphere的方式，為了使得操作 工具先將系統(tǒng)VM模板 拷貝到CloudStack管理節(jié)點(diǎn)中的任意 - /secondary/- - -[root@cloud~]#umount /secondary;rm–rf/secondary//管理節(jié)點(diǎn)卸載輔助[root@cloud~]#cloud-setup-management// 啟動(dòng)Cloudstack服務(wù)配置 上圖為CloudStack的登陸界面，默認(rèn)用戶名/為CloudStack選擇“我以前使用過(guò)CuSak，跳過(guò)此指南，若按照該安裝指南進(jìn)行配置，默認(rèn)在選擇虛擬化技術(shù)的時(shí)候只有eSrvr&&KV沒(méi)有VMare選項(xiàng)，故不適用該指南。在上文安裝CloudStack中我們介紹了二級(jí)的作用是用于虛擬機(jī)模板 將其值設(shè)置為二級(jí)的IP地址或者二級(jí)所在的網(wǎng)段，本文將其設(shè)置為其圖成功設(shè)置二級(jí)相關(guān)參[root@cloud~]#/etc/init.d/cloud-management [root@cloud~]#/etc/init.d/cloud-management Startingcloud- 重啟之后，需要重新登錄進(jìn)行相關(guān)配CloudStack的基礎(chǔ)架構(gòu)均為空值，此處涉及多個(gè)概念，簡(jiǎn)單在此描述一下區(qū)域是uak部署中最大的組織單位。一個(gè)區(qū)域通常會(huì)對(duì)應(yīng)到一個(gè)單一的數(shù)是提供物理和冗余。例如，每個(gè)區(qū)域都可以有自己的電源和網(wǎng)絡(luò)上行，（盡管這不是必需的ne包含一個(gè)或者多個(gè)s每個(gè)d務(wù)器。區(qū)域中被所有ds進(jìn)行共享的二級(jí)pod中的主機(jī)處于同一子網(wǎng)內(nèi)ESXi的物理機(jī)器主【primarystorage】主主要運(yùn)行的虛擬機(jī)實(shí)例文件以及卷文件輔助【secondarystorage】輔助用于存放模板文件，ISO鏡像文件，硬盤卷快照。圖圖選擇基本區(qū)域類型圖設(shè)置區(qū)域相關(guān)屬性名稱：給區(qū)域命名DNS1：外部DNS，用于提供客戶機(jī)解析服DNS2：輔助DNS內(nèi)部DNS1：內(nèi)部DNS，用于提供管理VM的解析服務(wù)內(nèi)部DNS2：內(nèi)部輔助DNS，可以不填EXSI網(wǎng)絡(luò)方案：默認(rèn)即可提供點(diǎn)名稱：對(duì)新的提供點(diǎn)進(jìn)行命名，規(guī)則自定預(yù)留的系統(tǒng)網(wǎng)關(guān)：設(shè)置同一提供點(diǎn)上所有主機(jī)使用的網(wǎng)關(guān)起始預(yù)留系統(tǒng)IP：管理VM的IP起始值結(jié)束預(yù)留系統(tǒng)IP：管理VMIP圖設(shè)置網(wǎng)絡(luò)信下一步即將創(chuàng)建“群集“，上文提到，在CloudStack中群集可以理解成同一VCenterESXI主機(jī)中就是如此，VCenter管理的所有主機(jī)使用的虛擬化技術(shù)必定是VMWARE，當(dāng)時(shí)為了根據(jù)某種需求，比如雙機(jī)熱備等高可用集群方案，VCenter會(huì)將提供同一種服務(wù)的多臺(tái)機(jī)器（物理機(jī)OR虛擬機(jī)）置于同在此，無(wú)需CloudStack跟VCenter中的集群概念，根據(jù)文檔，通過(guò)CloudStackVCenterVCenter上面創(chuàng)建好的CloudStackESXIVCenter的方式從而間接實(shí)現(xiàn)對(duì)ESXI主機(jī)的管理的，此處數(shù)據(jù)中心名為：yuntest,群集名為：cpicCloudStack群集的相關(guān)信息虛擬機(jī)管理程序：VMware群集名稱：此處指的是VCenter上面創(chuàng)建的群集名稱cpicVCenter主機(jī)：安裝VCenterIPESXIIP地址。VCenter用戶名：登陸VCenter的用戶名，此處為administratorVCenter：登陸VCenter的VCenter數(shù)據(jù)中心：填寫上文提到的VCenter圖VCenter中的數(shù)據(jù)信創(chuàng)建完CloudStack群集之后，其實(shí)也就是添加完ESXI主機(jī)集合之后，需要?jiǎng)?chuàng)建主，主可以通過(guò)兩種類型被創(chuàng)建：地之所以加引號(hào)，表示本地可能并不一定是VCenter管理的主機(jī)上直接掛載的硬盤，很有可能是通過(guò)ISCSI協(xié)議掛載的外部SAN，總之不管如何，我們只看VCenter的中類型為VMFS的即可，關(guān)于代表SAN的ISCSI協(xié)議跟代表NAS的NFS協(xié)議有什么區(qū)別在此不做討論，查看上圖，此處選擇名為：primary的VMFS。名稱：此處自定義主的名稱服務(wù)器：填入VCenter的IP地址VCenter數(shù)據(jù)中心：名稱要填寫正確，此處填寫 數(shù)據(jù)：此處只寫的名稱，不帶其他標(biāo)識(shí)，填寫primary即可二級(jí)只能選擇使用NFS服務(wù)器，原因很簡(jiǎn)單，在整個(gè)配置開始之前，需要在二級(jí)中導(dǎo)入支持VMWARE的系統(tǒng)模板文件，此處按照之前配置的二級(jí)存儲(chǔ)進(jìn)行填寫。路徑：NFS圖查看基礎(chǔ)架構(gòu)是否正常為0，系統(tǒng)VM數(shù)目為2之外，其他所有組件的數(shù)目均為1。系統(tǒng)VMVM系統(tǒng)VM是不同于ESXI主機(jī)上創(chuàng)建的普通虛擬機(jī)的，他們是CloudStack臺(tái)SecondaryStorageVM：簡(jiǎn)稱為SSVM，用于管理二級(jí)的相關(guān)操作，如模板跟鏡像文件的上傳與，快照，volumes的存放，第一次創(chuàng)建虛擬機(jī)時(shí)從二級(jí)拷貝模板到一級(jí)并且自動(dòng)創(chuàng)建快照，每一個(gè)資源域可以有多個(gè)SSVM，當(dāng)SSVM被刪除或停止，它會(huì)自動(dòng)被重建并啟動(dòng)。ConsoleVM：用于在web界面上展示控制臺(tái)。制作Windows以上都配置成功之后，開始制作跟上傳模板了，關(guān)于如何制作模板，跟openstack比起來(lái)，cloudstackWindows的】，只要把系統(tǒng)里面進(jìn)行定制化配置之后，關(guān)閉系統(tǒng)，拷貝到一個(gè)web服務(wù)器上面即V1相同點(diǎn)DHCP本章節(jié)著重講述如何制作 ISOISOWindowsVCenter下面導(dǎo)出OVA格式的模板即可?！?】上傳ISO圖上傳ISOISOcd1ISOcd2【2ISO鏡像上傳完成之后，點(diǎn)擊實(shí)例進(jìn)行添加操作，選擇ISO圖圖30GB圖填寫實(shí)例名，并啟動(dòng)【3圖開始安裝操作系統(tǒng)F8圖選擇系統(tǒng)安裝分區(qū)圖選擇文件系統(tǒng)類型圖設(shè)置主機(jī)名跟圖第一階段安裝完成圖開始安裝第二張卸載，然后掛載圖CD2信【4】安裝VMWare右擊虛擬機(jī):i-2-45-VM安裝/VMWareVMWare【5】使用sysprep參考參考：系統(tǒng)準(zhǔn)備(Sysprep)工具為Windows（vista7）的安裝準(zhǔn)備復(fù)制、審核和客戶交付功能。使用（也稱為映像）可以捕獲可在整個(gè)組織中重復(fù)使用的自定義Windows映像。使用審核模式可以將其他設(shè)備驅(qū)動(dòng)器或應(yīng)用程序添加到Windows安裝。安裝其他驅(qū)動(dòng)程序和應(yīng)用程序之后，可以測(cè)試Windows安裝的完整性。使用Sysprep還可以準(zhǔn)備要交付至客戶的映像?？蛻魡?dòng)Windows時(shí)，會(huì)啟動(dòng)“歡迎使用Windows”。拷貝sysprep文件CsysprepD:\SUPPORT\TOOL\DEPLOY.CAB下面的文件到c:\sysprep中圖拷貝文件到系 c:\sysprep\setupmgr.exe圖使用安裝管理器圖選擇創(chuàng)建新應(yīng)答文件Sysprep圖選擇Windows圖輸入用戶跟單位名稱圖選擇默認(rèn)顯示設(shè)置圖選擇正確的時(shí)區(qū)圖選擇客戶端模圖選擇自動(dòng)產(chǎn)生計(jì)算機(jī)名圖填入管理員，不在應(yīng)答文件中加圖網(wǎng)絡(luò)組建選擇典型設(shè)置 圖區(qū)域設(shè)置，選擇中文(中國(guó)圖語(yǔ)言選擇中文簡(jiǎn)體圖不選擇附加命令圖不填寫任何內(nèi)容圖選擇應(yīng)答文件sysprep.inf圖完成安裝管理器c:\sysprep\sysprep.exe-reseal-mini-圖圖sysprep【6】WindowsServer2008R2這個(gè)工具進(jìn)行Sysprep 或者直 如 WindowsAIK,Sysprep圖選擇安裝路徑，默認(rèn)將Windows安裝光盤sources 下面的install.wim文件拷貝至C盤 圖掛載系統(tǒng)鏡像，找到install.wim圖打開Windows圖右擊新建應(yīng)答文件Windowsinstall.wim圖選擇創(chuàng)建編錄文件圖編錄文件成功生成圖將條 -Windows-International-Core傳送至7圖下圖，不會(huì)自動(dòng)化啟動(dòng)成功。圖傳送第二個(gè)條目-Windows-S-圖配 -Setup下的OOBE相關(guān)設(shè)圖配置超級(jí)管理員圖圖保存配置文件到指 如上圖所示,保存到C:\Windows\System32\sysprep,文件名默認(rèn):Windows圖使用sysprep至此，WindowsServer2008R2SP1的模板配置基本完成，關(guān)于桌面設(shè)置【7】點(diǎn)擊裝有Windows_Server_2003_R2_SP2然后選擇文件---導(dǎo)出---導(dǎo)出OVF模板

圖填寫OVF除了模板的制作存在一定的不同之外，Linux跟Windows模板上傳，啟動(dòng)實(shí)StorageB模板CentOS5.3-x86_64.ova/ar/www/tml/ludtak/CntOS5.3-x86_64.ovaCloudStack管理界面 模圖URL：指定模板的路徑，此處使用web圖圖模板完成，成圖圖選擇我的模板—圖選擇數(shù)據(jù)磁盤類型圖選擇網(wǎng)絡(luò)，默認(rèn)無(wú)選項(xiàng)圖實(shí)例添加（啟動(dòng)）IP圖實(shí)例在ESXI圖虛擬路由器創(chuàng)建成功VCenter查看充當(dāng)虛擬路由器的虛擬機(jī)處于運(yùn)行狀態(tài)。至此，CloudStack臺(tái)從安裝，集成VMWARE，上傳模板，啟動(dòng)實(shí)例都暫時(shí)【1】安裝XenServer6.0.2圖輸入回車鍵開始安裝圖選擇OK圖硬件警報(bào)，點(diǎn)擊ESXI主機(jī)上面安裝的，所以會(huì)報(bào)這個(gè)問(wèn)題，提示不能夠安裝Windows操作系統(tǒng)，物理機(jī)不存在該問(wèn)題(只要BIOS開啟CPU虛擬化)圖選擇是否安裝額外包，選擇dom0

圖調(diào)整dem0的內(nèi)存值，使得其能夠支持創(chuàng)建的虛擬機(jī)sshxenserver主機(jī)備份并修改extlinux.conf[root@xenserver60~]#cp -01//labelxedem0_mem[root@xenserver60~]#sed-i'10s/dom0_mem=752M/dom0_mem=2940M/g'/boot/extlinux.conf//10dem0_memrebootXenServer的控制臺(tái)均[root@xenserver60 od722/etc/xensource-NTP

圖配置參數(shù)生效過(guò)程申請(qǐng)激活碼連接 CloudStackXenServerSupportPackage(該組件功能用于實(shí)現(xiàn)XenServer上面的安全組，彈性負(fù)載均衡以及彈性IP相關(guān)ForXenServer6.0.2，為 如果該主機(jī)所在的CloudStackzone使用的是基本網(wǎng)絡(luò)，則需要禁用重啟系統(tǒng)，然后就可以加入到CloudStack【2】Cloudstack集成XenserverVM -/secondary/- -h -CloudStackzone圖圖選擇網(wǎng)絡(luò)，填入流 為XenServer的網(wǎng)卡Pod圖填寫圖填寫XenServer圖查看基礎(chǔ)架構(gòu)信息圖從XenCenterVMKVM虛擬化一般是建立在RHEL之類的linux操作系統(tǒng)之上的虛擬化平臺(tái)，RHEVESXI,XenServer這樣的平臺(tái)，但是現(xiàn)在普及最廣，應(yīng)用最廣的還是Linux操作系統(tǒng)之上的KVM平臺(tái)，畢竟那么我們?cè)诎惭bKVM主機(jī)的時(shí)候，就盡量將RHEL系統(tǒng)打造成一個(gè)的虛擬化平臺(tái)，在安裝過(guò)程中選擇虛擬化平臺(tái)相關(guān)組件，將其他無(wú)關(guān)組件均去掉，這題。為了讓各位對(duì)整個(gè)環(huán)節(jié)有一個(gè)全面的了解，對(duì)KVM主機(jī)的操作將從RHEL系統(tǒng)安裝開始講述，直到其被CloudStack管理節(jié)點(diǎn)所接管為止，采用的是RHEL6.364位版本，CloudStack采用4.1.1版本，下文使用的是4.04.14.1.1版本不在本文列出，請(qǐng)根據(jù)官方文檔自行安裝。CloudStack/4.1.1/pdf/InstallationGuide/ApacheCloudStack-4.1.1-InstallationGuide-en-US.pdf既然在此處提到4.0版本跟KVM 可以正常添加KVM，并且創(chuàng)建SSVM以及SSVM跟CPVM可以正常啟動(dòng)，并顯示running登陸SSVM查看二級(jí) 狀態(tài)，無(wú)顯示，查看是否存在systemvm 現(xiàn)在/usr/local/cloud下無(wú)該 由于3的問(wèn)題，導(dǎo)致 使用CloudStack4.1的管理端以及AgentSSVM掛載二級(jí)【1】安裝RHEL6.3圖選擇安裝BootLoader選擇Desktop基礎(chǔ)包，然后選擇Customizenow，進(jìn)行定制化安裝，在下圖中，選中左邊的Virtualization,將右邊的所有選項(xiàng)全部選中，然后下一步，開始安裝系圖選擇所有虛擬化組件圖開始安裝所選軟件包FirstBoot圖不RHN服務(wù)RHN圖提示不會(huì)獲取系統(tǒng)更新圖設(shè)置Kdump【2】配置KVM1）網(wǎng)絡(luò)配置：IP地址設(shè)置為:主機(jī)名 關(guān)于主機(jī)名的域?qū)Νh(huán)境的影響請(qǐng)查看/ NTPCloudStack【3】安 跟ESXI與XenServer不同，CloudStack對(duì)KVM實(shí)例的管理需要通過(guò)實(shí)現(xiàn)jsvc包，安裝Cloud-Agent的時(shí)候需要使用到 64/Pa 1.0.1-[root@kvm01 [root@kvm01~]#rm-rf/mnt/cloudstack4.0/repodata/ 重新生成repodata [root@kvm01~]#createrepo -p-d-o/mnt/cloudstack4.0/ [root@kvm01~]#yuminstallcloud-agent //安裝cloud-agent包【4】修改libvirt配置文件嘗試使用組播DNS。[root@kvm01~]#cp/etc/libvirt/libvirtd.conf listen_tls=listen_tcp=tcp_port=mdns_adv=0 [root@kvm01~]#servicelibvirtd //libvirtd【5selinuxenforcing[root@kvm01~]#sed-i's/enforcing/disabled/g'iptables[root@kvm01~]#iptables–F;iptables–Z;iptables[root@kvm01~]#iptables-IINPUT-ptcp-mtcp--dport22-jACCEPT[root@kvm01~]#iptables-IINPUT-ptcp-mtcp--dport1798-jACCEPT[root@kvm01~]#iptables-IINPUT-ptcp-mtcp--dport16509-jACCEPT[root@kvm01~]#iptables-IINPUT-ptcp-mtcp--dport5900:6100-jACCEPT[root@kvm01~]#iptables-IINPUT-ptcp-mtcp--dport49152:49216-jACCEPT[root@kvm01~]#serviceiptablessave;serviceiptablesrestart[root@kvm01 //重啟系統(tǒng)使得selinux[root@kvm01~]#virshnet- //defaultKVMNAT[root@kvm01~]#virshnet-destroydefault//NAT[root@kvm01~]#virshnet- Networkdefaulthasbeen[root@kvm01~]#Networkdefaulthasbeen[root@kvm01~]#virshnet- --all//NAT [root@kvm01~]#cat [root@kvm01~]#cat [root@kvm01~]#servicenetworkrestart [root@kvm01~]#brctl bridgebridgenamebridgeSTPenabled 【7】集成到 CloudStackkvm /secondary/- -- 圖選擇區(qū)域類型為基本IPKVM圖編輯IP流量為KVM的橋接設(shè)備圖編輯podIP圖配置IP地址范KVM圖圖查看基礎(chǔ)架構(gòu)是否完整VMSSVMIPCPVMIP圖從CloudStack管理節(jié)點(diǎn)對(duì)以上IP進(jìn)試連圖從KVMSSVM圖查看KVM【8 模板文件—ISO鏡【9】通過(guò)ISO創(chuàng)建實(shí) 圖停止實(shí)例，查看實(shí)例卷圖圖填寫新建模板信息圖通過(guò)模板RHEL-6.3-x86_64Consoleinstance005IPCloudStackZone*1zone01---VM（SSVM+CPVM）Pod*IP：00-IP：45-45【該配置在zone中的網(wǎng)絡(luò)配置--IP主：擬Router:IP：00-40podIP：45-45【該配置在zone中的網(wǎng)絡(luò)配置--IP主：nfs://52/primary【每個(gè)Pod對(duì)應(yīng)一個(gè)主】輔助：nfs:///secondary【共用一個(gè)輔助】Cluster*2cluster01Incluster02In【1VCenter中的ESXICloudStack:VCenter:ESXI主機(jī):1【但可以成功添加VCenter主機(jī)】通過(guò)對(duì)VCenter了管理EXSI主機(jī)的VCenter的IP地址為：6，問(wèn)題解決，后期再新的VCenter上面創(chuàng)建普通用戶sjcloudAdministrator組之后，是可以將VCenter以及主機(jī)加入成功的，初步估計(jì)該問(wèn)題出在網(wǎng)絡(luò)層面?！?】VMFS協(xié)議的 無(wú)法添加VMFS格式的主，NFS協(xié)議的可以按照文檔的說(shuō)法，添加 Path(forVMFS).Path(forVMFS).InvSpherethisisacombinationofthedenternameandthedatastorename.Theformatis"/"dentername"/"datastorename.Forexample,"/cloud.dc.VM/cluster1datastore".所以之前一直按照下圖方式添加VMFS格式的 通過(guò)測(cè)試，通過(guò)上圖的方式添加主均會(huì)報(bào)錯(cuò)，不能夠添加成功。 日志中path的值的結(jié)構(gòu)為：/數(shù)據(jù)中心/數(shù)據(jù)中心 現(xiàn) 數(shù)據(jù)填入：primary，至此【3】基礎(chǔ)架構(gòu)中的系統(tǒng)VM一直處于 正常情況下，zone的一系列組件全部添加成功并啟用zone之后VM問(wèn)題分析：VMIP地址公用IP地址-----------即IP地址IP地址------------即內(nèi)網(wǎng)IP地址，用于管理使用CloudstackVMVM通過(guò)系統(tǒng)VM的IP地址，如果發(fā)現(xiàn)系統(tǒng)VM確實(shí)已經(jīng)啟動(dòng)成功，但是網(wǎng)絡(luò)連接失敗，則會(huì)顯示starting狀態(tài)，直到網(wǎng)絡(luò)連接測(cè)試正常，才會(huì)顯示為running1[ESXIIP地址]02[系統(tǒng)VM的IP地址]。從日志看出，是網(wǎng)絡(luò)的原因造成的，可以手動(dòng)登陸到系統(tǒng)VM一臺(tái)，比如登入SSVM：s-1-VM登錄名/：執(zhí)行：/usr/local/cloud/systemvm/ssvm-check.vm 只需要在配置cloudstack的提供點(diǎn)名稱跟管理IP的那個(gè)步驟填寫正確的網(wǎng)關(guān)，子網(wǎng)掩碼以及管理IP圖填寫正確的子網(wǎng)信息【4】多臺(tái)Cloudstack管理同一VCenter導(dǎo)致SSVM啟動(dòng)VCenter：6CloudStack中的SSVM啟動(dòng)總會(huì)失敗，即使手動(dòng)開啟該虛擬機(jī)，一段時(shí)間之后，會(huì)停止一個(gè)CloudStackcloud-management上面的SSVM狀態(tài)，可以正常啟動(dòng)，并持續(xù)正常運(yùn)行，所以問(wèn)題出在多CloudStackVCenterCloudStack均會(huì)在這個(gè)VCenter上的主機(jī)上面創(chuàng)建SSVM虛擬機(jī)，會(huì)有，導(dǎo)致SSVMVCenterCloudStackCloudStackVCenter【5】集成XenServer， 報(bào)錯(cuò)XenServerCloudStackCloudStackmysqlXenServer主機(jī):0，結(jié)果在創(chuàng)建主的時(shí)候報(bào)錯(cuò)：

圖創(chuàng)建主報(bào)CloudStackXenServer的時(shí)候，XenServer方式將主掛載了，雖然清空了CloudStack管理節(jié)點(diǎn)的所有數(shù)據(jù)，但是XenServer主機(jī)里仍舊掛載著該NFS，所以當(dāng)CloudStack管理節(jié)點(diǎn)在再次去不能夠繼續(xù)添加其他組件，完成整個(gè)Zone的創(chuàng)建工作。圖查看XenServer上面掛載的主圖通過(guò)命令列出該圖再次通過(guò)XenCenter查看是否卸載成 集成XenServer， 報(bào)錯(cuò)Failedtoaddstorage根據(jù)日志顯示，提示我們XenServer上有多個(gè)相同UUID的倉(cāng)庫(kù)，UUID

圖查看UUID為重復(fù)的兩個(gè)通過(guò)XenCenter圖形化右擊兩個(gè)重復(fù)的ID，F(xiàn)orget即可【7】集成KVM報(bào)錯(cuò)：`/mnt/xx':Invalid但是到系統(tǒng)VM2013-08-1315:28:01,634WARN2013-08-1315:28:01,634WARN(console-1:null)Exceptionwhiletryingtostart9023com.cloud.exception.AgentUnavailableException:Resource[Host:1]isunreachable:Host1:UnabletostartinstanceduetoUnabletogetanswerthatisofclasscom.cloud.agent.api.Star ...19KVMHost(Cloudstack '/mnt/2c65613e-e5a3-3443-96c9-272fd60502ee/v-2-VM-patchdisk':Invalidargument這個(gè)問(wèn)題的原因從 [root@storage252~]#cat [root@storage252~]#cat [root@storage252~]#ll/primary/ /secondary/-ddrwxrwxrwx3rootroot4096Aug1409:09/primary/drwxrwxrwx3rootroot4096Aug1318:33/secondary/[root@storage252~]#servicenfsstatusrpc.svcgssdisrpc.mountd(pid26157)isnfsd(pid2622226221262202621926218262172621626215)isrpc.rquotad(pid26153)isrunning...[root@storage252~]#exportfs 可以看出NFS服務(wù)器的配置文件跟導(dǎo)出的 手動(dòng)掛載NFS導(dǎo)出的 到KVM主機(jī)上[root@kvm01~]#showmount[root@kvm01~]#showmount Exportlistfor52:/secondary [root@kvm01~]#mkdir/mnt/1[root@kvm01~]#mkdir/mnt/2[root@kvm01~]#mount-tnfs52:/primary/mnt/1[root@kvm01~]#mount-tnfs52:/secondary/mnt/2[root@kvm01~]#ll totaldrwxrwxrwx.3nobodynobody4096Aug1409:09drwxrwxrwx.3nobodynobody4096Aug1318:33 [root@kvm01[root@kvm01~]# [root@kvm01~]#touch[root@kvm01~]#touch [root@kvm01~]#ll/mnt/1/total-rw-r--r--.1nobodynobody[root@kvm01~]#ll/mnt/2/total1-rw-r--r--.1nobody可以看出KVM0Aug1409:350Aug1409:35Operationxxx但是可以發(fā)現(xiàn)掛載到KVM主機(jī)上面的NFS的屬主跟屬組都是nobody,而我們?cè)贜FS服務(wù)器上面設(shè)置了no_root_squash參數(shù)，表明客戶端使用root用戶創(chuàng)建的文件的權(quán)限也應(yīng)該是root.root，而非nobody.nobody。Aug13Aug1316:50:25storage252rpc.idmapd[19778]:nss_getpwnam:name'0'doesmap' 'doesnotmap''A1sa1:FS-Cache:Netfs'nfs'registeredfor 'doesnotmapinto 2334Aug1315:26:48kvm01kernel:NFS:v4s