Openstack云平臺(tái)運(yùn)維手冊(cè)

1、Openstack運(yùn)維手冊(cè)2017 年 7 月 18 日目錄Openstack 運(yùn)維手冊(cè) 11、 健康檢查 31、認(rèn)證模塊檢查 32、計(jì)算模塊檢查 33、網(wǎng)絡(luò)模塊檢查 44、存儲(chǔ)模塊檢查 45、鏡像模塊檢查 56、檢查Horizon 服務(wù) 57、分布式存儲(chǔ)檢查 52、 運(yùn)維命令 61、虛擬機(jī)開通 62、安全組管理 63、創(chuàng)建和掛載彈性云硬盤 74、創(chuàng)建網(wǎng)絡(luò) 75、鏡像上傳與格式轉(zhuǎn)換 86、虛擬機(jī)模板管理 83、 日志檢查 84、 常見故障實(shí)戰(zhàn)模擬 94.1、 虛擬機(jī)不通 94.1.1、 測(cè)試ICMP告警94.1.2、 查找物理機(jī) 94.1.3、 、物理機(jī)網(wǎng)絡(luò)判斷 104.1.3.1、 物理機(jī)通

2、、承載的虛擬機(jī)網(wǎng)絡(luò)不通 104.1.3.2、 物理機(jī)通、承載的虛擬機(jī)網(wǎng)絡(luò)通 104.2、 物理機(jī)網(wǎng)絡(luò)不通 104.2.1、 、疏散后狀態(tài)異常 114.2.2、 、疏散失敗 124.2.3、 、疏散失敗導(dǎo)致任務(wù)狀態(tài)異常 12*執(zhí)行任何openstack命令之前都必須運(yùn)行 openstack的環(huán)境變量source /root/admin-openrc.sh （每次新開控制臺(tái)窗口必須執(zhí)行一次）A健康檢查J認(rèn)證模塊檢查openstack token issueiroot Contro 1 let:openstaclc token issueI，-，-H | Field| Value| expires

3、| 2D15-05-2ST05:03:27,9825813I Ld| 巴西9日口口 hb*56h5口 huU33G56| puojacVLd | 9=。3各63國(guó)1333g35?？诳诳?3039匚工9鼻4二6I userid- | acaasoSSGTsecsoeaece4astcGeis有輸出即可，如輸出異常重啟服務(wù)即可apache2 restartrestart2、計(jì)算模塊檢查nova service-listrflflt&ceiitireli.er: /|B vvova. atvice- 1i.3tI M Binary| Ho3t| Zonel ScfltTia | State- Uj

4、datcia_cic| Disafcilcd Fcaaon |i| 1 i| n0m口匕電工4| coatroller | internal | 白酸 1 總d | uj | 2D1 e-o6-3eiujp1113o=cocore | -I a j| oonLroll&r | iE)xernail | 白刀日力|曰& | u|.aacooo | -II 3 nov-SEheduler | coarcolIbe I InxetzriSil I enabled I up| 201 ff-06-Z：TO3141 s2g.OOOOOO | 一| 4 )-G：DndiiEtOi | coatrollei

5、 | iDtecEial | Eaebled | up| 2Ol(i-0fi-SBT0i3. OOCOdO | -l| 5 | SVS-&CilBpsQt| 口0m9心也 1.| nova| up| 2 01 ff-08TDIJ M 113 fl . 000000 ) -I 5 初，由| 口31口1| 加vm| 0口 lU也 | UR| 201-0M1 ； 6 - OWOd 0 | -所有計(jì)算服務(wù)的status必須是enabledState必須是up如有服務(wù)存在異常，直接重啟異常的服務(wù)。service nova-cert restartservice nova-consoleauth rest

6、artservice nova-scheduler restartservice nova-conductor restart service nova-compute restart3、網(wǎng)絡(luò)模塊檢查neutron agent-listhost-I 仁士后曰9 UZTEi - E fic =：- 十二0d-白二 1 L -Z 弓SSL;匚巴上巴口 I.I *2 zl3el -dSt才-帕可日一百占 t-4ds?4iEEI 7*5 ft12Q-: S6 .DODOOD|NoneIci4v3eE-VQlus=eI u*孽4a濾I nn”事l|軟口由4 Iup口;1習(xí)口與：$中 + 口?？冢?口|弊

7、口口座所有存儲(chǔ)服務(wù)的status必須是enabledState必須是up如有服務(wù)存在異常，直接重啟異常的服務(wù)。service cinder-scheduler restart service cinder-api restart service cinder-volume restart5、鏡像模塊檢查glance image-listraotlet rjf rjl*nc*w一一 一 _一一 _ a|r . 一 一 一，_ 一+|IDIKanu|Ulas-alrBb- ee b- e D41eibD5cs?0|cIex-ob . r au| - h有輸出即可，如輸出異常重啟服務(wù)即可servic

8、e glance-registry restartservice glance-api restart6、檢查Horizon 服務(wù)ps -ef | grep apache2如有輸出horizon用戶執(zhí)行apache2命令即可root.Sconcroller:ps -ef | grep apacheSroot1164755017:07plLs/300:00:00grep color-autoapache2匚口。tr319710Jun21?00;00;16/use/sbin/apache2-k 3t匚thor i_z.on1510931970Jun2 6?00:00:07/usr/sb in/ap

9、ache2-k starthorizon15L1031970JunZ 6000:00:07/use/sb in/apache2-k starthorizon1511131970JunZ 6?00:00:06/use/sbin/apache2-k startwuwdata1512 331970Jun2 57OO：00：36/use:/sb 1 n/ apac he 2-k startwu5一d&G比1537331970JunZ 5?00:00:37/usr/sb1n/apache2一吒 start如異常重啟 memcachedservicememcached restart7、分布式存儲(chǔ)檢查忖口

10、（卬：口證兇】:匕門-4 人口占Jbz 1 lister e-2 le12 3-310；-42 5a-B hdt-72 口4c 3 3 a6161tieftltn EEuTHCPKmcmq? 1 3 任廿口口 q匚 1二口0口“3卜L550.mg7JWacjiiipucijim 11c+3口/虱3力”口工工女二13露d10工$78即6e- left Lon u 戶口匚 h 3 6P q!jnrmri 口 . 1.2 ooq.tr ol le-r ,c Dispute-11 coirq cjtoaomaji e53: J osds: J opr 3 m 口空imji V537fi 5 Ed 3

11、L3U, 2Ll EB 曰* u七仙工/ Ufmil MN u：s=dL 134 G f L49 QR .mi 下atlvccltan rOotAcoAiCxcilli.:IHealth 必須是 HEALTH_OK 如遇至U mon或者osd down重啟對(duì)應(yīng)節(jié)點(diǎn)服務(wù)即可，查詢節(jié)點(diǎn)命令cephosd treeroot0con.trciLLer:ceph os fl creeIDtTEIGHTTYPENAMEUP/DOWNREWEIGHTPRIHARY-Ar?INITY-13.00000raocdefault-21, ooooohost- controlleu1,00000osd. up1.00

12、0001 ,ooooc-31.00000host computeE21.00000csd. 2up1.000001.0000C-41.00000host, coxtiputel1i.oaooocsd. 1Lipl.ooonol.OOCOOir n n T hi r1 n n r- nh 1 1 SnT-*為必重啟服務(wù)命令/etc/init.d/cephstart osd.x二、運(yùn)維命令1、虛擬機(jī)開通查詢現(xiàn)有的虛擬機(jī)模擬nova flavor-list查詢當(dāng)前的虛擬機(jī)鏡像nova image-list創(chuàng)建虛擬機(jī)Novaboot -flavor name -image name-nic net-i

13、d=4d42b06a-5b86-4d20-a249-4d0e9f7a8162 -security-group default testl查看虛擬機(jī)狀態(tài)nova show id當(dāng)vm_state狀態(tài)顯示為active時(shí)，說明虛擬機(jī)部署完畢，可以使用了2、安全組管理創(chuàng)建一個(gè)安全組novasecgroup-create test this is a test向安全組添加規(guī)則允許來自192.168.0.1的ICMP和ssh流量novasecgroup-add-rule testtcp 22 22 192.168.0.1/0novasecgroup-add-rule testicmp -1 -1 192

14、.168.0.1/0如果虛擬主機(jī)運(yùn)行Windows 系統(tǒng)，則添加一條允許建立TCP 連接的規(guī)則novasecgroup-add-rule testtcp 3389 3389 192.168.0.1/0查看安全組所有配置規(guī)則novasecgroup-list-rules test從安全組中刪除允許來自192.168.0.1的TCP流量規(guī)則novasecgroup-delete-rule testtcp 22 22 192.168.0.1/0刪除安全組novasecgroup-delete test3、創(chuàng)建和掛載彈性云硬盤查看已創(chuàng)建的云硬盤nova volume-list創(chuàng)建一塊新的云硬盤，名稱為

15、 test_disk ，大小為 10Gnova volume-create -display_nametest_disk 10查看新創(chuàng)建云硬盤 test_disk 的詳細(xì)信息nova volume-show id* 注意：新創(chuàng)建的云硬盤test_disk ，此時(shí)還沒有掛載到任何虛擬主機(jī)中。刪除新創(chuàng)建的云硬盤nova volume-delete a6cb97b7-145d-4acc-94ae-e3425d76254e將新創(chuàng)建的云硬盤 test_disk 掛載到指定的云主機(jī)test 上nova volume-attach test a6cb97b7-145d-4acc-94ae-e3425d762

16、54e將云硬盤從云主機(jī)test 上卸載nova volume-detach test a6cb97b7-145d-4acc-94ae-e3425d76254e4、創(chuàng)建網(wǎng)絡(luò)查看所有的網(wǎng)絡(luò)neutron net-list查看子網(wǎng)設(shè)置neutron subnet-list創(chuàng)建彈性公網(wǎng) IP 池neutron subnet-create ext-net 10.9.0.0/24-name ext-subnet -allocation-poolstart=10.9.0.113,end=10.9.0.140 -disable-dhcp -gateway 10.9.0.254創(chuàng)建一個(gè)彈性IP 給當(dāng)前租戶nov

17、a floating-ip-create ext-net將 IP 地址分配給虛擬機(jī)nova add-floating-ipvm_id 10.1.253.1645、鏡像上傳與格式轉(zhuǎn)換轉(zhuǎn)換成 raw 格式qemu-img convert -f qcow2 -O raw *.img *.raw上傳鏡像glance image-create -name *.raw -file *.raw -disk-format raw -container-formatbare-progress6、虛擬機(jī)模板管理創(chuàng)建虛擬機(jī)模板nova flavor-create test IDramdiskcpu例： nova f

18、lavor-create test 6 512 100 2查看虛擬機(jī)模板狀態(tài)nova flavor-list三、 日 志檢查Nova 日志目錄：/var/log/nova/*.logHorizon 日志目錄： /var/log/apache2 /*.logCinder日志目錄： /var/log/cinder/*.logKeystone 日志目錄： /var/log/keystone/*.logGlance 日志目錄： /var/log/glance/*.logNeutron日志目錄： /var/log/neutron/*.logCeph日志目錄： /var/log/ceph/*.log四、常

19、見故障實(shí)戰(zhàn)模擬4.1、 虛擬機(jī)不通虛擬機(jī)IP不通告警，（郵件提醒ICMP 10.36.8.230不通）4.1.1、 測(cè)試ICMP告警首先自行測(cè)試ip是否通，也有可能由于網(wǎng)絡(luò)閃斷、或者負(fù)載過高導(dǎo)致網(wǎng)絡(luò)異常，短暫時(shí) 間會(huì)恢復(fù)ping 1&.2C.9.23GPING 1Q.36.8.23Q (10.36.3,230) 560+) bytes of data.64 bytesfrom10.36.fi.239;icnip_5eq=lttl=S2tuiie=6.7&2ins64 bytesf rornIQ，葡4.230:icmp_seq=2tinie=e.712皿584 bytesfremIS.36,3,

20、230:icnp_seq=3ttl=&2tinie=O.&27ms4.1.2、 查找物理機(jī)如網(wǎng)絡(luò)確實(shí)不通，查找該虛擬機(jī)上承載的物理機(jī)信息fMT0cah! fftl1 -V /叱立占dnl*即白帽口相moiBtfitflntrollerlsnan list Igneg 后，融.幽7拈| 工垃M38H3dT長(zhǎng)白閡-忖知iftO阪為 | test| AJCTIWE | -| 刖nminq | selt&ertfuce= 1S2 a-lflr 1G.15.B.23S |F41 (centroller 1 sr nova 醐加11?9到廣7】酶LMd 41dlM I端|PropertyIValueI(S

21、-DCFiskCnpfis|MJEIK-LXT AZi：dAlldbjLUky_ianicIrv4|D-&XT-W-TTRihQiEt -|cvipata|I05-EJn-W-iBTTR；hi5tiaH?|testIN，Ejn 汕 AlTOi hypi-fIla|fgpwtn學(xué)I-EJn SKtf fiTTRinetince_niaHieibibtrK的圖一1日IID5- EXT -SftM -fiTTR； kernil_id|I OSf XT 5RM AITOj ijn*x| 0利用虛擬機(jī)IP調(diào)命令nova list|grep篩選出虛擬機(jī)名稱和ID號(hào)利用ID號(hào)，nova show ID找出承

22、載虛擬機(jī)的物理機(jī)。4.1.3、 物理機(jī)網(wǎng)絡(luò)判斷由上圖可以看到故障虛擬機(jī)上的物理機(jī)是comput29,在其所屬成都集群上Ping主機(jī),如果通，則進(jìn)行下一步判斷，如果不通，擇將虛擬機(jī)遷移到其他物理機(jī)上，詳細(xì)操作見 后面。4.1.3.1、 物理機(jī)通、承載的虛擬機(jī)網(wǎng)絡(luò)不通物理主機(jī)是通的，虛擬機(jī)不通，可查找承載該物理機(jī)上的其他虛擬機(jī)網(wǎng)絡(luò)狀態(tài)是否一致,如所有虛擬機(jī)都不通，則重啟該物理機(jī)上的neutron服務(wù)。O Ml ML其青理與中Z PlRWjfr比Wil LtrinipuH31LUbuHlij-M WI.5.C1i,J ，睢工聃 dhin LuwipuifrSili u。, -皿a弊口 iiKlnir

23、i LJinipuMs3l itmLii g 1 dg/翊 * M pt-fl（ 主機(jī)-*） /torapiie.31j ilW I+*猶槍 申/求 郵 a事制時(shí).no著 各1921CB 4 ZMip= 而在 1曰 $ 周-卵fT1OJ0A.Wrazi64 191手4！|帕&J&G Jt 在式 3 月, 1 用HKAN）用疆尊睜啕2喊皮。10仙曲INllHrUU 是，曰二冏*43 向郡rootcompute2:# service neutron-linuxbridge-agent restart等十幾秒后再次嘗試ping故障虛擬機(jī)和其他虛擬機(jī)如未能解決，則遷移。4.1.3.2、 物理機(jī)通、承載

24、的虛擬機(jī)網(wǎng)絡(luò)通物理主機(jī)是通的，只有這臺(tái)虛擬機(jī)不通，則從web頁面進(jìn)入操作系統(tǒng)，看系統(tǒng)是否卡死、 或者系統(tǒng)損壞如系統(tǒng)卡死，可直接重啟啟動(dòng)、看網(wǎng)絡(luò)狀態(tài)是否恢復(fù)，可進(jìn)入虛擬機(jī)操作系統(tǒng)，ifconfig查看；如遇系統(tǒng)損壞，暫不處理。如虛擬機(jī)重啟后仍無法通，則遷移。4.2、 物理機(jī)網(wǎng)絡(luò)不通無論物理機(jī)是宕機(jī)還是網(wǎng)卡異常。直接將物理機(jī)上的虛擬機(jī)疏散（遷移）出去。computeflanow已筆用關(guān)司11-. 3d曲工札目標(biāo)主機(jī)要在管理程序上找比較空閑的機(jī)器進(jìn)行疏散:二里3s程序工械氣m”M 卻 MUM211ft J百麗芹,計(jì)王禮rtnw 就礴Tfll鰭讀OEMU趣壽悟a本地存甯s tat*（口UHlpulfidIB“伴幗 一一 一一.JIJGS1W2TBLurnpifEOftJ1申31 d或lAIM”白1% A BrotrnpLlQSQEMUD憧51a怕21 4G3 2 TB0rOHipulB4EMU10431+5B4O加2TB1疏散后切換到選擇的物理機(jī)查看遷移后的狀態(tài)，測(cè)試網(wǎng)絡(luò)是否正常，如不正常則手動(dòng)重 啟虛擬機(jī)。主機(jī)餐 ,-&汨五濾O或目土機(jī) 包粽噱保若除1PMK大小O 住電源g創(chuàng)建tu曲聞聞禺，8m1921QD0%如科比0而的 咕喑Jbuurtu-IA 04 5 raw中動(dòng)Ipi1LQG和G，軸 無正在運(yùn)行號(hào)小時(shí), 口打都：lSa舊10就弓