Openstack運維手冊2017年7月18日目錄Openstack運維手冊 1一、 健康檢查 31、認證模塊檢查 32、計算模塊檢查 33、網(wǎng)絡(luò)模塊檢查 44、存儲模塊檢查 45、鏡像模塊檢查 56、檢查 Horizon服務(wù) 57、分布式存儲檢查 5二、 運維命令 61、虛擬機開通 62、安全組管理 63、創(chuàng)建和掛載彈性云硬盤 74、創(chuàng)建網(wǎng)絡(luò) 75、鏡像上傳與格式轉(zhuǎn)換 86、虛擬機模板管理 8三、 日志檢查 8四、 常見故障實戰(zhàn)模擬 94.1、虛擬機不通 9、測試ICMP告警 9、查找物理機 9、物理機網(wǎng)絡(luò)判斷 10、物理機通、承載的虛擬機網(wǎng)絡(luò)不通 10、物理機通、承載的虛擬機網(wǎng)絡(luò)通 104.2、物理機網(wǎng)絡(luò)不通 10、疏散后狀態(tài)異常 11、疏散失敗 12、疏散失敗導(dǎo)致任務(wù)狀態(tài)異常 12執(zhí)行任何openstack命令之前都必須運行openstack的環(huán)境變量source /root/admin-openrc.sh （每次新開控制臺窗口必須執(zhí)行一次）一、健康檢查1、認證模塊檢查openstacktokenissue有輸出即可，如輸出異常重啟服務(wù)即可serviceapache2restartservicememcachedrestart2、計算模塊檢查novaservice-list所有計算服務(wù)的 status必須是 enabledState必須是 up如有服務(wù)存在異常，直接重啟異常的服務(wù)。servicenova-certrestartservicenova-consoleauthrestartservicenova-schedulerrestartservicenova-conductorrestartservicenova-computerestart3、網(wǎng)絡(luò)模塊檢查neutronagent-list所有網(wǎng)絡(luò)服務(wù)的 alive必須是:-）如有服務(wù)存在異常，直接重啟異常的服務(wù)。serviceneutron-plugin-openvswitch-agentrestartserviceneutron-l3-agentrestartserviceneutron-dhcp-agentrestartserviceneutron-metadata-agentrestart4、存儲模塊檢查cinderservice-list所有存儲服務(wù)的 status必須是 enabledState必須是 up如有服務(wù)存在異常，直接重啟異常的服務(wù)。servicecinder-schedulerrestartservicecinder-apirestartservicecinder-volumerestart5、鏡像模塊檢查glanceimage-list有輸出即可，如輸出異常重啟服務(wù)即可serviceglance-registryrestartserviceglance-apirestart6、檢查 Horizon 服務(wù)ps-ef|grepapache2如有輸出 horizon用戶執(zhí)行 apache2命令即可如異常重啟 memcachedservicememcachedrestart7、分布式存儲檢查ceph–sHealth必須是 HEALTH_OK如遇到mon或者osddown重啟對應(yīng)節(jié)點服務(wù)即可，查詢節(jié)點命令cephosdtree重啟服務(wù)命令/etc/init.d/cephstartosd.x二、運維命令1、虛擬機開通查詢現(xiàn)有的虛擬機模擬novaflavor-list查詢當(dāng)前的虛擬機鏡像novaimage-list創(chuàng)建虛擬機Novaboot--flavorname--imagename--nicnet-id=4d42b06a-5b86-4d20-a249-4d0e9f7a8162--security-groupdefaulttest1查看虛擬機狀態(tài)novashowid當(dāng)vm_state狀態(tài)顯示為 active時，說明虛擬機部署完畢，可以使用了2、安全組管理創(chuàng)建一個安全組novasecgroup-createtest“thisisatest”查看所有的安全組novasecgroup-list向安全組添加規(guī)則允許來自 的ICMP和ssh流量如果虛擬主機運行Windows系統(tǒng)，則添加一條允許建立TCP連接的規(guī)則查看安全組所有配置規(guī)則novasecgroup-list-rulestest從安全組中刪除允許來自的TCP流量規(guī)則刪除安全組novasecgroup-deletetest3、創(chuàng)建和掛載彈性云硬盤查看已創(chuàng)建的云硬盤novavolume-list創(chuàng)建一塊新的云硬盤，名稱為test_disk，大小為10Gnovavolume-create--display_nametest_disk10查看新創(chuàng)建云硬盤test_disk的詳細信息novavolume-showid注意：新創(chuàng)建的云硬盤test_disk，此時還沒有掛載到任何虛擬主機中。刪除新創(chuàng)建的云硬盤novavolume-deletea6cb97b7-145d-4acc-94ae-e3425d76254e將新創(chuàng)建的云硬盤test_disk掛載到指定的云主機test上novavolume-attachtesta6cb97b7-145d-4acc-94ae-e3425d76254e將云硬盤從云主機test上卸載novavolume-detachtesta6cb97b7-145d-4acc-94ae-e3425d76254e4、創(chuàng)建網(wǎng)絡(luò)查看所有的網(wǎng)絡(luò)neutronnet-list查看子網(wǎng)設(shè)置neutronsubnet-list創(chuàng)建彈性公網(wǎng)IP池創(chuàng)建一個彈性IP給當(dāng)前租戶novafloating-ip-createext-net將IP地址分配給虛擬機5、鏡像上傳與格式轉(zhuǎn)換轉(zhuǎn)換成raw格式qemu-imgconvert-fqcow2-Oraw*.img*.raw上傳鏡像glanceimage-create--name"*.raw"--file*.raw--disk-formatraw--container-formatbare–progress6、虛擬機模板管理創(chuàng)建虛擬機模板novaflavor-createtestIDramdiskcpu例：novaflavor-createtest65121002查看虛擬機模板狀態(tài)novaflavor-list三、日志檢查Nova日志目錄：/var/log/nova/*.logHorizon日志目錄：/var/log/apache2/*.logCinder日志目錄：/var/log/cinder/*.logKeystone日志目錄：/var/log/keystone/*.logGlance日志目錄：/var/log/glance/*.logNeutron日志目錄：/var/log/neutron/*.logCeph日志目錄：/var/log/ceph/*.log四、常見故障實戰(zhàn)模擬4.1、虛擬機不通虛擬機IP不通告警，（郵件提醒 不通）、測試

ICMP

告警首先自行測試

IP是否通，也有可能由于網(wǎng)絡(luò)閃斷、

或者負載過高導(dǎo)致網(wǎng)絡(luò)異常，

短暫時間會恢復(fù)、查找物理機如網(wǎng)絡(luò)確實不通，查找該虛擬機上承載的物理機信息利用虛擬機IP調(diào)命令novalist|grep篩選出虛擬機名稱和ID號利用ID號，novashowID找出承載虛擬機的物理機。 、物理機網(wǎng)絡(luò)判斷由上圖可以看到故障虛擬機上的物理機是 comput29，在其所屬成都集群上 Ping主機，如果通，則進行下一步判斷，如果不通，擇將虛擬機遷移到其他物理機上，詳細操作見后面。、物理機通、承載的虛擬機網(wǎng)絡(luò)不通物理主機是通的，虛擬機不通，可查找承載該物理機上的其他虛擬機網(wǎng)絡(luò)狀態(tài)是否一致，如所有虛擬機都不通，則重啟該物理機上的 neutron服務(wù)。root@compute2:~#serviceneutron-linuxbridge-agentrestart等十幾秒后再次嘗試 ping故障虛擬機和其他虛擬機如未能解決，則遷移。、物理機通、承載的虛擬機網(wǎng)絡(luò)通物理主機是通的，只有這臺虛擬機不通，則從web頁面進入操作系統(tǒng)，看系統(tǒng)是否卡死、或者系統(tǒng)損壞如系統(tǒng)卡死，可直接重啟啟動、看網(wǎng)絡(luò)狀態(tài)是否恢復(fù)，可進入虛擬機操作系統(tǒng)，ifconfig查看；如遇系統(tǒng)損壞，暫不處理。如虛擬機重啟后仍無法通，則遷移。4.2、物理機網(wǎng)絡(luò)不通無論物理機是宕機還是網(wǎng)卡異常。直接將物理機上的虛擬機疏散（遷移）出去。目標(biāo)主機要在管理程序上找比較空閑的機器進行疏散疏散后切換到選擇的物理機查看遷移后的狀態(tài)，測試網(wǎng)絡(luò)是否正常，如不正常則手動重啟虛擬機。 、疏散后狀態(tài)異常如遷移后虛擬機狀態(tài)異常，則后臺修改數(shù)據(jù)庫。Mysql -u root -p Usenova;updateinstancessetpower_state='4',vm_state='stopped' whereuuid='1329434e-715d-48c8-aa80-f066ac809873';直接啟動即可。、疏散失敗如果疏散失敗，則手動修改數(shù)據(jù)庫進行人工遷移。 （疏散失敗就是一直在原來的物理機）修改數(shù)據(jù)庫信息后手動重啟虛擬機。Mysql -u root -p Usenova;updateinstancessetpower_state='4',vm_state='stop