精選文庫(kù) Openstack運(yùn)維手冊(cè) 2017年7月18日目錄Openstack運(yùn)維手冊(cè)1一、健康檢查31、認(rèn)證模塊檢查32、計(jì)算模塊檢查33、網(wǎng)絡(luò)模塊檢查44、存儲(chǔ)模塊檢查45、鏡像模塊檢查56、檢查 Horizon 服務(wù)57、分布式存儲(chǔ)檢查5二、運(yùn)維命令61、虛擬機(jī)開通62、安全組管理63、創(chuàng)建和掛載彈性云硬盤74、創(chuàng)建網(wǎng)絡(luò)75、鏡像上傳與格式轉(zhuǎn)換86、虛擬機(jī)模板管理8三、日志檢查8四、常見故障實(shí)戰(zhàn)模擬94.1、虛擬機(jī)不通94.1.1、測(cè)試ICMP告警94.1.2、查找物理機(jī)94.1.3 、物理機(jī)網(wǎng)絡(luò)判斷104.1.3.1、物理機(jī)通、承載的虛擬機(jī)網(wǎng)絡(luò)不通104.1.3.2、物理機(jī)通、承載的虛擬機(jī)網(wǎng)絡(luò)通104.2、物理機(jī)網(wǎng)絡(luò)不通104.2.1 、疏散后狀態(tài)異常114.2.2、 疏散失敗124.2.3 、疏散失敗導(dǎo)致任務(wù)狀態(tài)異常12*執(zhí)行任何openstack命令之前都必須運(yùn)行openstack的環(huán)境變量source /root/admin-openrc.sh（每次新開控制臺(tái)窗口必須執(zhí)行一次）一、 健康檢查1、認(rèn)證模塊檢查openstack token issue有輸出即可，如輸出異常重啟服務(wù)即可service apache2 restartservice memcached restart2、計(jì)算模塊檢查nova service-list所有計(jì)算服務(wù)的status 必須是 enabledState 必須是 up如有服務(wù)存在異常，直接重啟異常的服務(wù)。service nova-cert restart service nova-consoleauth restartservice nova-scheduler restart service nova-conductor restartservice nova-compute restart3、網(wǎng)絡(luò)模塊檢查neutron agent-list所有網(wǎng)絡(luò)服務(wù)的alive 必須是:-）如有服務(wù)存在異常，直接重啟異常的服務(wù)。service neutron-plugin-openvswitch-agent restartservice neutron-l3-agent restartservice neutron-dhcp-agent restartservice neutron-metadata-agent restart4、存儲(chǔ)模塊檢查cinder service-list所有存儲(chǔ)服務(wù)的status 必須是 enabledState 必須是 up如有服務(wù)存在異常，直接重啟異常的服務(wù)。service cinder-scheduler restartservice cinder-api restartservice cinder-volume restart5、鏡像模塊檢查glance image-list有輸出即可，如輸出異常重啟服務(wù)即可service glance-registry restartservice glance-api restart6、檢查 Horizon 服務(wù)ps -ef | grep apache2如有輸出horizon用戶執(zhí)行apache2命令即可如異常重啟memcachedservice memcached restart7、分布式存儲(chǔ)檢查ceph sHealth 必須是 HEALTH_OK如遇到mon或者osd down重啟對(duì)應(yīng)節(jié)點(diǎn)服務(wù)即可，查詢節(jié)點(diǎn)命令ceph osd tree重啟服務(wù)命令/etc/init.d/ceph start osd.x二、 運(yùn)維命令1、虛擬機(jī)開通 查詢現(xiàn)有的虛擬機(jī)模擬nova flavor-list 查詢當(dāng)前的虛擬機(jī)鏡像nova image-list 創(chuàng)建虛擬機(jī)Nova boot -flavor name -image name-nic net-id=4d42b06a-5b86-4d20-a249-4d0e9f7a8162 -security-group default test1 查看虛擬機(jī)狀態(tài)nova show id當(dāng) vm_state 狀態(tài)顯示為 active 時(shí)，說明虛擬機(jī)部署完畢，可以使用了2、安全組管理 創(chuàng)建一個(gè)安全組 nova secgroup-create test “this is a test” 查看所有的安全組nova secgroup-list 向安全組添加規(guī)則允許來自 192.168.0.1 的 ICMP 和 ssh 流量nova secgroup-add-rule test tcp 22 22 192.168.0.1/0 nova secgroup-add-rule test icmp -1 -1 192.168.0.1/0 如果虛擬主機(jī)運(yùn)行 Windows 系統(tǒng)，則添加一條允許建立 TCP 連接的規(guī)則 nova secgroup-add-rule test tcp 3389 3389 192.168.0.1/0 查看安全組所有配置規(guī)則nova secgroup-list-rules test 從安全組中刪除允許來自 192.168.0.1 的 TCP 流量規(guī)則 nova secgroup-delete-rule test tcp 22 22 192.168.0.1/0 刪除安全組 nova secgroup-delete test3、創(chuàng)建和掛載彈性云硬盤 查看已創(chuàng)建的云硬盤 nova volume-list 創(chuàng)建一塊新的云硬盤，名稱為 test_disk，大小為 10G nova volume-create -display_name test_disk 10 查看新創(chuàng)建云硬盤 test_disk 的詳細(xì)信息 nova volume-show id*注意：新創(chuàng)建的云硬盤 test_disk ，此時(shí)還沒有掛載到任何虛擬主機(jī)中。 刪除新創(chuàng)建的云硬盤 nova volume-delete a6cb97b7-145d-4acc-94ae-e3425d76254e 將新創(chuàng)建的云硬盤 test_disk 掛載到指定的云主機(jī) test 上 nova volume-attach test a6cb97b7-145d-4acc-94ae-e3425d76254e 將云硬盤從云主機(jī) test 上卸載nova volume-detach test a6cb97b7-145d-4acc-94ae-e3425d76254e4、創(chuàng)建網(wǎng)絡(luò) 查看所有的網(wǎng)絡(luò)neutron net-list 查看子網(wǎng)設(shè)置neutron subnet-list 創(chuàng)建彈性公網(wǎng) IP 池neutron subnet-create ext-net 10.9.0.0/24 -name ext-subnet -allocation-pool start=10.9.0.113,end=10.9.0.140 -disable-dhcp -gateway 10.9.0.254 創(chuàng)建一個(gè)彈性 IP 給當(dāng)前租戶 nova floating-ip-create ext-net 將 IP 地址分配給虛擬機(jī) nova add-floating-ip vm_id 10.1.253.1645、鏡像上傳與格式轉(zhuǎn)換 轉(zhuǎn)換成raw格式qemu-img convert -f qcow2 -O raw *.img *.raw 上傳鏡像glance image-create -name *.raw -file *.raw -disk-format raw -container-format bare progress6、虛擬機(jī)模板管理 創(chuàng)建虛擬機(jī)模板nova flavor-create test ID ram disk cpu例：nova flavor-create test 6 512 100 2 查看虛擬機(jī)模板狀態(tài)nova flavor-list三、 日志檢查 Nova 日志 目錄：/var/log/nova/*.log Horizon 日志 目錄：/var/log/apache2 /*.log Cinder 日志 目錄：/var/log/cinder/*.log Keystone 日志 目錄：/var/log/keystone/*.log Glance 日志 目錄：/var/log/glance/*.log Neutron 日志 目錄：/var/log/neutron/*.log Ceph 日志目錄：/var/log/ceph/*.log四、 常見故障實(shí)戰(zhàn)模擬4.1、虛擬機(jī)不通虛擬機(jī)IP不通告警，（郵件提醒ICMP 10.36.8.230不通）4.1.1、測(cè)試ICMP告警首先自行測(cè)試IP是否通，也有可能由于網(wǎng)絡(luò)閃斷、或者負(fù)載過高導(dǎo)致網(wǎng)絡(luò)異常，短暫時(shí)間會(huì)恢復(fù)4.1.2、查找物理機(jī)如網(wǎng)絡(luò)確實(shí)不通，查找該虛擬機(jī)上承載的物理機(jī)信息利用虛擬機(jī)IP調(diào)命令nova list|grep 篩選出虛擬機(jī)名稱和ID號(hào)利用ID號(hào)，nova show ID 找出承載虛擬機(jī)的物理機(jī)。4.1.3 、物理機(jī)網(wǎng)絡(luò)判斷由上圖可以看到故障虛擬機(jī)上的物理機(jī)是comput29，在其所屬成都集群上Ping主機(jī)，如果通，則進(jìn)行下一步判斷，如果不通，擇將虛擬機(jī)遷移到其他物理機(jī)上，詳細(xì)操作見后面。4.1.3.1、物理機(jī)通、承載的虛擬機(jī)網(wǎng)絡(luò)不通物理主機(jī)是通的，虛擬機(jī)不通，可查找承載該物理機(jī)上的其他虛擬機(jī)網(wǎng)絡(luò)狀態(tài)是否一致，如所有虛擬機(jī)都不通，則重啟該物理機(jī)上的neutron服務(wù)。rootcompute2:# service neutron-linuxbridge-agent restart等十幾秒后再次嘗試ping故障虛擬機(jī)和其他虛擬機(jī)如未能解決，則遷移。4.1.3.2、物理機(jī)通、承載的虛擬機(jī)網(wǎng)絡(luò)通物理主機(jī)是通的，只有這臺(tái)虛擬機(jī)不通，則從web頁(yè)面進(jìn)入操作系統(tǒng)，看系統(tǒng)是否卡死、或者系統(tǒng)損壞如系統(tǒng)卡死，可直接重啟啟動(dòng)、看網(wǎng)絡(luò)狀態(tài)是否恢復(fù)，可進(jìn)入虛擬機(jī)操作系統(tǒng)，ifconfig查看；如遇系統(tǒng)損壞，暫不處理。如虛擬機(jī)重啟后仍無法通，則遷移。4.2、物理機(jī)網(wǎng)絡(luò)不通無論物理機(jī)是宕機(jī)還是網(wǎng)卡異常。直接將物理機(jī)上的虛擬機(jī)疏散（遷移）出去。目標(biāo)主機(jī)要在管理程序上找比較空閑的機(jī)器進(jìn)行疏散疏散后切換到選擇的物理機(jī)查看遷移后的狀態(tài)，測(cè)試網(wǎng)絡(luò)是否正常，如不正常則手動(dòng)重啟虛擬機(jī)。4.2.1 、疏散后狀態(tài)異常如遷移后虛擬機(jī)狀態(tài)異常，則后臺(tái)修改數(shù)據(jù)庫(kù)。Mysql -u root -p -h 10.36.1.100(10.36.2.10010.36.3.100)Use nova;update instances set power_state=4,vm_state=stopped where uuid=1329434e-715d-48c8-aa80-f066ac809873;直接啟動(dòng)即可。4.2.2、 疏散失敗如果疏散失敗，則手動(dòng)修改數(shù)據(jù)庫(kù)進(jìn)行人工遷移。（疏散失敗就是一直在原來的物理機(jī)）修改數(shù)據(jù)庫(kù)信息后手動(dòng)重啟虛擬機(jī)。Mysql -u root -p -h 10.36.1.100(10.36.2.10010.36.3.100)Use nova;update instances set