Openstack云平臺運維手冊

1、 Openstack運維手冊 2017年7月18日目錄 TOC o 1-3 h z u HYPERLINK l _Toc488240835 Openstack運維手冊 PAGEREF _Toc488240835 h 1 HYPERLINK l _Toc488240836 一、健康檢查 PAGEREF _Toc488240836 h 3 HYPERLINK l _Toc488240837 1、認證模塊檢查 PAGEREF _Toc488240837 h 3 HYPERLINK l _Toc488240838 2、計算模塊檢查 PAGEREF _Toc488240838 h 3 HYPERLINK

2、 l _Toc488240839 3、網(wǎng)絡(luò)模塊檢查 PAGEREF _Toc488240839 h 4 HYPERLINK l _Toc488240840 4、存儲模塊檢查 PAGEREF _Toc488240840 h 4 HYPERLINK l _Toc488240841 5、鏡像模塊檢查 PAGEREF _Toc488240841 h 5 HYPERLINK l _Toc488240842 6、檢查 Horizon 服務(wù) PAGEREF _Toc488240842 h 5 HYPERLINK l _Toc488240843 7、分布式存儲檢查 PAGEREF _Toc488240843

3、h 5 HYPERLINK l _Toc488240844 二、運維命令 PAGEREF _Toc488240844 h 6 HYPERLINK l _Toc488240845 1、虛擬機開通 PAGEREF _Toc488240845 h 6 HYPERLINK l _Toc488240846 2、安全組管理 PAGEREF _Toc488240846 h 6 HYPERLINK l _Toc488240847 3、創(chuàng)建和掛載彈性云硬盤 PAGEREF _Toc488240847 h 7 HYPERLINK l _Toc488240848 4、創(chuàng)建網(wǎng)絡(luò) PAGEREF _Toc4882408

4、48 h 7 HYPERLINK l _Toc488240849 5、鏡像上傳與格式轉(zhuǎn)換 PAGEREF _Toc488240849 h 8 HYPERLINK l _Toc488240850 6、虛擬機模板管理 PAGEREF _Toc488240850 h 8 HYPERLINK l _Toc488240851 三、日志檢查 PAGEREF _Toc488240851 h 8 HYPERLINK l _Toc488240852 四、常見故障實戰(zhàn)模擬 PAGEREF _Toc488240852 h 9 HYPERLINK l _Toc488240853 4.1、虛擬機不通 PAGEREF _

5、Toc488240853 h 9 HYPERLINK l _Toc488240854 4.1.1、測試ICMP告警 PAGEREF _Toc488240854 h 9 HYPERLINK l _Toc488240855 4.1.2、查找物理機 PAGEREF _Toc488240855 h 9 HYPERLINK l _Toc488240856 4.1.3 、物理機網(wǎng)絡(luò)判斷 PAGEREF _Toc488240856 h 10 HYPERLINK l _Toc488240857 4.1.3.1、物理機通、承載的虛擬機網(wǎng)絡(luò)不通 PAGEREF _Toc488240857 h 10 HYPERLI

6、NK l _Toc488240858 4.1.3.2、物理機通、承載的虛擬機網(wǎng)絡(luò)通 PAGEREF _Toc488240858 h 10 HYPERLINK l _Toc488240859 4.2、物理機網(wǎng)絡(luò)不通 PAGEREF _Toc488240859 h 10 HYPERLINK l _Toc488240860 4.2.1 、疏散后狀態(tài)異常 PAGEREF _Toc488240860 h 11 HYPERLINK l _Toc488240861 4.2.2、 疏散失敗 PAGEREF _Toc488240861 h 12 HYPERLINK l _Toc488240862 4.2.3 、

7、疏散失敗導致任務(wù)狀態(tài)異常 PAGEREF _Toc488240862 h 12*執(zhí)行任何openstack命令之前都必須運行openstack的環(huán)境變量source /root/admin-openrc.sh（每次新開控制臺窗口必須執(zhí)行一次）健康檢查1、認證模塊檢查openstack token issue有輸出即可，如輸出異常重啟服務(wù)即可service apache2 restartservice memcached restart2、計算模塊檢查nova service-list所有計算服務(wù)的status 必須是 enabledState 必須是 up如有服務(wù)存在異常，直接重啟異常的服務(wù)。

8、service nova-cert restart service nova-consoleauth restartservice nova-scheduler restart service nova-conductor restartservice nova-compute restart3、網(wǎng)絡(luò)模塊檢查neutron agent-list所有網(wǎng)絡(luò)服務(wù)的alive 必須是:-）如有服務(wù)存在異常，直接重啟異常的服務(wù)。service neutron-plugin-openvswitch-agent restartservice neutron-l3-agent restartservice n

9、eutron-dhcp-agent restartservice neutron-metadata-agent restart4、存儲模塊檢查cinder service-list所有存儲服務(wù)的status 必須是 enabledState 必須是 up如有服務(wù)存在異常，直接重啟異常的服務(wù)。service cinder-scheduler restartservice cinder-api restartservice cinder-volume restart5、鏡像模塊檢查glance image-list有輸出即可，如輸出異常重啟服務(wù)即可service glance-registry r

10、estartservice glance-api restart6、檢查 Horizon 服務(wù)ps -ef | grep apache2如有輸出horizon用戶執(zhí)行apache2命令即可如異常重啟memcachedservice memcached restart7、分布式存儲檢查ceph sHealth 必須是 HEALTH_OK如遇到mon或者osd down重啟對應節(jié)點服務(wù)即可，查詢節(jié)點命令ceph osd tree重啟服務(wù)命令/etc/init.d/ceph start osd.x運維命令1、虛擬機開通查詢現(xiàn)有的虛擬機模擬nova flavor-list查詢當前的虛擬機鏡像nova

11、image-list創(chuàng)建虛擬機Nova boot -flavor name -image name-nic net-id=4d42b06a-5b86-4d20-a249-4d0e9f7a8162 -security-group default test1查看虛擬機狀態(tài)nova show id當 vm_state 狀態(tài)顯示為 active 時，說明虛擬機部署完畢，可以使用了2、安全組管理創(chuàng)建一個安全組 nova secgroup-create test “this is a test”查看所有的安全組nova secgroup-list向安全組添加規(guī)則允許來自 192.168.0.1 的 ICM

12、P 和 ssh 流量nova secgroup-add-rule test tcp 22 22 192.168.0.1/0 nova secgroup-add-rule test icmp -1 -1 192.168.0.1/0如果虛擬主機運行 Windows 系統(tǒng)，則添加一條允許建立 TCP 連接的規(guī)則 nova secgroup-add-rule test tcp 3389 3389 192.168.0.1/0查看安全組所有配置規(guī)則nova secgroup-list-rules test從安全組中刪除允許來自 192.168.0.1 的 TCP 流量規(guī)則 nova secgroup-de

13、lete-rule test tcp 22 22 192.168.0.1/0刪除安全組 nova secgroup-delete test3、創(chuàng)建和掛載彈性云硬盤查看已創(chuàng)建的云硬盤 nova volume-list創(chuàng)建一塊新的云硬盤，名稱為 test_disk，大小為 10G nova volume-create -display_name test_disk 10查看新創(chuàng)建云硬盤 test_disk 的詳細信息 nova volume-show id*注意：新創(chuàng)建的云硬盤 test_disk ，此時還沒有掛載到任何虛擬主機中。刪除新創(chuàng)建的云硬盤 nova volume-delete a6cb

14、97b7-145d-4acc-94ae-e3425d76254e將新創(chuàng)建的云硬盤 test_disk 掛載到指定的云主機 test 上 nova volume-attach test a6cb97b7-145d-4acc-94ae-e3425d76254e將云硬盤從云主機 test 上卸載nova volume-detach test a6cb97b7-145d-4acc-94ae-e3425d76254e4、創(chuàng)建網(wǎng)絡(luò)查看所有的網(wǎng)絡(luò)neutron net-list查看子網(wǎng)設(shè)置neutron subnet-list創(chuàng)建彈性公網(wǎng) IP 池neutron subnet-create ext-net

15、10.9.0.0/24 -name ext-subnet -allocation-pool start=10.9.0.113,end=10.9.0.140 -disable-dhcp -gateway 10.9.0.254創(chuàng)建一個彈性 IP 給當前租戶 nova floating-ip-create ext-net將 IP 地址分配給虛擬機 nova add-floating-ip vm_id 10.1.253.1645、鏡像上傳與格式轉(zhuǎn)換轉(zhuǎn)換成raw格式qemu-img convert -f qcow2 -O raw *.img *.raw上傳鏡像glance image-create -n

16、ame *.raw -file *.raw -disk-format raw -container-format bare progress6、虛擬機模板管理創(chuàng)建虛擬機模板nova flavor-create test ID ram disk cpu例：nova flavor-create test 6 512 100 2查看虛擬機模板狀態(tài)nova flavor-list日志檢查Nova 日志 目錄：/var/log/nova/*.logHorizon 日志 目錄：/var/log/apache2 /*.logCinder 日志 目錄：/var/log/cinder/*.logKeystone

17、 日志 目錄：/var/log/keystone/*.logGlance 日志 目錄：/var/log/glance/*.logNeutron 日志 目錄：/var/log/neutron/*.logCeph 日志目錄：/var/log/ceph/*.log常見故障實戰(zhàn)模擬4.1、虛擬機不通虛擬機IP不通告警，（郵件提醒ICMP 10.36.8.230不通）4.1.1、測試ICMP告警首先自行測試IP是否通，也有可能由于網(wǎng)絡(luò)閃斷、或者負載過高導致網(wǎng)絡(luò)異常，短暫時間會恢復4.1.2、查找物理機如網(wǎng)絡(luò)確實不通，查找該虛擬機上承載的物理機信息利用虛擬機IP調(diào)命令nova list|grep 篩選出虛

18、擬機名稱和ID號利用ID號，nova show ID 找出承載虛擬機的物理機。4.1.3 、物理機網(wǎng)絡(luò)判斷由上圖可以看到故障虛擬機上的物理機是comput29，在其所屬成都集群上Ping主機，如果通，則進行下一步判斷，如果不通，擇將虛擬機遷移到其他物理機上，詳細操作見后面。4.1.3.1、物理機通、承載的虛擬機網(wǎng)絡(luò)不通物理主機是通的，虛擬機不通，可查找承載該物理機上的其他虛擬機網(wǎng)絡(luò)狀態(tài)是否一致，如所有虛擬機都不通，則重啟該物理機上的neutron服務(wù)。rootcompute2:# service neutron-linuxbridge-agent restart等十幾秒后再次嘗試ping故障虛擬機和其他虛擬機如未能解決，則遷移。4.1.3.2、物理機通、承載的虛擬機網(wǎng)絡(luò)通物理主機是通的，只有這臺虛擬機不通，則從web頁面進入操作系統(tǒng)，看系統(tǒng)是否卡死、或者系統(tǒng)損壞如系統(tǒng)卡死，可直接重啟啟動、看網(wǎng)絡(luò)狀態(tài)是否恢復，可進入虛擬機操作系統(tǒng)，ifconfig查看；如遇系統(tǒng)損壞，暫不處理。如虛擬機重啟后仍無法通，則遷移。4.2、物理機網(wǎng)絡(luò)不通無論物理機是宕機還是網(wǎng)卡異常。直接將物理機上的虛擬機疏散（遷移）出去。目標主機要在管理程序上找比較空閑的機器進行疏散疏散后切換到選擇的物理機查