廣東移動(dòng)ndmc系統(tǒng)ndmcdb03和ndmcdb04數(shù)據(jù)庫(kù)vcs健康檢查報(bào)告

1、Business Critical Servi移動(dòng) NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫(kù) VCS 健康檢查Prepared By:Parco Liu Last Updated:2014-2-19目錄1.介紹3對(duì)象3目的3范圍3術(shù)語(yǔ)3結(jié)果31.11.21.31.41.52.客戶環(huán)境43.VCS 健康檢查項(xiàng)目5License Key 檢查5GAB port 檢查5VCS 心跳網(wǎng)絡(luò)檢查5VCS 日志檢查6VCS Cluster 節(jié)點(diǎn)及 Service Group 運(yùn)行狀態(tài)檢查6VCS 進(jìn)程檢查7VCS 配置文件的一致性檢查7文件系統(tǒng)使用狀況檢查93.13.23.33.43.

2、53.63.73.84.結(jié)論91.介紹1.1對(duì)象本文檔是用來(lái)輔助 Symantec Business Critical Servi戶。的顧問(wèn)和 VCS/NBU 的用1.2目的本文檔用于評(píng)估移動(dòng) NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫(kù)目前 VCS 集群的配置和運(yùn)行狀態(tài)是否良好。1.3范圍本文檔的范圍限制在檢查 VCS 產(chǎn)品.1.4術(shù)語(yǔ)HACluster VCS VXVM VXFS CVM CFSSFRACHigailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cl

3、uster Server VERITAS Volume Manager VERITAS File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5結(jié)果通過(guò)系列健康檢查項(xiàng)目的成功完成，驗(yàn)證 VCS 當(dāng)前配置和運(yùn)行狀態(tài)是否良好。2.客戶環(huán)境移動(dòng) NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫(kù) VCS 集群由 2 臺(tái)LINUX 服務(wù)器組成，系統(tǒng)環(huán)境如下：系統(tǒng)健康檢查時(shí)間：2014

4、 年 2 月 19 日symantec 工程師:用戶工程師:參加劉扳浩主機(jī)名操作系統(tǒng)版本管理軟件ORACLE 版本NDMCDB03SUSE10 SP2NDMCDB04SUSE10 SP23.VCS 健康檢查項(xiàng)目通過(guò)以下 8 個(gè)檢查項(xiàng)目，確認(rèn) NDMCDB03 和 NDMCDB04 兩主機(jī)上的 VCS 進(jìn)程、配置、運(yùn)行狀況以及性能等都處于良好的狀態(tài)。3.1 License Key 檢查需要確認(rèn)兩節(jié)點(diǎn)上的 License Key 都為L(zhǎng)icense。非License Key 過(guò)期后，一旦系統(tǒng)重啟， VCS 進(jìn)程將無(wú)法正常啟動(dòng)。在生產(chǎn)系統(tǒng)上，要避免使用Demo License.使用 vxlicrep

5、 命令可以檢查 License 的類型.以下為L(zhǎng)icenses 的輸出：的檢查主機(jī)檢查結(jié)果：VERITAS Cluster Server 的License key 為。3.2 GAB port 檢查VCS 的正常運(yùn)行，有賴于各包含模塊的正常運(yùn)行。使用主機(jī)上運(yùn)行了那些模塊，以下是gabconfig a 輸出：gabconfiga 命令可檢查檢查結(jié)果： GAB Port 特性均正常。3.3 VCS 心跳網(wǎng)絡(luò)檢查VCS 通過(guò)心跳網(wǎng)絡(luò)傳遞 cluster 狀態(tài)信息，當(dāng)前的每個(gè)VCS 節(jié)點(diǎn)都配置了兩條心跳線。VCS 心跳網(wǎng)絡(luò)運(yùn)行 LLT/GAB 協(xié)議，跳網(wǎng)絡(luò)是否正常, 檢查輸出如下:可以通過(guò)檢查 LLT

6、 的狀態(tài)來(lái)確認(rèn)心NDMCDB03: # gabconfig -a GAB Port Memberships=Port a gen61ef02 membership 01 Port h gen61ef04 membership 01Product Name= VERITAS Cluster ServerLicense Type= PERMANENTProduct Name= VERITAS File SystemLicense Type= PERMANENTProduct Name= VERITAS Volume ManagerLicense Type= PERMANENTProduct Nam

7、e= VERITAS Storage Foundation Standard HALicense Type= PERMANENTProduct Name= VERITAS Database Edition for OracleLicense Type= PERMANENTProduct Name= VERITAS SANPoControlLicense Type= PERMANENT檢查結(jié)果：節(jié)點(diǎn)的心跳網(wǎng)絡(luò)是健康的。3.4 VCS 日志檢查檢查 VCS 的日志文件， 察看近期是否有異常/var/VRTSvcs/log/engine_A.log ，可以在 database看 log 文件的修改時(shí)

8、間和察看最近有沒(méi)有異常狀況。信息。VCS 日志文件是的 VRTSexplorer 的包中來(lái)查檢查結(jié)果：VCS 日誌近期無(wú)異常信息。3.5 VCS Cluster 節(jié)點(diǎn)及 Service Group 運(yùn)行狀態(tài)檢查檢查 2 個(gè)節(jié)點(diǎn)的 VCS 運(yùn)行狀態(tài)以及所有的Service Group 運(yùn)行狀態(tài)，如下：從以上輸出可以看出，NDMCDB03、 NDMCDB03 都在一個(gè) Cluster 集群內(nèi)，運(yùn)行狀態(tài)正常，都為 RUNNING 狀態(tài)；各個(gè)服務(wù)組狀態(tài)正常。檢查結(jié)果：運(yùn)行正常。NDMCDB03: # hasus -summary- SYSTEM SE- SystemSeFrozenA NDMCDB03

9、RUNNING0NDMCDB04RUNNING0- GROUP SE- GroupSystemProbedAutoDisabledSeRCS_DB_SGNDMCDB03YNONLINEB RCS_DB_SGNDMCDB04YNOFFLINE2014/02/18 13:48:30 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/18 17:48:31 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/18 21:48:32 VCS INFO V-16-1-53504 VCS

10、Engine Alive message!2014/02/19 01:48:33 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/19 05:48:34 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/19 09:48:35 VCS INFO V-16-1-53504 VCS Engine Alive message!NDMCDB03: # llts-nvv LLT node information:NodeSeLink Sus Address* 0 NDMCDB03OP

11、ENeth10UP80:FB:06:35:F2:6D eth9UP80:FB:06:35:F2:6F eth8UP80:FB:06:35:F2:6E1 NDMCDB04OPENeth10UP80:FB:06:35:B7:7F eth9UP80:FB:06:35:B7:81 eth8UP80:FB:06:35:B7:803.6 VCS 進(jìn)程檢查主要檢查 VCS進(jìn)程had 和hashadow 是否存在，參數(shù)是否正確。檢查結(jié)果：had 和hadshadow 進(jìn)程正常。3.7 VCS 配置文件的一致性檢查檢查 VCS 配置文件/etc/VRTSvcs/conf/config/main.cf 的一致性，

12、結(jié)果應(yīng)無(wú)錯(cuò)誤信息。檢查輸出如下：NDMCDB03: # hacf -verify /etc/VRTSvcs/conf/config檢查結(jié)果：VCS 的配置文件main.cf 通過(guò)一致性檢查。main.cf 配置文件內(nèi)容如下：NDMCDB03: # cat /etc/VRTSvcs/conf/config/main.cf include types.cfinclude OracleTypes.cfcluster ndmcdb3 (UserNames = admin = ajkCjeJgkFkkIskEjh Administrators = admin )system NDMCDB03 (Shut

13、downTimeout = 3600)system NDMCDB04 (ShutdownTimeout = 3600)group RCS_DB_SG (SystemList = NDMCDB03 = 0, NDMCDB04 = 1 AutoStartList = NDMCDB03, NDMCDB04 )Application ora_raw (StartProgram = /opt/HWraw_ora/bin/raw_start.sh StopProgram = /opt/HWraw_ora/bin/raw_stop.sh CleanProgram = /opt/HWraw_ora/bin/r

14、aw_clean.sh MonitorProgram = /opt/HWraw_ora/bin/raw_monitor.sh Monitorerval = 30MonitorTimeout = 30)Application ora_vg (StartProgram = /opt/HWvg_ora/bin/vg_start.sh StopProgram = /opt/HWvg_ora/bin/vg_stop.sh CleanProgram = /opt/HWvg_ora/bin/vg_clean.sh MonitorProgram = /opt/HWvg_ora/bin/vg_monitor.s

15、h Monitorerval = 30MonitorTimeout = 30)IP ora_ip (Device = bond1root128561 0 Mar23 ?00:33:01 /opt/VRTSvcs/bin/hadroot128611 0 Mar23 ?00:00:00 /opt/VRTSvcs/bin/hashadowAddress = 192.168.130.52NetMask = 255.255.255.0OnlineRetryLimit = 3)Mount ora_archive (MountPo= /home/oracle/archive BlockDevice = /d

16、ev/mapper/vgopt-lvarchive FSType = reiserfsFsckOpt = -y)NIC ora_nic (Device = bond1)Netlsnr ora_listener (Owner = oracleHome = /opt/oracle/product/11g/dbTnsAdmin = /opt/oracle/product/11g/db/network/admin Listener = listener)Oracle ora_ora11g (Sid = NDMCDBOwner = oracleHome = /opt/oracle/product/11g

17、/db)ora_archive requires ora_raw ora_ip requires ora_nic ora_listener requires ora_archive ora_ora11g requires ora_listener ora_raw requires ora_vgora_vg requires ora_ip/resource dependency treegroup RCS_DB_SGOracle ora_ora11gNetlsnr ora_listenerMount ora_archiveApplication ora_rawApplication ora_vgIP ora_ipNIC ora_nic3.8 文件系統(tǒng)使用狀況檢查使用 df 檢查文件系統(tǒng)使用的狀況，輸出如下：檢查結(jié)果：可以看到各個(gè)文件系統(tǒng)空間使用率良好。在日常中需要注意避免使用率達(dá)到 100%的情況。4.結(jié)論通過(guò)本次對(duì)移動(dòng) NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫(kù) VCS 集群的健康檢查，確認(rèn)目前這個(gè)系統(tǒng)各功能模塊均運(yùn)行正常，系統(tǒng)性能處于良好狀態(tài)。NDMCDB03: # df -hFilesystemSize Used