廣東移動ndmc系統(tǒng)ndmcdb03和ndmcdb04數(shù)據(jù)庫vcs健康檢查報告

1、Business Critical Servi移動 NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫 VCS 健康檢查Prepared By:Parco Liu Last Updated:2014-2-19目錄1.介紹3對象3目的3范圍3術(shù)語3結(jié)果31.11.21.31.41.52.客戶環(huán)境43.VCS 健康檢查項目5License Key 檢查5GAB port 檢查5VCS 心跳網(wǎng)絡(luò)檢查5VCS 日志檢查6VCS Cluster 節(jié)點及 Service Group 運行狀態(tài)檢查6VCS 進(jìn)程檢查7VCS 配置文件的一致性檢查7文件系統(tǒng)使用狀況檢查93.13.23.33.43.

2、53.63.73.84.結(jié)論91.介紹1.1對象本文檔是用來輔助 Symantec Business Critical Servi戶。的顧問和 VCS/NBU 的用1.2目的本文檔用于評估移動 NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫目前 VCS 集群的配置和運行狀態(tài)是否良好。1.3范圍本文檔的范圍限制在檢查 VCS 產(chǎn)品.1.4術(shù)語HACluster VCS VXVM VXFS CVM CFSSFRACHigailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cl

3、uster Server VERITAS Volume Manager VERITAS File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5結(jié)果通過系列健康檢查項目的成功完成，驗證 VCS 當(dāng)前配置和運行狀態(tài)是否良好。2.客戶環(huán)境移動 NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫 VCS 集群由 2 臺LINUX 服務(wù)器組成，系統(tǒng)環(huán)境如下：系統(tǒng)健康檢查時間：2014

4、 年 2 月 19 日symantec 工程師:用戶工程師:參加劉扳浩主機名操作系統(tǒng)版本管理軟件ORACLE 版本NDMCDB03SUSE10 SP2NDMCDB04SUSE10 SP23.VCS 健康檢查項目通過以下 8 個檢查項目，確認(rèn) NDMCDB03 和 NDMCDB04 兩主機上的 VCS 進(jìn)程、配置、運行狀況以及性能等都處于良好的狀態(tài)。3.1 License Key 檢查需要確認(rèn)兩節(jié)點上的 License Key 都為License。非License Key 過期后，一旦系統(tǒng)重啟， VCS 進(jìn)程將無法正常啟動。在生產(chǎn)系統(tǒng)上，要避免使用Demo License.使用 vxlicrep

5、 命令可以檢查 License 的類型.以下為Licenses 的輸出：的檢查主機檢查結(jié)果：VERITAS Cluster Server 的License key 為。3.2 GAB port 檢查VCS 的正常運行，有賴于各包含模塊的正常運行。使用主機上運行了那些模塊，以下是gabconfig a 輸出：gabconfiga 命令可檢查檢查結(jié)果： GAB Port 特性均正常。3.3 VCS 心跳網(wǎng)絡(luò)檢查VCS 通過心跳網(wǎng)絡(luò)傳遞 cluster 狀態(tài)信息，當(dāng)前的每個VCS 節(jié)點都配置了兩條心跳線。VCS 心跳網(wǎng)絡(luò)運行 LLT/GAB 協(xié)議，跳網(wǎng)絡(luò)是否正常, 檢查輸出如下:可以通過檢查 LLT

6、 的狀態(tài)來確認(rèn)心NDMCDB03: # gabconfig -a GAB Port Memberships=Port a gen61ef02 membership 01 Port h gen61ef04 membership 01Product Name= VERITAS Cluster ServerLicense Type= PERMANENTProduct Name= VERITAS File SystemLicense Type= PERMANENTProduct Name= VERITAS Volume ManagerLicense Type= PERMANENTProduct Nam

7、e= VERITAS Storage Foundation Standard HALicense Type= PERMANENTProduct Name= VERITAS Database Edition for OracleLicense Type= PERMANENTProduct Name= VERITAS SANPoControlLicense Type= PERMANENT檢查結(jié)果：節(jié)點的心跳網(wǎng)絡(luò)是健康的。3.4 VCS 日志檢查檢查 VCS 的日志文件， 察看近期是否有異常/var/VRTSvcs/log/engine_A.log ，可以在 database看 log 文件的修改時

8、間和察看最近有沒有異常狀況。信息。VCS 日志文件是的 VRTSexplorer 的包中來查檢查結(jié)果：VCS 日誌近期無異常信息。3.5 VCS Cluster 節(jié)點及 Service Group 運行狀態(tài)檢查檢查 2 個節(jié)點的 VCS 運行狀態(tài)以及所有的Service Group 運行狀態(tài)，如下：從以上輸出可以看出，NDMCDB03、 NDMCDB03 都在一個 Cluster 集群內(nèi)，運行狀態(tài)正常，都為 RUNNING 狀態(tài)；各個服務(wù)組狀態(tài)正常。檢查結(jié)果：運行正常。NDMCDB03: # hasus -summary- SYSTEM SE- SystemSeFrozenA NDMCDB03

9、RUNNING0NDMCDB04RUNNING0- GROUP SE- GroupSystemProbedAutoDisabledSeRCS_DB_SGNDMCDB03YNONLINEB RCS_DB_SGNDMCDB04YNOFFLINE2014/02/18 13:48:30 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/18 17:48:31 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/18 21:48:32 VCS INFO V-16-1-53504 VCS

10、Engine Alive message!2014/02/19 01:48:33 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/19 05:48:34 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/02/19 09:48:35 VCS INFO V-16-1-53504 VCS Engine Alive message!NDMCDB03: # llts-nvv LLT node information:NodeSeLink Sus Address* 0 NDMCDB03OP

11、ENeth10UP80:FB:06:35:F2:6D eth9UP80:FB:06:35:F2:6F eth8UP80:FB:06:35:F2:6E1 NDMCDB04OPENeth10UP80:FB:06:35:B7:7F eth9UP80:FB:06:35:B7:81 eth8UP80:FB:06:35:B7:803.6 VCS 進(jìn)程檢查主要檢查 VCS進(jìn)程had 和hashadow 是否存在，參數(shù)是否正確。檢查結(jié)果：had 和hadshadow 進(jìn)程正常。3.7 VCS 配置文件的一致性檢查檢查 VCS 配置文件/etc/VRTSvcs/conf/config/main.cf 的一致性，

12、結(jié)果應(yīng)無錯誤信息。檢查輸出如下：NDMCDB03: # hacf -verify /etc/VRTSvcs/conf/config檢查結(jié)果：VCS 的配置文件main.cf 通過一致性檢查。main.cf 配置文件內(nèi)容如下：NDMCDB03: # cat /etc/VRTSvcs/conf/config/main.cf include types.cfinclude OracleTypes.cfcluster ndmcdb3 (UserNames = admin = ajkCjeJgkFkkIskEjh Administrators = admin )system NDMCDB03 (Shut

13、downTimeout = 3600)system NDMCDB04 (ShutdownTimeout = 3600)group RCS_DB_SG (SystemList = NDMCDB03 = 0, NDMCDB04 = 1 AutoStartList = NDMCDB03, NDMCDB04 )Application ora_raw (StartProgram = /opt/HWraw_ora/bin/raw_start.sh StopProgram = /opt/HWraw_ora/bin/raw_stop.sh CleanProgram = /opt/HWraw_ora/bin/r

14、aw_clean.sh MonitorProgram = /opt/HWraw_ora/bin/raw_monitor.sh Monitorerval = 30MonitorTimeout = 30)Application ora_vg (StartProgram = /opt/HWvg_ora/bin/vg_start.sh StopProgram = /opt/HWvg_ora/bin/vg_stop.sh CleanProgram = /opt/HWvg_ora/bin/vg_clean.sh MonitorProgram = /opt/HWvg_ora/bin/vg_monitor.s

15、h Monitorerval = 30MonitorTimeout = 30)IP ora_ip (Device = bond1root128561 0 Mar23 ?00:33:01 /opt/VRTSvcs/bin/hadroot128611 0 Mar23 ?00:00:00 /opt/VRTSvcs/bin/hashadowAddress = 192.168.130.52NetMask = 255.255.255.0OnlineRetryLimit = 3)Mount ora_archive (MountPo= /home/oracle/archive BlockDevice = /d

16、ev/mapper/vgopt-lvarchive FSType = reiserfsFsckOpt = -y)NIC ora_nic (Device = bond1)Netlsnr ora_listener (Owner = oracleHome = /opt/oracle/product/11g/dbTnsAdmin = /opt/oracle/product/11g/db/network/admin Listener = listener)Oracle ora_ora11g (Sid = NDMCDBOwner = oracleHome = /opt/oracle/product/11g

17、/db)ora_archive requires ora_raw ora_ip requires ora_nic ora_listener requires ora_archive ora_ora11g requires ora_listener ora_raw requires ora_vgora_vg requires ora_ip/resource dependency treegroup RCS_DB_SGOracle ora_ora11gNetlsnr ora_listenerMount ora_archiveApplication ora_rawApplication ora_vgIP ora_ipNIC ora_nic3.8 文件系統(tǒng)使用狀況檢查使用 df 檢查文件系統(tǒng)使用的狀況，輸出如下：檢查結(jié)果：可以看到各個文件系統(tǒng)空間使用率良好。在日常中需要注意避免使用率達(dá)到 100%的情況。4.結(jié)論通過本次對移動 NDMC 系統(tǒng) NDMCDB03 和 NDMCDB04 數(shù)據(jù)庫 VCS 集群的健康檢查，確認(rèn)目前這個系統(tǒng)各功能模塊均運行正常，系統(tǒng)性能處于良好狀態(tài)。NDMCDB03: # df -hFilesystemSize Used