移動(dòng)bmsuite系統(tǒng)數(shù)據(jù)庫vcs健康檢查報(bào)告

1、Business Critical Servi移動(dòng) BM SUITE 系統(tǒng)VCS 健康檢查Prepared By:Parco Liu Last Updated:2014-4-15目錄1.介紹3對(duì)象3目的3范圍3術(shù)語3結(jié)果31.11.21.31.41.52.客戶環(huán)境43.VCS 健康檢查項(xiàng)目5License Key 檢查5GAB port 檢查5VCS 心跳網(wǎng)絡(luò)檢查6VCS 日志檢查6VCS Cluster 節(jié)點(diǎn)及 Service Group 運(yùn)行狀態(tài)檢查6VCS 進(jìn)程檢查7VCS 配置文件的一致性檢查7文件系統(tǒng)使用狀況檢查93.13.23.33.43.53.63.73.84.結(jié)論91.介紹1.

2、1對(duì)象本文檔是用來輔助 Symantec Business Critical Servi戶。的顧問和 VCS/NBU 的用1.2目的本文檔用于評(píng)估移動(dòng) BM SUIT 系統(tǒng)目前 VCS 集群的配置和運(yùn)行狀態(tài)是否良好。1.3范圍本文檔的范圍限制在檢查 VCS 產(chǎn)品.1.4術(shù)語HACluster VCS VXVM VXFS CVM CFSSFRACHigh AvailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cluster Server VERITAS Volume Manager VE

3、RITAS File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5結(jié)果通過系列健康檢查項(xiàng)目的成功完成，驗(yàn)證 VCS 當(dāng)前配置和運(yùn)行狀態(tài)是否良好。2.客戶環(huán)境移動(dòng)BM SUITE 系統(tǒng)VCS 由 2 臺(tái)LINUX 服務(wù)器組成，系統(tǒng)環(huán)境如下：系統(tǒng)健康檢查時(shí)間：2014 年 4 月 15 日參加Symantec 工程師:用戶工程師:劉扳浩主機(jī)名操作系統(tǒng)版本管理ORACLE 版本bmsuite

4、dbaSUSE10 SP2BmsuitedUSE10 SP23.VCS 健康檢查項(xiàng)目通過以下 8 個(gè)檢查項(xiàng)目，確認(rèn) bmsuitedba 和 bmsuitedbb 兩主機(jī)上的 VCS 進(jìn)程、配置、運(yùn)行狀況以及性能等都處于良好的狀態(tài)。3.1 License Key 檢查需要確認(rèn)兩節(jié)點(diǎn)上的 License Key 都為License。非License Key 過期后，一旦系統(tǒng)重啟， VCS 進(jìn)程將無法正常啟動(dòng)。在生產(chǎn)系統(tǒng)上，要避免使用Demo License.使用 vxlicrep 命令可以檢查 License 的類型.以下為Licenses 的輸出：的檢查主機(jī)檢查結(jié)果：License key 為

5、.3.2 GAB port 檢查VCS 的正常運(yùn)行，有賴于各包含模塊的正常運(yùn)行。使用 gabconfig主機(jī)上運(yùn)行了那些模塊，以下是gabconfig a 輸出：a 命令可檢查檢查結(jié)果： GAB Port 特性均正常。bmsuitedba: # gabconfig -a GAB Port Memberships=Port a gen5d1c02 membership 01 Port h gen5d1c04 membership 01Product Name= VERITAS File SystemLicense Type= PERMANENTProduct Name= VERITAS Clus

6、ter ServerLicense Type= PERMANENTProduct Name= VERITAS Volume ManagerLicense Type= PERMANENTProduct Name= VERITAS Storage Foundation Standard HALicense Type= PERMANENTProduct Name= VERITAS Volume ManagerLicense Type= PERMANENTProduct Name= VERITAS File SystemLicense Type= PERMANENTProduct Name= VERI

7、TAS Database Edition for OracleLicense Type= PERMANENTProduct Name= VERITAS SANPoControlLicense Type= PERMANENT3.3 VCS 心跳網(wǎng)絡(luò)檢查VCS 通過心跳網(wǎng)絡(luò)傳遞 cluster 狀態(tài)信息，當(dāng)前的每個(gè) VCS 節(jié)點(diǎn)都配置了兩條心跳線。VCS 心跳網(wǎng)絡(luò)運(yùn)行 LLT/GAB 協(xié)議，跳網(wǎng)絡(luò)是否正常, 檢查輸出如下:可以通過檢查 LLT 的狀態(tài)來確認(rèn)心檢查結(jié)果：節(jié)點(diǎn)的心跳網(wǎng)絡(luò)是健康的。3.4 VCS 日志檢查檢查 VCS 的日志文件， 察看近期是否有異常/var/VRTSvcs/log/en

8、gine_A.log ，可以在 database看 log 文件的修改時(shí)間和察看最近又沒有異常狀況。信息。VCS 日志文件是的 VRTSexplorer 的包中來查檢查結(jié)果：VCS 日誌近期無異常信息。3.5 VCS Cluster 節(jié)點(diǎn)及 Service Group 運(yùn)行狀態(tài)檢查檢查 2 個(gè)節(jié)點(diǎn)的 VCS 運(yùn)行狀態(tài)以及所有的Service Group 運(yùn)行狀態(tài)，如下：bmsuitedba: # hasus -summary- SYSTEM SE- SystemSeFrozenA bmsuitedbaRUNNING0bmsuitedbbRUNNING0- GROUP SE- GroupSyst

9、emProbedAutoDisabledSeRCS_DB_SGbmsuitedbaYNONLINEB RCS_DB_SGbmsuitedbbYNOFFLINE2014/04/15 02:50:57 VCS NOTICE V-16-1-50086 CPU usage on bmsuitedba is 79% 2014/04/15 02:53:27 VCS INFO V-16-1-50086 CPU usage on bmsuitedba is 60% 2014/04/15 03:00:57 VCS INFO V-16-1-50086 CPU usage on bmsuitedba is 68%

10、2014/04/15 03:11:57 VCS WARNING V-16-1-50086 CPU usage on bmsuitedba is 81% 2014/04/15 03:17:27 VCS INFO V-16-1-50086 CPU usage on bmsuitedba is 63% 2014/04/15 03:28:27 VCS NOTICE V-16-1-50086 CPU usage on bmsuitedba is 76%2014/04/15 04:39:17 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/04/15

11、 08:39:18 VCS INFO V-16-1-53504 VCS Engine Alive message!2014/04/15 12:39:19 VCS INFO V-16-1-53504 VCS Engine Alive message!bmsuitedba: # llts-nvv LLT node information:NodeSeLink Sus Address* 0 bmsuitedbaOPENeth10UP80:FB:06:35:F3:39 eth9UP80:FB:06:35:F3:3B eth8UP80:FB:06:35:F3:3A1 bmsuitedbbOPENeth1

12、0UP80:FB:06:35:F2:9D eth9UP80:FB:06:35:F2:9F eth8UP80:FB:06:35:F2:9E從以上輸出可以看出，bmsuitedba、 bmsuitedbb 都在一個(gè) Cluster 集群內(nèi)，運(yùn)行狀態(tài)正常，都為 RUNNING 狀態(tài)；服務(wù)組 RCS_DB_SG 運(yùn)行在 bmsuitedba 節(jié)點(diǎn)上。檢查結(jié)果：運(yùn)行正常。3.6 VCS 進(jìn)程檢查主要檢查 VCS進(jìn)程had 和hashadow 是否存在，參數(shù)是否正確。檢查結(jié)果：had 和hadshadow 進(jìn)程正常。3.7 VCS 配置文件的一致性檢查檢查 VCS 配置文件/etc/VRTSvcs/con

13、f/config/main.cf 的一致性，結(jié)果應(yīng)無錯(cuò)誤信息。檢查輸出如下：檢查結(jié)果：VCS 的配置文件main.cf 通過一致性檢查。main.cf 配置文件內(nèi)容如下：include /etc/VRTSvcs/conf/config/types.cfinclude /etc/VRTSagents/ha/conf/Oracle/OracleTypes.cfcluster clusterBMSuiteDB (UserNames = admin = ajkCjeJgkFkkIskEjh Administrators = admin )system bmsuitedba (ShutdownTimeo

14、ut = 3600)system bmsuitedbb (ShutdownTimeout = 3600)group RCS_DB_SG (SystemList = bmsuitedba = 0, bmsuitedbb = 1 AutoStartList = bmsuitedba, bmsuitedbb )Application ora_raw (StartProgram = /opt/HWraw_ora/bin/raw_start.sh StopProgram = /opt/HWraw_ora/bin/raw_stop.sh CleanProgram = /opt/HWraw_ora/bin/

15、raw_clean.sh MonitorProgram = /opt/HWraw_ora/bin/raw_monitor.shbmsuitedba: # hacf -verify /etc/VRTSvcs/conf/configroot36431 0 Apr26 ?00:30:53 /opt/VRTSvcs/bin/hadroot36481 0 Apr26 ?00:00:00 /opt/VRTSvcs/bin/hashadowMonitorerval = 30MonitorTimeout = 30)Application ora_vg (StartProgram = /opt/HWvg_ora

16、/bin/vg_start.sh StopProgram = /opt/HWvg_ora/bin/vg_stop.sh CleanProgram = /opt/HWvg_ora/bin/vg_clean.sh MonitorProgram = /opt/HWvg_ora/bin/vg_monitor.sh Monitorerval = 30MonitorTimeout = 30)IP ora_ip (Device = bond1Address = 192.168.130.141NetMask = 255.255.255.0)Mount ora_archive (MountPo= /home/o

17、racle/archive BlockDevice = /dev/mapper/vgopt-lvarchive FSType = reiserfsFsckOpt = -y)NIC ora_nic (Device = bond1)Netlsnr ora_listener (Owner = oracleHome = /opt/oracle/product/11TnsAdmin = /opt/oracle/product/11/network/admin Listener = LISTENER)Oracle ora_ora11g (Sid = ora11g Owner = oracleHome =

18、/opt/oracle/product/11 DetailMonitor = 1User = rcsmonitor Pword = eqmSjqFslQjqNTable = rcs_monitor_table LevelTwoMonitorFreq = 1)ora_archive requires ora_vg ora_ip requires ora_nic ora_listener requires ora_raw ora_ora11g requires ora_listener ora_raw requires ora_archive ora_vg requires ora_ip/resource dependency treegroup RCS_DB_SGOracle ora_ora11gNetlsnr ora_listenerApplication ora_rawMount ora_archive3.8 文件系統(tǒng)使用狀況檢查使用 df 檢查文件系統(tǒng)使用的狀況