廣東移動onesdp系統(tǒng)mdspcgw1數(shù)據(jù)庫vcs健康檢查報告

1、Business Critical Servi移動 OneSDP 系統(tǒng) mdspCGW1 數(shù)據(jù)庫VCS 集群健康檢查Prepared By:Parco Liu Last Updated:2014-5-15目錄1.介紹3對象3目的3范圍3術(shù)語3結(jié)果31.11.21.31.41.52.客戶環(huán)境43.VCS 健康檢查項目5License Key 檢查5GAB port 檢查5VCS 心跳網(wǎng)絡(luò)檢查6VCS 日志檢查6VCS Cluster 節(jié)點及 Service Group 運行狀態(tài)檢查6VCS 進(jìn)程檢查7VCS 配置文件的一致性檢查7文件系統(tǒng)使用狀況檢查93.13.23.33.43.53.63.73

2、.84.結(jié)論91.介紹1.1對象本文檔是用來輔助 Symantec Business Critical Servi戶。的顧問和 VCS/NBU 的用1.2目的本文檔用于評估目前移動 OneSDP 系統(tǒng) mdspCGW1 數(shù)據(jù)庫 VCS 集群的配置和運行狀態(tài)是否良好。1.3范圍本文檔的范圍限制在檢查 VCS 產(chǎn)品.1.4術(shù)語HACluster VCS VXVM VXFS CVM CFSSFRACHigh AvailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cluster Server

3、VERITAS Volume Manager VERITAS File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5結(jié)果通過系列健康檢查項目的成功完成，驗證 VCS 當(dāng)前配置和運行狀態(tài)是否良好。2.客戶環(huán)境移動 OneSDP 系統(tǒng) mdspCGW1 數(shù)據(jù)庫 VCS 集群由 2 臺 LINUX 服務(wù)器組成，系統(tǒng)環(huán)境如下：系統(tǒng)健康檢查時間：2014 年 5 月 15 日symantec 工

4、程師:用戶工程師:參加劉扳浩主機(jī)名操作系統(tǒng)版本管理ORACLE 版本mdspCGW1ASUSE11 SP1mdspCGW1BSUSE11 SP13.VCS 健康檢查項目通過以下 8 個檢查項目，確認(rèn) mdspCGW1A 和 mdspCGW1B 兩主機(jī)上的 VCS 進(jìn)程、配置、運行狀況以及性能等都處于良好的狀態(tài)。3.1 License Key 檢查需要確認(rèn)兩節(jié)點上的 License Key 都為License。非License Key 過期后，一旦系統(tǒng)重啟， VCS 進(jìn)程將無法正常啟動。在生產(chǎn)系統(tǒng)上，要避免使用Demo License.使用 vxlicrep 命令可以檢查 License 的類型

5、.以下為Licenses 的輸出：的檢查主機(jī)檢查結(jié)果：VERITAS Cluster Server 的License key 為。3.2 GAB port 檢查VCS 的正常運行，有賴于各包含模塊的正常運行。使用主機(jī)上運行了那些模塊，以下是gabconfig a 輸出：gabconfiga 命令可檢查檢查結(jié)果： GAB Port 特性均正常。3.3 VCS 心跳網(wǎng)絡(luò)檢查VCS 通過心跳網(wǎng)絡(luò)傳遞 cluster 狀態(tài)信息，當(dāng)前的每個VCS 節(jié)點都配置了兩條心跳線。VCS 心跳網(wǎng)絡(luò)運行 LLT/GAB 協(xié)議，跳網(wǎng)絡(luò)是否正常, 檢查輸出如下:可以通過檢查 LLT 的狀態(tài)來確認(rèn)心mdspCGW1A:

6、# llts-nvv LLT node information:NodeSeLink Sus Address* 0 mdspCGW1AOPENeth10UP80:FB:06:35:B7:43 eth9UP80:FB:06:35:B7:45 eth8UP80:FB:06:35:B7:441 mdspCGW1BOPENeth10UP80:FB:06:35:B8:B7 eth9UP80:FB:06:35:B8:B9 eth8UP80:FB:06:35:B8:B8mdspCGW1A: # gabconfig -a GAB Port Memberships=Port a gen291e01 member

7、ship 01 Port h gen291e03 membership 01Product Name= VERITAS Cluster ServerLicense Type= PERMANENT檢查結(jié)果：節(jié)點的心跳網(wǎng)絡(luò)是健康的。3.4 VCS 日志檢查檢查 VCS 的日志文件， 察看近期是否有異常/var/VRTSvcs/log/engine_A.log ，可以在 database看 log 文件的修改時間和察看最近有沒有異常狀況。信息。VCS 日志文件是的 VRTSexplorer的包中來查檢查結(jié)果：VCS 日誌近期無異常信息。3.5 VCS Cluster 節(jié)點及 Service Grou

8、p 運行狀態(tài)檢查檢查 2 個節(jié)點的 VCS 運行狀態(tài)以及所有的Service Group 運行狀態(tài)，如下：從以上輸出可以看出，mdspCGW1A、 mdspCGW1B 都在一個 Cluster 集群內(nèi)，運行狀態(tài)正常，都為 RUNNING 狀態(tài)；各個資源組正常。mdspCGW1A: # hasus -summary- SYSTEM SE- SystemSeFrozenA mdspCGW1ARUNNING0mdspCGW1BRUNNING0- GROUP SE- GroupSystemProbedAutoDisabledSeonesdp_cgw_rg mdspCGW1AY NONLINEB one

9、sdp_cgw_rg mdspCGW1BY NOFFLINEB onesdp_faultspy_rg mdspCGW1A Y N ONLINE B onesdp_faultspy_rg mdspCGW1BY NONLINE B onesdp_nic_rg mdspCGW1AY NONLINEB onesdp_nic_rg mdspCGW1BY NONLINEB onesdp_notifymng_rg mdspCGW1AY NONLINE B onesdp_notifymng_rg mdspCGW1BY NOFFLINE2014/05/15 11:00:13 VCS INFO V-16-2-13

10、716 (mdspCGW1A) Resource(onesdp_cgw_app): Output of the completed operation (monitor)=rcscgw227701 ?07:40:06 mdspmon=2014/05/15 11:00:23 VCS INFO V-16-2-13716 (mdspCGW1A) Resource(onesdp_cgw_app): Output of the completed operation (monitor)=rcscgw227701 ?07:40:06 mdspmon=2014/05/1511:00:31VCSERRORV-

11、16-1-0(mdspCGW1B)OneSDPCGWApp:?:?:CGWApp:onesdp_cgw_app:monitor:CGWApp(rcscgw)seis abnormal!2014/05/15 11:00:33 VCS INFO V-16-2-13716 (mdspCGW1A) Resource(onesdp_cgw_app): Output of the completed operation (monitor)=rcscgw227701 ?07:40:06 mdspmon=檢查結(jié)果：運行正常。3.6 VCS 進(jìn)程檢查主要檢查 VCS進(jìn)程had 和hashadow 是否存在，參數(shù)

12、是否正確。檢查結(jié)果：had 和hadshadow 進(jìn)程正常。3.7 VCS 配置文件的一致性檢查檢查 VCS 配置文件/etc/VRTSvcs/conf/config/main.cf 的一致性，結(jié)果應(yīng)無錯誤信息。檢查輸出如下：mdspCGW1A: # hacf -verify /etc/VRTSvcs/conf/config檢查結(jié)果：VCS 的配置文件main.cf 通過一致性檢查。main.cf 配置文件內(nèi)容如下：mdspCGW1A: # cat /etc/VRTSvcs/conf/config/main.cf include OracleASMTypes.cfinclude types.c

13、f include Db2udbTypes.cf include OracleTypes.cf include MDSPTypes.cf include FaultSpy.cf include SybaseTypes.cfcluster clumdsp02 (UserNames = admin = dOPhOJoLPkPPnXPjOM ClusterAddress = 192.168.131.59 Administrators = admin )system mdspCGW1A (ShutdownTimeout = 3600)system mdspCGW1B (ShutdownTimeout

14、= 3600)group onesdp_cgw_rg (SystemList = mdspCGW1A = 1, mdspCGW1B = 2 AutoStartList = mdspCGW1A, mdspCGW1B )IP onesdp_cgw_base_ip (Critical = 0 Device = eth8Address = 192.168.105.98NetMask = 255.255.255.0)IP onesdp_cgw_ip (Device = bond1Address = 192.168.131.59root128191 0 2012 ?00:23:32 /opt/VRTSvc

15、s/bin/hadroot128211 0 2012 ?00:00:00 /opt/VRTSvcs/bin/hashadowNetMask = 255.255.255.0)OneSDPCGWApp onesdp_cgw_app ( ResourceOwner = unknown UserName = rcscgw)Proxy onesdp_cgw_base_nic (ResName = onesdp_base_nic)Proxy onesdp_cgw_fabric_nic (ResName = onesdp_fabric_nic)onesdp_cgw_app requires onesdp_c

16、gw_base_ip onesdp_cgw_app requires onesdp_cgw_ip onesdp_cgw_base_ip requires onesdp_cgw_base_nic onesdp_cgw_ip requires onesdp_cgw_fabric_nic/resource dependency treegroup onesdp_cgw_rgOneSDPCGWApp onesdp_cgw_appIPonesdp_cgw_base_ipProxy onesdp_cgw_base_niconesdp_cgw_ipProxy onesdp_cgw_fabric_nicIPg

17、roup onesdp_faultspy_rg (SystemList = mdspCGW1A = 1, mdspCGW1B = 2 Parallel = 1AutoStartList = mdspCGW1A, mdspCGW1B )OneSDPFaultSpy onesdp_faultspy ( ResourceOwner = unknown FaultClearResGrps=onesdp_nic_rg )onesdp_cgw_rgonesdp_notifymng_rg/ resource dependency tree/group onesdp_faultspy_rgOneSDPFaul

18、tSpy onesdp_faultspygroup onesdp_nic_rg (SystemList = mdspCGW1A = 1, mdspCGW1B = 2 Parallel = 1AutoStartList = mdspCGW1A, mdspCGW1B )3.8 文件系統(tǒng)使用狀況檢查使用 df 檢查文件系統(tǒng)使用的狀況，輸出如下：mdspCGW1A:/tmp/ruibao # df -hFilesystemSize Used Avail Use% Mounted on/dev/sda220G 7.3G12G 39% /devtmpfs12G 156K12G1% /devtmpfs12G012G0% /dev/shm/dev/sda650G26G21G 56% /home/dev/sda540G 2.3G36G6% /optNIC onesdp_base_nic (Device = eth8 Mii =