廣東移動ndsc系統(tǒng)數(shù)據(jù)庫vcs健康檢查報(bào)告

1、Business Critical Servi移動 NDSC 系統(tǒng)VCS 健康檢查Prepared By: Last Updated:Parco Liu 2014-8-14目錄1.介紹3對象3目的3范圍3術(shù)語3結(jié)果31.11.21.31.41.52.客戶環(huán)境43.VCS 健康檢查項(xiàng)目5License Key 檢查5GAB port 檢查5VCS 心跳網(wǎng)絡(luò)檢查5VCS 日志檢查6VCS Cluster 節(jié)點(diǎn)及 Service Group 運(yùn)行狀態(tài)檢查7VCS 進(jìn)程檢查7VCS 配置文件的一致性檢查8文件系統(tǒng)使用狀況檢查93.13.23.33.43.53.63.73.84.結(jié)論101.介紹1.1對

2、象本文檔是用來輔助 Symantec Business Critical Servi戶。的顧問和 VCS/NBU 的用1.2目的本文檔用于評估移動 NDSC 系統(tǒng)目前 VCS 集群的配置和運(yùn)行狀態(tài)是否良好。1.3范圍本文檔的范圍限制在檢查 VCS 產(chǎn)品.1.4術(shù)語HACluster VCS VXVM VXFS CVM CFSSFRACHigh AvailabilityA logical grouof servers (nodes) providing failover capabilityVERITAS Cluster Server VERITAS Volume Manager VERITAS

3、 File System Cluster Volume Manager Cluster File SystemVERITAS Storage Foundation for RAC (包括 VCS 和 VXVM,支持 Oracle RAC)NetBackupNBU1.5結(jié)果通過系列健康檢查項(xiàng)目的成功完成，驗(yàn)證 VCS 當(dāng)前配置和運(yùn)行狀態(tài)是否良好。2.客戶環(huán)境移動NDSC 系統(tǒng) VCS 集群由 2 臺LINUX 服務(wù)器組成，系統(tǒng)環(huán)境如下：系統(tǒng)健康檢查時(shí)間：2014 年 8 月 14 日參加symantec 工程師:用戶工程師:劉扳浩主機(jī)名操作系統(tǒng)版本管理ORACLE 版本ndscdb01SUSE1

4、0 SP1ndscdb02SUSE10 SP13.VCS 健康檢查項(xiàng)目通過以下 8 個(gè)檢查項(xiàng)目，確認(rèn) ndscdb01 和 ndscdb02 兩主機(jī)上的 VCS 進(jìn)程、配置、運(yùn)行狀況以及性能等都處于良好的狀態(tài)。3.1 License Key 檢查需要確認(rèn)兩節(jié)點(diǎn)上的 License Key 都為License。非License Key 過期后，一旦系統(tǒng)重啟， VCS 進(jìn)程將無法正常啟動。在生產(chǎn)系統(tǒng)上，要避免使用Demo License.使用 vxlicrep 命令可以檢查 License 的類型.以下為Licenses 的輸出：的檢查主機(jī)檢查結(jié)果：VERITAS Cluster Server 的

5、License key 為。3.2 GAB port 檢查VCS 的正常運(yùn)行，有賴于各包含模塊的正常運(yùn)行。使用主機(jī)上運(yùn)行了那些模塊，以下是gabconfig a 輸出：gabconfiga 命令可檢查檢查結(jié)果： GAB Port 特性均正常。3.3 VCS 心跳網(wǎng)絡(luò)檢查VCS 通過心跳網(wǎng)絡(luò)傳遞 cluster 狀態(tài)信息，當(dāng)前的每個(gè)VCS 節(jié)點(diǎn)都配置了兩條心跳線。VCS 心跳網(wǎng)絡(luò)運(yùn)行 LLT/GAB 協(xié)議，跳網(wǎng)絡(luò)是否正常, 檢查輸出如下:可以通過檢查 LLT 的狀態(tài)來確認(rèn)心檢查結(jié)果：節(jié)點(diǎn)的心跳網(wǎng)絡(luò)是健康的。ndscdb01: # llts -nvv LLT node information:No

6、deS e Link S us Address* 0 ndscdb01 OPENlink1 UP 00:18:82:D3:D7:F9 link2 UP 00:18:82:D3:DA:61 link3 UP 00:18:82:D3:DA:601 ndscdb02OPENlink1 UP 00:18:82:D3:D7:C3 link2 UP 00:18:82:D3:D8:C5 link3 UP 00:18:82:D3:D8:C5ndscdb01: # gabconfig -a GAB Port Memberships=Port a genf81801 membership 01 Port h ge

7、nf81820 membership 01Product Name= VERITAS Cluster ServerLicense Type= PERMANENT3.4 VCS 日志檢查檢查 VCS 的日志文件， 察看近期是否有異常/var/VRTSvcs/log/engine_A.log ，可以在 database看 log 文件的修改時(shí)間和察看最近又沒有異常狀況。信息。VCS 日志文件是的 VRTSexplorer 的包中來查檢查結(jié)果：VCS 日誌無異常信息。3.5 VCS Cluster 節(jié)點(diǎn)及 Service Group 運(yùn)行狀態(tài)檢查檢查 2 個(gè)節(jié)點(diǎn)的 VCS 運(yùn)行狀態(tài)以及所有的Serv

8、ice Group 運(yùn)行狀態(tài)，如下：從以上輸出可以看出，ndscdb01、 ndscdb02 都在一個(gè) Cluster 集群內(nèi)，運(yùn)行狀態(tài)正常，都為 RUNNING 狀態(tài)；服務(wù)組RCS_DB_SG 運(yùn)行在ndscdb01 節(jié)點(diǎn)上。檢查結(jié)果：運(yùn)行正常。3.6 VCS 進(jìn)程檢查主要檢查 VCS進(jìn)程had 和hashadow 是否存在，參數(shù)是否正確。root180831 0 Nov29 ?00:00:11 /opt/VRTSvcs/bin/hadndscdb01: # hasus -summary- SYSTEM SE- SystemSeFrozenA ndscdb01RUNNING0ndscdb02

9、RUNNING0- GROUP SE- GroupSystemProbedAutoDisabledSeRCS_DB_SGndscdb01YNONLINEB RCS_DB_SGndscdb02YNOFFLINE2014/07/12 10:12:33 VCS INFO V-16-1-10298 Resource ora_listener (Owner: unknown, Group: RCS_DB_SG) is online on ndscdb01 (VCS initiated)2014/07/12 10:12:33 VCS NOTICE V-16-1-10301 Initiating Onlin

10、e of Resource ora_ora11g (Owner: unknown, Group: RCS_DB_SG) on System ndscdb012014/07/12 10:13:14 VCS INFO V-16-1-10298 Resource ora_ora11g (Owner: unknown, Group: RCS_DB_SG) is online on ndscdb01 (VCS initiated)2014/07/12 10:13:14 VCS NOTICE V-16-1-10447 Group RCS_DB_SG is online on system ndscdb01

11、2014/07/12 10:13:14 VCS INFO V-16-6-15004 (ndscdb01) hatrigger:Failed to send trigger fortonline; script doesnt exist2014/07/12 10:57:19 VCS INFO V-16-1-50135 User admin firedd: hagrp - unfreeze RCS_DB_SG from 10.1.6.872014/07/12 10:57:23 VCS INFO V-16-1-50135 User admin firedd: haconf -dump from 10

12、.1.6.87檢查結(jié)果：had 和hadshadow 進(jìn)程正常。3.7 VCS 配置文件的一致性檢查檢查 VCS 配置文件/etc/VRTSvcs/conf/config/main.cf 的一致性，結(jié)果應(yīng)無錯(cuò)誤信息。檢查輸出如下：ndscdb01: # hacf -verify /etc/VRTSvcs/conf/config檢查結(jié)果：VCS 的配置文件main.cf 通過一致性檢查。main.cf 配置文件內(nèi)容如下：include types.cf include OracleTypes.cfcluster ndscdbC (UserNames = admin = ajkCjeJgkFkkI

13、skEjh Administrators = admin )system ndscdb01 (ShutdownTimeout = 3600)system ndscdb02 (ShutdownTimeout = 3600)group RCS_DB_SG (SystemList = ndscdb01 = 0, ndscdb02 = 1 AutoStartList = ndscdb01, ndscdb02 OnlineRetryLimit = 3)Application ora_raw (StartProgram = /opt/HWraw_ora/bin/raw_start.sh StopProgr

14、am = /opt/HWraw_ora/bin/raw_stop.sh CleanProgram = /opt/HWraw_ora/bin/raw_clean.sh MonitorProgram = /opt/HWraw_ora/bin/raw_monitor.sh Monitorerval = 30MonitorTimeout = 300)Application ora_vg (StartProgram = /opt/HWvg_ora/bin/vg_start.sh StopProgram = /opt/HWvg_ora/bin/vg_stop.sh CleanProgram = /opt/

15、HWvg_ora/bin/vg_clean.sh MonitorProgram = /opt/HWvg_ora/bin/vg_monitor.sh Monitorerval = 30MonitorTimeout = 300)IP ora_ip (Device = bond1Address = 192.168.120.190NetMask = 255.255.255.128OnlineRetryLimit = 3root180851 0 Nov29 ?00:00:00 /opt/VRTSvcs/bin/hashadow3.8 文件系統(tǒng)使用狀況檢查使用 df 檢查文件系統(tǒng)使用的狀況，輸出如下：nd

16、scdb01:/tmp/ruibao # df -hFilesystemSize Used Avail Use% Mounted on/dev/sda221G14G 6.8G 67% /udev7.9G 372K 7.9G1% /dev/dev/sda540G16G24G 41% /homeshm16G 6.5G 9.6G 41% /dev/shm)NIC ora_nic (Device = bond1)Netlsnr ora_listener (Owner = oracleHome = /home/oracle/app/product/11g/dbTnsAdmin = /home/oracl

17、e/app/product/11g/db/network/admin Listener = LISTENERMonScript = /opt/VRTSvcs/bin/Netlsnr/LsnrTest.pl)Oracle ora_ora11g (Sid = ndscdb Owner = oracleHome = /home/oracle/app/product/11g/dbPfile = /home/oracle/app/product/11g/db/dbs/initndscdb.ora EnvFile = /home/oracle/.bash_profileDetailMonitor = 1MonScript = /opt/VRTSvcs/bin/Oracle/SqlTest.pl User = vcsmonPword = fplRsjGloLllQtjPm Table = vcstest)ora_ip requires ora_nic ora_listener requires ora_raw ora_ora11g requires ora_listener ora_raw requires