xx項目avmon系統(tǒng)管理員手冊

1、XX項目AVMON系統(tǒng)管理員手冊文檔修訂記錄版本編號變化狀態(tài)簡要說明日期變更人批準(zhǔn)日期批準(zhǔn)人0.1C系統(tǒng)管理員模板創(chuàng)建*變化狀態(tài)：C創(chuàng)建，A增加，M修改，D刪除xx系統(tǒng)AVMON系統(tǒng)管理員手冊目 錄 TOC o 1-3 h z u HYPERLINK l _Toc390896837 Chapter 1 簡介 PAGEREF _Toc390896837 h 1 HYPERLINK l _Toc390896838 1.1目的 PAGEREF _Toc390896838 h 1 HYPERLINK l _Toc390896839 1.2適用范圍 PAGEREF _Toc390896839 h 1 H

2、YPERLINK l _Toc390896840 1.3產(chǎn)品概述 PAGEREF _Toc390896840 h 1 HYPERLINK l _Toc390896841 Chapter 2 系統(tǒng)環(huán)境說明 PAGEREF _Toc390896841 h 2 HYPERLINK l _Toc390896842 2.1物理節(jié)點及系統(tǒng)部署情況 PAGEREF _Toc390896842 h 2 HYPERLINK l _Toc390896843 2.2軟件環(huán)境部署說明 PAGEREF _Toc390896843 h 2 HYPERLINK l _Toc390896844 Chapter 3 AVMON

3、的初始化部署 PAGEREF _Toc390896844 h 3 HYPERLINK l _Toc390896845 3.1AVMON主版本部署 PAGEREF _Toc390896845 h 3 HYPERLINK l _Toc390896846 3.2初始化配置 PAGEREF _Toc390896846 h 3 HYPERLINK l _Toc390896847 Chapter 4 AVMON的啟動與停止 PAGEREF _Toc390896847 h 6 HYPERLINK l _Toc390896848 4.1啟動AVMON PAGEREF _Toc390896848 h 6 HYP

4、ERLINK l _Toc390896849 4.2檢查AVMON的運(yùn)行狀態(tài) PAGEREF _Toc390896849 h 6 HYPERLINK l _Toc390896850 Chapter 5 配置文件說明 PAGEREF _Toc390896850 h 7 HYPERLINK l _Toc390896851 Chapter 6 日志管理 PAGEREF _Toc390896851 h 8 HYPERLINK l _Toc390896852 6.1后臺日志查看 PAGEREF _Toc390896852 h 8 HYPERLINK l _Toc390896853 Chapter 7 系

5、統(tǒng)備份與恢復(fù) PAGEREF _Toc390896853 h 9 HYPERLINK l _Toc390896854 7.1系統(tǒng)備份說明 PAGEREF _Toc390896854 h 9 HYPERLINK l _Toc390896855 7.1.1系統(tǒng)備份 PAGEREF _Toc390896855 h 9 HYPERLINK l _Toc390896856 7.1.2數(shù)據(jù)庫備份 PAGEREF _Toc390896856 h 9 HYPERLINK l _Toc390896857 7.2系統(tǒng)恢復(fù)說明 PAGEREF _Toc390896857 h 10 HYPERLINK l _Toc3

6、90896858 7.2.1系統(tǒng)恢復(fù) PAGEREF _Toc390896858 h 10 HYPERLINK l _Toc390896859 7.2.2數(shù)據(jù)庫恢復(fù) PAGEREF _Toc390896859 h 10 HYPERLINK l _Toc390896860 Chapter 8 系統(tǒng)管理員日常巡檢的工作 PAGEREF _Toc390896860 h 12 HYPERLINK l _Toc390896861 8.1每天例行檢查 PAGEREF _Toc390896861 h 12 HYPERLINK l _Toc390896862 8.2每周例行檢查 PAGEREF _Toc390

7、896862 h 12 HYPERLINK l _Toc390896863 Chapter 9 高級管理員功能 PAGEREF _Toc390896863 h 13 HYPERLINK l _Toc390896864 9.1報表配置 PAGEREF _Toc390896864 h 13 HYPERLINK l _Toc390896865 Chapter 10 系統(tǒng)集成接口 PAGEREF _Toc390896865 h 14 HYPERLINK l _Toc390896866 10.1AVMON AMP系統(tǒng)集成概述 PAGEREF _Toc390896866 h 14 HYPERLINK l

8、_Toc390896867 10.2應(yīng)用監(jiān)控平臺接口 PAGEREF _Toc390896867 h 14 HYPERLINK l _Toc390896868 10.2.1告警集成 PAGEREF _Toc390896868 h 14文檔編號第19頁簡介目的本文概述了AVMON系統(tǒng)管理相關(guān)內(nèi)容，可作為產(chǎn)品系統(tǒng)管理維護(hù)的依據(jù)。適用范圍系統(tǒng)安裝和部署人員系統(tǒng)管理人員產(chǎn)品概述AVMON系統(tǒng)是一個功能強(qiáng)大的監(jiān)控解決方案, 具有能深入,全面的功能, 在市場上有其他的“入門級”產(chǎn)品，但他們把注意力集中在微軟環(huán)境或無代理監(jiān)控。AVMON系統(tǒng)針對各種異構(gòu)的IT基礎(chǔ)設(shè)施組件提供了全面的無代理/代理監(jiān)測。此外，它

9、提供的擴(kuò)展能力極強(qiáng)，可以開發(fā)的代理以及無代理的數(shù)據(jù)采集應(yīng)用程序和服務(wù)作為事件和性能監(jiān)測的補(bǔ)充, 是目前IT環(huán)境監(jiān)控工具的首選.系統(tǒng)環(huán)境說明物理節(jié)點及系統(tǒng)部署情況生產(chǎn)環(huán)境：HostnameIPAppAVMON_app1x.x.x.xAVMON_db1x.x.x.x測試環(huán)境：HostnameIPAppAVMON_app11AVMON應(yīng)用監(jiān)控平臺接口BPC性能文件接口AVMON_db12Postgresql詳見產(chǎn)品部署參數(shù)excel。軟件環(huán)境部署說明安裝JRE jdk-7u21-linux-x64.rpm執(zhí)行如下命令進(jìn)行安裝：rpm i jdk-7u21-linux-x64.rpm為AVMON服務(wù)器

10、創(chuàng)建帳號avmon，設(shè)置home為/opt/hp/avmonAVMON的初始化部署AVMON主版本部署參考XX項目AvMON_Server_Gateway_Web_DB_部署方案初始化配置Avmon Server創(chuàng)建目錄安裝目錄, 以/opt/hp/avmon/server為例，編輯perties，修改指向數(shù)據(jù)庫的連接參數(shù)Avmon gateway創(chuàng)建安裝目錄,以/opt/hp/avmon/gateway為例, 將package中的以下文件拷貝至/opt/hp/avmon/gateway/目錄下，目錄結(jié)構(gòu)如下：如果需要的話，編輯perties指定avmonserver的IP和端口。如果gate

11、way和avmonserver安裝在同一臺機(jī)器上，不需要修改。啟動Gateway, 執(zhí)行如下命令啟動gateway程序：停止gateway, 執(zhí)行如下命令啟動gateway程序：Memcached將package中的memcached-1.4.15.tar和libevent-2.0.21-stable.tar文件拷貝到任意目錄, 并運(yùn)行以下編譯命令:tar xvf libevent*tarcd libevent*./configure -prefix=/usr/localmakemake installln -s /usr/local/lib/libevent-2.0.so.5 /usr/li

12、b/libevent-2.0.so.5(注: 如果是64位環(huán)境, 請運(yùn)行l(wèi)n -s /usr/local/lib/libevent-2.0.so.5 /usr/lib64/libevent-2.0.so.5)tar xvf memcached*tarcd memcached*./configure -prefix=/usr/localmakemake install然后運(yùn)行啟動服務(wù)命令/usr/local/bin/memcached -d -m 2048 -u root -l $installIP -p 11211若能通過ps正?？吹絤emcached進(jìn)程, 則說明安裝過程是正常的Avmon

13、web tomcat配置數(shù)據(jù)庫鏈接和memcache鏈接，以/opt/hp/avmon為例,編輯/opt/hp/avmon/tomcat/webapps/avmon-web/WEB-INF/classes/perties，指定數(shù)據(jù)庫連接信息(注, 其中的用戶名密碼和數(shù)據(jù)庫名字必須和之前安裝postgresql數(shù)據(jù)庫時保持一致)：編輯/opt/hp/avmon/tomcat/webapps/avmon-web/WEB-INF/classes memcached.xml, 制定memcache的鏈接信息解壓并拷貝avmon package中的avmon-resources.tar文件到制定目錄,

14、以/opt/hp/avmon為例, 應(yīng)拷貝的目錄全路徑為/opt/hp/avmon /apache-tomcat-7.0.8/webapps解壓并拷貝avmon package中的mediaReport.tar文件到制定目錄, 以/opt/hp/avmon為例, 應(yīng)拷貝的目錄全路徑為/opt/hp/avmon/apache-tomcat-7.0.8/webapps, 完成之后需要修改/opt/hp/avmon/tomcat/webapps/avmon-web/WEB-INF/classes/perties中report.template.path和report.html.path的值如下:注:

15、 路徑最后必須跟上/, 否則會報錯解壓并拷貝avmon package中的avmon-license.tar文件到任意目錄, 然后進(jìn)入目錄, 運(yùn)行編譯命令:cc ./mycpuid.c -o $installPath/apache-tomcat-7.0.8/getcpusn或者gcc ./mycpuid.c -o $installPath/apache-tomcat-7.0.8/getcpusn其中installPath需要修改為apache的安裝目錄,以/opt/hp/avmon為例, 應(yīng)拷貝的目錄全路徑為/opt/hp/avmon/apache-tomcat-7.0.8/webappsAV

16、MON的啟動與停止啟動AVMON啟動AvmonServer, 執(zhí)行如下命令啟動AvmonServer。停止AvmonServer, 執(zhí)行如下命令停止AvmonServer。啟動Gateway, 執(zhí)行如下命令啟動gateway程序：停止gateway, 執(zhí)行如下命令啟動gateway程序：然后運(yùn)行啟動服務(wù)命令/usr/local/bin/memcached -d -m 2048 -u root -l $installIP -p 11211若能通過ps正常看到memcached進(jìn)程, 則說明安裝過程是正常的起停Avmon web檢查AVMON的運(yùn)行狀態(tài)配置文件說明(參考安裝文檔補(bǔ)充)日志管理后臺日

17、志查看 Server：安裝目錄下的logs，如/opt/hp/avmon/server/logs Gateway:安裝目錄下的logs，如/opt/hp/avmon/gateway/logs Web：安裝目錄下的logs，如/opt/hp/avmon/apache-tomcat-7.0.8/logsAgent: 安裝目錄下的LOG，不同的日志文件說明如下:crontab.exec.log.* 任務(wù)調(diào)度日志filetrans_*.exec.log 參數(shù)文件,amp包文件傳輸日志heartbeat.exec.log.* Agent心跳日志 main.exec.log.* Agent主程序日志 re

18、cv.exec.log.* 文件接收日志 runtask_*.exec.log 任務(wù)運(yùn)行日志 Ping server：安裝目錄下的logIlo&idrac的日志在windows agent目錄中的vbs目錄下的log，可以修改perty修改日志文件路徑其余的AMP腳本運(yùn)行情況查看agent日志內(nèi)容 系統(tǒng)備份與恢復(fù)系統(tǒng)備份說明系統(tǒng)備份每天8：50自動完成應(yīng)用軟件備份(需要自己編腳本定時tar 文件備份)數(shù)據(jù)庫備份每周一，10：02點開始新的歸檔備份系統(tǒng)恢復(fù)說明系統(tǒng)恢復(fù)停止AVMON所有服務(wù)，從備份的目錄/appbackup/AVMONbackup找到需要恢復(fù)的備份文件（根據(jù)文件名字的值進(jìn)行比較，

19、值最大的即為最新備份時間）。然后解壓替換即可。數(shù)據(jù)庫恢復(fù)1.確保postgresql 正常安裝，停掉數(shù)據(jù)庫，/home/pgsql/data目錄為數(shù)據(jù)目錄2.postgres用戶從/dbbackup/AVMON/archivelog找到最后一個歸檔文件3.解壓tar jxvf AVMON.baseline.bz2 C /在/home/pgsql/data目錄下創(chuàng)建recovery.conf4.vi /home/pgsql/data /recovery.confrestore_command = cp /usr/local/pgsql/backup/archived_log/%f “%p”用ro

20、ot啟動數(shù)據(jù)庫服務(wù)即可service postgresql start系統(tǒng)管理員日常巡檢的工作每天例行檢查視圖界面常規(guī)檢查以普通用戶登錄AVMON，進(jìn)行常規(guī)的視圖瀏覽操作，檢查視圖是否顯示正常，并核對數(shù)據(jù)是否正確及時。每周例行檢查系統(tǒng)磁盤使用情況檢查通過命令行遠(yuǎn)程登錄AVMON系統(tǒng)，通過df命令查看系統(tǒng)磁盤文件系統(tǒng)剩余情況，如果發(fā)現(xiàn)空間剩余不足，則需清理多余的日志以釋放磁盤空間或進(jìn)行磁盤擴(kuò)容操作。報表生成檢查登錄AVMON, 打開報表查詢界面，檢查報表是否按時正常生成，并且抽查報表內(nèi)容數(shù)據(jù)是否連續(xù)。數(shù)據(jù)庫狀態(tài)檢查通過數(shù)據(jù)庫管理終端登錄AVMON數(shù)據(jù)庫，檢查文件系統(tǒng)使用情況即可。高級管理員功能(

21、沒有寫在用戶手冊中的必需功能文檔)9.1報表配置報表管理模塊，主要功能包括：數(shù)據(jù)源管理、報表分類、模板管理、生成策略管理、報表查詢、歷史報表查看、發(fā)送策略管理、發(fā)送日志查詢。系統(tǒng)集成接口AVMON AMP系統(tǒng)集成概述以下內(nèi)容參考本項目中AVMON與各IT子系統(tǒng)進(jìn)行了相關(guān)的集成,可參考如下表格.AVMON系統(tǒng)集成接口告警接口性能接口界面集成應(yīng)用監(jiān)控平臺MQ/webserviceN/AN/AAVMON側(cè)接口配置文件:應(yīng)用監(jiān)控平臺接口告警集成應(yīng)用監(jiān)控平臺告警在應(yīng)用監(jiān)控平臺MQ隊列中，AVMON側(cè)開發(fā)接口程序從MQ取告警,然后調(diào)用統(tǒng)一監(jiān)控平臺AVMON側(cè)的webservice接口,發(fā)往AVMON。MQ

22、取告警程序部署目錄/home/AVMONapp/ibmmqApp/bin存放啟動停止命令,conf存放配置文件,logs存放日志文件.相關(guān)配置文件如下:日志配置文件:AVMONappAVMONapp01 conf$ cat log4j_IBMMQAperties log4j.rootLogger=DEBUG,Console,R# Console is set to Console appender using a PatternLayout.log4j.appender.Console=org.apache.log4j.ConsoleAppender log4j.appender.Consol

23、e.layout=org.apache.log4j.PatternLayout log4j.appender.Console.layout.ConversionPattern=%p %dyyyy-MM-dd HH:mm:ss: %m %nlog4j.appender.R=org.apache.log4j.RollingFileAppenderlog4j.appender.R.File=/home/AVMONapp/ibmmqApp/logs/ibmmqApp.loglog4j.appender.R.Append=truelog4j.appender.R.layout=org.apache.lo

24、g4j.PatternLayoutlog4j.appender.R.layout.ConversionPattern=%-dyyyy-MM-dd HH:mm:ss %c-%p %m%n log4j.appender.R.MaxFileSize=15MBlog4j.appender.R.MaxBackupIndex=7數(shù)據(jù)庫文件:AVMONappAVMONapp01 conf$ cat perties #remote postgresql settingjdbc.driverClassName=org.postgresql.Driverjdbc.url=jdbc:postgresql:/AVMO

25、Ndb01:1521/AVMONjdbc.username=postgresjdbc.password=postgresdatabase=postgresql集成參數(shù)文件:AVMONappAVMONapp01 conf$ cat perties #alertMQ基礎(chǔ)配置#告警MQ服務(wù)器的IP地址alertMQ.server.host= 0#告警MQ端口alertMQ.server.port=40011#告警MQ服務(wù)器服務(wù)使用的編碼 1381代表GBK、1208代表UTFalertMQ.server.cssid=1208#告警MQ服務(wù)器的隊列管理器名稱alertMQ.server.queueMa

26、nagerName=MON_COMMON#告警MQ遠(yuǎn)程隊列的名稱alertMQ.server.queueName=SCCBA.SERVICE.WPL.AVMON#告警MQ服務(wù)器連接的通道alertMQ.server.channel=SVRCONN_GW_MON#客戶端用來連接MQ服務(wù)器的用戶ID 默認(rèn)為MUSR_MQADMIN 如果MQ為7.1及以上版本，需要在MQ服務(wù)器上添加MCA用戶alertMQ.client.userid=MUSR_MQADMIN#客戶端獲取消息的方式 CONSUMER(消費(fèi)模式：讀取并清除)alertMQ.client.doType=CONSUMER#告警事件接收接口

27、地址（不帶參數(shù)） http:/AVMON-server:8088/collectorAlertService/collectAlert/#collectorAlertService.url=http:/localhost:8080/cygnoides/api/v1/monitor/1/100000#collectorAlertService.url=11:8088/collectorAlertService/collectAlert/collectorAlertService.url=11:8088/collectorAlertSccbaService/collectAlert/#格式化告警信

28、息配置#XML格式告警消息字符串中ARISING_TIME字段,表示告警事件產(chǎn)生時間mq.xml.arising_time=yyyy-MM-dd HH:mm:ss#將告警時間字段ARISING_TIME格式化,然后調(diào)用webservice接口傳給其他程序mq.xml.format_arising_time=yyyy-MM-dd HH:mm:ss#配置xml格式告警消息的編碼，比如GBK或者UTF-8,默認(rèn)為UTF-8,對應(yīng)xml字符串或文件的encoding項配置mq.xml.encoding=UTF-8#XML格式告警消息字段SEVERITY的幾種等級及其值mq.xml.severity.c

29、ritical=4mq.xml.severity.major=3mq.xml.severity.minor=2mq.xml.severity.warning=1=0#調(diào)用WebService傳給其他程序的SEVERITY幾種等級及值,可能與XML格式告警信息不同mq.webservice.severity.critical=0mq.webservice.severity.major=1mq.webservice.severity.minor=2mq.webservice.severity.warning=3=4MQ采集日志文件例:特別需要注意的是用DEV_NAME作為ci的key。2014-0

30、3-14 09:48:51 com.hp.AVMON.mq.messagemanager.listener.AlertMessageListener-INFO Recieve AlertMessage!ID:414d51204d4f4e5f434f4d4d4f4e202052d4f31420a055cdContent: 00450000000RW1 800 WarnGatherSend 2 51642368 TBUS_800_168 Ping命令返回結(jié)果:Request Timed Out，主機(jī)3運(yùn)行異常 錯誤代碼： 0 ,源監(jiān)控系統(tǒng)名稱: 圖形前端監(jiān)控 ,附加錯誤信息： 2014-03-14

31、 09:48:53.0 000 800 0000 2014-03-14 09:48:51 org.springframework.beans.factory.support.DefaultListableBeanFactory-DEBUG Returning cached instance of singleton bean bpcdicService 2014-03-14 09:48:51 org.springframework.orm.ibatis.SqlMapClientTemplate-DEBUG Opened SqlMapSession com.ibatis.sqlmap.engin

32、e.impl.SqlMapSessionImpl786becbc for iBATIS operation 2014-03-14 09:48:51 org.springframework.jdbc.datasource.DataSourceUtils-DEBUG Fetching JDBC Connection from DataSource 2014-03-14 09:48:51 java.sql.Connection-DEBUG conn-173158 Connection 2014-03-14 09:48:51 org.springframework.orm.ibatis.SqlMapC

33、lientTemplate-DEBUG Obtained JDBC Connection jdbc:postgresql:/AVMONdb01:1521/AVMON, UserName=postgres, PostgreSQL Native Driver for iBATIS operation 2014-03-14 09:48:51 java.sql.Connection-DEBUG conn-173158 Preparing Statement: SELECT id, dic_type, dic_code, dic_name FROM t_fc_bpcdic WHERE 1 = 2 AND

34、 dic_type = ? 2014-03-14 09:48:51 java.sql.PreparedStatement-DEBUG pstm-173159 Executing Statement: SELECT id, dic_type, dic_code, dic_name FROM t_fc_bpcdic WHERE 1 = 2 AND dic_type = ? 2014-03-14 09:48:51 java.sql.PreparedStatement-DEBUG pstm-173159 Parameters: branch 2014-03-14 09:48:51 java.sql.P

35、reparedStatement-DEBUG pstm-173159 Types: java.lang.String 2014-03-14 09:48:51 java.sql.ResultSet-DEBUG rset-173160 ResultSet 2014-03-14 09:48:51 org.springframework.jdbc.datasource.DataSourceUtils-DEBUG Returning JDBC Connection to DataSource 2014-03-14 09:48:51 org.springframework.orm.ibatis.SqlMa

36、pClientTemplate-DEBUG Opened SqlMapSession com.ibatis.sqlmap.engine.impl.SqlMapSessionImpl75836867 for iBATIS operation 2014-03-14 09:48:51 org.springframework.jdbc.datasource.DataSourceUtils-DEBUG Fetching JDBC Connection from DataSource 2014-03-14 09:48:51 java.sql.Connection-DEBUG conn-173161 Con

37、nection 2014-03-14 09:48:51 org.springframework.orm.ibatis.SqlMapClientTemplate-DEBUG Obtained JDBC Connection jdbc:postgresql:/AVMONdb01:1521/AVMON, UserName=postgres, PostgreSQL Native Driver for iBATIS operation 2014-03-14 09:48:51 java.sql.Connection-DEBUG conn-173161 Preparing Statement: SELECT

38、 id, dic_type, dic_code, dic_name FROM t_fc_bpcdic WHERE 1 = 2 AND dic_type = ? 2014-03-14 09:48:51 java.sql.PreparedStatement-DEBUG pstm-173162 Executing Statement: SELECT id, dic_type, dic_code, dic_name FROM t_fc_bpcdic WHERE 1 = 2 AND dic_type = ? 2014-03-14 09:48:51 java.sql.PreparedStatement-D

39、EBUG pstm-173162 Parameters: transchannel 2014-03-14 09:48:51 java.sql.PreparedStatement-DEBUG pstm-173162 Types: java.lang.String 2014-03-14 09:48:51 java.sql.ResultSet-DEBUG rset-173163 ResultSet 2014-03-14 09:48:51 org.springframework.jdbc.datasource.DataSourceUtils-DEBUG Returning JDBC Connectio

40、n to DataSource 2014-03-14 09:48:51 com.hp.AVMON.mq.messagemanager.listener.AlertMessageListener-DEBUG 準(zhǔn)備調(diào)用轉(zhuǎn)儲：18 2014-03-14 09:48:51 com.hp.AVMON.mq.messagemanager.webservice.CollectorAlertService-DEBUG 準(zhǔn)備MQ告警轉(zhuǎn)儲請求 2014-03-14 09:48:51 com.hp.AVMON.mq.messagemanager.webservice.CollectorAlertService-INFO MQ告警轉(zhuǎn)儲請求(編碼前)：11:8088/collectorAlertSccbaService/collectAle