系統(tǒng)運維操作手冊

1、xxxx系統(tǒng)運維操作手冊xxxx公司二零零九年十月第*頁共*頁版本控制版本號日期參與人員更新說明1.02011-06-06創(chuàng)建分發(fā)控制編p文檔權(quán)限與文檔的主要關(guān)系1創(chuàng)建、修改、讀取負(fù)責(zé)編制、修改、審核2批準(zhǔn)負(fù)責(zé)本文檔的批準(zhǔn)程序3標(biāo)準(zhǔn)化審核作為本項目的標(biāo)準(zhǔn)化負(fù)責(zé)人，負(fù) 責(zé)對本文檔進行標(biāo)準(zhǔn)化審核4讀取5讀取41 概述42 主機系統(tǒng)52.1 檢查文件系統(tǒng)利用率 52.2 查看系統(tǒng)硬件軟件告警日志 52.3 檢查僵死或運行時間過長的進程 62.4 檢查系統(tǒng)CPU利用率72.5 檢查系統(tǒng)內(nèi)存利用率 72.6 檢查系統(tǒng)IO利用率82.7 檢查系統(tǒng)交換量92.8 檢查系統(tǒng)高可用性（HA）的使用狀態(tài) 92.9

2、 清理過時的系統(tǒng)臨時文件 102.10 檢查磁帶庫和磁帶使用情況 102.11 修改用戶口令112.12 清洗磁帶機112.13 檢索操作系統(tǒng)日志 123 系統(tǒng)啟動與關(guān)閉133.1 系統(tǒng)的運行架構(gòu)133.2 系統(tǒng)的啟動 133.3 系統(tǒng)的關(guān)閉144 系統(tǒng)部署174.1 生成部署包174.2 程序部署185 重要的系統(tǒng)參數(shù)配置 215.1 CONFIG.PROPERTIES錯誤！未定義書簽。5.2 SPRING-MISTASK .XML 錯誤！未定義書簽。6 日志查看226.1 WAS 日志226.2 DB2 日志227 查系統(tǒng)是否正確運行 248 系統(tǒng)管理員維護人員信息日志 259 查看表空間

3、及附件硬盤的使用情況 269.1 DB2表空間查看269.2 115服務(wù)器附件文件占用情況 2610 服務(wù)停啟順序281概述本手冊給出了湖南省移動公司的報賬平臺系統(tǒng)及報賬平臺外圍 系統(tǒng)的運維操作細(xì)則。手冊從主機系統(tǒng)、應(yīng)用系統(tǒng)以及數(shù)據(jù)庫系統(tǒng)三 個方面對任務(wù)項進行組織，對應(yīng)章節(jié)包括第 錯誤！未找到引用源。章 報賬平臺主機系統(tǒng)，第 錯誤！未找到引用源。章報賬平臺應(yīng)用軟件系 統(tǒng)以及第錯誤！未找到引用源。章報賬平臺數(shù)據(jù)庫系統(tǒng)。每個任務(wù)項 中可能涉及的表格將在第5章表單模板中統(tǒng)一給出。-11 -2主機系統(tǒng)2.1 檢查文件系統(tǒng)利用率編 號名 稱檢查文件系統(tǒng)利用率描 述止匕任務(wù)檢查文件系統(tǒng)利用率不低于85%或

4、有大于0.5G以上的空閑空間操作角色主機系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明1 .系統(tǒng)的正常運行應(yīng)保證有足夠的磁盤空間，文件系統(tǒng)被寫滿會導(dǎo)致系統(tǒng)服務(wù)的中斷，可以使用df X進行檢查是否有文件系統(tǒng)利用率高于85%并且可用空間小于 500M,對于保存數(shù)據(jù)庫數(shù)據(jù)文件所在的磁 盤空間和保存歸檔日志的應(yīng)有更高的空閑空間。2 .但也不可以盲目的擴展文件系統(tǒng)，因為目前31省所使用的文件系統(tǒng)均不可以縮小，如果要回收空間只能刪除重建表單填寫參見表單模板中的巡檢單表格2.2 查看系統(tǒng)硬件軟件告警日志編 號名 稱查看系統(tǒng)硬件軟件告警日志描 述止匕任務(wù)查看系統(tǒng)硬件軟件告警日志操作角色主機系統(tǒng) 管理員所屬管

5、控類別巡檢執(zhí)行頻度每日操作說明以 root 運行 tail /var/adm/messages查看，如果系統(tǒng)寫滿了一個message 文件會自動備份為 message.0,message.1 等。表單填寫參見表單模板中的巡檢單表格2.3 檢查僵死或運行時間過長的進程編 號名 稱檢查僵死或運行時間過長的進程描 述此任務(wù)查看檢查僵死或運行時間過長的進程操作角色主機系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明2 . 使用 ps -ef|grep applprd和 ps -ef |grep oraprd進行檢查（運行時間超過12小時的絕大部分是需要注意的進程）。3 .而程序名為defunct的均為

6、孤兒或僵死進程。4 .由于，夜晚為非工作時間，因此運行超過12個小時的應(yīng)用服務(wù)例如，form 服務(wù)的客戶端進程（AIX 平臺為f60runm , SUN平臺為f60webmx ）,很可能是運行出錯的進程，應(yīng)可以 kill掉，對于數(shù)據(jù)庫進程一般不采用在UNIX命令中kill的方法而是登陸到數(shù)據(jù)庫使用alter system kill session<sid>,<serial#>'的方法中止該數(shù)據(jù)庫進程。表單填寫參見表單模板中的巡檢單表格2.4 檢查系統(tǒng)CPU利用率編 號名 稱檢查系統(tǒng)CPU利用率描 述此任務(wù)檢查系統(tǒng)CPU禾I用率操作角色主機系統(tǒng) 管理員所屬管控類別

7、巡檢執(zhí)行頻度每日操作說明1. prstat-aSolaris2. psrinfo -v （CPU狀態(tài)）表單填寫參見表單模板中的巡檢單表格2.5 檢查系統(tǒng)內(nèi)存利用率編 號名 稱檢查系統(tǒng)內(nèi)存利用率描 述此任務(wù)檢查內(nèi)存利用率操作角色主機系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明1. Solaris vmstat 查看 free 值2. prtdiag -v表單填寫參見表單模板中的巡檢單表格2.6 檢查系統(tǒng)IO利用率編 號名 稱檢查系統(tǒng)IO利用率描 述此任務(wù)檢查IO利用率操作角色主機系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明2. Solaris iostat表單填寫參見表單模板中的巡檢單表

8、格2.7 檢查系統(tǒng)交換量編 號名 稱檢查系統(tǒng)交換量描 述此任務(wù)檢查系統(tǒng)交換量操作角色主機系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明2 .手動運行的方法如下：topas3 . swap -l && swap-s Solaris表單填寫參見表單模板中的巡檢單表格名 稱檢查系統(tǒng)高可用性（HA）的使用狀態(tài)此任務(wù)檢查系統(tǒng)高可用性（HA）的使用狀態(tài)編號描述操作角色2.8 檢查系統(tǒng)高可用性（HA）的使用狀態(tài)主機系統(tǒng)所屬管控類別巡檢執(zhí)行頻度每日管理員操作說明l.webview 狀態(tài)# /etc/opt/FJSVwvbs/etc/bin/wvstat2.CF和心跳狀態(tài)# cftool -和

9、 cftool -r3.SF狀態(tài)# sdtool -s4.CIP狀態(tài)# ciptool -a和 # ciptool -n5.CRM狀態(tài)# /etc/opt/FJSVcluster/bin/clgettree6.RMS狀態(tài)# hvdisp -a2.表單填寫參見表單模板中的巡檢單表格2.9 清理過時的系統(tǒng)臨時文件編 號名 稱清理過時的系統(tǒng)臨時文件描 述此任務(wù)清理過時的系統(tǒng)臨時文件操作角色主機系統(tǒng)所屬管控類別巡檢執(zhí)行頻度每周管理員操作說明1. f60*dump* 。2. $ORACLE_HOME/reports60/server/cache/*（最好關(guān)閉服務(wù)清理）。3. $APPLTMP/* （只有

10、關(guān)閉服務(wù)后可以進行）。表單填寫參見表單模板中的巡檢單表格2.10 檢查磁帶庫和磁帶使用情況編 號名 稱檢查磁帶庫和磁帶使用情況描 述止匕任務(wù)檢查磁帶庫和磁帶使用情況操作角色主機系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度操作說明2 .檢查是否有足夠的空間保存?zhèn)浞荨? .磁帶庫運行中是否有錯誤出現(xiàn)。表單填寫參見表單模板中的巡檢單表格2.11修改用戶口令編 號名 稱修改UNIX用戶口令描 述此項目修改用戶口令操作角色主機系統(tǒng) 管理員所屬管控類別用戶帳號及 密碼管理執(zhí)行頻度每月操作說明1 . 修改UNIX密碼步驟如卜：letterboxusername1:passwdEnter login password

11、:您的舊密碼New password:您的新密碼Re-enter new password: 您的新密碼passwd (SYSTEM): passwd successfully changed for usernameletterboxusername2:2 .密碼修改之后，必須及時通知系統(tǒng)管理員。表單填寫參見表單模板中的用戶帳號管理情況登記表2.12清洗磁帶機編 號名 稱清洗磁帶機描 述此任務(wù)將清洗磁帶機清洗干凈操作角色主機系統(tǒng) 管理員所屬管控類別備份管理執(zhí)行頻度每月-ii -操作說明用清洗帶清洗磁帶機。表單填寫參見表單模板中的巡檢單表格-32 -2.13檢索操作系統(tǒng)日志編 號名 稱檢索AI

12、X操作系統(tǒng)日志描 述此任務(wù)檢索操作系統(tǒng)日志操作角色主機系統(tǒng) 管理員所屬管控類別日志管理執(zhí)行頻度每周操作說明1 .查看用戶登陸日志：在命令行輸入命令：last2 .查看用戶失敗登陸日志：在命令行輸入命令，進入日志所在目錄：cd /etc/security查看日忐內(nèi)谷:vi failedlogin3 .查看su命令執(zhí)行日志內(nèi)谷：在命令行輸入命令，進入日志所在目錄：cd /var/adm表單填寫參見表單模板中日志檢索申請表及日志檢索記錄表根據(jù)情況可能需要備份介質(zhì)訪問登記表3系統(tǒng)啟動與關(guān)閉3.1系統(tǒng)的運行架構(gòu)3.2系統(tǒng)的啟動編 號名 稱檢查系統(tǒng)啟動描 述此任務(wù)查看系統(tǒng)登錄以了解應(yīng)用系統(tǒng)此時此刻的運行狀

13、況操作角色應(yīng)用系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度系統(tǒng)更改操作說明第f第二步：掛接NFS:第三步：啟動其他軟件，表單填寫參見表單模板中的巡檢單表格輸入用戶名root和root的密碼，點擊 OE選擇 Global Cluster Service;選才C Cluster Admin,選擇其中的任意一個節(jié)點，如 dbsvr;選才? rms標(biāo)簽頁，在Tools菜單中選擇啟動；啟動后的狀態(tài)如下圖所示：3.3系統(tǒng)的關(guān)閉編 號名 稱系統(tǒng)關(guān)閉描 述此任務(wù)查看系統(tǒng)關(guān)閉操作角色應(yīng)用系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度系統(tǒng)更改操作說明第一步：第二步：關(guān)閉其他軟件這樣，應(yīng)用就關(guān)閉完成了。表單填寫參見表單模板中的巡檢單

14、表格輸入用戶名root和root的密碼，點擊 OE選擇 Global Cluster Service;選才C Cluster Admin,選擇其中的任意一個節(jié)點，如 dbsvr;選才rm rms標(biāo)簽頁，在Tools菜單中選擇關(guān)閉;根據(jù)需要，選擇 stop all Apps。關(guān)閉完成后，如下圖所示:4系統(tǒng)部署4.1 生成部署包首先，需要更新 SVN上的版本，在版本管理機器F:ProductSpecialSrc1128src下,選定下面的文件，按右鍵，選擇 update：F:ProductSpecialSrc1128WebRoot 下，選定下面的文件，按右鍵，選擇 update :進入 Eclip

15、se：查看項目屬性，確實為F:ProductSpecialSrc1128 的項目:在項目上按右鍵，選擇 Refresh。在Project菜單，選擇 Clean：待Clean完成后，在 File菜單選擇 Export,選擇 War file :導(dǎo)出到一個文件夾:這樣，部署包就生成了。4.2 程序部署登錄至 k http:15:9060/ibm/console/輸入用戶名，可輸入root:選擇應(yīng)用程序企業(yè)應(yīng)用程序，選定 eFinance.war,點擊停止:待停止完成后，選擇 eFinance.war,點擊刪除:點擊確定:點擊保存:點擊安裝:點擊瀏覽，選定部署包:輸入上下文根

16、：eFinance，點擊下一步:點擊下一步:選定所有集群和服務(wù)器，選定ent_bpms ,點擊應(yīng)用;選定ent_bpms ,點擊下一步:點擊完成:點擊保存:部署包已經(jīng)部署完成，如下圖所示:下一步的任務(wù)是啟動應(yīng)用程序。點擊集群：選才C Cluster,點擊停止：待選擇Cluster,點擊啟動：啟動完成后，如下圖所示：啟動完成后，進行驗證：16 /eFinance5重要的系統(tǒng)參數(shù)配置6日志查看6.1 WAS日志編 號名 稱檢查WAS日志描 述此任務(wù)查看WAS日志狀況操作角色應(yīng)用系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明1. Wassvr日志仔放于：/opt

17、/IBM/WebSphere/AppServer/profiles/AppSrv01 /logs/wassvr2. dbsvr日志仔放于/opt/IBM/WebSphere/AppServer/profiles/AppSrv01 /logs/dbsvr表單填寫參見表單模板中的巡檢單表格6.2 DB2日志編 號名 稱檢查DB2日志描 述此任務(wù)查看DB2日志狀況操作角色應(yīng)用系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明1. Db2日志存放與dbsvr服務(wù)器的:/ef/appinst/sqllib/db2dump表單填寫參見表單模板中的巡檢單表格7查系統(tǒng)是否正確運行編 號名 稱檢查系統(tǒng)登錄描 述此

18、任務(wù)查看系統(tǒng)登錄 以了解應(yīng)用系統(tǒng)此時此刻的運行狀況操作角色應(yīng)用系統(tǒng) 管理員所屬管控類別巡檢執(zhí)行頻度每日操作說明1 .如果頁面能正常顯示，說明115服務(wù)器或117服務(wù)器運行正常 如圖所示：檢查登錄頁面公司參照列表是否能正常顯示所有公司2 .檢查是否能正常登陸表單填寫參見表單模板中的巡檢單表格115服務(wù)器運行頁面:117服務(wù)器運行頁面:系統(tǒng)管理員維護人員信息日志當(dāng)管理員登錄后可以看到如下圖所示的頁面：您可以先點擊：系統(tǒng)管理員專區(qū)（用紅色的框標(biāo)出）進入相應(yīng)的頁面后，可以看 到一個日志管理（用紅色的框標(biāo)出）的菜單，點擊日志管理就可以查詢相應(yīng)的歷史人員 維護信息。9查看表空間及附件硬盤的使用情況9.1 Db2表空間查看編 號名 稱檢查DB2表空間情況描 述此任務(wù)查看DB2表空間情況操作角色應(yīng)用系統(tǒng) 管理員所屬管控類別巡檢