系統(tǒng)運維操作手冊

1、xxxx 系統(tǒng)系統(tǒng) 運維操作手冊運維操作手冊 xxxx 公司 二零零九年十月 版本控制版本控制 版本號版本號日期日期參與人員參與人員更新說明更新說明 1.02011-06-06創(chuàng)建 分發(fā)控制分發(fā)控制 編號編號讀者讀者文檔權(quán)限文檔權(quán)限與文檔的主要關(guān)系與文檔的主要關(guān)系 1創(chuàng)建、修改、讀取負責編制、修改、審核 2批準負責本文檔的批準程序 3標準化審核作為本項目的標準化負責人，負 責對本文檔進行標準化審核 4讀取 5讀取 1概述概述.5 2 2主機系統(tǒng)主機系統(tǒng).6 2.1檢查文件系統(tǒng)利用率.6 2.2查看系統(tǒng)硬件軟件告警日志.6 2.3檢查僵死或運行時間過長的進程.7 2.4檢查系統(tǒng) CPU 利用率.

2、8 2.5檢查系統(tǒng)內(nèi)存利用率.8 2.6檢查系統(tǒng) IO 利用率.9 2.7檢查系統(tǒng)交換量.10 2.8檢查系統(tǒng)高可用性（HA）的使用狀態(tài).10 2.9清理過時的系統(tǒng)臨時文件.11 2.10檢查磁帶庫和磁帶使用情況.11 2.11修改用戶口令.12 2.12清洗磁帶機.12 2.13檢索操作系統(tǒng)日志.13 3系統(tǒng)啟動與關(guān)閉系統(tǒng)啟動與關(guān)閉.14 3.1系統(tǒng)的運行架構(gòu).14 3.2系統(tǒng)的啟動.15 3.3系統(tǒng)的關(guān)閉.18 4系統(tǒng)部署系統(tǒng)部署.24 4.1生成部署包.24 4.2程序部署.28 5重要的系統(tǒng)參數(shù)配置重要的系統(tǒng)參數(shù)配置.41 5.1CONFIG.PROPERTIES.41 5.2SPRI

3、NG-MISTASK.XML.41 6日志查看日志查看.43 6.1WAS 日志.43 6.2DB2 日志.43 7查系統(tǒng)是否正確運行查系統(tǒng)是否正確運行.45 8系統(tǒng)管理員維護人員信息日志系統(tǒng)管理員維護人員信息日志.47 9查看表空間及附件硬盤的使用情況查看表空間及附件硬盤的使用情況.48 9.1DB2 表空間查看 .48 9.2115 服務(wù)器附件文件占用情況.48 10服務(wù)停啟順序服務(wù)停啟順序.50 1 概述概述 本手冊給出了湖南省移動公司的報賬平臺系統(tǒng)及報賬平臺外圍 系統(tǒng)的運維操作細則。手冊從主機系統(tǒng)、應(yīng)用系統(tǒng)以及數(shù)據(jù)庫系統(tǒng) 三個方面對任務(wù)項進行組織，對應(yīng)章節(jié)包括第 Error! Refe

4、rence source not found.章報賬平臺主機系統(tǒng)，第 Error! Reference source not found.章報賬平臺應(yīng)用軟件系統(tǒng)以及第 Error! Reference source not found.章報賬平臺數(shù)據(jù)庫系統(tǒng)。每個任務(wù)項中可能涉及的表格將 在第 5 章表單模板中統(tǒng)一給出。 2 2 主機系統(tǒng)主機系統(tǒng) 2.1 檢查文件系統(tǒng)利用率檢查文件系統(tǒng)利用率 編 號名 稱檢查文件系統(tǒng)利用率 描 述此任務(wù)檢查文件系統(tǒng)利用率不低于 85%或有大于 0.5G 以上的空閑空間 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1. 系統(tǒng)的正常運行應(yīng)保證

5、有足夠的磁盤空間，文件系統(tǒng)被寫滿會導致 系統(tǒng)服務(wù)的中斷，可以使用 df k 進行檢查是否有文件系統(tǒng)利用率 高于 85%并且可用空間小于 500M，對于保存數(shù)據(jù)庫數(shù)據(jù)文件所在的 磁盤空間和保存歸檔日志的應(yīng)有更高的空閑空間。 2. 但也不可以盲目的擴展文件系統(tǒng)，因為目前 31 省所使用的文件系統(tǒng) 均不可以縮小，如果要回收空間只能刪除重建 表單填寫參見表單模板中的巡檢單表格 2.2 查看系統(tǒng)硬件軟件告警日志查看系統(tǒng)硬件軟件告警日志 編 號名 稱查看系統(tǒng)硬件軟件告警日志 描 述此任務(wù)查看系統(tǒng)硬件軟件告警日志 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 以 root 運行 tai

6、l /var/adm/messages 查看，如果系統(tǒng)寫滿了一個 message 文件會自動備份為 message.0， message.1 等。 表單填寫參見表單模板中的巡檢單表格 2.3 檢查僵死或運行時間過長的進程檢查僵死或運行時間過長的進程 編 號名 稱檢查僵死或運行時間過長的進程 描 述此任務(wù)查看檢查僵死或運行時間過長的進程 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1. 使用 ps ef|grep applprd 和 ps ef |grep oraprd 進行檢查 （運行時間超過 12 小時的絕大部分是需要注意的進程） 。 2. 而程序名為 defunct

7、 的均為孤兒或僵死進程。 3. 由于，夜晚為非工作時間，因此運行超過 12 個小時的應(yīng)用服務(wù)例如， form 服務(wù)的客戶端進程（AIX 平臺為 f60runm，SUN 平臺為 f60webmx） ，很可能是運行出錯的進程，應(yīng)可以 kill 掉，對于數(shù)據(jù) 庫進程一般不采用在 UNIX 命令中 kill 的方法而是登陸到數(shù)據(jù)庫使用 alter system kill session ,的方法中止 該數(shù)據(jù)庫進程。 表單填寫參見表單模板中的巡檢單表格 2.4 檢查系統(tǒng)檢查系統(tǒng) CPU 利用率利用率 編 號名 稱檢查系統(tǒng) CPU 利用率 描 述此任務(wù)檢查系統(tǒng) CPU 利用率 操作角色 主機系統(tǒng) 管理員

8、所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1.prstat a solaris 2. psrinfo -v (CPU 狀態(tài)) 表單填寫參見表單模板中的巡檢單表格 2.5 檢查系統(tǒng)內(nèi)存利用率檢查系統(tǒng)內(nèi)存利用率 編 號名 稱檢查系統(tǒng)內(nèi)存利用率 描 述此任務(wù)檢查內(nèi)存利用率 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1.solaris vmstat 查看 free 值 2.prtdiag -v 表單填寫參見表單模板中的巡檢單表格 2.6 檢查系統(tǒng)檢查系統(tǒng) IO 利用率利用率 編 號名 稱檢查系統(tǒng) IO 利用率 描 述此任務(wù)檢查 IO 利用率 操作角色 主機系統(tǒng) 管理員 所屬管控

9、類別巡檢執(zhí)行頻度每日 操作說明 1.solaris iostat 表單填寫參見表單模板中的巡檢單表格 2.7 檢查系統(tǒng)交換量檢查系統(tǒng)交換量 編 號名 稱檢查系統(tǒng)交換量 描 述此任務(wù)檢查系統(tǒng)交換量 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1. 手動運行的方法如下： topas 2.swap l & swap s solaris 表單填寫參見表單模板中的巡檢單表格 2.8 檢查系統(tǒng)高可用性（檢查系統(tǒng)高可用性（HA）的使用狀態(tài)）的使用狀態(tài) 編 號名 稱檢查系統(tǒng)高可用性（HA）的使用狀態(tài) 描 述此任務(wù)檢查系統(tǒng)高可用性（HA）的使用狀態(tài) 操作角色 主機系統(tǒng) 管理員 所屬管控類

10、別巡檢執(zhí)行頻度每日 操作說明 1.webview 狀 態(tài) # /etc/opt/FJSVwvbs/etc/bin/wvstat 2.CF 和心跳狀 態(tài) # cftool - 和 cftool -r 3.SF 狀態(tài) # sdtool -s 4.CIP 狀態(tài)# ciptool -a 和 # ciptool -n 5.CRM 狀態(tài) # /etc/opt/FJSVcluster/bin/clgettree 6.RMS 狀態(tài) # hvdisp -a 1. 表單填寫參見表單模板中的巡檢單表格 2.9 清理過時的系統(tǒng)臨時文件清理過時的系統(tǒng)臨時文件 編 號名 稱清理過時的系統(tǒng)臨時文件 描 述此任務(wù)清理過時的系

11、統(tǒng)臨時文件 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每周 操作說明 1. f60*dump*。 2. $ORACLE_HOME/reports60/server/cache/*（最好關(guān)閉服務(wù) 清理） 。 3. $APPLTMP/*（只有關(guān)閉服務(wù)后可以進行） 。 表單填寫參見表單模板中的巡檢單表格 2.10 檢查磁帶庫和磁帶使用情況檢查磁帶庫和磁帶使用情況 編 號名 稱檢查磁帶庫和磁帶使用情況 描 述此任務(wù)檢查磁帶庫和磁帶使用情況 操作角色 主機系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每周 操作說明 1. 檢查是否有足夠的空間保存?zhèn)浞荨?2. 磁帶庫運行中是否有錯誤出現(xiàn)。 表單填寫參見

12、表單模板中的巡檢單表格 2.11 修改用戶口令修改用戶口令 編 號名 稱修改 UNIX 用戶口令 描 述此項目修改用戶口令 操作角色 主機系統(tǒng) 管理員 所屬管控類別 用戶帳號及 密碼管理 執(zhí)行頻度每月 操作說明 1. 修改 UNIX 密碼步驟如下： letterboxusername1: passwd Enter login password: 您的舊密碼 New password: 您的新密碼 Re-enter new password: 您的新密碼 passwd (SYSTEM): passwd successfully changed for username letterboxuser

13、name2: 2.密碼修改之后，必須及時通知系統(tǒng)管理員。 修改過 UNIX 口令之后，需要通知需要知道口令的人員。 表單填寫參見表單模板中的用戶帳號管理情況登記表 2.12 清洗磁帶機清洗磁帶機 編 號名 稱清洗磁帶機 描 述此任務(wù)將清洗磁帶機清洗干凈 操作角色 主機系統(tǒng) 管理員 所屬管控類別備份管理執(zhí)行頻度每月 操作說明 用清洗帶清洗磁帶機。 表單填寫參見表單模板中的巡檢單表格 2.13 檢索操作系統(tǒng)日志檢索操作系統(tǒng)日志 編 號名 稱檢索 AIX 操作系統(tǒng)日志 描 述此任務(wù)檢索操作系統(tǒng)日志 操作角色 主機系統(tǒng) 管理員 所屬管控類別日志管理執(zhí)行頻度每周 操作說明 1查看用戶登陸日志： 在命令行

14、輸入命令：last 2查看用戶失敗登陸日志： 在命令行輸入命令，進入日志所在目錄：cd /etc/security 查看日志內(nèi)容： vi failedlogin 3查看 su 命令執(zhí)行日志內(nèi)容： 在命令行輸入命令，進入日志所在目錄：cd /var/adm 查看日志內(nèi)容：vi sulog 4查看 Auditor 文件操作日志 首先需要在系統(tǒng)中開啟 audit 功能，會在系統(tǒng)中自動生成 /etc/security/audit/bin*文件。此處的 bin*指所有以 bin 開頭的文件 進入日志所在目錄：cd /etc/security/audit/ 查看日志： vi bin* 表單填寫參見表單模板

15、中日志檢索申請表及日志檢索記錄表 根據(jù)情況可能需要備份介質(zhì)訪問登記表 3 系統(tǒng)啟動與關(guān)閉系統(tǒng)啟動與關(guān)閉 3.1 系統(tǒng)的運行架構(gòu)系統(tǒng)的運行架構(gòu) 3.2 系統(tǒng)的啟動系統(tǒng)的啟動 編 號名 稱檢查系統(tǒng)啟動 描 述此任務(wù)查看系統(tǒng)登錄以了解應(yīng)用系統(tǒng)此時此刻的運行狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度系統(tǒng)更改 操作說明 第一步： 第二步：掛接 NFS： 第三步：啟動其他軟件， 表單填寫參見表單模板中的巡檢單表格 輸入用戶名 root 和 root 的密碼，點擊 OK。 選擇 Global Cluster Service； 選擇 Cluster Admin，選擇其中的任意一個節(jié)點，如 db

16、svr； 選擇 rms 標簽頁，在 Tools 菜單中選擇啟動； 啟動后的狀態(tài)如下圖所示： 3.3 系統(tǒng)的關(guān)閉系統(tǒng)的關(guān)閉 編 號名 稱系統(tǒng)關(guān)閉 描 述此任務(wù)查看系統(tǒng)關(guān)閉 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度系統(tǒng)更改 操作說明 表單填寫參見表單模板中的巡檢單表格 輸入用戶名 root 和 root 的密碼，點擊 OK。 選擇 Global Cluster Service； 第一步： 第二步：關(guān)閉其他軟件 這樣，應(yīng)用就關(guān)閉完成了。 選擇 Cluster Admin，選擇其中的任意一個節(jié)點，如 dbsvr； 選擇 rms 標簽頁，在 Tools 菜單中選擇關(guān)閉； 根據(jù)需要，選擇 st

17、op all Apps。 關(guān)閉完成后，如下圖所示： 4 系統(tǒng)部署系統(tǒng)部署 4.1 生成部署包生成部署包 首先，需要更新 SVN 上的版本，在版本管理機器 F:ProductSpecialSrc1128src 下， 選定下面的文件，按右鍵，選擇 update： F:ProductSpecialSrc1128WebRoot 下，選定下面的文件，按右鍵，選擇 update： 進入 Eclipse： 查看項目屬性，確實為 F:ProductSpecialSrc1128 的項目： 在項目上按右鍵，選擇 Refresh。 在 Project 菜單，選擇 Clean： 待 Clean 完成后，在 File

18、菜單選擇 Export， 選擇 War file： 導出到一個文件夾： 這樣，部署包就生成了。 4.2 程序部署程序部署 登錄到：15:9060/ibm/console/ 輸入用戶名，可輸入 root： 選擇應(yīng)用程序企業(yè)應(yīng)用程序，選定 eFinance.war，點擊停止： 待停止完成后，選擇 eFinance.war，點擊刪除： 點擊確定： 點擊保存： 點擊安裝： 點擊瀏覽，選定部署包： 輸入上下文根： eFinance ，點擊下一步： 點擊下一步： 選定所有集群和服務(wù)器，選定 ent_bpms，點擊應(yīng)用； 選定 ent_bpms，點擊下一步： 點擊完成：

19、點擊保存： 部署包已經(jīng)部署完成，如下圖所示： 下一步的任務(wù)是啟動應(yīng)用程序。 點擊集群： 選擇 Cluster，點擊停止： 待選擇 Cluster，點擊啟動： 啟動完成后，如下圖所示： 啟動完成后，進行驗證：16/eFinance 5 重要的系統(tǒng)參數(shù)配置重要的系統(tǒng)參數(shù)配置 6 日志查看日志查看 6.1 WAS 日志日志 編 號名 稱檢查 WAS 日志 描 述此任務(wù)查看WAS 日志狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1Wassvr 日志存放于： /opt/IBM/WebSphere/AppServer/profiles/Ap

20、pSrv01/logs/wassvr 2dbsvr 日志存放于 /opt/IBM/WebSphere/AppServer/profiles/AppSrv01/logs/dbsvr 表單填寫參見表單模板中的巡檢單表格 6.2 DB2 日志日志 編 號名 稱檢查 DB2 日志 描 述此任務(wù)查看DB2 日志狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1Db2 日志存放與 dbsvr 服務(wù)器的： /ef/appinst/sqllib/db2dump 表單填寫參見表單模板中的巡檢單表格 7 查系統(tǒng)是否正確運行查系統(tǒng)是否正確運行 編 號名 稱檢查系統(tǒng)登錄 描 述此任務(wù)查看系統(tǒng)登錄以了解應(yīng)用系統(tǒng)此時此刻的運行狀況 操作角色 應(yīng)用系統(tǒng) 管理員 所屬管控類別巡檢執(zhí)行頻度每日 操作說明 1. 如果頁面能正常顯示，說明 115 服務(wù)器或 11