mindray異地crm系統(tǒng)災備切換手冊-0922

1、邁瑞生物醫(yī)療電子CRM 系統(tǒng)異地災備切換手冊（版本：V1.1）EMC Consulting文檔信息文檔維護說明本文件中出現(xiàn)的任何文字敘述、文檔格式、插圖、方法、過程等內(nèi)容，除另有特別注明，均屬邁瑞生物醫(yī)療電子和 EMC，受到有關(guān)產(chǎn)權(quán)及法保護。任何個人、機構(gòu)邁瑞生物醫(yī)療電子和 EMC 公司的，不得、或本文件的任何片斷，無論通過電子形式或非電子形式。版本號維護日期作者/維護人描述2014 年 3 月 27 日EMC創(chuàng)建項目名稱：邁瑞生物醫(yī)療電子有限公司文檔版本號：文檔作者：生成日期：文檔審核者：審核日期：目 錄概述4CRM 切換操作5CRM 系統(tǒng)切換操作流程5CRM 系統(tǒng)切換工作項6CRM 系統(tǒng)切

2、換操作命令7第一章第二章2.12.22.32.3.12.3.22.3.32.3.42.3.52.3.62.3.72.3.82.3.9災備中心 CRM 系統(tǒng)健康檢查16停止生產(chǎn) CRM 系統(tǒng)19RecoverPoint 切換19災備調(diào)整錯誤!未定義書簽。啟動災備 CRM 系統(tǒng)23停止災備 CRM 系統(tǒng)34網(wǎng)絡(luò)切換37應(yīng)用數(shù)據(jù)驗證40F5 配置調(diào)整42CRM 系統(tǒng)回切操作45CRM 系統(tǒng)回切操作流程45CRM 系統(tǒng)回切工作項46CRM 系統(tǒng)回切操作命令47第三章3.13.23.33.3.13.3.23.3.3RecoverPoint 回切47啟動生產(chǎn) CRM 系統(tǒng)50網(wǎng)絡(luò)回切52第一章概述本文檔是

3、指導異地災備在 CRM 系統(tǒng)故障不可用需要切換至災備中心，進行異地切換和回切的技術(shù)操作手冊；目的是確保 Mindray 建成的異地災備中心 CRM 系統(tǒng)能夠正常有序地進行恢復工作，提高災備系統(tǒng)的恢復效率。本預案需要 Mindray 通過定期的測試/演練進行檢驗并完善，以便使得 IT 恢復熟悉災備系統(tǒng)的具體的恢復流程和步驟。第二章CRM 切換操作2.1CRM 系統(tǒng)切換操作流程當生產(chǎn)中心 CRM 發(fā)生中斷短時間內(nèi)無法提供正常業(yè)務(wù)時，需要將異地災備中心運行。具體切換操作流程如下：CRM 系統(tǒng)切換至開始切換災備調(diào)整切換完成災備災備系統(tǒng)災備網(wǎng)絡(luò)健康檢查健康檢查健康檢查業(yè)務(wù)驗證故障修復OK？否是是停止CR

4、M生產(chǎn)系統(tǒng)數(shù)據(jù)庫災備系統(tǒng)正常啟動？生產(chǎn)CRM系統(tǒng)varyoff vg否切換失敗災備CRM系統(tǒng)import vg; varyon vg; mountFilesystem數(shù)據(jù)是否一致？是否停止災備CRM系統(tǒng)數(shù)據(jù)庫并varyoff vg啟動災備CRM系統(tǒng)數(shù)據(jù)庫Recoverpoint執(zhí)行Finish Failover操作Recoverpoint 中重新選擇其它時間點鏡像數(shù)據(jù)不一致的災備系統(tǒng)varyoff vg停止數(shù)據(jù)不一致的災備系統(tǒng)數(shù)據(jù)庫varyon vg并啟動災備CRM系統(tǒng)數(shù)據(jù)庫啟動災備CRM應(yīng)用系統(tǒng)并調(diào)整網(wǎng)絡(luò)配置Recoverpoint Failover功能中選擇最近時間點鏡像，進行切換災備CR

5、M系統(tǒng)可用性檢查F5配置調(diào)整停止CRM生產(chǎn)系統(tǒng)應(yīng)用放開災備CRM系統(tǒng)網(wǎng)絡(luò)及確認2.2CRM 系統(tǒng)切換工作項與之對應(yīng)的詳細操作步驟如下表所示：序號操作任務(wù)對應(yīng)操作詳細步驟調(diào)用1調(diào)整 CRM 系統(tǒng)災備詳見 2.3.1 災備調(diào)整 步驟系統(tǒng)管理員2切換前準備2.1災備中心 CRM 系統(tǒng)健康性檢查詳見 2.3.2 步驟 1系統(tǒng)管理員2.2災備中心網(wǎng)絡(luò)情況檢查詳見 2.3.2 步驟 2網(wǎng)絡(luò)管理員2.3RPA 及災備健康檢查詳見 2.3.2 步驟 3管理員3停止生產(chǎn) CRM 系統(tǒng)（計劃性切換操作，如若系統(tǒng)已壞不需此操作）詳見 2.3.2 停止生產(chǎn) CRM 系統(tǒng)3.1停止應(yīng)用詳見 2.3.3應(yīng)用管理員3.2停

6、止數(shù)據(jù)庫詳見 2.3.3數(shù)據(jù)庫管理員3.3umount Filesystem; varyoff vg詳見 2.3.3系統(tǒng)管理員4Recoverpoint Failover 功能中選擇最近時間點鏡像，進行切換詳見 2.3.4Recoverpoint 切換步驟管理員5啟動災備 CRM 系統(tǒng)詳見 2.3.5 啟動災備 CRM 系統(tǒng)5.1import vg; varyon vg; mount Filesystem詳見 2.3.5 步驟a系統(tǒng)管理員5.2啟動數(shù)據(jù)庫詳見 2.3.5 步驟b數(shù)據(jù)庫管理員5.3啟動應(yīng)用詳見 2.3.5 步驟c應(yīng)用管理員5.4修改系統(tǒng)網(wǎng)絡(luò)配置詳見 2.3.5 步驟d系統(tǒng)管理員6

7、停止災備 CRM 系統(tǒng)數(shù)據(jù)庫6.1停止數(shù)據(jù)庫詳見 2.3.6 步驟a數(shù)據(jù)庫管理員6.2umount Filesystem; varyoff vg詳見 2.3.6 步驟c系統(tǒng)管理員7RecoverPoint 執(zhí)行 Finish Failover 操作詳見 2.3.4 Recoverpoint 切換步驟 2- g)管理員8啟動災備 CRM 系統(tǒng)數(shù)據(jù)庫8.1import vg; varyon vg; mount Filesystem詳見 2.3.5 步驟a系統(tǒng)管理員8.2啟動數(shù)據(jù)庫詳見 2.3.5 步驟b數(shù)據(jù)庫管理員9災備系統(tǒng)數(shù)據(jù)驗證詳見 2.3.8 應(yīng)用數(shù)據(jù)驗證步驟 1）數(shù)據(jù)庫管理員10災備系統(tǒng)可

8、用性檢查詳見 2.3.8 應(yīng)用數(shù)據(jù)驗證步驟 2）應(yīng)用管理員11F5 配置調(diào)整詳見 2.3.9 F5 配置調(diào)整步驟 1網(wǎng)絡(luò)管理員12放開災備 CRM 系統(tǒng)網(wǎng)絡(luò)及確認詳見 2.3.7 網(wǎng)絡(luò)切換12.1在生產(chǎn)交換機允許列表添加 CRM 網(wǎng)段詳見 2.3.7 網(wǎng)絡(luò)切換步驟 1網(wǎng)絡(luò)管理員12.2在災備交換機允許列表添加 CRM 網(wǎng)段詳見 2.3.7 網(wǎng)絡(luò)切換步驟 2網(wǎng)絡(luò)管理員12.3確認網(wǎng)段配置正確詳見 2.3.7 網(wǎng)絡(luò)切換步驟 3網(wǎng)絡(luò)管理員13用戶驗證上述表格中如能夠成功完成第 5 步驟，即數(shù)據(jù)是一致的，可以正常進行后續(xù) 6-13 步驟操作。如若出現(xiàn)問題，我們需要重新選擇鏡像，而在重新選擇鏡像前需要停

9、止災備CRM 系統(tǒng)同時卸載相應(yīng)磁盤，將按照下述操作步驟進行操作直至數(shù)據(jù)一致才繼續(xù)進行上表中 6-13 步驟。2.3 CRM 系統(tǒng)切換操作命令2.3.0 災備中心系統(tǒng)登錄方式對災備中心所有 AIX/Linux 服務(wù)器的管理，需先登錄災備中心的 1 臺管理服務(wù)器， 然后再 ssh 到相應(yīng)的災備服務(wù)器，避免切換時網(wǎng)絡(luò)中斷的發(fā)生。管理服務(wù)器登錄信息：ssh 10.6.17.62，root/Passw0rd!ERP/CRM 系統(tǒng)管理需要使用 CDE 界面， 需先windows 管理服務(wù)器，然后在本地局域網(wǎng)運行 xmanger 軟件。桌面至災備中心的 1 臺windows 管理服務(wù)器登錄信息：IP 10.

10、6.17.65，administrator/Mindray1232.3.1 災備中心 CRM 系統(tǒng)調(diào)整在廣州災備環(huán)境操作（地點：廣州；操作：系統(tǒng)管理員)a)關(guān)閉災備中心服務(wù)器虛擬環(huán)境除 admin 作用之外的所有 VM，進行及準備進行調(diào)整。admin 作用 VM 包括：Power 環(huán)境 nim、vios 及 VMware 環(huán)境的 vcenter, admin 等。序號操作任務(wù)對應(yīng)操作詳細步驟調(diào)用1停止災備 CRM 系統(tǒng)1.1停止應(yīng)用及數(shù)據(jù)庫詳見 2.3.6 步驟a應(yīng)用管理員1.2umount Filesystem; varyoff vg詳見 2.3.6 步驟b系統(tǒng)管理員2Recoverpoin

11、t Failover 功能中選擇其它時間點鏡像，進行切換在之前選擇的鏡像數(shù)據(jù)不一致的情況下操作, 詳見 2.3.3Recoverpoint 切換步驟管理員3啟動災備 CRM 系統(tǒng)詳見 2.3.4 啟動災備 ERP 系統(tǒng)3.1import vg; varyon vg; mount Filesystem詳見 2.3.5 步驟a系統(tǒng)管理員3.2啟動數(shù)據(jù)庫詳見 2.3.5 步驟b數(shù)據(jù)庫管理員3.3啟動應(yīng)用詳見 2.3.5 步驟c應(yīng)用管理員在重新選擇的鏡像前進行下述操作調(diào)整災備系統(tǒng) CPU、內(nèi)存分配，各 VM分配如下表示：備注：白色代表 VM 需要處于運行狀態(tài)，代表 VM 需要處于關(guān)閉狀態(tài)，代表 VM需

12、要調(diào)整或確認配置，用于容災切換場景的系統(tǒng)運行。b)災備 Power調(diào)整調(diào)整思路：在 VM 處于關(guān)閉狀態(tài)編輯 profile 文件，根據(jù)上面表格配置要求，修改相應(yīng) VM 的 CPU、內(nèi)存數(shù)量，保存 profile，再激活修改后的 profile，啟動 VM。針對 ERP、CRM 整體切換和單系統(tǒng)切換的 2 個場景，分別定義 2 個 profile，分別為DefaultProfile 及 ERP-Single-DR/CRM-Single-DR，在當前場景選擇 CRM-Single-DR。方法如下（步驟介紹以 sapprd調(diào)整為例，其它 VM調(diào)整類似）：l登陸 Flex System Manager

13、(FSM)管理界面方式：， 登陸信息：USERID/PASSW0RD!黃色灰色序號ServerVM Name應(yīng)用大類應(yīng)用名稱IP 地址（管理）CRM 切換后CPU內(nèi)存1P260-1sapprderperp 數(shù)據(jù)庫10.6.17.10002crmprdjacrmcrm java 數(shù)據(jù)庫10.6.17.186483erppetdbpeterp 預生產(chǎn)數(shù)據(jù)庫10.6.17.22004erpsbxsbxerp 沙盤10.6.17.27005nimadmin10.6.17.620.126vios-p260-1admin10.6.17.600.547P260-2sapstbyerperp 應(yīng)用10.6.1

14、7.11008crmprdaacrmcrm ABAP 數(shù)據(jù)庫10.6.17.156489gtsprdgtsgts10.6.17.210010crmpetaapetcrm 預生產(chǎn)數(shù)據(jù)庫10.6.17.240011crmpetjapetcrm 預生產(chǎn)數(shù)據(jù)庫10.6.17.250012vios-p260-2admin10.6.17.610.5413X240-1sapapp1saperp 應(yīng)用10.6.17.110014crmapp1crmcrm 應(yīng)用10.6.17.1662615petapppeterp 預生產(chǎn)應(yīng)用10.6.17.230016vCenteradmin10.6.17.641817X24

15、0-2sapapp2erperp 應(yīng)用10.6.17.120018crmapp2crmcrm 應(yīng)用10.6.17.1762619crmpetapppetcrm 預生產(chǎn)應(yīng)用10.6.17.260020X240-3crmprdtrexcrmcrm 搜索引擎10.6.17.1931221crmprdwedcrmcrmweb10.6.17.20312l確認 sapprd 分區(qū)當前 CPU/內(nèi)存配置l修改 sapprd 分區(qū) profile 文件，CPU/內(nèi)存配置為 4CPU/30GB選擇 Profile修改 CPU 數(shù)量，virtual processors 數(shù)量為整數(shù)，大于等于 processing

16、 unit修改內(nèi)存數(shù)量l保存分區(qū) profile選擇 OK 保存 profile 修改l激活 profile激活修改后的 profile，啟動系統(tǒng)選擇 OK 確認激活 profilel操作系統(tǒng)運行命令確認運行命令：prtconf|grep Processorsprtconf|grep Memoryc)災備 X86調(diào)整調(diào)整思路：在 VM 處于關(guān)閉狀態(tài)編輯虛擬機設(shè)置，根據(jù)上面表格配置要求，修改相應(yīng) VM 的 CPU、內(nèi)存數(shù)量，保存配置，啟動 VM。方法如下（以下示例步驟調(diào)整 CPU 內(nèi)存為 5C/28G，其它 VM登陸 vCenter啟動 vSphere Client 登錄 vCenter，vCe

17、nter 登陸信息，IP 地址：10.6.17.63，用戶名密碼：root/vmware。調(diào)整類似）：ll關(guān)閉需要調(diào)整的虛擬機l選擇編輯虛擬機設(shè)置l修改內(nèi)存數(shù)量l修改 CPU 數(shù)量虛擬插槽數(shù)為物理 CPU 個數(shù)，每個插槽的內(nèi)核數(shù)為 2l啟動虛擬機l確認 CPU/內(nèi)存分配數(shù)量系統(tǒng)調(diào)整完成。2.3.2 災備中心 CRM 系統(tǒng)健康檢查1. 災備中心 CRM 系統(tǒng)健康檢查 (地點：廣州；操作服務(wù)器登錄信息：ssh 登錄，IP 地址信息如下表：系統(tǒng)管理員)用戶名：AIX 環(huán)境，root/Passw0rd!，Linux 環(huán)境，root/1qazWSX2.(地點：廣州；操作：網(wǎng)絡(luò)管理員)災備中心網(wǎng)絡(luò)設(shè)備的健

18、康檢查交換機登陸信息：10.6.17.254，username/password能夠成功從或者分支機構(gòu) ping 或者 telnet 到廣州交換機 10.6.17.2543.災備中心 RPA 及1)RPA 健康檢查設(shè)備的健康檢查(地點：廣州；操作管理員)：errpt -dH|more# 檢查系統(tǒng)無報錯ifconfig -a#確認 en1 網(wǎng)卡 是否配置生產(chǎn)段 IP 地址netstat -rn#確認系統(tǒng)默認網(wǎng)關(guān)是為 10.6.17.254 lsvg#確認系統(tǒng) VG 信息lsvg -o#確認激活 VG 只有 rootvg分類VM 名稱主機名管理 IP 地址CRMp260-02-vm02-crmpr

19、daacrmprdaa 物理主機名10.6.17.15x240-01-vm02- hqcrmmob01lhqcrmmob01l10.6.17.16x240-02-vm02- hqcrmmob02lhqcrmmob02l10.6.17.17p260-01-vm02-crmprdjacrmprdja 物理主機名10.6.17.18x240-03-vm02-crmprdtrexcrmprdtrex10.6.17.19x240-03-vm03-crmprdwedcrmprdwed10.6.17.20RPA 登錄信息：登錄 RPA 管理界面，選擇() ,admin/admin（廣州）Protection

20、-Manage Protection，確認 ERP_CG、CRM_CG、GTS_CG 的 Transfer 狀態(tài)為 active， Alters 狀態(tài)為 No alerts，狀態(tài)如下圖所示：2)CX3-40(地點：廣州；操作：管理員)健康檢查CX3-40 登錄信息：, admin/Passw0rd!123登錄 EMC Unisphere 管理界面，確認 CX3-40 的 Status 為 OK，狀態(tài)如下圖所示：2.3.3 停止生產(chǎn) CRM 系統(tǒng)crmprdaa 服務(wù)器登錄信息：IP 地址，用戶名crmprdja 服務(wù)器登錄信息：IP 地址，用戶名， (需客戶補充)， (待客戶補充)a)停止應(yīng)用

21、 (地點：；操作：應(yīng)用管理員)請補充詳細操作命令-(需客戶補充)b)停止數(shù)據(jù)庫 (地點：；操作：數(shù)據(jù)庫管理員)請補充詳細操作命令-(需客戶補充)c)卸載 vg (地點：；操作：系統(tǒng)管理員)crmprdaa 服務(wù)器登crmprdja 服務(wù)器2.3.4 RecoverPoint 切換RPA 登錄信息：（廣州） admin/admin（），(地點：；操作：管理員)具體步驟如下：1.暫停進行 Fail Over 操作 CG 的本地 CDP。在管理界面功能菜單中選擇 Protection->Manage Protection，在左邊面板中選擇需要啟用的 CG，確認 CG 已在同步狀態(tài)（Active

22、），如下圖示，選擇本地的 CDPCopy，點擊 Pause Transfer 按鈕，暫停本地 CDP。umount /db2 umount /usr/sap varyoffvg db2sapvgumount /db2 umount /usr/sap umount /sapaudit varyoffvg db2sapvg varyoffvg provg2.對 CG 進行 Fail Over 操作。a)首先確認 CG 已經(jīng)在同步狀態(tài)（Active），且 PROD 環(huán)境數(shù)據(jù)庫、應(yīng)用已經(jīng)停止且 VG 處于 varyoff 狀態(tài)。開始 Failover 操作，選擇需要啟用災備端來接管生產(chǎn)系統(tǒng)的 CG，然

23、后點擊下面的 Fail Over 按鈕：b)c)在點擊 Failover 后進入 Failover Wizard 操作界面，在”Select a Copy”窗口中， 確定需要啟動災備端接管生產(chǎn)系統(tǒng)的 CG 然后選擇需要啟用的災備端數(shù)據(jù)點，接著點擊“Next Select an Image”d)在“Select an Image”窗口中選取最近的時間點，選擇 Image access mode 為Logged access（physical），接著點擊“Next Strat Failover”如下圖：e)在上步點擊 Next Strat Failover 后進入“ Start Failover”

24、窗口中，可以看到啟動災備卷的時間點、啟動進度等信息，如下圖：【注：在上步點擊 Start Failover 后在點擊 Finish 按鈕之前需要啟動災備系統(tǒng)進行數(shù) 據(jù)驗證，待數(shù)據(jù)驗證完畢后點擊 Finish 按鈕即真正完成切換。在點擊 Finish 操作前需要， 需要關(guān)閉災備數(shù)據(jù)庫服務(wù)器，并使數(shù)據(jù)庫服務(wù)器處于未掛載狀態(tài)。其中 Windows 需要去掉磁盤盤符、Linux/Unix 需要 varyoffvg、Linux 需要 umount 文件系統(tǒng)?！縡)當災備系統(tǒng)數(shù)據(jù)驗證無誤后，點擊 Finish 按鈕，在彈出框中點擊“Yes”按鈕后災備系統(tǒng)將自動將災備端的 Image 做為最后的數(shù)據(jù)，并刪除

25、所有日志，切換災備端為生產(chǎn)端。如下圖：在管理界面功能菜單中選擇 Recovery->Manage Recovery，進入管理界面查看狀態(tài)，如下圖示：此時也可在管理界面功能菜單中選擇 Protection->Manage protection，進入管理界面查看圖形界面的狀態(tài)，如下圖示，廣州端的 Role 已由“Remote copy”變成“Remote Source”即由目標端變成源，端已由“Production”變成“Target at production”即此時深圳變成的目標端。Fail Over 操作至此完成。2.3.5 啟動災備 CRM 系統(tǒng)在廣州 CRM 系統(tǒng)災備環(huán)境操作

26、a)激活 VG 及文件系統(tǒng) (地點：廣州；操作：系統(tǒng)管理員)lcrmprdaa 服務(wù)器 VG 激活及文件系統(tǒng)掛載crmprdaa 服務(wù)器登錄信息：ssh 10.6.17.15，root/ Passw0rd!重新識別磁盤激活 VG備注：vg db2sapvg 和 provg 如系統(tǒng)重啟會自動激活，不需要手工激活mount 文件系統(tǒng)mount /sapaudit mount /db2 mount /usr/sap mount /db2/CRPmount /db2/CRP/db2dump mount /db2/CRP/db2crp mount /db2/CRP/log_archive mount /

27、db2/CRP/log_dir mount /db2/CRP/sapdata1 mount /db2/CRP/sapdata2 mount /db2/CRP/sapdata3 mount /db2/CRP/sapdata4 mount /db2/CRP/saptemp1 mount /db2/db2crpmount /export/sapmnt/CRPvaryonvg crpdbvg varyonvg crpscsvg varyonvg db2sapvg varyonvg provgcfgmgr vmount NFS 文件系統(tǒng)：lcrmprdja 服務(wù)器 VG 激活及文件系統(tǒng)掛載crmprdj

28、a 服務(wù)器登錄信息：ssh 10.6.17.18，root/ Passw0rd!重新識別磁盤激活 VG備注： VG db2sapvg 如系統(tǒng)重啟會自動激活，不需要手工激活mount 文件系統(tǒng)mount /db2 mount /usr/sap mount /db2/CPJmount /db2/CPJ/db2dump mount /db2/CPJ/db2cpj mount /db2/CPJ/log_archive mount /db2/CPJ/log_dir mount /db2/CPJ/sapdata1 mount /db2/CPJ/sapdata2 mount /db2/CPJ/sapdata

29、3 mount /db2/CPJ/sapdata4 mount /db2/CPJ/saptemp1 mount /db2/db2cpjmount /export/sapmnt/CPJvaryonvg cpjdbvg varyonvg cpjscsvg varyonvg db2sapvgcfgmgr vexportfs -amount crmprdascs:/export/sapmnt/CRP8 /sapmnt/CRP mount crmprdascs:/export/usr/sap/trans /usr/sap/transmount /export/usr/sap/transmount NFS

30、 文件系統(tǒng)hqcrmmob01l,hqcrmmob02l 服務(wù)器 mount NFS 文件系統(tǒng)hqcrmmob01l 服務(wù)器登錄信息：ssh 10.6.17.16，root/ 1qazWSX hqcrmmob02l 服務(wù)器登錄信息：ssh 10.6.17.17，root/ 1qazWSXb)啟動數(shù)據(jù)庫 (地點：廣州；操作：數(shù)據(jù)庫管理員)登錄 crmprdaa 操作系統(tǒng)，使用如下命令啟動 CRM AS ABAP 系統(tǒng)消息服務(wù)和例：實注：CRM 系統(tǒng)由于啟用單點登錄驗證，在容災系統(tǒng)啟動之后，需要重新導入 prd.pse文件；具體步驟如下：1. 禁用 SNC 服務(wù)，修改 DEFUALT.PFL 文件

31、，注釋掉參數(shù)： snc/enable=12. 啟動 CI 和所有 DI 實例3. 重新導入 PRD.pse4. 關(guān)閉 SAP 系統(tǒng)文件；tcode： STRUST5.啟用 SNC 服務(wù)，修改 DEFUALT.PFL 文件，重新啟用參數(shù)： snc/enable=1# su db2crp db2update dbm cfg using INSTANCE_MEMORY AUTOMATIC#修改內(nèi)存管理參數(shù)db2crp> db2startmount crmprdascs:/export/sapmnt/CRP/profile /sapmnt/CRP/profile -o nfsvers=3 mou

32、nt crmprdascs:/export/sapmnt/CRP/global /sapmnt/CRP/global -o nfsvers=3 mount crmprdascs:/export/usr/sap/trans /usr/sap/trans -o nfsvers=3exportfs -amount crmprdscs:/export/sapmnt/CPJ /sapmnt/CPJ mount crmprdscs:/export/usr/sap/trans /usr/sap/transmount /export/usr/sap/trans6.正常啟動 SAP 系統(tǒng)c)1.啟動應(yīng)用 (地點

33、：廣州；操作：應(yīng)用管理員)分別登錄 hqcrmmob01l 和 hqcrmmob02l 操作系統(tǒng)，使用如下命令啟動 CRM ASABAP 系統(tǒng)應(yīng)用實例：2.去掉 CRM AS JAVA 實例參數(shù)配置中 wily 相關(guān)的參數(shù)：#su cpjadm/usr/sap/CPJ/JC02/j2ee/configtool:cpjadm>configtool# su crpadm crpadm> startsap去掉選中的參數(shù)保存。3.登錄 crmprdja 操作系統(tǒng)，使用如下命令啟動 CRM AS JAVA 系統(tǒng)消息服務(wù)和實例：4.5.安裝 CRM AS JAVA license（/usr/s

34、ap/CPJ/JC02/j2ee/admin/go）調(diào)整 CRM 系統(tǒng) IPC 配置中的 jco 目標主機，瀏覽器打開地址：,點 擊“ExtendedConfigurationManagements(XCM)Administration” ：# su db2cpj db2update dbm cfg using INSTANCE_MEMORY AUTOMATIC#修改內(nèi)存管理參數(shù)db2cpj> db2start啟動 crm as Java 的時候可能會提示啟動失敗，報 sapstart not found，這時執(zhí)行一下命令 sapcpe pf= /sapmnt/CPJ/profile/C

35、PJ_SCS00_crmprdscs在彈出的界面中，點擊”Application Configurations”“Customers”“Zcrmicwebclient”點擊“JCO”的按鈕維護 JCO 的正確信息如下：點擊“Test Run”，測試連接配置的是否無誤。確保測試結(jié)果 OK重新配置 JCO 之后需要重啟 IPC，步驟如下：登錄 IPC 的 java 地址，點擊“SAP Netweaver Administrator”點擊“Administration”“Applications”在”show”里選擇”Select Applications” ；在“Get”里選擇”Applicati

36、on Name”；后面輸入”ipc”，點擊“Go”進行搜索分別選擇兩個 IPC 的 service，先停掉，在開啟。6.啟動 CRM web dispatcher:CRM web dispatcher 服務(wù)器登錄信息：ssh 10.6.17.20，root/ 1qazWSXd)修改系統(tǒng)網(wǎng)絡(luò)配置 (地點：廣州；操作：系統(tǒng)管理員)修改 10.6.17.15 系統(tǒng)默認網(wǎng)關(guān)：從 10.6.17.254 修改為 10.1.6.254修改 10.6.17.18 系統(tǒng)默認網(wǎng)關(guān)：從 10.6.17.254 修改為 10.1.6.254hqcrmmob01l 10.6.17.16 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6

37、.17.254 修改為 10.1.4.254hqcrmmob02l 10.6.17.17 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.17.254 修改為 10.1.4.254crmprdtrex 10.6.17.19 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.17.254 修改為 10.1.5.254crmprdwed 10.6.17.20 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.17.254 修改為 10.6.28.254 AIX 環(huán)境：運行 smitty mktcpip 命令，選擇 en0# su wejadm wejadm> startsap # su wdpadm wdpadm> startsap #

38、 su wp2adm wdjadm> startsap運行命令，確認默認網(wǎng)關(guān)：netstat -rnLinux 環(huán)境：編輯/etc/sysconfig/network-scripts/ifcfg-eth0 文件，修改 GATEWAY 部分編輯/etc/sysconfig/network-scripts/ifcfg-eth1 文件，注釋 GATEWAY 部分運行命令重啟網(wǎng)絡(luò)服務(wù)：service network restart運行命令確認默認網(wǎng)關(guān)：netstat -rn2.3.6停止災備 CRM 系統(tǒng)a)1.停止 CRM 系統(tǒng) (地點：廣州；操作：應(yīng)用管理員)依次在 hqcrmmob01l、

39、hqcrmmob02l、crmprdaa 三臺主機上執(zhí)行下列命令停止CRM AS ABAP 系統(tǒng)：2.登錄 crmprdja 三臺主機上執(zhí)行下列命令停止 CRM AS JAVA 系統(tǒng)：b)LUN，卸載磁盤 (地點：廣州；操作：系統(tǒng)管理員)關(guān)閉lhqcrmmob01l 和 hqcrmmob02l 服務(wù)器 umount 文件系統(tǒng)hqcrmmob01l 服務(wù)器登錄信息：ssh 10.6.17.16，root/ 1qazWSXhqcrmmob02l 服務(wù)器登錄信息：ssh 10.6.17.17，root/ 1qazWSXlcrmprdaa 服務(wù)器關(guān)閉LUN，卸載磁盤crmprdaa 服務(wù)器登錄信息：s

40、sh 10.6.17.15，root/ Passw0rd!umount 文件系統(tǒng)umount /db2/CRP/db2dump umount /db2/CRP/db2crp umount /db2/CRP/log_archive umount /db2/CRP/log_dir umount /db2/CRP/sapdata1# umount /sapmnt/CRP/profile # umount /sapmnt/CRP/global # umount /usr/sap/trans# su cpjadm cpjadm> stopsap# su crpadm crpadm> stop

41、sap卸載 vglcrmprdja 服務(wù)器關(guān)閉LUN，卸載磁盤crmprdaa 服務(wù)器登錄信息：ssh 10.6.17.18，root/ Passw0rd!umount 文件系統(tǒng)umount /db2/CPJumount /db2/CPJ/db2dump umount /db2/CPJ/db2cpj umount /db2/CPJ/log_archive umount /db2/CPJ/log_dir umount /db2/CPJ/sapdata1 umount /db2/CPJ/sapdata2 umount /db2/CPJ/sapdata3 umount /db2/CPJ/sapdat

42、a4varyoffvg db2sapvg varyoffvg crpdbvg varyoffvg crpscsvg varyoffvg provgumount /db2/CRP/sapdata2 umount /db2/CRP/sapdata3 umount /db2/CRP/sapdata4 umount /db2/CRP/saptemp1 umount /db2/CRPumount /db2/db2crp umount /db2umount /sapmnt/CRP umount /usr/sap/trans umount /usr/sapumount /export/sapmnt/CRP

43、umount /export/usr/sap/trans umount /sapaudit卸載 vgc)修改網(wǎng)絡(luò)配置 (地點：廣州；操作：系統(tǒng)管理員)修改 10.6.17.15 系統(tǒng)默認網(wǎng)關(guān)：從 10.6.6.254 修改為 10.1.17.254修改 10.6.17.18 系統(tǒng)默認網(wǎng)關(guān)：從 10.6.6.254 修改為 10.1.17.254hqcrmmob01l 10.6.17.16 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.4.254 修改為 10.1.17.254hqcrmmob02l 10.6.17.17 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.4.254 修改為 10.1.17.254crmprdt

44、rex 10.6.17.19 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.5.254 修改為 10.1.17.254crmprdwed 10.6.17.20 修改系統(tǒng)默認網(wǎng)關(guān)：從 10.6.28.254 修改為 10.6.17.254Linux 環(huán)境：編輯/etc/sysconfig/network-scripts/ifcfg-eth0 文件，注釋 GATEWAY 部分編輯/etc/sysconfig/network-scripts/ifcfg-eth1 文件，修改 GATEWAY 部分varyoffvg cpjdbvg varyoffvg cpjscsvg varyoffvg db2sapvgumoun

45、t /db2/CPJ/saptemp1 umount /db2/db2cpj umount /db2umount /sapmnt/CPJ umount /usr/sap/trans umount /usr/sapumount /export/sapmnt/CPJ umount /export/usr/sap/trans運行命令重啟網(wǎng)絡(luò)服務(wù)：service network restart運行命令確認默認網(wǎng)關(guān)：netstat -rn2.3.7 網(wǎng)絡(luò)切換1.在交換機允許列表添加 CRM 網(wǎng)段：在Nexus7010 交換機與廣州 MSTP線路連接 trunk 端口，允許列表添加 CRM 網(wǎng)段 vlan

46、 104、vlan105(地點：；操作：邁瑞網(wǎng)絡(luò)管理員)交換機 IP 地址：172.17.1.5配置命令：確認命令：# show interface trunk#show spanning-tree interface e10/40SW(config)#int e10/40SW(config-if)#sw trunk allowed vlan add 104 SW(config-if)#sw trunk allowed vlan add 1052.在廣州交換機允許列表添加 CRM 網(wǎng)段：在廣州 3750 交換機允許列表添加 CRM網(wǎng)段 (操作地點：廣州；操作交換機 IP 地址：10.6.17.

47、254配置命令：邁瑞網(wǎng)絡(luò)管理員)MindrayDRGZC3750X(config)#int g1/0/1確認命令：3.確認網(wǎng)段切換配置完成情況(操作地點：廣州；操作：邁瑞網(wǎng)絡(luò)管理員)在廣州內(nèi)網(wǎng)和其他分支機構(gòu)的網(wǎng)絡(luò)上運行命令：ping 10.1.4.5，10.1.5.25，10.1.6.9#show interface trunk#show spanning-tree interface g1/0/1MindrayDRGZC3750X(config-if)#sw trunk allowed vlan add 104 MindrayDRGZC3750X(config-if)#sw trunk al

48、lowed vlan add 105網(wǎng)段切換完成。2.3.8 應(yīng)用數(shù)據(jù)驗證1)數(shù)據(jù)庫驗證2)應(yīng)用系統(tǒng)數(shù)據(jù)驗證雙擊新加的條目即可登錄應(yīng)用系統(tǒng)：2.3.9 F5 配置調(diào)整1.在 F5 設(shè)備中調(diào)整配置使 CRM_web 接入到廣州災備中心當生產(chǎn)中心 CRM 主服務(wù)器正常的情況下，廣州災備 CRM 服務(wù)器的狀態(tài)處于禁用狀態(tài)。如下圖。（1）在 WideIP 頁面找到。（2）在對應(yīng)的 pool 當中，廣州災備機房的 crm 服務(wù)器對應(yīng)地址處于手動禁用狀態(tài)。如果生產(chǎn)中心主CRM 服務(wù)器失效時，pool 中的其他地址均處于紅色狀態(tài)，此時需手動啟用廣州點災備 CRM 服務(wù)器地址。勾選地址 218.107.10.

49、6，然后點擊 enable 啟用災備服務(wù)器地址。啟用之后，所有點（包括、廣州、美國、荷蘭）的 F5 設(shè)備均會狀態(tài)同步，所有的地址請求均到 218.107.10.6。2.在 F5 設(shè)備中調(diào)整配置使 CRM_web 接入回到生產(chǎn)中心當生產(chǎn)中心主 CRM 服務(wù)器恢復之后，對應(yīng)的 pool 中的所有地址狀態(tài)均變?yōu)榫G色，按照 Topology 算法所有地點的 F5 設(shè)備均智能此時可手動將災備 CRM 服務(wù)器地址禁用，禁用之后狀態(tài)變?yōu)楹谏?。到較近的IP 地址。勾選地址 218.107.10.6，然后點擊 disable 禁用。第三章CRM 系統(tǒng)回切操作3.1 CRM 系統(tǒng)回切操作流程當生產(chǎn)中心 CRM 系

50、統(tǒng)修復并可法提供正常業(yè)務(wù)時，需要將災備 CRM 系統(tǒng)回切至生產(chǎn)中心運行。具體操作流程如下：開始回切回切完成數(shù)據(jù)是否一致？是否啟動生產(chǎn)CRM系統(tǒng)數(shù)據(jù)庫啟動生產(chǎn)CRM系統(tǒng)應(yīng)用Recoverpoint Failover功能中選擇其它時間點鏡 像，進行回切生產(chǎn)CRM系統(tǒng)varyoff vg停止生產(chǎn)CRM系統(tǒng)數(shù)據(jù)庫生產(chǎn)CRM系統(tǒng)import vg;varyon vg; mount FilesystemRecoverpoint執(zhí)行Finish Failover操作Recoverpoint Failover功能中選擇最近時間點鏡像，進行回切CRM系統(tǒng)可用性檢查災備調(diào)整回切換前狀態(tài)F5配置調(diào)整災備CRM系統(tǒng)v

51、aryoff vg啟動生產(chǎn)CRM系統(tǒng)網(wǎng)絡(luò)及確認停止災備CRM系統(tǒng)數(shù)據(jù)庫業(yè)務(wù)驗證停止災備CRM系統(tǒng)應(yīng)用3.2CRM 系統(tǒng)回切工作項與之對應(yīng)的詳細操作步驟如下表所示：上述表格中如能夠成功完成第 4 步驟，即數(shù)據(jù)是一致的，可以正常進行后續(xù)5-11 步驟操作。如若出現(xiàn)問題，我們需要重新選擇鏡像，而在重新選擇鏡像前需要停止生產(chǎn)CRM 系統(tǒng)同時卸載相應(yīng)磁盤，將按照下述操作步驟進行操作直至數(shù)據(jù)一致才繼續(xù)進行上表中 5-11 步驟。序號操作任務(wù)對應(yīng)操作詳細步驟調(diào)用1停止災備 CRM 系統(tǒng)詳見 2.3.6 停止災備 CRM 系統(tǒng)1.1停止應(yīng)用及數(shù)據(jù)庫詳見 2.3.6 步驟a應(yīng)用管理員1.2umount Filesystem; varyoff vg 及修改網(wǎng)絡(luò)配置詳見 2.3.6 步驟c、d系統(tǒng)管理員2災備調(diào)整為切換前狀態(tài)詳見 2.3.1 災備調(diào)整步驟系統(tǒng)管理員3Recoverpoint Failover 功能中選擇最近時間點鏡像，進行回切詳見 3.3.1Recoverpoint 切換步驟 c管理員4啟動生產(chǎn) CRM 系統(tǒng)詳見 3.3.2 啟動生產(chǎn) CRM 系統(tǒng)4.1import vg; varyon vg; mount Filesystem詳見 3.3.2系統(tǒng)管理員4.2啟動數(shù)據(jù)