業(yè)務(wù)應(yīng)急與運維保障方案

業(yè)務(wù)應(yīng)急與運維保障方案業(yè)務(wù)應(yīng)急與運維保障方案1XXX..........................................................................................錯誤!未定義書簽。第1章需求分析..............................................................................................11.1多業(yè)務(wù)應(yīng)急系統(tǒng)建設(shè)背景...............................................................................................................11.2信息中心運維面臨的問題...............................................................................................................11.3業(yè)務(wù)應(yīng)急和運維保障系統(tǒng)建設(shè)的要求.......................................................................................2第2章整體方案設(shè)計......................................................................................32.1方案設(shè)計原則.......................................................................................................................................32.2整體方案描述.......................................................................................................................................42.3方案的擴展性.......................................................................................................................................42.4方案實現(xiàn)的效果..................................................................................................................................5實現(xiàn)本地多業(yè)務(wù)應(yīng)急2.4.1CDAP..........................................................................................................52.5產(chǎn)品價值.................................................................................................................................................5多業(yè)務(wù)應(yīng)急與運維保障平臺能實現(xiàn)一對多的應(yīng)急接管2.5.1“CDAP”...............................5多業(yè)務(wù)應(yīng)急與運維保障平臺能改善備份方案2.5.2“CDAP”...................................................6多業(yè)務(wù)應(yīng)急與運維保障平臺提供的測試和遷移工具2.5.3“CDAP”....................................7第3章CDAP業(yè)務(wù)應(yīng)急與運維保障平臺介紹...................................................83.1方案環(huán)境部署.......................................................................................................................................93.2方案關(guān)系配置：..................................................................................................................................9應(yīng)急數(shù)據(jù)源3.2.1........................................................................................................................................10同步配置3.2.2.............................................................................................................................................10備份配置3.2.3.............................................................................................................................................10數(shù)據(jù)同步3.2.4.............................................................................................................................................103.3應(yīng)急機制和預案建立.......................................................................................................................10第4章災(zāi)難恢復方案.....................................................................................12應(yīng)急接管4.1.1.............................................................................................................................................12數(shù)據(jù)與業(yè)務(wù)系統(tǒng)恢復4.1.2....................................................................................................................13文件和數(shù)據(jù)庫邏輯錯誤恢復4.1.3....................................................................................................13服務(wù)器系統(tǒng)錯誤恢復4.1.4....................................................................................................................14服務(wù)器硬件故障異機恢復4.1.5..........................................................................................................15第5章產(chǎn)品維護方案.....................................................................................155.1目的.........................................................................................................................................................155.2范圍.........................................................................................................................................................155.3服務(wù).........................................................................................................................................................155.4內(nèi)容.........................................................................................................................................................16i第1章需求分析1.1多業(yè)務(wù)應(yīng)急系統(tǒng)建設(shè)背景在現(xiàn)代社會各單位和企業(yè)越來越注重信息化的建設(shè)，為了滿足業(yè)務(wù)不斷的需要，每年都會新增加各種信息化管理系統(tǒng)，經(jīng)過不斷的發(fā)展和建設(shè)，信息中心的運維和管理工作的復雜度在不斷增加；如何保障信息中心的業(yè)務(wù)系統(tǒng)和服務(wù)器主機的正常運行，成為信息中心的運維工作人員的主要任務(wù)和考核指標。傳統(tǒng)的數(shù)據(jù)安全保障機制越來越不能適應(yīng)新形勢下信息中心的運維保障需求。需要一種智能的、一體化的、適應(yīng)各種應(yīng)用環(huán)境的業(yè)務(wù)應(yīng)急和運維管理平臺。隨著金保工程的上線，XXX目前已經(jīng)基本完成了覆蓋全縣完整信息系統(tǒng)，包括人力資源管理系統(tǒng)和社會保險管理系統(tǒng)。目前核心業(yè)務(wù)系統(tǒng)包括：醫(yī)保系統(tǒng)、網(wǎng)上申報業(yè)務(wù)系統(tǒng)、異地接入系統(tǒng)、陽光醫(yī)保系統(tǒng)、網(wǎng)上辦事業(yè)務(wù)系統(tǒng)等業(yè)務(wù)前置系統(tǒng)。這些業(yè)務(wù)系統(tǒng)運行都會根據(jù)實時更新的數(shù)據(jù)庫系統(tǒng)做連接，雖然對數(shù)據(jù)系統(tǒng)做了雙機保障，但前置應(yīng)用服務(wù)器都時單應(yīng)用服務(wù)器在運行，如果發(fā)生前置業(yè)務(wù)系統(tǒng)故障，各種業(yè)務(wù)辦理就要停止，給業(yè)務(wù)開展帶來不變。1.2信息中心運維面臨的問題大量服務(wù)器業(yè)務(wù)應(yīng)急需求：信息化平臺現(xiàn)有的大量業(yè)務(wù)系統(tǒng)設(shè)備采用了一機一應(yīng)用/一機多應(yīng)用的模式，當前的這種部署模式，如果某臺物理服務(wù)器因為各1種原因計劃內(nèi)停機或者故障停機，都不可避免的會造成其上運行的業(yè)務(wù)系統(tǒng)停止的問題，這將直接影響到用戶業(yè)務(wù)的正常開展。運維環(huán)境復雜，響應(yīng)速度滯后：由于當前信息化平臺服務(wù)器數(shù)量巨大，如何處理各種不同操作系統(tǒng)、業(yè)務(wù)系統(tǒng)的日常維護與故障處理對平臺的運維管理是極大考驗。如果沒有統(tǒng)一的備份管理與應(yīng)急恢復的管理手段，因服務(wù)器與操作系統(tǒng)存在差異，管理難度極大，極有可能無法響應(yīng)業(yè)務(wù)系統(tǒng)的要求，影響日常工作。數(shù)據(jù)和應(yīng)用備份的快速恢復系統(tǒng)：信息化平臺現(xiàn)有的大量應(yīng)用系統(tǒng)存在數(shù)據(jù)備份保護問題，簡單的手動備份不僅需要耗費大量的人力物力，效果往往會得不償失，無法實現(xiàn)對應(yīng)用數(shù)據(jù)的實時保障。當服務(wù)器出現(xiàn)硬件和系統(tǒng)錯誤時候，當前平臺系統(tǒng)也缺少非常簡便和快速備份和恢復系統(tǒng)。平臺系統(tǒng)運維缺少測試環(huán)境遷移手段：信息化平臺現(xiàn)有服務(wù)器數(shù)量繁多，種類復雜，各種不同系統(tǒng)與應(yīng)用都存在，在運維過程中對于應(yīng)用程序或者操作系統(tǒng)的測試與補丁升級，往往需要耗費大量的人力物力資源，缺乏有效的仿真測試環(huán)境，來簡化運維管理中碰到的測試升級問題。另外，有些老的系統(tǒng)需要遷移到新的硬件平臺，需要一個方便的系統(tǒng)遷移工具?；旌檄h(huán)境統(tǒng)一應(yīng)急管理：在信息中心，各種業(yè)務(wù)有的在虛擬機、有的在物理服務(wù)器環(huán)境，需要一套可以解決在混合環(huán)境中都可以實現(xiàn)業(yè)務(wù)應(yīng)急和業(yè)務(wù)備份恢復的手段。1.3業(yè)務(wù)應(yīng)急和運維保障系統(tǒng)建設(shè)的要求根據(jù)需求了解，機房業(yè)務(wù)應(yīng)急和運維保障系統(tǒng)需要支持以下功能：2業(yè)務(wù)負載應(yīng)急：可以支持各種類型的服務(wù)器業(yè)務(wù)負載轉(zhuǎn)移接管，包括數(shù)據(jù)庫系統(tǒng)、中間件、文檔管理系統(tǒng)、郵件系統(tǒng)、域控、安全管理平臺等。快速地實現(xiàn)業(yè)務(wù)的切換，同時也可以從不同的時間點實現(xiàn)業(yè)務(wù)的應(yīng)急。仿真測試功能：可以實現(xiàn)服務(wù)器整體業(yè)務(wù)的任意時間點仿真模擬，可以為日常機房運維提供測試，補丁升級的測試環(huán)境。虛擬機遷移功能：可以實現(xiàn)對機房不同品牌服務(wù)器一次性完整遷移，同時也可以實現(xiàn)對虛擬化平臺的遷移，可以支持對物理服務(wù)器業(yè)務(wù)系統(tǒng)，一鍵完整遷移到虛擬化平臺上。第2章整體方案設(shè)計2.1方案設(shè)計原則為滿足XXX信息中心的需求，本次方案設(shè)計遵循以下原則：?開放性：采用標準的技術(shù)、結(jié)構(gòu)、系統(tǒng)組件和用戶接口，支持所有流行的國際標準及協(xié)議。?先進性：方案的技術(shù)、設(shè)計思想、管理工具要先進，符合信息科技的發(fā)展趨勢，保證業(yè)務(wù)發(fā)展具有巨大的拓展空間；選用的產(chǎn)品為具有先進性和市場成熟度的存儲系統(tǒng)產(chǎn)品。?經(jīng)濟性：有良好的性價比，最大化保護現(xiàn)有投資。?可擴展性：系統(tǒng)能夠在規(guī)模和性能兩個方面向上擴展，以保證未來不斷發(fā)展的要求。隨著業(yè)務(wù)量的增長獨立升級；能夠比較方便地進行擴展，擴展時與應(yīng)用無關(guān)。32.2整體方案描述在社別中心機房的，設(shè)置兩臺CDAP應(yīng)急服務(wù)器，將機房中所有的x86服務(wù)器的業(yè)務(wù)實時備份到CDAP設(shè)備中，可以為關(guān)鍵應(yīng)用比如：醫(yī)保前置業(yè)務(wù)系統(tǒng)、網(wǎng)上申報業(yè)務(wù)系統(tǒng)、異地接入系統(tǒng)、網(wǎng)站放在性能比較高的CDAP設(shè)備上，其他次重點業(yè)務(wù)系統(tǒng)實時備份在另外一臺CDAP設(shè)備上，分散業(yè)務(wù)應(yīng)急和備份的風險。同時可以采用CDAP統(tǒng)一保障物理機和虛擬機所有業(yè)務(wù)系統(tǒng)，不用區(qū)分其中平臺架構(gòu)的區(qū)別，減少應(yīng)急保障的投入。網(wǎng)絡(luò)架構(gòu)圖：2.3方案的擴展性CDAP產(chǎn)品是采用開放式架構(gòu)的一體化應(yīng)急產(chǎn)品，以后信息中心的業(yè)務(wù)量有增加可以從軟件和硬件存儲去擴展;軟件：增加容災(zāi)點，保障更多的應(yīng)用業(yè)務(wù)和服務(wù)器；硬件：增加容量，可以直接增加盤柜和連接第三方的存儲。4目前的容量配置，可以滿足未來3～5年機房信息中心建設(shè)的需求。2.4方案實現(xiàn)的效果2.4.1CDAP實現(xiàn)本地多業(yè)務(wù)應(yīng)急在本地機房的核心交換機上部署CDAP多業(yè)務(wù)應(yīng)急和運維保障平臺，其中CDAP為數(shù)據(jù)中心的所有服務(wù)器的備機，實現(xiàn)當本地服務(wù)器發(fā)生故障，包括硬件故障和軟件故障，可以在幾分鐘實現(xiàn)快速應(yīng)急的效果。CDAP設(shè)備解決機房運維中90%的故障，保障整個數(shù)據(jù)中心的應(yīng)用和數(shù)據(jù)實時備份和快速頂替故障服務(wù)器。CDAP業(yè)務(wù)應(yīng)急和運維保障平臺是一個可擴展的平臺。2.5產(chǎn)品價值2.5.1“CDAP多業(yè)務(wù)應(yīng)急與運維保障平臺”能實現(xiàn)一對多的應(yīng)急接管可以隨機接管機房內(nèi)任何X86的應(yīng)用服務(wù)器，任意一臺服務(wù)器發(fā)生數(shù)據(jù)丟失等故障時，1-2分鐘內(nèi)就可以快速恢復數(shù)據(jù)并接觸故障。任意一臺服務(wù)器發(fā)生應(yīng)用故障，3-5分鐘就可以實現(xiàn)接管，一臺保護多達25臺，實施簡單，不用改變配置和改動網(wǎng)絡(luò)架構(gòu)。用一臺設(shè)備就可以實現(xiàn)類似于幾十套雙機效果，能大量節(jié)約資金和維護量.52.5.2“CDAP多業(yè)務(wù)應(yīng)急與運維保障平臺”能改善備份方案提供整機一體化實時備份，兼容所有需要備份的系統(tǒng)環(huán)境，而且改善了備份效率。a.很多重要數(shù)據(jù)實現(xiàn)了接近實時數(shù)據(jù)保護；b.不僅備份了數(shù)據(jù)還備份整個系統(tǒng)環(huán)境及應(yīng)用;c.系統(tǒng)能夠改變以前數(shù)據(jù)備份無法驗證不足，能夠?qū)崿F(xiàn)及時驗證備份數(shù)據(jù)；d.恢復數(shù)據(jù)方式非?？旌捅憬?，不僅幾秒鐘就能恢復單個數(shù)據(jù)，也可以幾十分鐘就可以完整恢復一個應(yīng)用和數(shù)據(jù)，立即就可以使用，能可徹底改觀傳統(tǒng)恢復漫長局面。62.5.3“CDAP多業(yè)務(wù)應(yīng)急與運維保障平臺”提供的測試和遷移工具能提供了方便的各種操作系統(tǒng)和應(yīng)用的遷移工具，為本單位一些老設(shè)備的應(yīng)用提供遷移到新服務(wù)器的手段。能提供了原機多時間點的快照，提供了原機實時的仿真系統(tǒng)，能非常方便做各種應(yīng)用系統(tǒng)測試。7第3章CDAP業(yè)務(wù)應(yīng)急與運維保障平臺介紹CDAP業(yè)務(wù)應(yīng)急與運維保障平臺是上海數(shù)騰公司歷時六年，采用當前最新的實時虛擬化鏡像與驅(qū)動抽象化技術(shù)研發(fā)的平臺化軟件產(chǎn)品。作為一款致力于為用戶解決多服務(wù)器多應(yīng)用等復雜環(huán)境下機房業(yè)務(wù)應(yīng)急與運維管理的產(chǎn)品，平臺解決了一對多保護、系統(tǒng)應(yīng)用和數(shù)據(jù)整機一體化實時備份、服務(wù)器快速應(yīng)急接管以及服務(wù)器無縫恢復等一系列機房運維管理中常見的各種難題。另外，本著簡易、高效、開放、綠色等原則，CDAP業(yè)務(wù)應(yīng)急與運維保障平臺集一對多的業(yè)務(wù)應(yīng)急、機房智慧運維管理與虛擬化保障于一身，為用戶帶來新的機房運維管理體驗。83.1方案環(huán)境部署CDAP業(yè)務(wù)應(yīng)急與運維管理平臺本著簡易高效原則，部署簡單，穩(wěn)定可靠。首先，將CDAP一體機服務(wù)器接入用戶網(wǎng)絡(luò)內(nèi)，確保與需保障服務(wù)器相互ping即可，無需更改機房現(xiàn)有的網(wǎng)絡(luò)配置；其次，登入客戶端服務(wù)器，登入CDAP平臺的Web管理界面，通過網(wǎng)絡(luò)推送的方式獲取客戶端，安裝即可?？蛻舳税惭b簡便，對客戶服務(wù)器性能影響極少。最后，客戶端軟件安裝完成以后，用戶就可以直接登入CDAP軟件Web管理界面進行統(tǒng)一的客戶端備份的管理。3.2方案關(guān)系配置：CDAP業(yè)務(wù)應(yīng)急與運維管理平臺提供了各式各樣的關(guān)系配置選擇，配置簡單易懂。服務(wù)器接管與備份關(guān)系相關(guān)的配置主要包括：應(yīng)急數(shù)據(jù)源、同步策略設(shè)置以及快照策略設(shè)置。93.2.1應(yīng)急數(shù)據(jù)源通過對客戶端進行配置操作可以進入相關(guān)的配置界面，應(yīng)急數(shù)據(jù)源主要是業(yè)務(wù)服務(wù)器需要備份的分區(qū)進行選擇確認。3.2.2同步配置備份數(shù)據(jù)的數(shù)據(jù)同步最短可以實現(xiàn)秒級的數(shù)據(jù)同步，用戶可以根據(jù)自身業(yè)務(wù)服務(wù)器負載能力進行數(shù)據(jù)同步間隔時間的選擇。3.2.3備份配置快照策略設(shè)置主要包括快照周期設(shè)置，快照保存份數(shù)以及完整備份數(shù)，用戶可以根據(jù)自身業(yè)務(wù)服務(wù)器負載能力進行數(shù)據(jù)同步間隔時間的選擇。另外平臺系統(tǒng)還提供快照合并功能，用戶可以根據(jù)自身要求，制定自動合并快照策略以及通過手動合并快照的方式進行數(shù)據(jù)的周期備份。3.2.4數(shù)據(jù)同步CDAP采用磁盤I/O實時復制技術(shù)，技術(shù)基于磁盤過濾驅(qū)動，實時監(jiān)控每個磁盤的讀寫I/O，同時記錄下來每個寫I/O的磁盤MAP分布圖，在每次同步時間里把相應(yīng)的物理磁盤變化量同步到虛擬磁盤上；CDAP軟件同步技術(shù)基于全球唯一獨創(chuàng)的卷有效空間備份技術(shù)，同步空間僅僅是卷的有效數(shù)據(jù)，備份卷時，不需要檢索文件，繞過文件系統(tǒng)層，直接復制硬盤連續(xù)使用塊，能獲取最大的讀寫速度，能夠大大簡化數(shù)據(jù)同步操作。3.3應(yīng)急機制和預案建立應(yīng)急預案是平臺系統(tǒng)針對客戶端業(yè)務(wù)服務(wù)器出現(xiàn)故障以后，信息化平臺管理員能夠通過應(yīng)急預案快速實現(xiàn)業(yè)務(wù)服務(wù)器接管以保證業(yè)務(wù)服務(wù)器的正常運行。10出現(xiàn)服務(wù)器或者系統(tǒng)故障，導致原服務(wù)器無法正常啟動時，用戶可以通過最近的歷史快照點選擇應(yīng)急接管選項進行快速應(yīng)急啟動，實現(xiàn)原機的業(yè)務(wù)接管以保證業(yè)務(wù)的連續(xù)性。具體操作過程，如下圖示：首先，進入CDAP業(yè)務(wù)應(yīng)急與運維保障平臺Web管理界面，進入應(yīng)急運維界面選擇相應(yīng)故障服務(wù)器，進入快照管理中，確認最近時間點快照。其次，確認快照點以后，點擊接管演練，選擇接管模式，選擇相應(yīng)的原機操作系統(tǒng)，配置啟動所需的CPU內(nèi)核數(shù)與內(nèi)存數(shù)，確認啟動即可。11第4章災(zāi)難恢復方案CDAP多業(yè)務(wù)應(yīng)急軟件可以實現(xiàn)對接管服務(wù)器的業(yè)務(wù)連續(xù)性以及數(shù)據(jù)實時備份功能。當故障發(fā)生時，通過快速配置并啟動虛機的操作，即可在幾分鐘內(nèi)實現(xiàn)相應(yīng)的業(yè)務(wù)接管與數(shù)據(jù)恢復操作。4.1.1應(yīng)急接管應(yīng)急接管基于CDAP產(chǎn)品獨有的備份功能?；趯崟rP2V技術(shù)，將原主機實時備份成虛擬化磁盤格式，當服務(wù)器發(fā)生故障時，可以通過虛擬化系統(tǒng)全面實現(xiàn)應(yīng)用級接管。124.1.2數(shù)據(jù)與業(yè)務(wù)系統(tǒng)恢復業(yè)務(wù)應(yīng)用服務(wù)器故障總體上可以分為數(shù)據(jù)的邏輯錯誤故障以及服務(wù)器硬件錯誤導致的故障，針對不同的故障以記恢復效果不同，對于容災(zāi)故障恢復分為幾種，具體介紹以及恢復效果如下示：4.1.3文件和數(shù)據(jù)庫邏輯錯誤恢復數(shù)據(jù)錯誤恢復方式包含兩種模式：模式一：整機硬件錯誤恢復，基于CDAP卷基本完整恢復。當服務(wù)器硬件數(shù)據(jù)錯誤，如存儲內(nèi)數(shù)據(jù)錯誤。這時候需要啟動CDAP完整卷恢復模式。就是將CDAP實時備份點數(shù)據(jù)將卷完整恢復到原有卷上。恢復時間點最接近故障還原點。CDAP支持在故障恢復時候，先啟動影子系統(tǒng)對備份數(shù)據(jù)完整性進行測試校驗，確定備份數(shù)據(jù)完整可靠后?？梢砸淮涡钥焖倩謴偷皆O(shè)備故障卷內(nèi)。因而發(fā)生服務(wù)器硬件錯誤導致業(yè)務(wù)故障時，數(shù)據(jù)恢復基于實時工作點進行恢復，能夠保證恢復的數(shù)據(jù)為故障發(fā)生前的最后一刻，保證數(shù)據(jù)的極少的丟失。模式二：數(shù)據(jù)庫邏輯完整恢復，基于CDAP單個表恢復。當出現(xiàn)數(shù)據(jù)庫邏輯錯誤，或其他文件邏輯錯誤，可以單獨恢復數(shù)據(jù)方案。支持單個文件和單個數(shù)據(jù)庫的恢復。CDAP可以將原來備份卷掛載會到故障設(shè)備上，形成一個本地附加分區(qū)。然后通過拷貝文件和目錄配置等方式直接恢復原始數(shù)據(jù)。這種恢復方式更直觀和直接，比較容易操作單個故障點，及小顆粒度恢復。因而當發(fā)生數(shù)據(jù)邏輯錯誤的時候，為保證數(shù)據(jù)一致性，數(shù)據(jù)恢復基于最近的快照節(jié)點進行數(shù)據(jù)恢復，這是可能會存在一定時間的數(shù)據(jù)量丟失，但能保證數(shù)據(jù)一致性，確保業(yè)務(wù)的正常運行。134.1.4服務(wù)器系統(tǒng)錯誤恢復CDAP備份基于磁盤的一體化備份，備份過程將OS+APP+DATA一起備份。當服務(wù)器出現(xiàn)系統(tǒng)錯誤，應(yīng)用無法啟動等故障。此種情況下，CDAP軟件恢復可以實現(xiàn)數(shù)