自動化運維管理解決方案

自動化運維管理解決方案目錄TOC\o"1-5"\h\z\o"CurrentDocument"IT運維管理面臨挑戰(zhàn) 3\o"CurrentDocument"應(yīng)運而生的自動化解決方案 4\o"CurrentDocument"自動化應(yīng)用場景 5\o"CurrentDocument"3。1災(zāi)備切換自動化 5\o"CurrentDocument"3。2故障現(xiàn)場快照 6\o"CurrentDocument"3。3批量設(shè)備操作處理 6\o"CurrentDocument"3。 4周期性作業(yè)調(diào)度 7\o"CurrentDocument"應(yīng)急處理流程 7\o"CurrentDocument"重要配置備份、基線比對 8\o"CurrentDocument"產(chǎn)品簡介 10\o"CurrentDocument"4.1 運維腳本集中管理 104。 2 可視化流程配置引擎 10\o"CurrentDocument"4.3 作業(yè)流程人工干預(yù) 10\o"CurrentDocument"4。4 作業(yè)執(zhí)行驗證/持續(xù)監(jiān)控 11\o"CurrentDocument"4。5 作業(yè)操作手冊自動生成 11\o"CurrentDocument"4。6作業(yè)執(zhí)行結(jié)果展現(xiàn) 11\o"CurrentDocument"配置備份/基線庫管理 11\o"CurrentDocument"產(chǎn)品優(yōu)勢 12\o"CurrentDocument"運行環(huán)境 13IT運維管理面臨挑戰(zhàn)隨著企業(yè)IT服務(wù)多樣化發(fā)展，IT應(yīng)用的規(guī)模也越來越龐大、IT應(yīng)用的結(jié)構(gòu)也越來越復(fù)雜?隨著不斷變化的IT應(yīng)用，需要越來越合理的模式，來保障IT服務(wù)能靈活便捷、安全穩(wěn)定地持續(xù)保障，這種模式的保障因素就是IT運維管理。據(jù)國外某咨詢機(jī)構(gòu)2013年調(diào)研結(jié)果顯示，在IT費用中大約有1/2用于系統(tǒng)運營期的運維管理工作。即使當(dāng)前企業(yè)在IT運維管理方面投入大量時間及費用，但是在IT運維管理方面仍存在諸多問題。主要表現(xiàn)為：＞運維管理效率低、人工成本高：■經(jīng)驗未沉淀為實際運維工作，經(jīng)驗利用率、推廣率低；■分散于各服務(wù)器上的運維腳本,存在管理風(fēng)險，且耗費大量管理成本；日常操作消耗大量人力資源，誤操作風(fēng)險較大，操作執(zhí)行效率低；＞操作過程可控度低，運維風(fēng)險大：操作與執(zhí)行方案匹配度無法保證,實際操作過程可控度較低；日常操作對人員水平要求高，人力資源風(fēng)險大；＞運維操作透明度低：實際操作不便于監(jiān)督,存在“黑盒"操作風(fēng)險；日常工作與實際操作無法有效關(guān)聯(lián)，不利于日后審計；應(yīng)運而生的自動化解決方案面對IT運維管理中的諸多問題，單靠人工已經(jīng)無法滿足在技術(shù)、業(yè)務(wù)等方面的要求，那么標(biāo)準(zhǔn)化、自動化、架構(gòu)優(yōu)化、過程優(yōu)化等降低IT服務(wù)成本的因素越來越被人們所重視。其中，IT運維自動化是指將IT運維中日常的、大量的重復(fù)性工作自動化，把過去的手工執(zhí)行轉(zhuǎn)為自動化操作。自動化是IT運維工作的升華,IT運維自動化不單純是一個維護(hù)過程，更是一個管理的提升過程，是IT運維的最高層次，也是未來的發(fā)展趨勢。IT運維自動化從誕生發(fā)展至今，其重要屬性之一已經(jīng)不僅僅只是代替人工操作，更重要的是深層探知和全局分析，關(guān)注的是在當(dāng)前條件下如何實現(xiàn)性能與服務(wù)最優(yōu)化，同時保障投資收益最大化。自動化對IT運維的影響，已經(jīng)不僅僅是人與設(shè)備之間的關(guān)系，已經(jīng)發(fā)展到了面向客戶服務(wù)驅(qū)動IT運維決策的層面。融海咨詢借鑒IT運維自動化發(fā)展趨勢，結(jié)合多年IT服務(wù)經(jīng)驗中對用戶需求的把控，自行研發(fā)自動化解決方案。自動化方案概述：通過自動化手段，實現(xiàn)IT運維管理操作的自動化調(diào)度、“一鍵式〃處理;通過異常處理的支持，對操作的結(jié)果進(jìn)行驗證，并持續(xù)監(jiān)控作業(yè)執(zhí)行結(jié)果；通過時間約束條件，對按照時間計劃執(zhí)行的運維作業(yè)進(jìn)行管理；通過復(fù)雜的關(guān)系運算條件，處理復(fù)雜的作業(yè)流程的關(guān)系；通過UserTasks人工接口，方便運維人員對作業(yè)調(diào)度流程的參與；通過圖形化的工作流定制平臺，實現(xiàn)對業(yè)務(wù)活動進(jìn)行整體規(guī)劃；通過與其它平臺的集成，實現(xiàn)了與報警、監(jiān)控等運維系統(tǒng)的一體化管理。從而實現(xiàn)功能強(qiáng)大、簡單易用、安全可靠的作業(yè)調(diào)度自動化。通過自動化解決方案，推動了企業(yè)IT運維管理操作的指令化、標(biāo)準(zhǔn)化、流程化進(jìn)程。自動化建設(shè)目標(biāo)：自動化應(yīng)用場景3.1災(zāi)備切換自動化隨著IT設(shè)備數(shù)量持續(xù)增加，IT系統(tǒng)日益復(fù)雜，依靠手動方式進(jìn)行系統(tǒng)災(zāi)備切換的傳統(tǒng)模式遇到了一定瓶頸,主要表現(xiàn)：＞操作效率低:RTO（RecoveryTimeObjective，復(fù)原時間目標(biāo)）無法保證；＞操作風(fēng)險大：系統(tǒng)復(fù)雜度日益增高，操作復(fù)雜度也隨之增強(qiáng),操作失誤的幾率也隨之增高；＞過分依賴個人水平:在盡短的時間內(nèi)完成整個切換流程，對操作員本人的技能水平、操作規(guī)程熟悉程度、環(huán)境熟悉程度有著非常高的要求。＞操作過程不透明：災(zāi)備切換有相應(yīng)的操作規(guī)程，但是切換過程中，每個環(huán)節(jié)執(zhí)行狀態(tài)、當(dāng)前執(zhí)行環(huán)節(jié)情況只有操作員本人了解，旁人無從知曉。通過對災(zāi)備切換流程進(jìn)行標(biāo)準(zhǔn)化配置，實現(xiàn)災(zāi)備切換管理的配置可視化、執(zhí)行可視化、過程可視化、規(guī)程可視化。＞配置可視化：提供類似Visio配置方式,每個操作環(huán)節(jié)配置成為一個節(jié)點，然后通過拖拽、連線的方式配置整個切換流程，避免了代碼編寫工作，降低了系統(tǒng)使用門檻，增加了系統(tǒng)易用性；＞執(zhí)行可視化：提供圖形界面方式，災(zāi)備切換流程無需通過繁瑣命令行方式執(zhí)行,管理員僅需在圖形界面中選擇相應(yīng)流程并點擊執(zhí)行即可，執(zhí)行前還可以在界面進(jìn)行多人確認(rèn)；＞過程可視化：提供操作流程視圖，所有人員在流程圖中可以清晰了解災(zāi)備切換整體流程情況、當(dāng)前執(zhí)行環(huán)節(jié)，以及每個節(jié)點執(zhí)行狀態(tài),為保證不同使用習(xí)慣，執(zhí)行過程提供流程視圖、樹狀視圖兩種展現(xiàn)形態(tài)；＞規(guī)程可視化：提供自動生成操作規(guī)程文檔功能，管理員配置完某自動化流程時，系統(tǒng)能夠自動生成該流程的操作規(guī)程文檔，系統(tǒng)使用人員可以根據(jù)文檔清晰了解到本自動化流程完整信息.3.2故障現(xiàn)場快照傳統(tǒng)IT監(jiān)控系統(tǒng)在故障發(fā)生時能及時告警，但是運維人員、廠商、開發(fā)商僅僅獲得一條告警信息,無法從監(jiān)控平臺獲取更多的信息完成故障分析及預(yù)防。通過監(jiān)控/監(jiān)控集成、作業(yè)調(diào)度雙重技術(shù)手段，在故障發(fā)生時，對故障現(xiàn)場的本機(jī)環(huán)境、跨服務(wù)器/跨設(shè)備環(huán)境進(jìn)行全方位捕捉,對故障現(xiàn)場進(jìn)行最大程度的保留，協(xié)助管理員、廠商、開發(fā)商進(jìn)行事故后的詳細(xì)分析，并設(shè)定相應(yīng)預(yù)案。通過故障現(xiàn)場快照,可以完成:1、故障現(xiàn)場全方位場景獲取,獲取內(nèi)容可以根據(jù)不同角色需求靈活定制;2、故障發(fā)生時系統(tǒng)自行完成場景捕獲、保存,并將其分發(fā)給不同的角色進(jìn)行聯(lián)合“會診”；3、根據(jù)預(yù)案內(nèi)，通過定制化納入到中，實現(xiàn)故障發(fā)生前的預(yù)警，并且提供及時處理，避免故障再次發(fā)生。批量設(shè)備操作處理隨著IT規(guī)模不斷擴(kuò)大，IT設(shè)備數(shù)量不斷增多,原有簡單的運維操作，也隨之成倍增長，即增加了運維工作量，又使重復(fù)性操作過程中，由于人員注意力降低導(dǎo)致的操作失誤次數(shù)成倍增長。例如：對設(shè)備批量程序更新、批量巡檢等、批量密碼修改等大批量、重復(fù)性操作。提供批量作業(yè)并行處理平臺,實現(xiàn)多設(shè)備同時批處理操作.通過自動化流程把，將簡單的操作在大批量設(shè)備上操作，并對作業(yè)執(zhí)行過程進(jìn)行監(jiān)控對執(zhí)行結(jié)果進(jìn)行檢查。通過部署批量設(shè)備操作流程：1、 批量設(shè)備并發(fā)執(zhí)行,縮短批量操作執(zhí)行時間，提高執(zhí)行效率，并且提高系統(tǒng)升級一致性；2、 減少批量操作過程中，由于實施過程中因操作人員操作疲勞、注意力降低導(dǎo)致的誤操作,從而減少人工失誤導(dǎo)致的生產(chǎn)系統(tǒng)故障;3、提高IT運維自動化水平，減少人工投入，降低運營成本；周期性作業(yè)調(diào)度隨著IT應(yīng)用系統(tǒng)不斷上線，運維中周期性、重復(fù)性操作逐漸增多。此類操作即占用了運維人員大量日常工作時間，又存在人工誤操作的風(fēng)險。并且對于復(fù)雜作業(yè)流程，還需要運維人員有較高的技術(shù)水平及較高的系統(tǒng)熟練度,由此增加了因人員、崗位變動導(dǎo)致的而操作意外發(fā)生幾率。例如：可以對每日巡檢、日終批量操作、事務(wù)數(shù)據(jù)收集、月結(jié)批處理、年結(jié)批處理等作業(yè)執(zhí)行的自動化。提供統(tǒng)一應(yīng)用運行操控平臺，實現(xiàn)跨平臺、跨作業(yè)段、跨設(shè)備的作業(yè)協(xié)同調(diào)度操作。平臺將周期性、重復(fù)性批處理作業(yè),以及龐大復(fù)雜的作業(yè)流程，固化為自動化作業(yè)流程，通過時間調(diào)度引擎，按照既定時間規(guī)則，在指定時間點進(jìn)行調(diào)度。從而實現(xiàn)作業(yè)的周期性自動化調(diào)度，運維人員僅需查看相應(yīng)的作業(yè)執(zhí)行過程、執(zhí)行成功與否、執(zhí)行結(jié)果報告（截圖、操作命令輸出結(jié)果等操作結(jié)果信息）。通過自動化流程把成百上千的批處理作業(yè)組織起來，規(guī)范跑批作業(yè)，對作業(yè)執(zhí)行過程進(jìn)行監(jiān)控對執(zhí)行結(jié)果進(jìn)行檢查。通過周期性作業(yè)調(diào)度自動化：1、 降低了關(guān)鍵崗位的技能要求：過去，必須由全面掌握各業(yè)務(wù)系統(tǒng)的運維專家完成各類批處理作業(yè)的操作和判斷;現(xiàn)在,普通運維人員即可使用自動化工具完成。2、 消除故障隱患、保證作業(yè)效率:一方面，對關(guān)鍵數(shù)據(jù)的完整性、合規(guī)性進(jìn)行校驗；另一方面，在發(fā)生異常時快速定位故障數(shù)據(jù)源,以便排查。3、降低日常運維工作中人員的時間投入、精力投入，從而將運維人員解放出來，投入到更重要的IT運維工作中。應(yīng)急處理流程IT系統(tǒng)發(fā)生嚴(yán)重故障發(fā)生時，時間就是金錢。一方面，如何縮短管理員接收通知到故障處理時間；另一方面,如何縮短故障處理過程花費的時間，并提高故障處理成功率，顯得極其重要。例如：文件系統(tǒng)滿，導(dǎo)致新的日志無法寫入；數(shù)據(jù)庫歸檔日志空間滿；數(shù)據(jù)庫表空間滿,數(shù)據(jù)無法寫入;生產(chǎn)系統(tǒng)故障,需要緊急切換備份系統(tǒng)等.自動化處理與監(jiān)控告警集成，第一時間發(fā)現(xiàn)，調(diào)用預(yù)定義的故障應(yīng)急處理流程;故障處理后，系統(tǒng)會調(diào)用檢查流程，對故障恢復(fù)情況進(jìn)行檢查.全部操作完畢后，系統(tǒng)會將故障發(fā)生現(xiàn)場鏡像、故障處理結(jié)果、處理完畢檢查確認(rèn)結(jié)果，一并發(fā)送給管理員，由管理員確認(rèn)整個流程執(zhí)行無誤。通過應(yīng)急處理流程：1、極大縮短了從故障發(fā)生到故障響應(yīng)的間隔，為系統(tǒng)恢復(fù)贏得了寶貴的時間,從而極大的減少了系統(tǒng)故障所產(chǎn)生的影響;2、管理員在應(yīng)急故障處理過程中肩負(fù)著極大的壓力，精神高度緊張，可能會產(chǎn)生處理流程順序顛倒或者忘記某一環(huán)節(jié)等現(xiàn)象，并且存在壓力下導(dǎo)致操作失誤的可能，由自動化平臺應(yīng)急處理，一方面提高了故障處理過程中的操作效率，一方面提高了故障處理的成功率。3、系統(tǒng)自動將故障發(fā)生的現(xiàn)場鏡像、故障處理過程、結(jié)果以及故障恢復(fù)后的檢查結(jié)果，以報告形式保存下來，為今后審查、統(tǒng)計提供了依據(jù)。3.6重要配置備份、基線比對IT系統(tǒng)中配置文件非常重要,因為誤操作導(dǎo)致配置文件被刪除、內(nèi)容被修改,經(jīng)常會導(dǎo)致非常嚴(yán)重的后果.日常運維工作中，管理員需要花費大量的時間，對系統(tǒng)中包括操作系統(tǒng)、數(shù)據(jù)庫、中間件、應(yīng)用系統(tǒng)及其他軟件的重要配置文件進(jìn)行周期性備份，并且配置文件被誤修改、惡意篡改時，不容易被發(fā)現(xiàn)，只有當(dāng)產(chǎn)生嚴(yán)重后果才會被人們注意。重要文件例如：Oracle的initSID.ora,listener。ora文件，sqlnet.ora文件，tnsnames.ora文件，操作系統(tǒng)/etc/passwd文件，以及Weblogic、應(yīng)用系統(tǒng)等配置文件.通過基線保護(hù)模塊，幫助企業(yè)建立信息系統(tǒng)的安全基線,并持續(xù)監(jiān)控關(guān)鍵文件和系統(tǒng)的完整性和一致性。平臺定期對企業(yè)中各層面、各級別配置文件進(jìn)行周期性備份,并以此建立文件基線.平臺會定期對系統(tǒng)中配置文件修改日期、大小、內(nèi)容等進(jìn)行掃描，并將掃描結(jié)果與基線版本進(jìn)行比對，當(dāng)發(fā)現(xiàn)兩者不一致時,及時通知管理員進(jìn)行審查,并在極端情況以基線版本為準(zhǔn)則，對現(xiàn)有環(huán)境進(jìn)行備份、更新。通過文件基線管理功能:1、系統(tǒng)自動對重要配置進(jìn)行備份，極大減輕了管理員日常工作壓力,并且減少了備份過程中的遺漏情況發(fā)生；2、系統(tǒng)通過自動掃描、對比，發(fā)現(xiàn)配置異常,改變原來配置文件修改不易發(fā)現(xiàn)的缺點；3、系統(tǒng)自動恢復(fù)被篡改的配置文件,從而完全避免了因配置文件修改導(dǎo)致的重大故障；4、保證兩地三中心主備系統(tǒng)的配置信息一致性。產(chǎn)品簡介4.1運維腳本集中管理日常運維工作中，管理員積累了豐富的運維知識，并將部分整理為運維腳本，方便日常運維管理工作。提供運維腳本集中管理功能，將日常大量零散的運維腳本集中管理、統(tǒng)一下發(fā)。既實現(xiàn)了日常運維腳本的集中存儲、統(tǒng)一版本控制，也實現(xiàn)了自動下發(fā)、批量下發(fā)、批量更新。同時特有版本管理功能，可以清晰統(tǒng)計各Agent端運行的腳本版本情況。各種運維操作，都有其一定的業(yè)務(wù)邏輯關(guān)系。流程定制化,就是將這些看似零散又有著復(fù)雜的邏輯關(guān)系的應(yīng)用操作以一種常態(tài)化固定下來。例如:災(zāi)備系統(tǒng)啟停操作、數(shù)據(jù)庫啟停操作,都是由多個操作步驟、操作指令按照先后順序執(zhí)行完成。自動化運維管理平臺先將這些零散操作節(jié)點化,然后將這些代表每個操作單元的節(jié)點以一定的業(yè)務(wù)邏輯關(guān)系定制成可執(zhí)行流程，甚至流程里面也可嵌套子流程或者引用已有流程的以滿足各種龐大的業(yè)務(wù)邏輯需要.提供了類似Visio可視化配置界面，通過鼠標(biāo)點擊和拖拽方式，輕松完成各類復(fù)雜流程制定工作。作業(yè)流程人工干預(yù)日常運維工作,對于復(fù)雜操作流程，需要部分人工干預(yù)工作。例如：災(zāi)備切換演練過程中，柜臺簽退確認(rèn)、演練參與人員簽到；重要作業(yè)任務(wù)執(zhí)行前，多人復(fù)核確認(rèn);核心系統(tǒng)自動化任務(wù)執(zhí)行前，人工錄入鑒權(quán)信息等。在作業(yè)流程執(zhí)行過程中，提供圖形化人工干預(yù)界面。以便管理員在流程執(zhí)行過程中，進(jìn)行執(zhí)行復(fù)核確認(rèn)和重點信息人工錄入工作，提升作業(yè)流程執(zhí)行安全性。作業(yè)執(zhí)行驗證/持續(xù)監(jiān)控日常運維作業(yè)執(zhí)行完畢，需要確認(rèn)作業(yè)執(zhí)行效果。且部分行業(yè)監(jiān)管機(jī)構(gòu)要求，系統(tǒng)投產(chǎn)變更后，需對系統(tǒng)進(jìn)行3?5天持續(xù)監(jiān)測,確保系統(tǒng)變更后穩(wěn)定運行。提供檢查/監(jiān)控作業(yè)功能，在自動化作業(yè)執(zhí)行完畢后,對作業(yè)執(zhí)行效果進(jìn)行檢查、驗證.并在一定時間內(nèi)對系統(tǒng)運行狀況進(jìn)行持續(xù)監(jiān)控，保障業(yè)務(wù)連續(xù)性。作業(yè)操作手冊自動生成提供操作手冊自動生成功能。針對每個自動化操作流程，自動生成操作手冊。記錄每個操作流程的操作指令、操作服務(wù)器、操作賬號、操作說