自動(dòng)化運(yùn)維管理解決方案

自動(dòng)化運(yùn)維管理解決方案目錄TOC\o"1-5"\h\z\o"CurrentDocument"IT運(yùn)維管理面臨挑戰(zhàn)3\o"CurrentDocument"應(yīng)運(yùn)而生的自動(dòng)化解決方案4\o"CurrentDocument"自動(dòng)化應(yīng)用場(chǎng)景5\o"CurrentDocument"3。1災(zāi)備切換自動(dòng)化5\o"CurrentDocument"3。2故障現(xiàn)場(chǎng)快照6\o"CurrentDocument"批量設(shè)備操作處理6\o"CurrentDocument"周期性作業(yè)調(diào)度7\o"CurrentDocument"3。5應(yīng)急處理流程8\o"CurrentDocument"3。6重要配置備份、基線比對(duì)8\o"CurrentDocument"產(chǎn)品簡(jiǎn)介10\o"CurrentDocument"4.1運(yùn)維腳本集中管理10\o"CurrentDocument"4。2可視化流程配置引擎10\o"CurrentDocument"作業(yè)流程人工干預(yù)10\o"CurrentDocument"作業(yè)執(zhí)行驗(yàn)證/持續(xù)監(jiān)控11\o"CurrentDocument"4。5作業(yè)操作手冊(cè)自動(dòng)生成11\o"CurrentDocument"4。6作業(yè)執(zhí)行結(jié)果展現(xiàn)11\o"CurrentDocument"4。7配置備份/基線庫管理11\o"CurrentDocument"產(chǎn)品優(yōu)勢(shì)12\o"CurrentDocument"運(yùn)行環(huán)境131IT運(yùn)維管理面臨挑戰(zhàn)隨著企業(yè)IT服務(wù)多樣化發(fā)展，IT應(yīng)用的規(guī)模也越來越龐大、IT應(yīng)用的結(jié)構(gòu)也越來越復(fù)雜.隨著不斷變化的IT應(yīng)用，需要越來越合理的模式,來保障IT服務(wù)能靈活便捷、安全穩(wěn)定地持續(xù)保障，這種模式的保障因素就是IT運(yùn)維管理。據(jù)國(guó)外某咨詢機(jī)構(gòu)2013年調(diào)研結(jié)果顯示，在IT費(fèi)用中大約有1/2用于系統(tǒng)運(yùn)營(yíng)期的運(yùn)維管理工作.即使當(dāng)前企業(yè)在IT運(yùn)維管理方面投入大量時(shí)間及費(fèi)用，但是在IT運(yùn)維管理方面仍存在諸多問題。主要表現(xiàn)為：＞運(yùn)維管理效率低、人工成本高：■經(jīng)驗(yàn)未沉淀為實(shí)際運(yùn)維工作，經(jīng)驗(yàn)利用率、推廣率低；■分散于各服務(wù)器上的運(yùn)維腳本，存在管理風(fēng)險(xiǎn)，且耗費(fèi)大量管理成本；■日常操作消耗大量人力資源，誤操作風(fēng)險(xiǎn)較大，操作執(zhí)行效率低；＞操作過程可控度低，運(yùn)維風(fēng)險(xiǎn)大：■操作與執(zhí)行方案匹配度無法保證，實(shí)際操作過程可控度較低；■日常操作對(duì)人員水平要求高，人力資源風(fēng)險(xiǎn)大；＞運(yùn)維操作透明度低：■實(shí)際操作不便于監(jiān)督，存在“黑盒”操作風(fēng)險(xiǎn)；■日常工作與實(shí)際操作無法有效關(guān)聯(lián)，不利于日后審計(jì)；2應(yīng)運(yùn)而生的自動(dòng)化解決方案面對(duì)IT運(yùn)維管理中的諸多問題，單靠人工已經(jīng)無法滿足在技術(shù)、業(yè)務(wù)等方面的要求，那么標(biāo)準(zhǔn)化、自動(dòng)化、架構(gòu)優(yōu)化、過程優(yōu)化等降低IT服務(wù)成本的因素越來越被人們所重視。其中，IT運(yùn)維自動(dòng)化是指將IT運(yùn)維中日常的、大量的重復(fù)性工作自動(dòng)化，把過去的手工執(zhí)行轉(zhuǎn)為自動(dòng)化操作。自動(dòng)化是IT運(yùn)維工作的升華,IT運(yùn)維自動(dòng)化不單純是一個(gè)維護(hù)過程，更是一個(gè)管理的提升過程，是IT運(yùn)維的最高層次，也是未來的發(fā)展趨勢(shì)。IT運(yùn)維自動(dòng)化從誕生發(fā)展至今，其重要屬性之一已經(jīng)不僅僅只是代替人工操作，更重要的是深層探知和全局分析，關(guān)注的是在當(dāng)前條件下如何實(shí)現(xiàn)性能與服務(wù)最優(yōu)化，同時(shí)保障投資收益最大化。自動(dòng)化對(duì)IT運(yùn)維的影響，已經(jīng)不僅僅是人與設(shè)備之間的關(guān)系，已經(jīng)發(fā)展到了面向客戶服務(wù)驅(qū)動(dòng)IT運(yùn)維決策的層面。融海咨詢借鑒IT運(yùn)維自動(dòng)化發(fā)展趨勢(shì)，結(jié)合多年IT服務(wù)經(jīng)驗(yàn)中對(duì)用戶需求的把控，自行研發(fā)自動(dòng)化解決方案。自動(dòng)化方案概述：通過自動(dòng)化手段，實(shí)現(xiàn)IT運(yùn)維管理操作的自動(dòng)化調(diào)度、“一鍵式”處理；通過異常處理的支持，對(duì)操作的結(jié)果進(jìn)行驗(yàn)證，并持續(xù)監(jiān)控作業(yè)執(zhí)行結(jié)果；通過時(shí)間約束條件，對(duì)按照時(shí)間計(jì)劃執(zhí)行的運(yùn)維作業(yè)進(jìn)行管理；通過復(fù)雜的關(guān)系運(yùn)算條件，處理復(fù)雜的作業(yè)流程的關(guān)系;通過UserTasks人工接口，方便運(yùn)維人員對(duì)作業(yè)調(diào)度流程的參與；通過圖形化的工作流定制平臺(tái)，實(shí)現(xiàn)對(duì)業(yè)務(wù)活動(dòng)進(jìn)行整體規(guī)劃；通過與其它平臺(tái)的集成，實(shí)現(xiàn)了與報(bào)警、監(jiān)控等運(yùn)維系統(tǒng)的一體化管理。從而實(shí)現(xiàn)功能強(qiáng)大、簡(jiǎn)單易用、安全可靠的作業(yè)調(diào)度自動(dòng)化。通過自動(dòng)化解決方案，推動(dòng)了企業(yè)IT運(yùn)維管理操作的指令化、標(biāo)準(zhǔn)化、流程化進(jìn)程。自動(dòng)化建設(shè)目標(biāo)：3自動(dòng)化應(yīng)用場(chǎng)景3.1災(zāi)備切換自動(dòng)化隨著IT設(shè)備數(shù)量持續(xù)增加，IT系統(tǒng)日益復(fù)雜，依靠手動(dòng)方式進(jìn)行系統(tǒng)災(zāi)備切換的傳統(tǒng)模式遇到了一定瓶頸，主要表現(xiàn)：＞操作效率低：RTO（RecoveryTimeObjective，復(fù)原時(shí)間目標(biāo)）無法保證；＞操作風(fēng)險(xiǎn)大：系統(tǒng)復(fù)雜度日益增高，操作復(fù)雜度也隨之增強(qiáng)，操作失誤的幾率也隨之增高；＞過分依賴個(gè)人水平:在盡短的時(shí)間內(nèi)完成整個(gè)切換流程，對(duì)操作員本人的技能水平、操作規(guī)程熟悉程度、環(huán)境熟悉程度有著非常高的要求.＞操作過程不透明：災(zāi)備切換有相應(yīng)的操作規(guī)程，但是切換過程中，每個(gè)環(huán)節(jié)執(zhí)行狀態(tài)、當(dāng)前執(zhí)行環(huán)節(jié)情況只有操作員本人了解，旁人無從知曉.通過對(duì)災(zāi)備切換流程進(jìn)行標(biāo)準(zhǔn)化配置，實(shí)現(xiàn)災(zāi)備切換管理的配置可視化、執(zhí)行可視化、過程可視化、規(guī)程可視化。＞配置可視化:提供類似Visio配置方式，每個(gè)操作環(huán)節(jié)配置成為一個(gè)節(jié)點(diǎn)，然后通過拖拽、連線的方式配置整個(gè)切換流程，避免了代碼編寫工作，降低了系統(tǒng)使用門檻，增加了系統(tǒng)易用性；＞執(zhí)行可視化：提供圖形界面方式，災(zāi)備切換流程無需通過繁瑣命令行方式執(zhí)行,管理員僅需在圖形界面中選擇相應(yīng)流程并點(diǎn)擊執(zhí)行即可，執(zhí)行前還可以在界面進(jìn)行多人確認(rèn)；＞過程可視化：提供操作流程視圖，所有人員在流程圖中可以清晰了解災(zāi)備切換整體流程情況、當(dāng)前執(zhí)行環(huán)節(jié)，以及每個(gè)節(jié)點(diǎn)執(zhí)行狀態(tài)，為保證不同使用習(xí)慣，執(zhí)行過程提供流程視圖、樹狀視圖兩種展現(xiàn)形態(tài)；規(guī)程可視化：提供自動(dòng)生成操作規(guī)程文檔功能,管理員配置完某自動(dòng)化流程時(shí)，系統(tǒng)能夠自動(dòng)生成該流程的操作規(guī)程文檔，系統(tǒng)使用人員可以根據(jù)文檔清晰了解到本自動(dòng)化流程完整信息.3.2故障現(xiàn)場(chǎng)快照傳統(tǒng)IT監(jiān)控系統(tǒng)在故障發(fā)生時(shí)能及時(shí)告警，但是運(yùn)維人員、廠商、開發(fā)商僅僅獲得一條告警信息，無法從監(jiān)控平臺(tái)獲取更多的信息完成故障分析及預(yù)防。通過監(jiān)控/監(jiān)控集成、作業(yè)調(diào)度雙重技術(shù)手段，在故障發(fā)生時(shí)，對(duì)故障現(xiàn)場(chǎng)的本機(jī)環(huán)境、跨服務(wù)器/跨設(shè)備環(huán)境進(jìn)行全方位捕捉，對(duì)故障現(xiàn)場(chǎng)進(jìn)行最大程度的保留，協(xié)助管理員、廠商、開發(fā)商進(jìn)行事故后的詳細(xì)分析，并設(shè)定相應(yīng)預(yù)案。通過故障現(xiàn)場(chǎng)快照，可以完成：1、故障現(xiàn)場(chǎng)全方位場(chǎng)景獲取，獲取內(nèi)容可以根據(jù)不同角色需求靈活定制；2、故障發(fā)生時(shí)系統(tǒng)自行完成場(chǎng)景捕獲、保存，并將其分發(fā)給不同的角色進(jìn)行聯(lián)合“會(huì)診”；3、根據(jù)預(yù)案內(nèi)，通過定制化納入到中，實(shí)現(xiàn)故障發(fā)生前的預(yù)警，并且提供及時(shí)處理，避免故障再次發(fā)生。3.3批量設(shè)備操作處理隨著IT規(guī)模不斷擴(kuò)大，IT設(shè)備數(shù)量不斷增多，原有簡(jiǎn)單的運(yùn)維操作，也隨之成倍增長(zhǎng)，即增加了運(yùn)維工作量，又使重復(fù)性操作過程中，由于人員注意力降低導(dǎo)致的操作失誤次數(shù)成倍增長(zhǎng)。例如：對(duì)設(shè)備批量程序更新、批量巡檢等、批量密碼修改等大批量、重復(fù)性操作。提供批量作業(yè)并行處理平臺(tái)，實(shí)現(xiàn)多設(shè)備同時(shí)批處理操作。通過自動(dòng)化流程把，將簡(jiǎn)單的操作在大批量設(shè)備上操作，并對(duì)作業(yè)執(zhí)行過程進(jìn)行監(jiān)控對(duì)執(zhí)行結(jié)果進(jìn)行檢查。通過部署批量設(shè)備操作流程：1、批量設(shè)備并發(fā)執(zhí)行，縮短批量操作執(zhí)行時(shí)間，提高執(zhí)行效率，并且提高系統(tǒng)升級(jí)一致性；2、減少批量操作過程中，由于實(shí)施過程中因操作人員操作疲勞、注意力降低導(dǎo)致的誤操作，從而減少人工失誤導(dǎo)致的生產(chǎn)系統(tǒng)故障；3、提高IT運(yùn)維自動(dòng)化水平，減少人工投入，降低運(yùn)營(yíng)成本；3.4周期性作業(yè)調(diào)度隨著IT應(yīng)用系統(tǒng)不斷上線，運(yùn)維中周期性、重復(fù)性操作逐漸增多。此類操作即占用了運(yùn)維人員大量日常工作時(shí)間，又存在人工誤操作的風(fēng)險(xiǎn).并且對(duì)于復(fù)雜作業(yè)流程，還需要運(yùn)維人員有較高的技術(shù)水平及較高的系統(tǒng)熟練度，由此增加了因人員、崗位變動(dòng)導(dǎo)致的而操作意外發(fā)生幾率。例如：可以對(duì)每日巡檢、日終批量操作、事務(wù)數(shù)據(jù)收集、月結(jié)批處理、年結(jié)批處理等作業(yè)執(zhí)行的自動(dòng)化。提供統(tǒng)一應(yīng)用運(yùn)行操控平臺(tái)，實(shí)現(xiàn)跨平臺(tái)、跨作業(yè)段、跨設(shè)備的作業(yè)協(xié)同調(diào)度操作.平臺(tái)將周期性、重復(fù)性批處理作業(yè)，以及龐大復(fù)雜的作業(yè)流程，固化為自動(dòng)化作業(yè)流程，通過時(shí)間調(diào)度引擎，按照既定時(shí)間規(guī)則，在指定時(shí)間點(diǎn)進(jìn)行調(diào)度。從而實(shí)現(xiàn)作業(yè)的周期性自動(dòng)化調(diào)度，運(yùn)維人員僅需查看相應(yīng)的作業(yè)執(zhí)行過程、執(zhí)行成功與否、執(zhí)行結(jié)果報(bào)告（截圖、操作命令輸出結(jié)果等操作結(jié)果信息）。通過自動(dòng)化流程把成百上千的批處理作業(yè)組織起來，規(guī)范跑批作業(yè)，對(duì)作業(yè)執(zhí)行過程進(jìn)行監(jiān)控對(duì)執(zhí)行結(jié)果進(jìn)行檢查。通過周期性作業(yè)調(diào)度自動(dòng)化：1、降低了關(guān)鍵崗位的技能要求：過去，必須由全面掌握各業(yè)務(wù)系統(tǒng)的運(yùn)維專家完成各類批處理作業(yè)的操作和判斷；現(xiàn)在，普通運(yùn)維人員即可使用自動(dòng)化工具完成。2、消除故障隱患、保證作業(yè)效率：一方面，對(duì)關(guān)鍵數(shù)據(jù)的完整性、合規(guī)性進(jìn)行校驗(yàn)；另一方面，在發(fā)生異常時(shí)快速定位故障數(shù)據(jù)源，以便排查。3、降低日常運(yùn)維工作中人員的時(shí)間投入、精力投入，從而將運(yùn)維人員解放出來，投入到更重要的IT運(yùn)維工作中。3.5應(yīng)急處理流程IT系統(tǒng)發(fā)生嚴(yán)重故障發(fā)生時(shí)，時(shí)間就是金錢。一方面，如何縮短管理員接收通知到故障處理時(shí)間；另一方面，如何縮短故障處理過程花費(fèi)的時(shí)間，并提高故障處理成功率，顯得極其重要。例如：文件系統(tǒng)滿，導(dǎo)致新的日志無法寫入；數(shù)據(jù)庫歸檔日志空間滿；數(shù)據(jù)庫表空間滿，數(shù)據(jù)無法寫入；生產(chǎn)系統(tǒng)故障，需要緊急切換備份系統(tǒng)等.自動(dòng)化處理與監(jiān)控告警集成，第一時(shí)間發(fā)現(xiàn)，調(diào)用預(yù)定義的故障應(yīng)急處理流程；故障處理后，系統(tǒng)會(huì)調(diào)用檢查流程，對(duì)故障恢復(fù)情況進(jìn)行檢查。全部操作完畢后，系統(tǒng)會(huì)將故障發(fā)生現(xiàn)場(chǎng)鏡像、故障處理結(jié)果、處理完畢檢查確認(rèn)結(jié)果，一并發(fā)送給管理員，由管理員確認(rèn)整個(gè)流程執(zhí)行無誤。通過應(yīng)急處理流程：1、極大縮短了從故障發(fā)生到故障響應(yīng)的間隔，為系統(tǒng)恢復(fù)贏得了寶貴的時(shí)間，從而極大的減少了系統(tǒng)故障所產(chǎn)生的影響；2、管理員在應(yīng)急故障處理過程中肩負(fù)著極大的壓力，精神高度緊張，可能會(huì)產(chǎn)生處理流程順序顛倒或者忘記某一環(huán)節(jié)等現(xiàn)象，并且存在壓力下導(dǎo)致操作失誤的可能，由自動(dòng)化平臺(tái)應(yīng)急處理，一方面提高了故障處理過程中的操作效率，一方面提高了故障處理的成功率。3、系統(tǒng)自動(dòng)將故障發(fā)生的現(xiàn)場(chǎng)鏡像、故障處理過程、結(jié)果以及故障恢復(fù)后的檢查結(jié)果，以報(bào)告形式保存下來，為今后審查、統(tǒng)計(jì)提供了依據(jù)。3.6重要配置備份、基線比對(duì)IT系統(tǒng)中配置文件非常重要，因?yàn)檎`操作導(dǎo)致配置文件被刪除、內(nèi)容被修改，經(jīng)常會(huì)導(dǎo)致非常嚴(yán)重的后果.日常運(yùn)維工作中，管理員需要花費(fèi)大量的時(shí)間，對(duì)系統(tǒng)中包括操作系統(tǒng)、數(shù)據(jù)庫、中間件、應(yīng)用系統(tǒng)及其他軟件的重要配置文件進(jìn)行周期性備份，并且配置文件被誤修改、惡意篡改時(shí)，不容易被發(fā)現(xiàn)，只有當(dāng)產(chǎn)生嚴(yán)重后果才會(huì)被人們注意。重要文件例如：Oracle的initSID。ora,listener.ora文件，sqlnet.ora文件，tnsnames.ora文件，操作系統(tǒng)/etc/passwd文件，以及Weblogic、應(yīng)用系統(tǒng)等配置文件。通過基線保護(hù)模塊，幫助企業(yè)建立信息系統(tǒng)的安全基線，并持續(xù)監(jiān)控關(guān)鍵文件和系統(tǒng)的完整性和一致性。平臺(tái)定期對(duì)企業(yè)中各層面、各級(jí)別配置文件進(jìn)行周期性備份，并以此建立文件基線。平臺(tái)會(huì)定期對(duì)系統(tǒng)中配置文件修改日期、大小、內(nèi)容等進(jìn)行掃描，并將掃描結(jié)果與基線版本進(jìn)行比對(duì)，當(dāng)發(fā)現(xiàn)兩者不一致時(shí)，及時(shí)通知管理員進(jìn)行審查，并在極端情況以基線版本為準(zhǔn)則，對(duì)現(xiàn)有環(huán)境進(jìn)行備份、更新。通過文件基線管理功能：1、系統(tǒng)自動(dòng)對(duì)重要配置進(jìn)行備份，極大減輕了管理員日常工作壓力，并且減少了備份過程中的遺漏情況發(fā)生；2、系統(tǒng)通過自動(dòng)掃描、對(duì)比，發(fā)現(xiàn)配置異常，改變?cè)瓉砼渲梦募薷牟灰装l(fā)現(xiàn)的缺點(diǎn)；3、系統(tǒng)自動(dòng)恢復(fù)被篡改的配置文件，從而完全避免了因配置文件修改導(dǎo)致的重大故障；4、保證兩地三中心主備系統(tǒng)的配置信息一致性。4產(chǎn)品簡(jiǎn)介4.1運(yùn)維腳本集中管理日常運(yùn)維工作中，管理員積累了豐富的運(yùn)維知識(shí)，并將部分整理為運(yùn)維腳本，方便日常運(yùn)維管理工作.提供運(yùn)維腳本集中管理功能，將日常大量零散的運(yùn)維腳本集中管理、統(tǒng)一下發(fā).既實(shí)現(xiàn)了日常運(yùn)維腳本的集中存儲(chǔ)、統(tǒng)一版本控制，也實(shí)現(xiàn)了自動(dòng)下發(fā)、批量下發(fā)、批量更新。同時(shí)特有版本管理功能，可以清晰統(tǒng)計(jì)各Agent端運(yùn)行的腳本版本情況。4?2可視化流程配置引擎各種運(yùn)維操作，都有其一定的業(yè)務(wù)邏輯關(guān)系.流程定制化，就是將這些看似零散又有著復(fù)雜的邏輯關(guān)系的應(yīng)用操作以一種常態(tài)化固定下來。例如：災(zāi)備系統(tǒng)啟停操作、數(shù)據(jù)庫啟停操作，都是由多個(gè)操作步驟、操作指令按照先后順序執(zhí)行完成。自動(dòng)化運(yùn)維管理平臺(tái)先將這些零散操作節(jié)點(diǎn)化，然后將這些代表每個(gè)操作單元的節(jié)點(diǎn)以一定的業(yè)務(wù)邏輯關(guān)系定制成可執(zhí)行流程，甚至流程里面也可嵌套子流程或者引用已有流程的以滿足各種龐大的業(yè)務(wù)邏輯需要.提供了類似Visio可視化配置界面，通過鼠標(biāo)點(diǎn)擊和拖拽方式，輕松完成各類復(fù)雜流程制定工作。4.3作業(yè)流程人工干預(yù)日常運(yùn)維工作，對(duì)于復(fù)雜操作流程，需要部分人工十預(yù)工作。例如：災(zāi)備切換演練過程中，柜臺(tái)簽退確認(rèn)、演練參與人員簽到；重要作業(yè)任務(wù)執(zhí)行前，多人復(fù)核確認(rèn)；核心系統(tǒng)自動(dòng)化任務(wù)執(zhí)行前，人工錄入鑒權(quán)信息等。在作業(yè)流程執(zhí)行過程中，提供圖形化人工干預(yù)界面。以便管理員在流程執(zhí)行過程中，進(jìn)行執(zhí)行復(fù)核確認(rèn)和重點(diǎn)信息人工錄入工作，提升作業(yè)流程執(zhí)行安全性。4.4作業(yè)執(zhí)行驗(yàn)證/持續(xù)監(jiān)控日常運(yùn)維作業(yè)執(zhí)行完畢，需要確認(rèn)作業(yè)執(zhí)行效果。且部分行業(yè)監(jiān)管機(jī)構(gòu)要求，系統(tǒng)投產(chǎn)變更后，需對(duì)系統(tǒng)進(jìn)行3~5天持續(xù)監(jiān)測(cè),確保系統(tǒng)變更后穩(wěn)定運(yùn)行。提供檢查/監(jiān)控作業(yè)功能，在自動(dòng)化作業(yè)執(zhí)行完畢后，對(duì)作業(yè)執(zhí)行效果進(jìn)行檢查、驗(yàn)證。并在一定時(shí)間內(nèi)對(duì)系統(tǒng)運(yùn)行狀況進(jìn)行持續(xù)監(jiān)控，保障業(yè)務(wù)連續(xù)性.4.5作業(yè)操作手冊(cè)自動(dòng)生成提供操作手冊(cè)自動(dòng)生成功能。針對(duì)每個(gè)自動(dòng)化操作流程，自