大數(shù)據(jù)平臺(tái)運(yùn)維服務(wù)方案（僅用于學(xué)習(xí)的參考模板）

某大數(shù)據(jù)運(yùn)維服務(wù)方案當(dāng)故障出現(xiàn)時(shí)，通知相關(guān)人員，相關(guān)人員必須在最短時(shí)間內(nèi)查看故障點(diǎn)狀態(tài)，并分析故障原因；運(yùn)維工程師在排查出故障后，立即著手解決；故障排除后，對(duì)發(fā)生故障的設(shè)備或軟件進(jìn)行事后跟蹤；故障排除后，對(duì)故障原因及解決方法進(jìn)行詳細(xì)說(shuō)明記錄。二級(jí)預(yù)警當(dāng)故障出現(xiàn)時(shí)，通知相關(guān)人員，相關(guān)人員必須在最短時(shí)間內(nèi)查看故障點(diǎn)狀態(tài)，并分析故障原因；應(yīng)急小組組長(zhǎng)應(yīng)及時(shí)將故障相關(guān)情況報(bào)告給業(yè)主方部門(mén)領(lǐng)導(dǎo)，在故障完全排查清楚后以書(shū)面形式遞交“故障報(bào)告單”；運(yùn)維工程師在排查出故障后，立即著手解決，如需其他廠商或人員協(xié)助，及時(shí)上報(bào)給應(yīng)急小組，協(xié)調(diào)相關(guān)人員參與故障的排查；故障排除后，對(duì)發(fā)生故障的設(shè)備或軟件進(jìn)行事后跟蹤；故障排除后，對(duì)故障原因及解決方法進(jìn)行詳細(xì)說(shuō)明記錄。三級(jí)預(yù)警當(dāng)故障出現(xiàn)時(shí)，通知相關(guān)人員，相關(guān)人員必須在最短時(shí)間內(nèi)查看故障點(diǎn)狀態(tài)，并分析故障原因；應(yīng)急小組組長(zhǎng)應(yīng)及時(shí)將故障相關(guān)情況報(bào)告給業(yè)主方部門(mén)領(lǐng)導(dǎo)，在故障完全排查清楚后以書(shū)面形式遞交“故障報(bào)告單”；運(yùn)維工程師在排查出故障后，立即著手解決，如需其他廠商或人員協(xié)助，及時(shí)上報(bào)給應(yīng)急小組，協(xié)調(diào)相關(guān)人員參與故障的排查；如因硬件設(shè)備問(wèn)題導(dǎo)致故障的發(fā)生，則由硬件繼承方及時(shí)派出人員參與解決，并支持硬件設(shè)備的更新；故障排除后，對(duì)發(fā)生故障的設(shè)備或軟件進(jìn)行事后跟蹤；故障排除后，對(duì)故障原因及解決方法進(jìn)行詳細(xì)說(shuō)明記錄。服務(wù)內(nèi)容服務(wù)目標(biāo)本運(yùn)維服務(wù)方案針對(duì)某地大數(shù)據(jù)臺(tái)相關(guān)系統(tǒng)，服務(wù)內(nèi)容包括日常運(yùn)維服務(wù)、主要支撐軟件維保服務(wù)、主要應(yīng)用軟件系統(tǒng)維保服務(wù)、數(shù)據(jù)安全服務(wù)、咨詢支持服務(wù)等。服務(wù)目標(biāo)包含以下幾點(diǎn)：保障支撐軟件和應(yīng)用軟件的穩(wěn)定性和可靠性；保障支撐軟件和應(yīng)用軟件的安全性和可恢復(fù)性；保障數(shù)據(jù)的安全性故障的及時(shí)響應(yīng)與修復(fù)；客戶問(wèn)題的及時(shí)響應(yīng)與支持信息資產(chǎn)統(tǒng)計(jì)服務(wù)大數(shù)據(jù)臺(tái)信息資產(chǎn)包含服務(wù)器資源、支撐軟件以及應(yīng)用系統(tǒng)三部分。服務(wù)器資源類(lèi)型用途數(shù)量虛擬機(jī)應(yīng)用服務(wù)器4數(shù)據(jù)庫(kù)服務(wù)器3交換臺(tái)3大數(shù)據(jù)存儲(chǔ)集群4前置機(jī)5測(cè)試服務(wù)器2堡壘機(jī)1物理機(jī)數(shù)據(jù)庫(kù)服務(wù)器2文件服務(wù)器1支撐軟件類(lèi)型名稱(chēng)版本數(shù)量操作系統(tǒng)Centos7.320WindowsServer2008R264位5數(shù)據(jù)庫(kù)Postgresql9.24Mysql5.63Oracle11g1WEB容器Tomcat8.0.534Nginx1.7.81應(yīng)用系統(tǒng)系統(tǒng)名稱(chēng)訪問(wèn)地址大數(shù)據(jù)臺(tái)8數(shù)據(jù)可視化臺(tái)3:3025/dav/login.do展廳大屏3:3025/gg/login.jsp網(wǎng)絡(luò)、安全系統(tǒng)運(yùn)維服務(wù)大數(shù)據(jù)臺(tái)運(yùn)行網(wǎng)絡(luò)環(huán)境復(fù)雜，涉及外網(wǎng)、互聯(lián)網(wǎng)和專(zhuān)網(wǎng)。為保障數(shù)據(jù)的安全性和交換共享，各網(wǎng)域之間嚴(yán)格隔離，借助安全設(shè)備（網(wǎng)閘、防火墻、交換機(jī)等），實(shí)現(xiàn)數(shù)據(jù)高效傳輸。網(wǎng)絡(luò)、安全系統(tǒng)維護(hù)的目標(biāo)是：通過(guò)網(wǎng)絡(luò)、安全系統(tǒng)管理服務(wù)，降低網(wǎng)絡(luò)設(shè)備故障率，提高網(wǎng)絡(luò)設(shè)備的運(yùn)行性能和應(yīng)用系統(tǒng)的穩(wěn)定性、可靠性，保障數(shù)據(jù)傳輸?shù)陌踩浴＞唧w服務(wù)內(nèi)容如下：網(wǎng)絡(luò)故障排查網(wǎng)絡(luò)設(shè)備硬件狀態(tài)檢查網(wǎng)絡(luò)流量監(jiān)測(cè)安全策略配置及配置優(yōu)化網(wǎng)絡(luò)設(shè)備資料整理，配置參數(shù)整理網(wǎng)絡(luò)使用狀況趨勢(shì)分析及建議主機(jī)、存儲(chǔ)系統(tǒng)運(yùn)維服務(wù)主機(jī)維護(hù)主機(jī)維護(hù)指大數(shù)據(jù)臺(tái)在用的各類(lèi)服務(wù)器的維護(hù)：數(shù)據(jù)庫(kù)服務(wù)器、應(yīng)用服務(wù)器、GIS服務(wù)器、交換臺(tái)服務(wù)器等。具體運(yùn)維服務(wù)內(nèi)容包括以下幾項(xiàng)：服務(wù)器硬件狀態(tài)檢查服務(wù)器設(shè)備事件管理服務(wù)服務(wù)器性能監(jiān)控服務(wù)器防病毒軟件的維護(hù)服務(wù)器系統(tǒng)漏洞修補(bǔ)服務(wù)器進(jìn)程與服務(wù)檢查 服務(wù)器磁盤(pán)空間檢查系統(tǒng)垃圾清理記錄與報(bào)告以上內(nèi)容要求云計(jì)算中心運(yùn)維人員以及值班人員定期巡檢，實(shí)時(shí)掌握服務(wù)器的運(yùn)行狀態(tài)，依照運(yùn)維規(guī)定有序記錄事件日志，形成操作管理手冊(cè)、事故管理文檔、故障處理報(bào)告、監(jiān)控報(bào)告等文檔，保障服務(wù)器自身的正常運(yùn)轉(zhuǎn)。除以上內(nèi)容外，應(yīng)用系統(tǒng)運(yùn)維人員定期巡檢支撐軟件以及應(yīng)用系統(tǒng)的運(yùn)行狀態(tài)，了解對(duì)服務(wù)器的需求是否發(fā)生變化，為服務(wù)器的動(dòng)態(tài)調(diào)整提供依據(jù)。存儲(chǔ)系統(tǒng)維護(hù)大數(shù)據(jù)臺(tái)匯聚了各部門(mén)的大量數(shù)據(jù)，存儲(chǔ)系統(tǒng)的維護(hù)是一項(xiàng)十分重要的工作。存儲(chǔ)系統(tǒng)的維護(hù)主要包括存儲(chǔ)硬件的管理維護(hù)和數(shù)據(jù)的冗余備份，具體服務(wù)內(nèi)容包括：存儲(chǔ)設(shè)備日常狀態(tài)檢查維護(hù)存儲(chǔ)設(shè)備事件管理維護(hù)備份及恢復(fù)策略制定備份介質(zhì)管理備份作業(yè)檢查數(shù)據(jù)的冗余存儲(chǔ)備份數(shù)據(jù)恢復(fù)備份數(shù)據(jù)整理記錄和報(bào)告，針對(duì)巡檢、故障處理、調(diào)整等操作環(huán)節(jié)，詳細(xì)記錄日志，形成文檔存檔以備查閱數(shù)據(jù)庫(kù)系統(tǒng)運(yùn)維服務(wù)大數(shù)據(jù)臺(tái)中使用了多種數(shù)據(jù)庫(kù)：Postgresql、Mysql、Oracle、文件數(shù)據(jù)庫(kù)。具體服務(wù)內(nèi)容包括：數(shù)據(jù)庫(kù)運(yùn)行狀態(tài)檢查數(shù)據(jù)庫(kù)使用磁盤(pán)空間檢查數(shù)據(jù)庫(kù)備份任務(wù)檢查數(shù)據(jù)庫(kù)連接情況監(jiān)控?cái)?shù)據(jù)庫(kù)告警日志檢查分析數(shù)據(jù)表數(shù)據(jù)量檢查數(shù)據(jù)庫(kù)恢復(fù)中間件運(yùn)維服務(wù)中間件是應(yīng)用系統(tǒng)穩(wěn)定運(yùn)行的必要組件，大數(shù)據(jù)臺(tái)中的中間件包含WEB容器、負(fù)載均衡中間等。中間件的維護(hù)主要包括以下內(nèi)容：運(yùn)行監(jiān)控異常日志分析應(yīng)用系統(tǒng)更新導(dǎo)致對(duì)中間件版本、配置的變更維護(hù)中間件自身缺陷導(dǎo)致對(duì)中間件進(jìn)行升級(jí)更新的維護(hù)中間件升級(jí)更新對(duì)應(yīng)用系統(tǒng)產(chǎn)生的影響維護(hù)中間件的配置調(diào)優(yōu)維護(hù)運(yùn)維服務(wù)流程主動(dòng)式服務(wù)定期預(yù)防性維護(hù)服務(wù)維護(hù)團(tuán)隊(duì)根據(jù)系統(tǒng)維護(hù)服務(wù)計(jì)劃或用戶要求為用戶提供定期預(yù)防性維護(hù)服務(wù)。此類(lèi)服務(wù)是有計(jì)劃有步驟進(jìn)行的，目的是為了提高系統(tǒng)的可使用率和高可靠性，把系統(tǒng)故障的可能性降低到最低。在硬件維護(hù)方面，要求維護(hù)團(tuán)隊(duì)工程師每?jī)芍苓M(jìn)行一次現(xiàn)場(chǎng)例行檢查，為用戶維護(hù)硬件設(shè)備，并為用戶替換那些雖然能夠工作但不是很正常的部件，以避免系統(tǒng)崩潰的情況發(fā)生，防患于未然。系統(tǒng)運(yùn)行健康檢查維護(hù)團(tuán)隊(duì)?wèi)?yīng)提供一月一次的系統(tǒng)運(yùn)行健康檢查，按計(jì)劃由專(zhuān)家定期對(duì)主機(jī)系統(tǒng)性能進(jìn)行診斷，根據(jù)結(jié)果出具性能診斷報(bào)告，并征得用戶同意后調(diào)整系統(tǒng)參數(shù)，使系統(tǒng)始終在最佳狀態(tài)下運(yùn)行。對(duì)可能出現(xiàn)的問(wèn)題提供學(xué)預(yù)測(cè)，并采取必要的預(yù)防和補(bǔ)救措施，防患于未然。系統(tǒng)運(yùn)行狀況分析每季一次對(duì)系統(tǒng)的運(yùn)行狀況分析。提供本項(xiàng)目服務(wù)器設(shè)備運(yùn)行狀態(tài)和性能的分析、評(píng)估服務(wù)，以提高系統(tǒng)的可靠性、可用性和整體性能。每年一次向用戶提交詳細(xì)的系統(tǒng)可用性、安全性、運(yùn)行狀況分析等預(yù)防性維護(hù)策略、報(bào)告和總結(jié)。糾錯(cuò)性維護(hù)維護(hù)團(tuán)隊(duì)?wèi)?yīng)提供電話技術(shù)支持服務(wù)或現(xiàn)場(chǎng)維護(hù)服務(wù)。在部件服務(wù)方面，維護(hù)團(tuán)隊(duì)?wèi)?yīng)及時(shí)確認(rèn)故障原因，并更換故障部件，恢復(fù)系統(tǒng)正常運(yùn)行。解決系統(tǒng)軟件問(wèn)題，恢復(fù)系統(tǒng)軟件正常運(yùn)行，作系統(tǒng)備份，遞交系統(tǒng)檢查報(bào)告等。服務(wù)管理制度規(guī)范服務(wù)時(shí)間日常服務(wù)響應(yīng)時(shí)間針對(duì)由硬件（如虛機(jī)、存儲(chǔ)、內(nèi)存等）導(dǎo)致的問(wèn)題，由云計(jì)算中心運(yùn)維人員或值班工程師及時(shí)發(fā)現(xiàn)并及時(shí)解決，服務(wù)時(shí)間做到及時(shí)響應(yīng)。若出現(xiàn)應(yīng)用系統(tǒng)層面的問(wèn)題，則由運(yùn)維人員配合軟件技術(shù)支持人員，及時(shí)解決，可采用遠(yuǎn)程方式或到現(xiàn)場(chǎng)操作，做到近及時(shí)響應(yīng)。事故分級(jí)服務(wù)響應(yīng)時(shí)間各級(jí)故障事件的最晚響應(yīng)時(shí)間為：確認(rèn)時(shí)間一級(jí)故障事件二級(jí)故障事件三級(jí)故障事件四級(jí)故障事件1小時(shí)技術(shù)服務(wù)人員4小時(shí)專(zhuān)業(yè)工程師技術(shù)服務(wù)人員24小時(shí)技術(shù)支持專(zhuān)家專(zhuān)業(yè)工程師技術(shù)服務(wù)人員48小時(shí)服務(wù)項(xiàng)目經(jīng)理服務(wù)項(xiàng)目經(jīng)理專(zhuān)業(yè)工程師技術(shù)服務(wù)人員故障事件等級(jí)劃分如下：一級(jí)故障事件：現(xiàn)有的網(wǎng)絡(luò)或系統(tǒng)停機(jī)，或遭到嚴(yán)重攻擊行為或安全事件，對(duì)信息系統(tǒng)的業(yè)務(wù)運(yùn)作有重大影響；二級(jí)故障事件：現(xiàn)有網(wǎng)絡(luò)或系統(tǒng)的操作性能?chē)?yán)重降級(jí)，或由于網(wǎng)絡(luò)性能失?；虬踩录?yán)重影響信息系統(tǒng)用戶業(yè)務(wù)運(yùn)作；三級(jí)故障事件：網(wǎng)絡(luò)或系統(tǒng)的操作性能受損，安全事件（例如病毒在小范圍內(nèi)發(fā)作），但大部分業(yè)務(wù)運(yùn)作仍可正常工作；四級(jí)故障事件：在網(wǎng)絡(luò)、服務(wù)器、存儲(chǔ)、安全設(shè)備功能、安裝或配置方面需要調(diào)整或優(yōu)化。本級(jí)故障事件對(duì)信息系統(tǒng)的業(yè)務(wù)運(yùn)作幾乎無(wú)影響，或影響很小。依據(jù)事故重要性和緊急性的原則，每一級(jí)事故嚴(yán)格定義升級(jí)時(shí)間為2小時(shí)，其中在二級(jí)事故和一級(jí)事故應(yīng)急處理過(guò)程中，要及時(shí)考慮替代恢復(fù)方案，盡可能在最短的時(shí)間內(nèi)恢復(fù)業(yè)務(wù)系統(tǒng)。其中三級(jí)事故的處理，駐場(chǎng)服務(wù)人員在事故響應(yīng)1個(gè)小時(shí)內(nèi)，如果不能快速判斷問(wèn)題所在，可以尋求整個(gè)服務(wù)團(tuán)隊(duì)的支持。在一、二級(jí)事故判斷中，服務(wù)人員在監(jiān)控中發(fā)現(xiàn)問(wèn)題，一方面應(yīng)迅速將問(wèn)題向部門(mén)領(lǐng)導(dǎo)進(jìn)行反應(yīng)，一方面須快速判斷問(wèn)題和收集事故信息，涉及到具體產(chǎn)品提供商或服務(wù)商內(nèi)，及時(shí)告知客戶協(xié)調(diào)相關(guān)廠商現(xiàn)場(chǎng)支持。為保障業(yè)務(wù)臺(tái)的正常運(yùn)行，除對(duì)突發(fā)故障的應(yīng)急支持外，要充分保障日常對(duì)業(yè)務(wù)系統(tǒng)軟硬件的應(yīng)急災(zāi)備恢復(fù)預(yù)案，并通過(guò)定期的演練加強(qiáng)應(yīng)對(duì)突發(fā)事故的意識(shí)和流程。行為規(guī)范對(duì)待工作要有責(zé)任心遇事不推諉，不抱怨每日工作做到日清日畢，不拖拉發(fā)現(xiàn)問(wèn)題，多溝通，多理解關(guān)注成本，倡導(dǎo)節(jié)約服務(wù)過(guò)程中耐心細(xì)致服務(wù)之后認(rèn)真確認(rèn)嚴(yán)格尊受保密諸項(xiàng)要求和規(guī)范現(xiàn)場(chǎng)服務(wù)支持規(guī)范著裝整齊，佩戴工牌服務(wù)過(guò)程遇交流情況，使用普通話與客戶溝通時(shí)，耐心聆聽(tīng)客戶問(wèn)題，并及時(shí)給出回應(yīng)，遇不冷靜客戶，保持克制工作場(chǎng)所嚴(yán)禁吃東西、睡覺(jué)等與工作無(wú)關(guān)事情進(jìn)入機(jī)房等要求嚴(yán)格的場(chǎng)所或區(qū)域必須尊受相關(guān)規(guī)定辦公電腦上只能安裝和使用工作相關(guān)的程序或軟件收到任務(wù)或問(wèn)題后，及時(shí)解決并反饋?zhàn)龊梅?wù)支持記錄問(wèn)題記錄規(guī)范針對(duì)運(yùn)維服務(wù)過(guò)程中自檢或突發(fā)遇到的問(wèn)題，嚴(yán)格記錄問(wèn)題相關(guān)信息，包含但不限于以下信息項(xiàng)：?jiǎn)栴}描述問(wèn)題發(fā)生時(shí)間問(wèn)題當(dāng)前狀態(tài)問(wèn)題提出人、記錄人、處理人問(wèn)題發(fā)生單位、記錄時(shí)間、處理時(shí)間原因分析處理方法防范措施事故主要責(zé)任方應(yīng)急服務(wù)響應(yīng)措施應(yīng)急基本流程從整個(gè)生命周期劃分，應(yīng)急服務(wù)響應(yīng)包含準(zhǔn)備階段、監(jiān)測(cè)與預(yù)警階段、處置階段和總結(jié)改進(jìn)階段四個(gè)階段的工作。應(yīng)急準(zhǔn)備階段組建應(yīng)急響應(yīng)組織，確定應(yīng)急響應(yīng)制度，系統(tǒng)性識(shí)別運(yùn)行維護(hù)服務(wù)對(duì)象及運(yùn)行維護(hù)活動(dòng)中可能出現(xiàn)的風(fēng)險(xiǎn)，定義應(yīng)急事件級(jí)別，制定預(yù)案，開(kāi)展培訓(xùn)和演練。監(jiān)測(cè)與預(yù)警階段進(jìn)行日常監(jiān)測(cè)，及時(shí)發(fā)現(xiàn)應(yīng)急事件并有效預(yù)警，進(jìn)行核實(shí)和評(píng)估，以規(guī)定的策略和程序啟動(dòng)預(yù)案，并保持對(duì)應(yīng)急事件的跟蹤。應(yīng)急處置階段采取必要的應(yīng)急調(diào)度手段，基于預(yù)案開(kāi)展故障排查與診斷，對(duì)故障進(jìn)行有效、快速的處理與系統(tǒng)恢復(fù)，及時(shí)通報(bào)應(yīng)急事件，提供持續(xù)性服務(wù)保障，進(jìn)行結(jié)果評(píng)價(jià)，關(guān)閉事件。該階段流程如下：總結(jié)改進(jìn)階段對(duì)應(yīng)急事件發(fā)生原因、處理過(guò)程和結(jié)果進(jìn)行總結(jié)分析，持續(xù)改進(jìn)應(yīng)急工作，完善信息系統(tǒng)。預(yù)防措施做好應(yīng)急準(zhǔn)備階段的各項(xiàng)工作：劃分預(yù)警級(jí)別，制定各級(jí)別預(yù)警的應(yīng)對(duì)方案；做好風(fēng)險(xiǎn)評(píng)估工作，對(duì)各種潛在的預(yù)警實(shí)施演練；做好監(jiān)控與巡檢工作：人工+設(shè)備+軟件的多渠道監(jiān)控排查方案，盡早發(fā)現(xiàn)不確定因素、不穩(wěn)定性，將問(wèn)題解決在發(fā)生之前；故障發(fā)生恢復(fù)后，記錄過(guò)程中各項(xiàng)注意事項(xiàng)，及時(shí)總結(jié)經(jīng)驗(yàn)，及時(shí)排查是否在別處存在同樣的問(wèn)題。突發(fā)事件應(yīng)急策略突發(fā)事件發(fā)生后，首先評(píng)估事件影響情況，依據(jù)預(yù)警級(jí)別的定義（如下表），確定事件預(yù)警級(jí)別：預(yù)警級(jí)別警報(bào)內(nèi)容情況描述一級(jí)網(wǎng)絡(luò)流量升高主機(jī)性能降低數(shù)據(jù)備份出現(xiàn)異常監(jiān)控軟甲出現(xiàn)故障日志大量累計(jì)……系統(tǒng)出現(xiàn)故障，但不影響系統(tǒng)的正常運(yùn)轉(zhuǎn)二級(jí)網(wǎng)絡(luò)中斷或網(wǎng)路設(shè)備異常主機(jī)、硬盤(pán)等出現(xiàn)故障黑客入侵或病毒發(fā)作……系統(tǒng)出現(xiàn)故障，影響系統(tǒng)的正常運(yùn)轉(zhuǎn)，經(jīng)運(yùn)維工程師排查，可在較短時(shí)間內(nèi)恢復(fù)系統(tǒng)三級(jí)網(wǎng)絡(luò)防火墻宕機(jī)無(wú)法使用主機(jī)宕機(jī)無(wú)法啟動(dòng)操作系統(tǒng)、數(shù)據(jù)庫(kù)無(wú)發(fā)啟動(dòng)……系統(tǒng)出現(xiàn)故障，影響系統(tǒng)的正常運(yùn)轉(zhuǎn)，經(jīng)運(yùn)維工程師不能再短時(shí)間內(nèi)排除故障，影響用戶業(yè)務(wù)的正常運(yùn)作針對(duì)上表中的預(yù)警情況，應(yīng)急策略分別如下：一級(jí)預(yù)警當(dāng)故障出現(xiàn)時(shí)，通知相關(guān)人員，相關(guān)人員必須在最短時(shí)間內(nèi)查看故障點(diǎn)狀態(tài)，并分析故障原因；運(yùn)維工程師在排查出故障后，立即著手解決；故障排除后，對(duì)發(fā)生故障的設(shè)備或軟件進(jìn)行事后跟蹤；故障排除后，對(duì)故障原因及解決方法進(jìn)行詳細(xì)說(shuō)明記錄。二級(jí)預(yù)警當(dāng)故障出現(xiàn)時(shí)，通知相關(guān)人員，相關(guān)人員必須在最短時(shí)間內(nèi)查看故障點(diǎn)狀態(tài)，并分析故障原因；應(yīng)急小組組長(zhǎng)應(yīng)及時(shí)將故障相關(guān)情況報(bào)告給業(yè)主方部門(mén)領(lǐng)導(dǎo)，在故障完全排查清楚后以書(shū)面形式遞交“故障報(bào)告單”；運(yùn)維工程師在排查出故障后，立即著手解決，如需其他廠商或人員協(xié)助，及時(shí)上報(bào)給應(yīng)急小組，協(xié)調(diào)相關(guān)人員參與故障的排查；故障排除后，對(duì)發(fā)生故障的設(shè)備或軟件進(jìn)行事后跟蹤；故障排除后，對(duì)故障原因及解決方法進(jìn)行詳細(xì)