服務(wù)器故障應(yīng)急響應(yīng)方案

1、耳百米生活二.M深圳市百米生活電子商務(wù)1.導(dǎo)致效勞器出現(xiàn)故障的問題是一個龐大的集合,可以分成很多種導(dǎo)致效勞器出現(xiàn)故障的原因,根據(jù)效勞器故障出現(xiàn)的狀況進(jìn)行分類,確定故障屬于哪一個級別,根據(jù)相應(yīng)的故障級別對故障做對應(yīng)的處理,保證故障的處理流程是標(biāo)準(zhǔn)化的.如果沒有一套故障處理的標(biāo)準(zhǔn),工程師只能靠經(jīng)驗去判斷,但是依靠經(jīng)驗判斷并不是不可以,有時候這種處理方式會很高效,但是大多數(shù)這種處理方式都是不太合理的,如果更換了運(yùn)維工程師,顯然每一個工程師通過經(jīng)驗去判斷故障原因的方式都不盡相同,這樣的差異將會使故障處理事后不能夠得到很好的記錄與存檔,以供其他工程師以后借鑒故障處理案例.故障處理標(biāo)準(zhǔn)化的優(yōu)點：A.根據(jù)流

2、程可以確定哪些故障應(yīng)該立即匯報上級,哪些可以自行解決后,再寫故障處理報告匯報上級,這樣做有助于提升故障處理效率.B.對于工程師經(jīng)驗判斷,可能出現(xiàn)判斷失誤的情況,根據(jù)故障判斷流程,可以不遺漏任何可能的情況對效勞器故障進(jìn)行排除.C.有時候工程師處理了故障之后只是簡單的做了一下匯報,并沒有一些故障處理過程的記錄,以及故障處理的詳細(xì)時間記錄,這樣對需要追溯以前的具體情況的時候就束手無策了.2 .劃分故障等級故障級別故障說明故障處理第一步I級緊急當(dāng)系統(tǒng)出現(xiàn)以下相當(dāng)嚴(yán)重的現(xiàn)象時,屬一級故障： 系統(tǒng)整體癱瘓,全部操作失去響應(yīng)； 系統(tǒng)崩潰,關(guān)鍵硬件或文件系統(tǒng)損壞無法自動修復(fù)； 發(fā)生間歇性、隨機(jī)性、重復(fù)性的啟動

3、或應(yīng)用退出,無法保證公司業(yè)務(wù)的正常處理.立即匯報上級n級重要當(dāng)系統(tǒng)出現(xiàn)以下比擬嚴(yán)重的現(xiàn)象時,屬二級故障：關(guān)鍵部件含軟、硬件停止工作,導(dǎo)致系統(tǒng)降低運(yùn)行狀態(tài),客戶業(yè)務(wù)受到嚴(yán)重影響；系統(tǒng)整體性能嚴(yán)重卜降,無法自動恢復(fù)正常運(yùn)行狀態(tài)；立即匯報上級打百米生活f18MSHCOMI重要數(shù)據(jù)、參數(shù)和配置信息損壞,無恢復(fù),導(dǎo)致客戶數(shù)據(jù)及業(yè)務(wù)記錄嚴(yán)重?fù)p失；出級關(guān)鍵當(dāng)系統(tǒng)出現(xiàn)以下現(xiàn)象時,屬三級故障： 局部設(shè)備或軟件異常,局部功能受限,系統(tǒng)整體仍可止常工作,對客戶業(yè)務(wù)影響不大或存在隱患； 關(guān)鍵備用設(shè)施因故障離線,主用設(shè)施仍能正常工作； 系統(tǒng)運(yùn)行指標(biāo)例如：I/O效率、CPU效率受到直接或間接影響,客戶業(yè)務(wù)處理緩慢；立即匯

4、報上級IV級口聲當(dāng)系統(tǒng)出現(xiàn)以下情況而不影響客戶業(yè)務(wù)時,屬四級故障：不在運(yùn)行狀態(tài)的線路、端口損壞； 出于平安考慮并且是受保護(hù)的軟件降級或應(yīng)用重啟； 因存儲空間缺乏導(dǎo)致的性能下降； 系統(tǒng)硬件、軟件產(chǎn)品功能、安裝、或配置方面的支援；,業(yè)務(wù)仍然可以正常運(yùn)作,但是效勞器報出故障信息的；故障排錯判斷3 .故障分類序列問題種類詳細(xì)內(nèi)容一機(jī)房網(wǎng)絡(luò)故障1、骨干網(wǎng)光纖切割；2、機(jī)房網(wǎng)絡(luò)升級；3、機(jī)房網(wǎng)絡(luò)設(shè)備調(diào)試；4、機(jī)房網(wǎng)絡(luò)設(shè)備損壞；二政府部門封網(wǎng)1、效勞器沒有備案；2、域名備案存在問題；3、黑客入侵導(dǎo)致效勞器違法行為；4、違規(guī)代理效勞器；5、效勞器轉(zhuǎn)發(fā)違禁網(wǎng)站；6、效勞器放置的網(wǎng)站內(nèi)容/、符合當(dāng)?shù)氐恼ɡㄒ?guī)

5、；三機(jī)房鋪助設(shè)備故障1、機(jī)房空調(diào)故障問題；2、機(jī)房灰塵過多問題；3、機(jī)房電力供給問題；四機(jī)房機(jī)柜遷移1、機(jī)柜擴(kuò)容；2、機(jī)柜移位；3、效勞器遷移機(jī)柜；五效勞器硬件故障1、電源線損環(huán)；2、效勞器電源損壞；3、效勞器非人為硬盤損壞；4、效勞器受黑客入侵攻擊時導(dǎo)致硬盤損壞；5、CPU溫度過高燒毀；6、內(nèi)存使用中損壞；7、主板在電源損壞時容易燒毀；六效勞器系統(tǒng)故障1、黑客攻擊導(dǎo)致系統(tǒng)癱瘓；2、緩存日志過多沒后整理；3、人為配置/、當(dāng)導(dǎo)致系統(tǒng)崩潰；4、硬盤損壞導(dǎo)致系統(tǒng)崩潰；七效勞器應(yīng)用故障1、效勞器放置的應(yīng)用程序存在bug后門等；2、效勞器環(huán)境配置問題；3、黑客攻擊導(dǎo)致應(yīng)用程序崩潰；4、硬盤、內(nèi)存的兼容性

6、差導(dǎo)致應(yīng)用程序崩潰；5、應(yīng)用程序沒有優(yōu)化占用效勞器硬件資源過高導(dǎo)致崩潰；6、用戶負(fù)載過多導(dǎo)致應(yīng)用程序崩潰；八效勞器硬件超負(fù)荷1、數(shù)據(jù)超過硬盤讀寫負(fù)載水平導(dǎo)致應(yīng)用程序崩潰；2、CPU使用率跑滿導(dǎo)致效勞器宕機(jī)；3、使用內(nèi)存cache占用過多導(dǎo)致宕機(jī)；4、硬盤空間使用滿導(dǎo)致宕機(jī)；九效勞器網(wǎng)絡(luò)超負(fù)荷1、用戶量過多,效勞器帶寬/、足,導(dǎo)致卡頓,用戶訪問程序故障；2、系統(tǒng)連接數(shù)過多造成系統(tǒng)擁堵網(wǎng)絡(luò)帶寬使用不上；3、數(shù)據(jù)庫數(shù)據(jù)讀寫占用過多效勞器連接數(shù),達(dá)不到預(yù)期的效勞器叱；十人為違規(guī)操作1、人為違規(guī)關(guān)機(jī)；2、人為違規(guī)操作更改或刪除效勞器應(yīng)用；3、機(jī)房人為關(guān)機(jī)或斷電；深圳市百米生活電子商務(wù)1ODMSH.COM

7、百米生活18MSH.COMI深圳市百米生活電子商務(wù)效勞器受到攻擊1、效勞拒絕攻擊導(dǎo)致系統(tǒng)崩潰,如常見的UD啾水攻擊等；2、利用型攻擊導(dǎo)致黑客入侵系統(tǒng),如特洛伊木馬、口令猜想等；3、信息收集型攻擊,如體系結(jié)構(gòu)探測、DNS®轉(zhuǎn)換等4、假消息攻擊,如DNS高速緩存污染、偽造電子郵件等十二不可預(yù)知因素1、機(jī)房遭遇火災(zāi)事故；2、機(jī)房遭遇地震事故；4 .故障應(yīng)急處理流程5 .故障排錯流程6 .數(shù)據(jù)與日志備份在進(jìn)行故障修復(fù)的時候,需要對效勞器系統(tǒng)以及軟件的配置文件進(jìn)行修改,這些修改可能造成的風(fēng)險是很大的,這時保存?zhèn)浞菖渲梦募畔ⅰ?yīng)用數(shù)據(jù)、系統(tǒng)日志信息會很重要,可以直接通過shell腳本對效勞器重要的數(shù)據(jù)進(jìn)行備份.H百米生活18M5HCOMI7 .故障處理報告7.1. 故障處理報告文件命名規(guī)那么文件名前綴故障級別效勞器名稱故障類型故障處理報告I級一緊急n級一重要Linux效勞器名稱終端#前曲的子符故障分類一詳細(xì)內(nèi)容出級1關(guān)鍵IV級一小跳、口W例如：故障處理報告_I級一緊急_squid-chendu_系統(tǒng)崩潰7.2. 故障處理報告內(nèi)容故障發(fā)現(xiàn)時間Xxxx年xx月xx曰xx：xx24小時制處理完成時間如果處理一次就解決的直接寫：Xxxx年xx月xx曰xx：xx24小時制如果屢次處理后才解決,按卜面格式寫： Xxxx年xx月xx曰xx：xx24小時制 Xxxx年