事故報(bào)告樣例模板

事故報(bào)告事故–漢庭酒店上海浦江聯(lián)航路店P(guān)MS無法使用事故時(shí)間:08/25/2014事故信息事故ID:2014082501簡(jiǎn)略描述：漢庭酒店上海浦江聯(lián)航路門店反饋其PMS無法使用，簡(jiǎn)單確認(rèn)只此一家店碰到故障。經(jīng)檢查發(fā)現(xiàn)PMS庫多數(shù)表中均沒有該酒店數(shù)據(jù)，后檢查分庫遷移配置表時(shí)發(fā)現(xiàn)，今天的PMS分庫2遷移，多刪除了1家酒店(漢庭酒店上海浦江聯(lián)航路店)，原因是上周分庫2的數(shù)據(jù)遷移線上演練時(shí)，漏刪除了主PMS庫中配置表與上海浦江聯(lián)航路店相關(guān)的記錄，而今天PMS分庫2正常遷移后，刪除的操作步驟(job,依賴于配置表)中除了刪除正常遷移那家門店數(shù)據(jù)之外，一并刪除了漢庭酒店上海浦江聯(lián)航路店的數(shù)據(jù)，這個(gè)失誤從而導(dǎo)致了故障。影響范圍:僅漢庭酒店上海浦江聯(lián)航路店P(guān)MS無法使用影響時(shí)長(zhǎng)：844分鐘解決辦法：周波聯(lián)系董雁在第3臺(tái)服務(wù)器上還原PMS數(shù)據(jù)到2014-08-2516:55分。李斌準(zhǔn)備從第3臺(tái)服務(wù)器上恢復(fù)該門店數(shù)據(jù)的腳本，并在還原后負(fù)責(zé)實(shí)施。狀狀告之門店相關(guān)情況，讓門店先使用應(yīng)急報(bào)表進(jìn)行業(yè)務(wù)，告之恢復(fù)預(yù)計(jì)3小時(shí)以上?；謴?fù)后聯(lián)系狀狀進(jìn)行門店回訪及驗(yàn)證。發(fā)生時(shí)間:16:5608/25/2014解決時(shí)間:7:0008/26/2014參與人員：李斌、周波、董雁、肖飛、庹新林、張狀狀附：事故時(shí)間點(diǎn)回顧日期時(shí)間描述/事件/行動(dòng)2014082517:15張狀狀接門店漢庭酒店上海浦江聯(lián)航路店反饋其PMS無法使用，簡(jiǎn)單確認(rèn)只此一家店碰到故障，并反饋此信息給肖飛和李斌。2014082517:20肖飛檢查后發(fā)現(xiàn)該酒店樓層信息，房態(tài)信息，接待單信息等主要表數(shù)據(jù)均不存在。并讓狀狀聯(lián)系李斌檢查是否和分庫有關(guān)。2014082517:25李斌檢查發(fā)現(xiàn)PMS庫多數(shù)表中均沒有該酒店數(shù)據(jù)，后檢查分庫遷移配置表時(shí)發(fā)現(xiàn)，今天的PMS分庫2遷移，多刪除了1家酒店(漢庭酒店上海浦江聯(lián)航路店)，原因是上周分庫2的數(shù)據(jù)遷移線上演練時(shí)，漏刪除了主PMS庫中配置表與上海浦江聯(lián)航路店相關(guān)的記錄，而今天PMS分庫2正常遷移后，刪除的操作步驟(job,依賴于配置表)中除了刪除正常遷移那家門店數(shù)據(jù)之外，一并刪除了漢庭酒店上海浦江聯(lián)航路店的數(shù)據(jù)，這個(gè)失誤從而導(dǎo)致了故障。2014082517:35肖飛、庹新林、李斌、周波、張狀狀討論解決方案。1．周波聯(lián)系董雁在第3臺(tái)服務(wù)器上還原PMS數(shù)據(jù)到2014-08-2516:55分。2．李斌準(zhǔn)備從第3臺(tái)服務(wù)器上恢復(fù)該門店數(shù)據(jù)的腳本，并在還原后負(fù)責(zé)實(shí)施。3．狀狀告之門店相關(guān)情況，讓門店先使用應(yīng)急報(bào)表進(jìn)行業(yè)務(wù)，告之恢復(fù)預(yù)計(jì)3小時(shí)以上。4．恢復(fù)后聯(lián)系狀狀進(jìn)行門店回訪及驗(yàn)證。2014082518:04向馬紹秋匯報(bào)事件相關(guān)情況。2014082518:30周波、董雁配合還原PMS數(shù)據(jù)。2014082606:00PMS數(shù)據(jù)還原到2014-08-2516:55分完成，歷時(shí)11.5小時(shí)。2014082607:00李斌將漢庭酒店上海浦江聯(lián)航路店數(shù)據(jù)成功恢復(fù)到2014-08-2516:55分，并回訪該門店。2014082607:30李斌聯(lián)系肖飛、潘明啟一起配合該門店進(jìn)行夜審，最終該門店成功夜審，PMS正常使用。根本原因分析事故ID:2014082501是否找到根本原因是根本原因分析原因是上周分庫2的數(shù)據(jù)遷移線上演練時(shí)，漏刪除了主PMS庫中配置表與上海浦江聯(lián)航路店相關(guān)的記錄，而今天PMS分庫2正常遷移后，刪除的操作步驟(job,依賴于配置表)中除了刪除正常遷移那家門店數(shù)據(jù)之外，一并刪除了漢庭酒店上海浦江聯(lián)航路店的數(shù)據(jù)，這個(gè)失誤從而導(dǎo)致了故障。這是個(gè)操作失誤，引起操作失誤的根本原因是操作習(xí)慣不好，對(duì)操作手冊(cè)的執(zhí)行不到位。事故跟進(jìn)1）流程1.整理以PMS為核心的日常操作手冊(cè)，所有操作必須嚴(yán)格按照操作手冊(cè)操作，每名DBA的操作工藝均標(biāo)準(zhǔn)化，并定期復(fù)核。2.重大變更或者復(fù)雜操作必須寫CheckList，必須嚴(yán)格按照CheckList操作，CheckList需要記錄和留檔，并定期復(fù)核。2)技術(shù)1.PMS分庫遷移CheckList中增加1步遷移前創(chuàng)建數(shù)據(jù)庫快照，以解決出現(xiàn)緊急情況時(shí)，可以快速回退數(shù)據(jù)。根本原因查找截止日期（若根本原因未找到）N/A改進(jìn)項(xiàng)編號(hào)改進(jìn)項(xiàng)描述負(fù)責(zé)人計(jì)劃完成時(shí)間狀態(tài)1整理以PMS為核心的日常操作手冊(cè)，所有操作必須嚴(yán)格按照操作手冊(cè)操作。庹新林/周波9/5未完成2重大變更或者復(fù)雜操作必須寫CheckList，必須嚴(yán)格按照CheckList操作，CheckList需要記錄和留檔。DBA3分庫遷移的CheckList增加3個(gè)步驟：1)數(shù)據(jù)遷移配置初始化前增加1個(gè)步驟：檢查配置表配置是否正常。2)刪除變更涉及門店Hivemap表