600MW機(jī)組DCS服務(wù)器故障及處理事故預(yù)案

1、600mw機(jī)組dcs服務(wù)器故障及處理事故預(yù)案山西兆光發(fā)電有限責(zé)任公司600mw機(jī)纟fl dcs服務(wù)器故障及處理事故預(yù)案批準(zhǔn)：審核：編制：2013年9月8日600mw機(jī)組dcs服務(wù)器故障及處理事故預(yù)案山西兆光發(fā)電有限責(zé)任公司二期600mw四號(hào)機(jī)組于2013年8月17 h發(fā)牛一次dcs服 務(wù)器死機(jī)故障，嚴(yán)重影響到機(jī)組的安全穩(wěn)定運(yùn)行。為提髙運(yùn)行人員的事故處理能力和儀電維 護(hù)人員的應(yīng)急處理能力，保證機(jī)組在發(fā)生dcs服務(wù)器故障后能夠?qū)崿F(xiàn)冇序處理、及時(shí)消除 故障、避免擴(kuò)大事故，從運(yùn)行、熱控兩方面對(duì)發(fā)生dcs服務(wù)器死機(jī)后故障處理過程編寫此 處理預(yù)案，作為現(xiàn)場(chǎng)處理的指導(dǎo)建議。一、基本情況：我公司二期600mw

2、超臨界機(jī)組dcs系統(tǒng)采用西門了公司的t-3000系統(tǒng)，人機(jī)接口配置 為兩臺(tái)dcs服務(wù)器帶五臺(tái)運(yùn)行操作員站，dcs服務(wù)器為兀余配置，正常運(yùn)行小，主服務(wù)器 運(yùn)行，備用服務(wù)器保持?jǐn)?shù)據(jù)同步運(yùn)行，主服務(wù)器發(fā)生故障后，口動(dòng)切換至備用服務(wù)器。二、投運(yùn)以來設(shè)備運(yùn)行情況：二期機(jī)組2009年投產(chǎn)至此次故障期間，兩臺(tái)機(jī)組的dcs服務(wù)器運(yùn)行基本正常，未發(fā)主 單臺(tái)機(jī)組dcs服務(wù)器全部故障的情況。但發(fā)牛過多次備用服務(wù)器退備用和主服務(wù)器故障切 換至備用服務(wù)器的情況。三、dcs服務(wù)器故障現(xiàn)彖及處理方案：i、二單元dcs服務(wù)器全部死機(jī)的故障現(xiàn)象：此次#4機(jī)紐dcs服務(wù)器發(fā)主失電的故障現(xiàn)象如f：1）dcs mm數(shù)據(jù)全部顯示壞點(diǎn)，

3、運(yùn)行人員失去對(duì)機(jī)組所有畫而的監(jiān)視、控制。2）工程師站檢查服務(wù)器故障現(xiàn)象為：服務(wù)器上層模塊前面板電源指示燈亮（圖一屮的部 件2）,后部網(wǎng)線插口指示燈全滅（圖二中的部件4）；手動(dòng)停運(yùn)服務(wù)器上層模塊并斷電，單 獨(dú)啟動(dòng)服務(wù)器下層模塊，約30分鐘后，畫面恢復(fù)監(jiān)視，操作正常，但歷史數(shù)據(jù)無(wú)記錄，運(yùn) 行約1小時(shí)后，服務(wù)器下層模塊突然停運(yùn)，畫面數(shù)據(jù)全部壞點(diǎn)，啟動(dòng)服務(wù)器上層模塊時(shí)無(wú)法 啟動(dòng)，將下層模塊的硬盤全部更換到上層模塊后再次啟動(dòng)上層模塊，約30分鐘后上層模塊 啟動(dòng)，畫而恢復(fù)監(jiān)視，但是系統(tǒng)檢測(cè)為cpu enclosure 1 （對(duì)應(yīng)為卜層模塊）在運(yùn)行，cpuenclosure 0 （對(duì)應(yīng)上層模塊）顯示灰色。d

4、cs服務(wù)器僅剩上層模塊（安裝的是下層模塊的碩盤）運(yùn)行，無(wú)備用，且系統(tǒng)檢測(cè)為cpu1 （對(duì)應(yīng)為下層模塊）在運(yùn)行，cpu0 （對(duì)應(yīng)上層模塊）顯示灰色，即運(yùn)行中的上層模塊狀態(tài) 也不正常，服務(wù)器系統(tǒng)不可靠，隨時(shí)可能故障停運(yùn)，dcs系統(tǒng)失去畫面監(jiān)視與控制。圖一：圖二故障原因：下層模塊內(nèi)部的電源模塊故障導(dǎo)致其停運(yùn)，下層模塊的便盤良好；上層模塊因 其系統(tǒng)硬盤丟失文件導(dǎo)致模塊故障停運(yùn)。2、dcs服務(wù)器全部故障的處理原則：1）dcs服務(wù)器全部故障后，機(jī)組的所有監(jiān)視畫面和參數(shù)均無(wú)法監(jiān)視且任何操作指令均無(wú) 法執(zhí)行，但dcs的各閉環(huán)控制系統(tǒng)及保護(hù)功能仍能正常工作。因此，當(dāng)機(jī)組運(yùn)行在協(xié)調(diào)或 agc方式，主要自動(dòng)（給水、

5、減溫水、引送風(fēng)機(jī)調(diào)節(jié)、除氧器水位調(diào)節(jié)等）在正常投運(yùn)狀 態(tài)下，機(jī)組發(fā)生dcs服務(wù)器全部故障時(shí)，機(jī)組能夠短時(shí)間通過就地監(jiān)視重要的參數(shù)來維持 運(yùn)行。當(dāng)機(jī)組在純手動(dòng)方式（如機(jī)組啟動(dòng)過程中）或主要自動(dòng)退岀運(yùn)行狀態(tài)下，發(fā)生dcs 服務(wù)器全部故障時(shí)，應(yīng)立即執(zhí)行緊停規(guī)定，保證機(jī)組安全停運(yùn)。2）dcs服務(wù)器全部故障示，運(yùn)行人員必須通過就地監(jiān)視掌握機(jī)組主要參數(shù)的變化情況和 設(shè)備的運(yùn)行情況。需要就地監(jiān)視的主要參數(shù)有：除氧器水位、排汽裝査水位；需要就地重點(diǎn) 監(jiān)視的設(shè)備有：各給煤機(jī)下煤悄況，需耍就地可能操作的設(shè)備：鍋爐本體減溫水門。同吋需要儀電人員在電了間手動(dòng)測(cè)量鍋爐側(cè)主汽、再熱汽溫（保護(hù)配置為四取二，拆除單一測(cè) 點(diǎn)不

6、會(huì)導(dǎo)致保護(hù)謀動(dòng)）3）就地監(jiān)視的運(yùn)行人員要充足，各司其職，保持通訊暢通，匯報(bào)及時(shí)。4）當(dāng)機(jī)組主要參數(shù)無(wú)法控制或無(wú)法監(jiān)視時(shí)，當(dāng)值運(yùn)行人員必須嚴(yán)格執(zhí)行緊停規(guī)定。5）在dcs服務(wù)器全部故障處理過程屮，如果發(fā)生主耍設(shè)備掉閘或主要參數(shù)達(dá)到保護(hù)定值, 導(dǎo)致機(jī)組掉閘時(shí)，按機(jī)組停運(yùn)處理，保證機(jī)組安全停運(yùn)。6）儀電人員響應(yīng)必須及時(shí)、到位、值班人員熟悉且能夠勝任dcs服務(wù)器故障處理及相關(guān) 工作。3、dcs服務(wù)器全部故障的處理步驟:1）當(dāng)值值長(zhǎng)立即組織人員分工，就地監(jiān)視故障機(jī)組主要的控制參數(shù)和設(shè)備運(yùn)行情況，并 立即通知儀電值班人員到現(xiàn)場(chǎng)配侖故障處理。匯報(bào)公司分管副總經(jīng)理、發(fā)電部經(jīng)理、設(shè)備管 理部經(jīng)理，通知儀電部經(jīng)理增

7、加應(yīng)急處理人員。就地主要設(shè)備的運(yùn)行情況及參數(shù)情況由故障機(jī)紐機(jī)長(zhǎng)進(jìn)行統(tǒng)一記錄，就地監(jiān)視人員具體安 排分工如下:給煤機(jī)間監(jiān)視給煤機(jī)運(yùn)行情況的人員2人；鍋爐本體監(jiān)視減溫水調(diào)門的人員2人；除氧器水位就地監(jiān)視人員1人；排汽裝置水位就地監(jiān)視人員1人；儀電人員準(zhǔn)備配合減溫水調(diào)門的操作人員2人、電子間測(cè)溫度的人員2人。（儀電人員在 電子間需測(cè)量鍋爐側(cè)單側(cè)主汽溫度、再熱汽溫，每5分鐘向機(jī)長(zhǎng)匯報(bào)溫度數(shù)值一次。）2）值長(zhǎng)安排兩名電氣人員，一人至保安段，汽機(jī)交流潤(rùn)滑汕泵開關(guān)處，做好手動(dòng)啟動(dòng)汕 泵的準(zhǔn)備；一人至6kv配電室，做好機(jī)組掉閘后設(shè)備無(wú)法停運(yùn)時(shí)，就地停運(yùn)6kv設(shè)備的準(zhǔn) 備。3）機(jī)長(zhǎng)應(yīng)通過立盤嚴(yán)密監(jiān)視機(jī)組負(fù)荷變化

8、，同時(shí)每5分鐘向輔控脫硫值班員詢問并記錄 引風(fēng)機(jī)靜葉開度情況和增壓風(fēng)機(jī)入口負(fù)壓情況。4）給煤機(jī)就地人員必須嚴(yán)密監(jiān)視各給煤機(jī)運(yùn)行情況，當(dāng)發(fā)生給煤機(jī)斷煤示，及時(shí)投運(yùn)振 打裝査，保證下煤正常。5）dcs服務(wù)器故障期間，發(fā)生主要輔機(jī)設(shè)備掉閘或主汽、再熱蒸汽溫度升高達(dá)到保護(hù)值 或其他主要監(jiān)視參數(shù)達(dá)到保護(hù)定值時(shí)，應(yīng)立即執(zhí)行緊停規(guī)定，按破真空操作步驟停機(jī)：機(jī)長(zhǎng)在操作臺(tái)上同時(shí)按卜鍋爐mft和汽機(jī)跳閘按鈕，派專人就地檢查鍋爐滅火、汽機(jī)掉 閘，發(fā)電機(jī)解列。汽機(jī)未打閘吋，就地打閘。至電子間檢査廠用電切換是否成功。保安配電室人員查看交流潤(rùn)滑油泵未聯(lián)啟時(shí)，就地啟動(dòng)。汽機(jī)轉(zhuǎn)速降至1200rpm,就地啟 動(dòng)頂軸汕泵。6kv

9、 k電室人員檢查所有磨煤機(jī)、一次風(fēng)機(jī)掉閘，否則就地停運(yùn)，并依次停運(yùn)送、引風(fēng)機(jī), 汽泵止速后，停運(yùn)前置泵；電泵如聯(lián)啟，停運(yùn)電泵運(yùn)行；停運(yùn)凝泵運(yùn)行。汽機(jī)副機(jī)長(zhǎng)至就地手動(dòng)開啟真空破壞門，汽機(jī)破真空。就地停運(yùn)真空泵運(yùn)行；就地檢查汽 機(jī)止速后，投盤車運(yùn)行。按機(jī)纟fl破真空停運(yùn)檢點(diǎn)系統(tǒng)及設(shè)備運(yùn)行方式。dcs服務(wù)器恢復(fù)后,全面檢査dcs畫面和就地系統(tǒng),具備恢復(fù)條件時(shí),恢復(fù)機(jī)組啟動(dòng)。6）儀電人員到位后，除安排就地配合運(yùn)行人員的工作外，立即進(jìn)行dcs服務(wù)器的故障檢 查、處理工作，具體步驟見“四、（二）dcs服務(wù)器更換步驟"。四、機(jī)組正常'運(yùn)行中，更換dcs服務(wù)器的處理方案及步驟：（一）機(jī)組正常

10、運(yùn)行屮更換dcs服務(wù)器前的處理方案：1、為保證運(yùn)行人員在dcs失去価面監(jiān)視期間能夠可靠臨視機(jī)組重要的溫度參數(shù)，儀電部 必須在更換dcs服務(wù)器前將以下6個(gè)溫度測(cè)點(diǎn)接至鄰機(jī)運(yùn)行正常的dcs系統(tǒng)：1）爐a啟動(dòng)分離器溫度測(cè)點(diǎn)1 （40hah11ct602,安裝于40dcs15柜,ac007, ai02）；2）爐b啟動(dòng)分離器溫度測(cè)點(diǎn)1 （40hah12ct602,安裝于40dcs15柜,ac007, ai03）。安裝于 40dcs17 柜，ab008, ai01）；。4）右側(cè)過熱器出口溫度測(cè)點(diǎn)1 （40lba11ct601,5）左側(cè)再熱器出口溫度測(cè)點(diǎn)1 （40lbb81ct601,安裝于40dcs18柜

11、,ac007, aioo）；6）右側(cè)再熱器出口溫度測(cè)點(diǎn)1 （40lbb82ct601,安裝于40dcs18柜,ac007, ai01）。上述6個(gè)溫度測(cè)點(diǎn)分別通過臨時(shí)電纜逐個(gè)接至正常運(yùn)行dcs系統(tǒng)機(jī)組備用通道，依次対 應(yīng)為：3odcs15 柜/acoo8/ai（）1,3（）dcs15 柜/ac008/ai04,30dcs15 柜/ac008/ai07,3odcs15 柜/ac007/ai01, 30dcs16 柜/ac008/ai07, 30dcs16 柜/ac009/ai07。儀電部人員在正常運(yùn) 行dcs系統(tǒng)機(jī)組提前做好相關(guān)組態(tài)。在電子間拆接上述溫度測(cè)點(diǎn)z前，需做以下措施：逐個(gè)將每個(gè)測(cè)點(diǎn)所帶超

12、溫保護(hù)退出； 必須將該測(cè)點(diǎn)所參與的取平均值的邏輯塊改為第二點(diǎn)輸出，即輸岀值為同一側(cè)不拆的那個(gè) 溫度測(cè)點(diǎn)的數(shù)據(jù)，以避免拆接線過程屮產(chǎn)牛錯(cuò)謀信號(hào)而造成給水、減溫水自動(dòng)擺動(dòng)或者超溫 保護(hù)誤發(fā)而觸發(fā)mft；拆接線負(fù)責(zé)人與工程師站人員認(rèn)真溝通，在確認(rèn)已做好上述兩點(diǎn) 捲施后，由專人監(jiān)護(hù)，在核對(duì)所拆測(cè)點(diǎn)機(jī)柜號(hào)、模件位置及通道無(wú)誤后再進(jìn)行拆接線。將全部6個(gè)測(cè)點(diǎn)接至正常運(yùn)行dcs系統(tǒng)后，儀電部人員確認(rèn)數(shù)據(jù)正確，再明確告知運(yùn)行 人員監(jiān)視方法，同時(shí)在故障dcs系統(tǒng)工程師站及時(shí)恢復(fù)拆接線前所退出的溫度保護(hù)。拆接 線工作完成后所有人員退出電子間并清點(diǎn)人數(shù)，禁止在更換服務(wù)器期間觸動(dòng)相關(guān)測(cè)點(diǎn)接線。2、更換服務(wù)器前，儀電部人

13、員應(yīng)檢杳完善服務(wù)器上下層模塊的電源線、網(wǎng)線、硬盤的標(biāo) 識(shí)，標(biāo)識(shí)應(yīng)清楚準(zhǔn)確，無(wú)產(chǎn)生混淆的可能。3、儀電部人員提前在服務(wù)器模塊后接好顯示器以便觀察服務(wù)器啟/停時(shí)的狀態(tài)，并安裝鍵 盤、鼠標(biāo)。4、更換服務(wù)器前，發(fā)電部當(dāng)值值長(zhǎng)應(yīng)聯(lián)系調(diào)度將機(jī)組運(yùn)行方式退出agc方式，維持協(xié)調(diào) 運(yùn)行，機(jī)組運(yùn)行人員維持機(jī)組負(fù)荷穩(wěn)定，保證制粉系統(tǒng)運(yùn)行方式穩(wěn)定，停止鍋爐吹灰。將主 汽、再熱蒸汽溫度逐步調(diào)整穩(wěn)定，減溫水調(diào)門及機(jī)組的其他自動(dòng)投入自動(dòng)方式。發(fā)電部同時(shí)應(yīng)準(zhǔn)備充足的就地監(jiān)視人員，當(dāng)dcs服務(wù)器更換過程屮，由于所有dcs畫面 不能監(jiān)視，現(xiàn)場(chǎng)運(yùn)行監(jiān)視人員具體安排分工如2給煤機(jī)間監(jiān)視給煤機(jī)運(yùn)行情況的人員2人；鍋爐本體監(jiān)視減溫水調(diào)

14、門的人員2人；除氧器水位就地監(jiān)視人員1人；排汽裝證水位就地監(jiān)視人員1人；在正常運(yùn)行dcs系統(tǒng)機(jī)纟f1監(jiān)視故障dcs系統(tǒng)機(jī)纟r鍋爐側(cè)主汽溫度、再熱汽溫度的人員1 人。儀電人員準(zhǔn)備配合減溫水調(diào)門的操作人員2人。機(jī)組各方血參數(shù)和設(shè)備均趨于穩(wěn)定，人員全部到位后，開始dcs服務(wù)器的更換工作。（二）dcs服務(wù)器更換步驟：（儀電人員進(jìn)行）1、核實(shí)清楚服務(wù)器故障的模塊位置，確認(rèn)故障模塊電源線、網(wǎng)線標(biāo)識(shí)清楚準(zhǔn)確，然示拔 出故障模塊電源線后，再拔出故障模塊網(wǎng)線；2、拉出服務(wù)器故障模塊，平穩(wěn)放置，將其光驅(qū)、內(nèi)存條移至新的服務(wù)器模塊上；3、將新服務(wù)器模塊裝到機(jī)架對(duì)應(yīng)位置，將網(wǎng)線連接止確，將拆下的故障模塊上的硬盤按 對(duì)

15、應(yīng)位置裝到新模塊上；4、插好新模塊電源線，上電后新模塊白動(dòng)啟動(dòng)，大約有7分鐘的自檢時(shí)間（自檢期間模 塊風(fēng)扇聲音較大，自檢完成后會(huì)變?。?；5、在桌面上雙擊打開ft4300管理工具，可以査看各個(gè)部件的詳細(xì)情況，如圖三， cpuenclosure （上血模塊是0號(hào)，下血模塊是1號(hào)），i/o enclosure （上面模塊是10,下面 模塊是11）,其它還有storage enclosure圖三：可以觀察到cpu0狀態(tài)已可以監(jiān)視，但是因硬盤與模塊不對(duì)應(yīng)，硬盤無(wú)法實(shí)現(xiàn)同步，須將 硬盤恢復(fù)到最開始故障前的原安裝位置（即將現(xiàn)在上層模塊的硬盤恢復(fù)到下層模塊屮）：6、先停運(yùn)新裝的服務(wù)器模塊（在此次更換操作中為下

16、層模塊）、斷電，聯(lián)系就地人員做好臨測(cè)準(zhǔn)備后，逐臺(tái)退出#1-#5操作員站及大屏服務(wù)器的t3000軟 件，然后停運(yùn)服務(wù)器運(yùn)行中的模塊（在此次更換操作屮為上層模塊）并斷電，將上層模塊硬 盤拆出后裝至下層模塊；7、將新裝的服務(wù)器模塊（卜-層模塊）上電，模塊自動(dòng)啟動(dòng)，約7分鐘后自檢完成，啟動(dòng) t3000軟件，約20分鐘后，13個(gè)相關(guān)進(jìn)程全部啟動(dòng)，逐臺(tái)恢復(fù)#1-#5操作員站與大屏；8、檢查網(wǎng)線連接正確后，將上層模塊上電，自檢完成后，在windows磁盤管理器中發(fā)現(xiàn) 硬盤仍無(wú)法同步（如圖四,顯示有無(wú)盤符的分區(qū),顯示有disk。、diski、disk2、disk3： 如果同步，則應(yīng)只顯示disk0和d1sk1

17、）,于是在磁盤管理中將disk2和d1sk3的分區(qū)全 部刪除（切勿誤刪運(yùn)行中的磁盤分區(qū)）；圖四：硬盤不同步時(shí)的狀態(tài)，顯示有無(wú)盤符的分區(qū)圖五：將無(wú)盤符的分區(qū)刪除后的狀態(tài)9、打開 ft4300 管理工具，在 i/o enclosure-10/storagc enclosurc40 中，分別點(diǎn)擊 slot-1/disk2 和 slot-2/disk-3,選擇 add physical disk to rdr virtual disk,類似于圖六圖六：添加虛擬硬盤操作成功后，i/o enclosure-10/storagc enclosurc-40/slot-1/disk2 的描述將變?yōu)?i/oenc

18、losure-10/storage enclosure-40/slot-1 /disko,如下圖七圖七：添加虛擬硬盤成功后，slot-1/diski變?yōu)閟lot-1/disko然后打開 i/o enclosures/logical disk information/rdrvirtual disk 1,可觀察到新加的虛擬硬盤正在同步，如卜圖八，同步速度以10%的速率更新。10、等待硬盤數(shù)據(jù)同步，系統(tǒng)盤約1.5小吋后同步完成，擴(kuò)容盤約8小吋后同步完成，同 步完成后虛擬破盤的狀態(tài)變?yōu)椋篸uplex（如下圖九），服務(wù)器恢復(fù)冗余運(yùn)行狀態(tài)。圖九：同步完成后的硬盤狀態(tài)11、dcs服務(wù)器數(shù)據(jù)同步完成后，檢查所有硬件運(yùn)行正常，備用服務(wù)器可靠備用后，工作 結(jié)束，運(yùn)行人員正常使用dcs系統(tǒng)監(jiān)視、操作機(jī)組運(yùn)行。（三）dcs服務(wù)器更換過程中的注意事項(xiàng)：1、因更換故障模塊期間，dcs系統(tǒng)將失丈畫面監(jiān)視，因此需各崗位人員到位，做