電網(wǎng)運(yùn)維工具與管理研究

電網(wǎng)運(yùn)維工具與管理研究

Summary：隨著電力信息化進(jìn)程的加快，電力企業(yè)的運(yùn)維管理從手工操作向自動(dòng)化、標(biāo)準(zhǔn)化、規(guī)范化的方向發(fā)展。本文通過對(duì)數(shù)據(jù)庫(kù)自動(dòng)化工具的研究與應(yīng)用，了解其工作狀況，以便于開始查找其中存在的異常情況，而后制定針對(duì)性的管理措施，以期更好地確保電網(wǎng)得以平穩(wěn)運(yùn)行。Keys：電網(wǎng)運(yùn)維工具；知識(shí)結(jié)構(gòu)化；數(shù)據(jù)處理1引言電網(wǎng)運(yùn)維是電網(wǎng)運(yùn)行的重要組成部分，是保證電網(wǎng)安全穩(wěn)定運(yùn)行的基礎(chǔ)，也是電網(wǎng)企業(yè)效益的核心。為了更好地滿足一線數(shù)據(jù)庫(kù)運(yùn)維的需求，將需要積極對(duì)數(shù)據(jù)庫(kù)自動(dòng)化工具進(jìn)行開發(fā)與應(yīng)用，其將能夠有效地提高運(yùn)行的效率，切實(shí)推進(jìn)系統(tǒng)建設(shè)，進(jìn)一步支持運(yùn)維規(guī)范化管理。2運(yùn)維工具的分類2.1運(yùn)維流程管理工具運(yùn)維流程管理工具是基于業(yè)務(wù)流程，通過申請(qǐng)單、操作票等多種管理手段，對(duì)運(yùn)維人員、運(yùn)維時(shí)間等進(jìn)行管控。主要包括：(1)流程管理工具不能執(zhí)行商業(yè)運(yùn)作，其作用是對(duì)系統(tǒng)進(jìn)行追蹤，保證閉環(huán)，由此更好地反映出事件的工作關(guān)系，并對(duì)審批的風(fēng)險(xiǎn)進(jìn)行控制。(2)警報(bào)和突發(fā)事件管理工具，其能夠保證從錯(cuò)誤中吸取經(jīng)驗(yàn)教訓(xùn)、指導(dǎo)經(jīng)營(yíng)控制、用人力控制風(fēng)險(xiǎn)、充實(shí)知識(shí)庫(kù)。2.2運(yùn)維監(jiān)控告警工具運(yùn)維監(jiān)控告警工具主要包括網(wǎng)絡(luò)設(shè)備、數(shù)據(jù)庫(kù)、安全設(shè)備、主機(jī)以及應(yīng)用系統(tǒng)軟件等，其主要是WEB接口的分布式監(jiān)控系統(tǒng)，由此其整體的應(yīng)用自動(dòng)化水平也相對(duì)較高。該系統(tǒng)主要用于對(duì)網(wǎng)絡(luò)中的服務(wù)器和其它網(wǎng)絡(luò)狀況進(jìn)行監(jiān)測(cè)，可與各種不同的數(shù)據(jù)庫(kù)配合使用，具有實(shí)時(shí)報(bào)警功能。目前存在的技術(shù)難題主要是各種工具收集對(duì)象無法滿足用戶的個(gè)性化以及對(duì)腳本、接口等第三方監(jiān)測(cè)數(shù)據(jù)的要求。同時(shí)，由于大量數(shù)據(jù)的讀取會(huì)產(chǎn)生重存輕讀問題，由此將對(duì)數(shù)據(jù)的收集與傳輸機(jī)制的設(shè)計(jì)提出了更高的要求。2.3運(yùn)維發(fā)布變更工具運(yùn)維發(fā)布變更工具主要是對(duì)資源發(fā)布和資源調(diào)控進(jìn)行統(tǒng)一管理，針對(duì)實(shí)際需求進(jìn)行大量發(fā)布，既可以主動(dòng)發(fā)布更改，又可以實(shí)現(xiàn)被動(dòng)下載?，F(xiàn)有的技術(shù)難題主要有：操作工具的使用不方便、人工學(xué)習(xí)時(shí)間長(zhǎng)、自動(dòng)組態(tài)更新等。3電網(wǎng)運(yùn)維工具與管理3.1知識(shí)結(jié)構(gòu)化業(yè)務(wù)邏輯設(shè)計(jì)電網(wǎng)運(yùn)維工具可以進(jìn)一步處理和規(guī)范知識(shí)庫(kù)。知識(shí)庫(kù)的內(nèi)容主要有：電網(wǎng)生產(chǎn)的典型案例庫(kù)、重大事故事件庫(kù)、系統(tǒng)庫(kù)以及新技術(shù)新產(chǎn)品知識(shí)庫(kù)等，在其業(yè)務(wù)模塊中凸顯的是多源數(shù)據(jù)融合、模型管理、數(shù)據(jù)預(yù)處理、知識(shí)介紹等功能。其主要作用是為電網(wǎng)知識(shí)管理提供支持，并且切實(shí)提升知識(shí)的可用性以及系統(tǒng)的可擴(kuò)充性。期間電網(wǎng)運(yùn)維工具運(yùn)用中的多數(shù)據(jù)融合實(shí)際上就是將電網(wǎng)的各種信息綜合起來；而后通過模型的管理，將實(shí)體識(shí)別和關(guān)系屬性抽取相結(jié)合，構(gòu)建多種深度學(xué)習(xí)模型，方便系統(tǒng)的統(tǒng)一管理；數(shù)據(jù)預(yù)處理是一種需要處理和處理知識(shí)庫(kù)數(shù)量的多項(xiàng)應(yīng)用的需求；知識(shí)簡(jiǎn)報(bào)就是運(yùn)用智能技術(shù)，對(duì)電網(wǎng)的經(jīng)營(yíng)決策進(jìn)行分析。3.2多數(shù)據(jù)源融合本文提出一種基于云技術(shù)和分布式存儲(chǔ)技術(shù)的方法，其主要是將電網(wǎng)中的數(shù)據(jù)進(jìn)行結(jié)構(gòu)化和非結(jié)構(gòu)化的數(shù)據(jù)提取。然后通過對(duì)電網(wǎng)數(shù)據(jù)的整合、加工、交換和裝載，實(shí)現(xiàn)對(duì)各種數(shù)據(jù)的全量采集和實(shí)時(shí)提取。多數(shù)據(jù)源融合能夠與各種數(shù)據(jù)源、目標(biāo)庫(kù)相兼容，同時(shí)還能夠進(jìn)行數(shù)據(jù)的傳送。除此之外，多數(shù)據(jù)源融合也能夠?qū)Ω鞣N數(shù)據(jù)源進(jìn)行采集、匯聚、配置，實(shí)現(xiàn)多個(gè)服務(wù)器間的文件格式數(shù)據(jù)的安全傳輸，并能實(shí)現(xiàn)多種業(yè)務(wù)接口、數(shù)據(jù)庫(kù)等的數(shù)據(jù)傳送。3.3模型管理基于電網(wǎng)的知識(shí)資源管理，能夠滿足不同的使用者的需要，從知識(shí)圖譜、模型管理、知識(shí)檢索等多個(gè)方面提供知識(shí)服務(wù)。此外，還能為專家提供數(shù)據(jù)挖掘分析、專家模型的創(chuàng)建等業(yè)務(wù)。根據(jù)數(shù)據(jù)的抽取模型，也將能夠進(jìn)行數(shù)據(jù)管理，其中包括數(shù)據(jù)屬性標(biāo)簽、模型識(shí)別、對(duì)應(yīng)關(guān)系標(biāo)簽等方面內(nèi)容，進(jìn)而為凸顯各模塊的功能奠定堅(jiān)實(shí)的基礎(chǔ)。3.4數(shù)據(jù)預(yù)處理3.4.1數(shù)據(jù)預(yù)處理在收集不同維度、來源以及結(jié)構(gòu)的數(shù)據(jù)時(shí)，需要對(duì)數(shù)據(jù)進(jìn)行預(yù)處理，以便有效地修改錯(cuò)誤數(shù)據(jù)，并對(duì)數(shù)據(jù)進(jìn)行整理和儲(chǔ)存。數(shù)據(jù)提取是利用ETL技術(shù)從數(shù)據(jù)源中提取數(shù)據(jù)，而在實(shí)際操作中，往往存在許多可供使用的數(shù)據(jù)采集工具，因此，要根據(jù)電網(wǎng)運(yùn)維業(yè)務(wù)的實(shí)際情況，選取合適的采集工具。期間可以通過以下方法從數(shù)據(jù)庫(kù)提取數(shù)據(jù)信息：（1）全量抽取。這種方法類似于數(shù)據(jù)鏡像，能夠完全地從數(shù)據(jù)源中提取表格和視圖，主要應(yīng)用在系統(tǒng)的初始化階段。（2）增量抽取。當(dāng)所有的數(shù)據(jù)都被提取出來之后，再?gòu)臄?shù)據(jù)庫(kù)中提取出新的或者需要修改的數(shù)據(jù)。進(jìn)入數(shù)據(jù)篩選階段，還需要對(duì)電網(wǎng)運(yùn)行運(yùn)維中產(chǎn)生的不符合規(guī)范和無效的數(shù)據(jù)進(jìn)行清理，確保所采集到的數(shù)據(jù)符合規(guī)范的要求。但是，由于某些數(shù)據(jù)數(shù)據(jù)存在格式錯(cuò)誤、代碼值沖突等問題，為了適應(yīng)對(duì)數(shù)據(jù)的加載處理，還需要對(duì)業(yè)務(wù)數(shù)據(jù)進(jìn)行及時(shí)轉(zhuǎn)換。數(shù)據(jù)的轉(zhuǎn)換方式有兩種，即插入和修改，期間可以將已完成的數(shù)據(jù)和不干凈的數(shù)據(jù)插入到數(shù)據(jù)表中。若數(shù)據(jù)量較大，可建立數(shù)據(jù)庫(kù)，儲(chǔ)存于應(yīng)用程式文字檔案，并配合文字處理程式執(zhí)行作業(yè)。3.4.2數(shù)據(jù)清洗由于電網(wǎng)運(yùn)行環(huán)境的復(fù)雜性和存在電網(wǎng)運(yùn)維數(shù)據(jù)的多次上報(bào)等問題，經(jīng)常出現(xiàn)數(shù)據(jù)重復(fù)的情況，因此可以利用域的相似性對(duì)其進(jìn)行識(shí)別。同時(shí)，由于技術(shù)和物理因素的原因，導(dǎo)致數(shù)據(jù)的數(shù)值超出采集的范圍，并產(chǎn)生異常值。對(duì)于離散度較高的數(shù)據(jù)來源，可以采用盒式圖法，若采用數(shù)據(jù)分布特征量或電網(wǎng)運(yùn)維服務(wù)難以辨識(shí)噪音數(shù)據(jù)，則可以采用聚類辨識(shí)。一些字段需要彼此確認(rèn)，并根據(jù)字段的數(shù)據(jù)來源狀況，確定哪些字段信息更可靠，哪些字段應(yīng)該刪除和重建。當(dāng)電網(wǎng)運(yùn)行數(shù)據(jù)有多個(gè)源時(shí)，需要對(duì)其相關(guān)性進(jìn)行檢驗(yàn)。多源數(shù)據(jù)的集成比較困難，由此需要充分考慮到數(shù)據(jù)之間的相關(guān)性，并避免數(shù)據(jù)之間的沖突。在數(shù)據(jù)不一致性方面，還需要對(duì)元數(shù)據(jù)、字典等數(shù)據(jù)進(jìn)行整理和分析，并對(duì)數(shù)據(jù)之間的關(guān)系進(jìn)行徹底的梳理，而后對(duì)數(shù)據(jù)的錯(cuò)誤進(jìn)行修改。一般而言，許多不一致的數(shù)據(jù)都是由于缺乏數(shù)據(jù)規(guī)范而造成的，由此將可以將數(shù)據(jù)屬性當(dāng)作一個(gè)隨機(jī)變量，并根據(jù)其置信區(qū)間進(jìn)行判定。通過對(duì)數(shù)據(jù)信息的相似性進(jìn)行聚類處理，識(shí)別出不能分組的孤立點(diǎn)。期間還可以采用距離法，精確地測(cè)量數(shù)據(jù)的相似度。同時(shí)還可以利用分類方法，建立正常數(shù)據(jù)和異常數(shù)據(jù)的分類和查勘模式，由此將不符合規(guī)則的數(shù)據(jù)歸入到不正常的數(shù)據(jù)行列中。3.4.3規(guī)則處理引擎為了更好地處理電網(wǎng)運(yùn)行數(shù)據(jù)，需要對(duì)各數(shù)據(jù)項(xiàng)目建立相應(yīng)的數(shù)據(jù)元準(zhǔn)則和處理準(zhǔn)則，實(shí)現(xiàn)數(shù)據(jù)拼接、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)檢驗(yàn)等功能。而為了解決數(shù)據(jù)不規(guī)范的問題，本文提出一種基于機(jī)器學(xué)習(xí)的方法，即對(duì)各個(gè)數(shù)據(jù)域進(jìn)行識(shí)別和處理，而后使用自動(dòng)標(biāo)定技術(shù)，將數(shù)據(jù)項(xiàng)與標(biāo)準(zhǔn)庫(kù)的數(shù)據(jù)源進(jìn)行匹配，而后采用機(jī)器學(xué)習(xí)技術(shù)進(jìn)一步降低人工勞動(dòng)強(qiáng)度，并結(jié)合語義立體關(guān)系進(jìn)行抽樣值檢測(cè)，選擇具有較高相似性的數(shù)據(jù)作為相關(guān)數(shù)據(jù)表，然后根據(jù)數(shù)據(jù)特征選擇最合理的數(shù)據(jù)轉(zhuǎn)化規(guī)則，最后用規(guī)則模板構(gòu)造出相應(yīng)的字段。結(jié)束語綜上所述，電網(wǎng)運(yùn)維工具可利用知識(shí)庫(kù)數(shù)據(jù)，對(duì)電網(wǎng)的知識(shí)庫(kù)進(jìn)行再加工、標(biāo)準(zhǔn)化，期間采用多數(shù)據(jù)融合、模型管理、數(shù)據(jù)預(yù)處理、知識(shí)通報(bào)等方式，也能夠逐步完成系統(tǒng)的設(shè)計(jì)，從而為電網(wǎng)的管理決策提供數(shù)據(jù)支撐。Reference[1]晁岱峰,劉佳.省級(jí)電網(wǎng)企業(yè)助推營(yíng)商環(huán)