石油行業(yè) 大數(shù)據(jù)分析平臺方案

平臺方案 1 2（一）石油行業(yè)大數(shù)據(jù)分析概念 2 3 3 4 4 5 6 8 9 11 12 13 13 13 13 13 15 15 16 17 19 20 20 22附件A數(shù)據(jù)管理規(guī)范 23附件B數(shù)據(jù)質(zhì)量評估辦法 41附件C數(shù)據(jù)質(zhì)量管理流程 45關(guān)于石油行業(yè)大數(shù)據(jù)分析的理解數(shù)據(jù)管理的現(xiàn)狀根據(jù)行業(yè)信息化發(fā)展的現(xiàn)狀，結(jié)合當(dāng)今行業(yè)石油行業(yè)大數(shù)據(jù)分析的要求，大型集團(tuán)或政務(wù)管理部門現(xiàn)階段數(shù)據(jù)管理方面存在以下（1）數(shù)據(jù)多頭管理，缺少專門對數(shù)據(jù)管理進(jìn)行監(jiān)督和控制的組織。信息系統(tǒng)的建設(shè)和管理職能分散在各部門，致使數(shù)據(jù)管理的職責(zé)分散，權(quán)責(zé)不明確。組織機構(gòu)各部門關(guān)注數(shù)據(jù)的角度不一樣，缺少一個組織從全局的視角對數(shù)據(jù)進(jìn)行管理，導(dǎo)致無法建立統(tǒng)一的數(shù)據(jù)管理規(guī)程、標(biāo)準(zhǔn)等，相應(yīng)的數(shù)據(jù)管理監(jiān)督措施無法得到落實。組織機構(gòu)的數(shù)據(jù)考核體系也尚未建立，無法保障數(shù)據(jù)管理標(biāo)準(zhǔn)和規(guī)（2）多系統(tǒng)分散建設(shè)，沒有規(guī)范統(tǒng)一的省級數(shù)據(jù)標(biāo)準(zhǔn)和數(shù)據(jù)模型。組織機構(gòu)為應(yīng)對迅速變化的市場和社會需求，逐步建立了各自的信息系統(tǒng)，各部門站在各自的立場生產(chǎn)、使用和管理數(shù)據(jù)，使得數(shù)據(jù)分散在不同的部門和信息系統(tǒng)中，缺乏統(tǒng)一的數(shù)據(jù)規(guī)劃、可信的數(shù)據(jù)來源和數(shù)據(jù)標(biāo)準(zhǔn)，導(dǎo)致數(shù)據(jù)不規(guī)范、不一致、冗余、無法共享等問題出現(xiàn)，組織機構(gòu)各部門對數(shù)據(jù)的理解難以應(yīng)用一致的語言來描述，導(dǎo)致理解不一致。（3）缺少統(tǒng)一的主數(shù)據(jù)，組織機構(gòu)核心系統(tǒng)間的人員等主要信息并不是存儲在一個獨立的系統(tǒng)中，或者不是通過統(tǒng)一的業(yè)務(wù)管理流程在系統(tǒng)間維護(hù)。缺乏對集團(tuán)公司或政務(wù)單位主數(shù)據(jù)的管理，就無法保障主數(shù)據(jù)在整個業(yè)務(wù)范圍內(nèi)保持一致、完整和可控，導(dǎo)致業(yè)務(wù)數(shù)據(jù)正確性無法得到保障。（4）缺乏統(tǒng)一的集團(tuán)型數(shù)據(jù)質(zhì)量管理流程體系。當(dāng)前現(xiàn)狀中數(shù)據(jù)質(zhì)量管理主要由各組織部門分頭進(jìn)行；跨局跨部門的數(shù)據(jù)質(zhì)量溝通機制不完善；缺乏清晰的跨局跨部門的數(shù)據(jù)質(zhì)量管控規(guī)范與標(biāo)數(shù)據(jù)的自動采集尚未全面實現(xiàn)，處理過程存在人為干預(yù)問題，很多部門存在數(shù)據(jù)質(zhì)量管理人員不足、知識與經(jīng)驗不夠、監(jiān)管方式不全面等問題；缺乏完善的數(shù)據(jù)質(zhì)量管控流程和系統(tǒng)支撐能力。（5）數(shù)據(jù)全生命周期管理不完整。目前，大型集團(tuán)或政務(wù)單位，數(shù)據(jù)的產(chǎn)生、使用、維護(hù)、備份到過時被銷毀的數(shù)據(jù)生命周期管理規(guī)范和流程還不完善，不能確定過期和無效數(shù)據(jù)的識別條件，且非結(jié)構(gòu)化數(shù)據(jù)未納入數(shù)據(jù)生命周期的管理范疇；無信息化工具支撐數(shù)據(jù)生命周期狀態(tài)的查詢，未有效利用元數(shù)據(jù)管理。石油行業(yè)大數(shù)據(jù)分析的概述2.1石油行業(yè)大數(shù)據(jù)分析概念石油行業(yè)大數(shù)據(jù)分析是指將數(shù)據(jù)作為組織資產(chǎn)而展開的一系列石油行業(yè)大數(shù)據(jù)分析體系是指從組織架構(gòu)、管理制度、操作規(guī)范、IT應(yīng)用技術(shù)、績效考核支持等多個維度對組織的數(shù)據(jù)架構(gòu)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生命周期等各方面進(jìn)行全面的梳理、建設(shè)以及持續(xù)改進(jìn)的體系。2.2石油行業(yè)大數(shù)據(jù)分析目標(biāo)石油行業(yè)大數(shù)據(jù)分析的目標(biāo)是提高數(shù)據(jù)的質(zhì)量（準(zhǔn)確性和完整性保證數(shù)據(jù)的安全性（保密性、完整性及可用性實現(xiàn)數(shù)據(jù)資源在各組織機構(gòu)部門的共享；推進(jìn)信息資源的整合、對接和共享，從而提升集團(tuán)公司或政務(wù)單位信息化水平，充分發(fā)揮信息化作用。石油行業(yè)大數(shù)據(jù)分析體系域，二是數(shù)據(jù)質(zhì)量保障機制。具體兩者內(nèi)容及相互關(guān)系可以參見下圖：石油行業(yè)大數(shù)據(jù)分析核心領(lǐng)域為了有效管理信息資源，必須構(gòu)集團(tuán)級石油行業(yè)大數(shù)據(jù)分析體系。石油行業(yè)大數(shù)據(jù)分析體系包含石油行業(yè)大數(shù)據(jù)分析組織、數(shù)據(jù)構(gòu)架管理、主數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)服務(wù)管理及數(shù)據(jù)安全管理內(nèi)容，這些內(nèi)容既有機結(jié)合，又相互支撐。4.1數(shù)據(jù)模型數(shù)據(jù)模型是數(shù)據(jù)構(gòu)架中重要一部分，包括概念數(shù)據(jù)模型和邏輯數(shù)據(jù)模型，是石油行業(yè)大數(shù)據(jù)分析的關(guān)鍵、重點。理想的數(shù)據(jù)模型整個集團(tuán)的業(yè)務(wù)范圍，以一種清晰的表達(dá)方式記錄跟蹤集團(tuán)單位的重要數(shù)據(jù)元素及其變動，并利用它們之間各種可能的限制條件和關(guān)系來表達(dá)重要的業(yè)務(wù)規(guī)則。數(shù)據(jù)模型必須在設(shè)計過程中保持統(tǒng)一的業(yè)務(wù)定義。為了滿足將來不同的應(yīng)用分析需要，邏輯數(shù)據(jù)模型的設(shè)計應(yīng)該能夠支持最小粒度的詳細(xì)數(shù)據(jù)的存儲，以支持各種可能的分析查詢。同時保障邏輯數(shù)據(jù)模型能夠最大程度上減少冗余，并保障結(jié)構(gòu)具有足夠的靈活性和擴(kuò)展性4.2數(shù)據(jù)生命周期一般包括數(shù)據(jù)生成及傳輸、數(shù)據(jù)存儲、數(shù)據(jù)處理及應(yīng)用、數(shù)據(jù)數(shù)據(jù)應(yīng)該能夠按照數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)和發(fā)展需要產(chǎn)生，應(yīng)采取措施保證數(shù)據(jù)的準(zhǔn)確性和完整性，業(yè)務(wù)系統(tǒng)上線前應(yīng)該進(jìn)行必要的安全測試，以保證上述措施的有效性。對于手工流程中產(chǎn)生的數(shù)據(jù)在相關(guān)制度中明確要求，并通過事中復(fù)核、事后檢查等手段保證其準(zhǔn)確性和完整性。數(shù)據(jù)傳輸過程中需要考慮保密性和完整性的問題，對不同種類的數(shù)據(jù)分別采取不同的措施防止數(shù)據(jù)泄漏或數(shù)據(jù)被篡改。這個階段除了關(guān)注保密性、完整性之外，更要關(guān)心數(shù)據(jù)的可用性，對于大部分?jǐn)?shù)據(jù)應(yīng)采取分級存儲的方式，不僅存儲在本地磁盤上，還應(yīng)該在磁帶上，甚至遠(yuǎn)程復(fù)制到磁盤陣列中，或者采用光盤庫進(jìn)行存儲。對于存儲備份的數(shù)據(jù)要定期進(jìn)行測試，確保其可訪問其數(shù)據(jù)完整。數(shù)據(jù)的備份恢復(fù)策略應(yīng)該由數(shù)據(jù)的責(zé)任部門或責(zé)任人負(fù)責(zé)制定，信息化管理部門可以給予相應(yīng)的支持。同時還需要注意因為部門需要或故障處理的需要，可能對數(shù)據(jù)進(jìn)行修改，必須在數(shù)據(jù)管理辦法中明確數(shù)據(jù)修改的申請審批流程，審慎對待后臺數(shù)據(jù)修信息化相關(guān)部門需要對數(shù)據(jù)進(jìn)行分析處理，以挖掘出對于管理用聯(lián)機處理，系統(tǒng)只輸出分析處理的結(jié)果。但是實際中，因為相關(guān)數(shù)據(jù)分析系統(tǒng)建設(shè)不到位，需要從數(shù)據(jù)庫中提取數(shù)據(jù)后再對數(shù)據(jù)進(jìn)行必要的分析處理，在這個過程中就需要關(guān)注數(shù)據(jù)提取操作是否可能對數(shù)據(jù)庫造成破壞、提取出的數(shù)據(jù)在交付給分析處理人員的過程中其安全性是否會降低、數(shù)據(jù)分析處理的環(huán)境安全性等等。這個階段主要涉及數(shù)據(jù)的保密性。應(yīng)明確數(shù)據(jù)銷毀的流程，采用必要的工具，數(shù)據(jù)的銷毀應(yīng)該有完整的記錄。尤其是對于需要送出外部修理的存儲設(shè)備，送修之前應(yīng)該對數(shù)據(jù)進(jìn)行可靠的銷毀。4.3數(shù)據(jù)標(biāo)準(zhǔn)數(shù)據(jù)標(biāo)準(zhǔn)是集團(tuán)單位建立的一套符合自身實際，涵蓋定義、操作、應(yīng)用多層次數(shù)據(jù)的標(biāo)準(zhǔn)化體系。數(shù)據(jù)標(biāo)準(zhǔn)的建立是集團(tuán)單位信息化、數(shù)字化建設(shè)的一項重要工作，行業(yè)的各類數(shù)據(jù)必須遵循一個統(tǒng)一的標(biāo)準(zhǔn)進(jìn)行組織，才能構(gòu)成一個可流通、可共享的信息平臺。石油行業(yè)大數(shù)據(jù)分析對標(biāo)準(zhǔn)的需求可以劃分為兩類，即基礎(chǔ)性標(biāo)準(zhǔn)和應(yīng)用性標(biāo)準(zhǔn)。前者主要用于在不同系統(tǒng)間，形成信息的一致理解和統(tǒng)一的坐標(biāo)參照系統(tǒng)，是信息匯集、交換以及應(yīng)用的基礎(chǔ)，包括數(shù)據(jù)分類與編碼、數(shù)據(jù)字典、數(shù)字地圖標(biāo)準(zhǔn)；后者是為平臺功能發(fā)揮所涉及的各個環(huán)節(jié)，提供一定的標(biāo)準(zhǔn)規(guī)范，以保證信息的高效匯集和交換，包括元數(shù)據(jù)標(biāo)準(zhǔn)、數(shù)據(jù)交換技術(shù)規(guī)范、數(shù)據(jù)傳輸協(xié)數(shù)據(jù)分類與編碼標(biāo)準(zhǔn)是信息化建設(shè)中標(biāo)準(zhǔn)化的一項基礎(chǔ)工作，該類標(biāo)準(zhǔn)規(guī)定平臺匯集、交換相關(guān)信息統(tǒng)一的分類系統(tǒng)和排列順序以及編碼規(guī)則，目的是在不同系統(tǒng)和用戶之間建立交通數(shù)據(jù)的一致參照，對提高數(shù)據(jù)采集、處理和數(shù)據(jù)交換效率具有重要作用。數(shù)據(jù)分類與編碼標(biāo)準(zhǔn)的制定將有力推進(jìn)平臺標(biāo)準(zhǔn)化及交通信息化建設(shè)標(biāo)針對實際需求，定義數(shù)據(jù)集，建立各個領(lǐng)域的數(shù)據(jù)字典，規(guī)范數(shù)據(jù)概念和數(shù)據(jù)定義。在此基礎(chǔ)上，形成完備的集團(tuán)單位數(shù)據(jù)集和元數(shù)據(jù)標(biāo)準(zhǔn)是描述數(shù)據(jù)資源的具體對象時所有規(guī)則的集合，它包括了完整描述一個具體數(shù)據(jù)對象時所需要的數(shù)據(jù)項集合。針對各種信息資源分別制定適當(dāng)?shù)脑獢?shù)據(jù)標(biāo)準(zhǔn)，可為信息的管理、發(fā)現(xiàn)和獲取提供一種實際而簡便的方法，從而提高數(shù)據(jù)交換效率。為了保證數(shù)據(jù)共享和交換的順利實現(xiàn)，必須明確定義和規(guī)范數(shù)據(jù)交換的相關(guān)標(biāo)準(zhǔn)。數(shù)據(jù)交換的標(biāo)準(zhǔn)規(guī)范是集團(tuán)單位綜合信息平臺的核心標(biāo)準(zhǔn)。其中應(yīng)當(dāng)包括數(shù)據(jù)交換內(nèi)容、數(shù)據(jù)交換格式、數(shù)據(jù)傳輸方式、各類中心間數(shù)據(jù)接口的標(biāo)準(zhǔn)化等方面。由于數(shù)據(jù)采集任務(wù)通常由其他二級平臺完成，石油行業(yè)大數(shù)據(jù)分析平臺的標(biāo)準(zhǔn)方法主要集中在數(shù)據(jù)的加工和管理上。應(yīng)該重點開發(fā)的一個領(lǐng)域是數(shù)據(jù)質(zhì)量控制方法。應(yīng)當(dāng)從三個方面對數(shù)據(jù)質(zhì)量方輯方法，以及缺少值的處理。4.4主數(shù)據(jù)主數(shù)據(jù)管理要做的就是從各部門的多個業(yè)務(wù)系統(tǒng)中整合最核心且以服務(wù)的方式把統(tǒng)一的、完整的、準(zhǔn)確的、具有權(quán)威性的主數(shù)據(jù)傳送給集團(tuán)單位范圍內(nèi)需要使用這些數(shù)據(jù)的操作型應(yīng)用系統(tǒng)和分析有關(guān)的應(yīng)用系統(tǒng)3)主數(shù)據(jù)管理系統(tǒng)為決策支持和數(shù)據(jù)倉庫系統(tǒng)提供準(zhǔn)確的數(shù)因此對于主數(shù)據(jù)管理要考慮運用主數(shù)據(jù)管理系統(tǒng)實現(xiàn)，主數(shù)據(jù)4.5數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量不高將影響數(shù)據(jù)倉庫應(yīng)用程度不高。低下的數(shù)據(jù)質(zhì)量往往造成開發(fā)出來的系統(tǒng)與用戶的預(yù)期大相徑庭，數(shù)據(jù)質(zhì)量關(guān)系建合理有效的使用正確的數(shù)據(jù)能指導(dǎo)集團(tuán)單位做出正確的決策，提高省綜合競爭力。不合理的使用不正確的數(shù)據(jù)（即差的數(shù)據(jù)質(zhì)量）可導(dǎo)致決策的失敗，正可謂差之毫厘、謬以千里。數(shù)據(jù)質(zhì)量管理包含對數(shù)據(jù)的絕對質(zhì)量管理、過程質(zhì)量管理。絕過程質(zhì)量即使用質(zhì)量、存儲質(zhì)量和傳輸質(zhì)量，數(shù)據(jù)的使用質(zhì)量是指數(shù)據(jù)被正確的使用。再正確的數(shù)據(jù)，如果被錯誤的使用，就不可能得出正確的結(jié)論。數(shù)據(jù)的存貯質(zhì)量指數(shù)據(jù)被安全的存貯在適當(dāng)?shù)慕橘|(zhì)上。所謂存貯在適當(dāng)?shù)慕橘|(zhì)上是指當(dāng)需要數(shù)據(jù)的時候能及時方便的取出。數(shù)據(jù)的傳輸質(zhì)量是指數(shù)據(jù)在傳輸過程中的效率和正確性。高質(zhì)量的交通運輸行業(yè)數(shù)據(jù)至少有如下幾項要求：一是正確性，在轉(zhuǎn)換、分析、存儲、傳輸、應(yīng)用流程中不存在二是完整性，數(shù)據(jù)庫應(yīng)用或要求的所有記錄、字段都存在；三是一致性，體現(xiàn)在整個數(shù)據(jù)庫的定義和維護(hù)方面，確保數(shù)據(jù)在使用的整個過程中是一致的；四是時效性，衡量指標(biāo)是在指定的數(shù)據(jù)與真實的業(yè)務(wù)情況同步的時間容忍度內(nèi)，即指定的更新頻度內(nèi)，及時被刷新的數(shù)據(jù)的百分?jǐn)?shù)據(jù)質(zhì)量管理的規(guī)劃和實施包括以下內(nèi)容：一是數(shù)據(jù)質(zhì)量管控體系的建立，包括數(shù)據(jù)質(zhì)量的評估體系，定二是在部門各個應(yīng)用系統(tǒng)中的落實，包括每個應(yīng)用系統(tǒng)中的數(shù)三是在最開始建立數(shù)據(jù)質(zhì)量管理系統(tǒng)的時候，借助石油行業(yè)大數(shù)據(jù)分析平臺上，通過建立數(shù)據(jù)質(zhì)量管理的規(guī)則來集中化地建立數(shù)據(jù)質(zhì)量管理系統(tǒng)，發(fā)現(xiàn)問題并持續(xù)改進(jìn)；四是數(shù)據(jù)質(zhì)量管理與業(yè)務(wù)稽核的結(jié)合，通過業(yè)務(wù)規(guī)則的稽核來發(fā)現(xiàn)數(shù)據(jù)質(zhì)量深層次的問題，將數(shù)據(jù)質(zhì)量與業(yè)務(wù)一線結(jié)合起來，使業(yè)務(wù)人員對數(shù)據(jù)質(zhì)量問題有更加清晰和明確的認(rèn)識。完善的數(shù)據(jù)質(zhì)量管理是保障各項石油行業(yè)大數(shù)據(jù)分析工作能夠得到有效落實，達(dá)到數(shù)據(jù)準(zhǔn)確、完整的目標(biāo)，并能夠提供有效的增4.6數(shù)據(jù)服務(wù)數(shù)據(jù)整理最終目的就是要服務(wù)于各部門單位、人員等，能更準(zhǔn)確更快更方便的服務(wù)是數(shù)據(jù)服務(wù)管理的目標(biāo)。數(shù)據(jù)服務(wù)管理是指針對內(nèi)部積累多年的數(shù)據(jù)，研究如何能夠充分利用這些數(shù)據(jù)，分析行業(yè)業(yè)務(wù)流程優(yōu)化業(yè)務(wù)流程。數(shù)據(jù)使用的方式通常包括對數(shù)據(jù)的深度加工和分析，包括通過各種報表、工具來分析運營層面的問題，還包括通過數(shù)據(jù)挖掘等工具對數(shù)據(jù)進(jìn)行深度加工，從而更好的管理者服務(wù)。通過建立統(tǒng)一的數(shù)據(jù)服務(wù)平臺來滿足針對跨部門、跨系統(tǒng)的數(shù)據(jù)應(yīng)用。通過統(tǒng)一的數(shù)據(jù)服務(wù)平臺來統(tǒng)一數(shù)據(jù)源，變多源為單源，加快數(shù)據(jù)流轉(zhuǎn)速度，提升數(shù)據(jù)服務(wù)的效4.7數(shù)據(jù)安全由于集團(tuán)單位的重要且敏感信息大部分集中在應(yīng)用系統(tǒng)中，數(shù)據(jù)安全更是至關(guān)重要。如何保障數(shù)據(jù)不被泄露和非法訪問，是非常關(guān)鍵的問題。數(shù)據(jù)安全管理主要解決的就是數(shù)據(jù)在保存、使用和交數(shù)據(jù)安全管理主要體現(xiàn)在以下六個方面：一是數(shù)據(jù)使用的安全性，包括基礎(chǔ)數(shù)據(jù)的保存、訪問和權(quán)限管二是數(shù)據(jù)隱私問題，系統(tǒng)中采集的證件號碼、銀行賬號等信息在下游分析系統(tǒng)和內(nèi)部管理系統(tǒng)中，是否要進(jìn)行加密，以避免數(shù)據(jù)三是訪問權(quán)限統(tǒng)一管理，包括單點登錄問題及用戶名、數(shù)據(jù)和四是數(shù)據(jù)安全審計，為數(shù)據(jù)修改、使用等環(huán)節(jié)設(shè)置審計方法，五是制度及流程建立，逐步建立數(shù)據(jù)安全性的管理辦法、系統(tǒng)開發(fā)規(guī)范、數(shù)據(jù)隱私管理辦法及相應(yīng)的應(yīng)用系統(tǒng)規(guī)范、在管理決策六是應(yīng)用系統(tǒng)權(quán)限的訪問控制，建立集團(tuán)級權(quán)限管理系統(tǒng)，增加數(shù)字水印等技術(shù)在應(yīng)用系統(tǒng)中的使用。石油行業(yè)大數(shù)據(jù)分析保障機制5.1制度章程石油行業(yè)大數(shù)據(jù)分析章程類似于企業(yè)的公司條例。該章程闡明石油行業(yè)大數(shù)據(jù)分析的主要目標(biāo)、相關(guān)工作人員、職責(zé)、決策權(quán)利考核是是保障制度落實的根本，建立明確的考核制度，實際操作中可根據(jù)集團(tuán)單位情況，建立相應(yīng)的針對石油行業(yè)大數(shù)據(jù)分析方面的考核辦法，并與個人績效相關(guān)聯(lián)?？蓞⒖脊芾韺W(xué)中相關(guān)考核、對于石油行業(yè)大數(shù)據(jù)分析的考核，可見下圖進(jìn)行理解：5.2石油行業(yè)大數(shù)據(jù)分析組織有效的組織機構(gòu)是項目成功的有力保證，為了達(dá)到項目預(yù)期目標(biāo)，在項目開始之前對于組織機構(gòu)及其責(zé)任分工做出規(guī)劃是非常必要的，石油行業(yè)大數(shù)據(jù)分析項目管理組織建議宜采用如圖所示的組石油行業(yè)大數(shù)據(jù)分析委員會由集團(tuán)公司的高層領(lǐng)導(dǎo)者組成。委部門進(jìn)行協(xié)調(diào)；設(shè)置石油行業(yè)大數(shù)據(jù)分析計劃的總體方向；在發(fā)生策略分歧時進(jìn)行協(xié)調(diào)。此委員會也將包含來自部門或子公司的領(lǐng)導(dǎo)代表，以及來自各單位視數(shù)據(jù)為機構(gòu)資產(chǎn)的信息科技部門的代表。這些高層管理人員是石油行業(yè)大數(shù)據(jù)分析計劃的所有擁護(hù)者，確保石油行業(yè)大數(shù)據(jù)分析工作組是組織內(nèi)委員會下面的下一個級別。工作組執(zhí)行石油行業(yè)大數(shù)據(jù)分析計劃。工作組負(fù)責(zé)監(jiān)督數(shù)據(jù)管理員工作。石油行業(yè)大數(shù)據(jù)分析工作組由石油行業(yè)大數(shù)據(jù)分析委員每各業(yè)務(wù)部門有至少一位業(yè)務(wù)分析員，信息科技部門設(shè)置數(shù)據(jù)質(zhì)量分析員、數(shù)據(jù)管理員、集成開發(fā)人員。各工作人員負(fù)責(zé)本部門數(shù)據(jù)的質(zhì)量，履行職責(zé)，解決具體的問題。根據(jù)數(shù)據(jù)管理工作的實際需要，在業(yè)務(wù)管理部門、技術(shù)管理部門和業(yè)務(wù)應(yīng)用部門確定各工作人員的職責(zé)。石油行業(yè)大數(shù)據(jù)分析委員會的職責(zé)范圍：定石油行業(yè)大數(shù)據(jù)分析的范圍；明確數(shù)據(jù)源的出處、使用和管理的2）明確石油行業(yè)大數(shù)據(jù)分析的組織、功能、角色和職責(zé)；5）負(fù)責(zé)確定石油行業(yè)大數(shù)據(jù)分析的工具、技術(shù)和平臺；6）負(fù)責(zé)制定石油行業(yè)大數(shù)據(jù)分析的評估指標(biāo)、方法。石油行業(yè)大數(shù)據(jù)分析工作小組，其主要工作職責(zé)是：負(fù)責(zé)石油行業(yè)大數(shù)據(jù)分析的牽頭，組織、指導(dǎo)和協(xié)調(diào)本單位的綜合石油行業(yè)大數(shù)據(jù)分析管控辦法、石油行業(yè)大數(shù)據(jù)分析考核機制等有關(guān)規(guī)章制度的牽頭制定、修改等；負(fù)責(zé)數(shù)據(jù)的分析整理并出具數(shù)據(jù)指標(biāo)報告；建立數(shù)據(jù)沖突的處理流程和數(shù)據(jù)變更控制流程。負(fù)責(zé)對基礎(chǔ)數(shù)據(jù)質(zhì)量的檢測、發(fā)布、考核和清理完善工作。工作組成員：業(yè)務(wù)分析員、數(shù)據(jù)質(zhì)量分析員、數(shù)據(jù)管理員、集這些不同的角色在石油行業(yè)大數(shù)據(jù)分析過程中承擔(dān)著彼此不同，而又相輔相成的職責(zé)。其中集成開發(fā)人員在石油行業(yè)大數(shù)據(jù)分析流程中需要肩負(fù)起數(shù)據(jù)訪問、驗證數(shù)據(jù)結(jié)構(gòu)、驗證數(shù)據(jù)、交付數(shù)據(jù)以及數(shù)據(jù)庫/知識庫的構(gòu)建等角色，因此他們的工作包括：訪問及交付相應(yīng)數(shù)據(jù)給業(yè)務(wù)用戶提高生產(chǎn)力和性能開發(fā)和完善技術(shù)最佳實踐數(shù)據(jù)質(zhì)量分析員在石油行業(yè)大數(shù)據(jù)分析流程中負(fù)責(zé)數(shù)據(jù)的剖為開發(fā)人員定義數(shù)據(jù)規(guī)格及標(biāo)準(zhǔn)為機構(gòu)有效的追蹤數(shù)據(jù)質(zhì)量問題實施被業(yè)務(wù)人員和數(shù)據(jù)管理員定義正確的數(shù)據(jù)質(zhì)量規(guī)則不間斷的監(jiān)控數(shù)據(jù)質(zhì)量水平及問題業(yè)務(wù)分析人員在石油行業(yè)大數(shù)據(jù)分析流程中負(fù)責(zé)定義數(shù)據(jù)的轉(zhuǎn)與需求開發(fā)人員協(xié)作，正確捕獲和解析業(yè)務(wù)需求值的時間數(shù)據(jù)管理員需要定義引證數(shù)據(jù)，并管理元數(shù)據(jù)，工作包括：為組織機構(gòu)數(shù)據(jù)實體給出正確業(yè)務(wù)定義為組織機構(gòu)解決混淆和有爭論的數(shù)據(jù)定義5.3流程管理流程管理包括流程目標(biāo)、流程任務(wù)、流程分級，根據(jù)石油行業(yè)大數(shù)據(jù)分析的內(nèi)容，建立相應(yīng)流程，且遵循本單位石油行業(yè)大數(shù)據(jù)分析的規(guī)則制度。實際操作中可結(jié)合所使用的石油行業(yè)大數(shù)據(jù)分析工具，與石油行業(yè)大數(shù)據(jù)分析工具供應(yīng)商進(jìn)行協(xié)商，建立符合集團(tuán)5.4IT技術(shù)應(yīng)用現(xiàn)市場上關(guān)于石油行業(yè)大數(shù)據(jù)分析平臺存在不同的成熟產(chǎn)品，但在功能實現(xiàn)上大致相同，具體可參加下圖了解。技術(shù)規(guī)范是保障石油行業(yè)大數(shù)據(jù)分析平臺可持續(xù)管理的基礎(chǔ)，隨著數(shù)據(jù)量的增長、技術(shù)水平的發(fā)展，為更好、可持續(xù)的實現(xiàn)數(shù)據(jù)資產(chǎn)的管理、應(yīng)用，需建立明確的技術(shù)規(guī)范。附件A數(shù)據(jù)管理規(guī)范信息化和數(shù)字化方向發(fā)展，數(shù)據(jù)管理應(yīng)遵循以下原則：（2）分級管理。實行分層級的數(shù)據(jù)管理模式，明確職責(zé)分工，過程的控制規(guī)范，保證數(shù)據(jù)質(zhì)量，提高應(yīng)用效果。份等安全制度，規(guī)范操作，做好病毒預(yù)防、入侵檢測和數(shù)據(jù)保密工采集，集中存儲，共享使用