鋼鐵行業(yè)數(shù)據(jù)治理架構(gòu)建設(shè)實(shí)踐

鋼鐵行業(yè)數(shù)據(jù)治理架構(gòu)建設(shè)實(shí)踐收錄于話題\o"數(shù)據(jù)治理體系"#數(shù)據(jù)治理體系\o"數(shù)據(jù)治理"#數(shù)據(jù)治理1引言中國寶武鋼鐵集團(tuán)有限公司(簡稱“中國寶武”)是一家以鋼鐵行業(yè)為主、多行業(yè)為輔多元化發(fā)展的企業(yè)，旗下分子公司遍布全國，各自擁有海量的數(shù)據(jù)。其數(shù)據(jù)以鋼鐵或相關(guān)生產(chǎn)、管理數(shù)據(jù)為主，在傳統(tǒng)鋼鐵領(lǐng)域內(nèi)的L1—L5的架構(gòu)中，生產(chǎn)數(shù)據(jù)以金字塔形分布，數(shù)據(jù)之間關(guān)聯(lián)不多，數(shù)據(jù)統(tǒng)一化程度弱。各子公司信息化系統(tǒng)繁多，相互之間層級關(guān)系復(fù)雜，關(guān)聯(lián)關(guān)系交錯(cuò)，層次關(guān)系不分明，相互引用情況時(shí)有發(fā)生，且又有不少系統(tǒng)孤島形式存在，數(shù)據(jù)標(biāo)準(zhǔn)化程度很低，導(dǎo)致數(shù)據(jù)相互使用起來難度大，查找困難，難以發(fā)揮價(jià)值。因此迫切需要一個(gè)可解決這些難點(diǎn)的方法，面對這些難點(diǎn)，以數(shù)據(jù)標(biāo)準(zhǔn)體系為核心的的數(shù)據(jù)治理架構(gòu)應(yīng)運(yùn)而生。2數(shù)據(jù)治理架構(gòu)建設(shè)2.1數(shù)據(jù)治理理論基礎(chǔ)數(shù)據(jù)治理在國外有著較為成熟的模型、體系，例如數(shù)據(jù)管理成熟度模型(DMM)、DAMA體系等。國內(nèi)公認(rèn)數(shù)據(jù)治理模型——數(shù)據(jù)管理能力成熟度評估模型(簡稱“DCMM”)，于2018年正式發(fā)布，成為中國寶武開展數(shù)據(jù)治理的理論基礎(chǔ)。DCMM模型由8個(gè)數(shù)據(jù)管理能力域組成，它為廣義的數(shù)據(jù)治理工作劃定了范圍。但模型本身無法直接落地，需要企業(yè)自行構(gòu)建適合自己的數(shù)據(jù)治理架構(gòu)，明確數(shù)據(jù)管理具體執(zhí)行方法，把數(shù)字化轉(zhuǎn)型工作落到實(shí)處。2.2鋼鐵行業(yè)數(shù)據(jù)治理架構(gòu)數(shù)據(jù)治理在鋼鐵行業(yè)的大數(shù)據(jù)中心全面應(yīng)用還屬于初級階段。中國寶武逐步開展數(shù)字化轉(zhuǎn)型，初建數(shù)據(jù)治理規(guī)范體系解決如何用好數(shù)據(jù)的問題，必須著力于一個(gè)核心焦點(diǎn)。中國寶武選擇了核心數(shù)據(jù)管理能力域：數(shù)據(jù)標(biāo)準(zhǔn)作為數(shù)據(jù)治理核心。以數(shù)據(jù)標(biāo)準(zhǔn)為主線，將之作為數(shù)據(jù)架構(gòu)、使用的基礎(chǔ)，同時(shí)將元數(shù)據(jù)結(jié)構(gòu)標(biāo)準(zhǔn)化，將它們貫穿數(shù)據(jù)生存周期始終，形成數(shù)據(jù)治理架構(gòu)的主體，輔以數(shù)據(jù)質(zhì)量和數(shù)據(jù)安全，形成完整的中國寶武數(shù)據(jù)治理架構(gòu)如圖1所示。圖1?以數(shù)據(jù)標(biāo)準(zhǔn)體系為核心的數(shù)據(jù)治理架構(gòu)中國寶武第一階段選擇治理的數(shù)據(jù)標(biāo)準(zhǔn)包括：業(yè)務(wù)術(shù)語標(biāo)準(zhǔn)、數(shù)據(jù)元標(biāo)準(zhǔn)、指標(biāo)標(biāo)準(zhǔn)、維度標(biāo)準(zhǔn)、數(shù)據(jù)分類標(biāo)準(zhǔn)、數(shù)據(jù)分層標(biāo)準(zhǔn)。2.3鋼鐵行業(yè)數(shù)據(jù)治理核心DCMM模型中，數(shù)據(jù)標(biāo)準(zhǔn)能力域包括4項(xiàng)子域，分別為：業(yè)務(wù)術(shù)語、參考數(shù)據(jù)和主數(shù)據(jù)、數(shù)據(jù)元、指標(biāo)數(shù)據(jù)。中國寶武大數(shù)據(jù)中心施行的數(shù)據(jù)標(biāo)準(zhǔn)在此基礎(chǔ)上進(jìn)行了大幅修改，現(xiàn)階段不僅設(shè)立了業(yè)務(wù)術(shù)語、數(shù)據(jù)元、指標(biāo)數(shù)據(jù)標(biāo)準(zhǔn)，而且將這3個(gè)標(biāo)準(zhǔn)的范圍進(jìn)行適當(dāng)修改容納更多的標(biāo)準(zhǔn)內(nèi)容，還將其他可標(biāo)準(zhǔn)化管理的內(nèi)容一律用數(shù)據(jù)標(biāo)準(zhǔn)的方式進(jìn)行管理，最終形成適合鋼鐵行業(yè)使用的數(shù)據(jù)標(biāo)準(zhǔn)體系。(1)擴(kuò)展業(yè)務(wù)術(shù)語，形成術(shù)語標(biāo)準(zhǔn)和字根標(biāo)準(zhǔn)。中國寶武大數(shù)據(jù)中心數(shù)據(jù)標(biāo)準(zhǔn)將DCMM的業(yè)務(wù)術(shù)語標(biāo)準(zhǔn)范圍擴(kuò)大，形成術(shù)語標(biāo)準(zhǔn)。術(shù)語標(biāo)準(zhǔn)中涵蓋了業(yè)務(wù)術(shù)語、技術(shù)術(shù)語、管理術(shù)語及通用術(shù)語4類術(shù)語，術(shù)語標(biāo)準(zhǔn)分別收集了各門類下的國標(biāo)、行標(biāo)、集團(tuán)內(nèi)部自定義的術(shù)語及術(shù)語描述。在集團(tuán)內(nèi)部建立大數(shù)據(jù)相關(guān)統(tǒng)一的語義，確保達(dá)成一致的認(rèn)知，降低因理解差異和被相互理解錯(cuò)誤導(dǎo)致的風(fēng)險(xiǎn)。在業(yè)務(wù)術(shù)語、技術(shù)術(shù)語的基礎(chǔ)上，還形成了字根標(biāo)準(zhǔn)。字根標(biāo)準(zhǔn)不僅規(guī)范了中文詞語、短句的定義，還在語義理解、英語定義，尤其是英語縮略語定義上進(jìn)行了標(biāo)準(zhǔn)化，含義一致或接近的對象都統(tǒng)一使用一個(gè)英語縮略語進(jìn)行定義。此類標(biāo)準(zhǔn)是基礎(chǔ)標(biāo)準(zhǔn)，成為大數(shù)據(jù)中心內(nèi)首批建成的數(shù)據(jù)標(biāo)準(zhǔn)。(2)依托字根標(biāo)準(zhǔn)，形成數(shù)據(jù)元標(biāo)準(zhǔn)。數(shù)據(jù)元可用獨(dú)立定義的方式標(biāo)準(zhǔn)化，但是中國寶武大數(shù)據(jù)中心建有字根標(biāo)準(zhǔn)，可使用字根標(biāo)準(zhǔn)，讓字根成為數(shù)據(jù)元標(biāo)準(zhǔn)的原子，根據(jù)使用者的需求，排列組合成數(shù)據(jù)元標(biāo)準(zhǔn)。這樣形成的數(shù)據(jù)元標(biāo)準(zhǔn)更規(guī)范、更精確，減少語義重復(fù)語義相近導(dǎo)致的數(shù)據(jù)元數(shù)量爆發(fā)的情況。(3)結(jié)合指標(biāo)標(biāo)準(zhǔn)和維度標(biāo)準(zhǔn)。中國寶武大數(shù)據(jù)中心使用維度建模方式，與DCMM融合，建立了完整的指標(biāo)標(biāo)準(zhǔn)和維度標(biāo)準(zhǔn)。首先，將指標(biāo)分為技術(shù)指標(biāo)和業(yè)務(wù)指標(biāo)兩大類，每一類都可分為：原子指標(biāo)、派生指標(biāo)和復(fù)合指標(biāo)。其次，把所有指標(biāo)進(jìn)行拆分，提取出不可拆分的有業(yè)務(wù)含義的指標(biāo)定義成原子指標(biāo)。然后用維度對指標(biāo)進(jìn)行限定，組合成派生指標(biāo)，或者對原子、派生指標(biāo)進(jìn)行計(jì)算，形成復(fù)合指標(biāo)。這些指標(biāo)將成為大數(shù)據(jù)中心的核心價(jià)值。(4)建立數(shù)據(jù)分類標(biāo)準(zhǔn)。在識別出數(shù)據(jù)核心價(jià)值之后，需要解決如何讓使用者使用數(shù)據(jù)的問題，需要一種辦法讓使用者輕易找到想要的數(shù)據(jù)。針對這個(gè)需求，制定了數(shù)據(jù)分類標(biāo)準(zhǔn)，用分類的方式展示數(shù)據(jù)資產(chǎn)。數(shù)據(jù)分類方式可以有多種，歸根結(jié)底都是將擁有近似屬性或特征的數(shù)據(jù)歸攏到一個(gè)分類中，各分類之間相互獨(dú)立。按使用者角度，數(shù)據(jù)可按業(yè)務(wù)領(lǐng)域分類，可按工藝流程、組織機(jī)構(gòu)分類。默認(rèn)可用一種方式展示數(shù)據(jù)，其他的類型供候選。(5)建立統(tǒng)一的參考數(shù)據(jù)和主數(shù)據(jù)標(biāo)準(zhǔn)。中國寶武內(nèi)部子公司曾建有代碼管理系統(tǒng)，管理了生產(chǎn)過程中的工藝代碼，但是這些代碼相互之間不統(tǒng)一，需要一個(gè)統(tǒng)一的參考數(shù)據(jù)標(biāo)準(zhǔn)將它們統(tǒng)一化。以往的代碼系統(tǒng)中管理的代碼范圍較小，難以滿足數(shù)據(jù)建設(shè)的需要，所以擴(kuò)大范圍建成統(tǒng)一的參考數(shù)據(jù)標(biāo)準(zhǔn)成了數(shù)據(jù)標(biāo)準(zhǔn)化過程中“排頭兵”。主數(shù)據(jù)管理的范圍特別大，數(shù)據(jù)中心建設(shè)初期不建議大規(guī)模鋪開，出具規(guī)則由各業(yè)務(wù)系統(tǒng)自行管理。(6)其他數(shù)據(jù)標(biāo)準(zhǔn)?？蓸?biāo)準(zhǔn)化的數(shù)據(jù)種類非常多，為適應(yīng)鋼鐵行業(yè)的數(shù)據(jù)特征，還創(chuàng)建了數(shù)據(jù)分層標(biāo)準(zhǔn)、質(zhì)量標(biāo)準(zhǔn)、業(yè)務(wù)板塊標(biāo)準(zhǔn)、缺陷標(biāo)準(zhǔn)等多種類型的標(biāo)準(zhǔn)。2.4數(shù)據(jù)治理架構(gòu)整合在數(shù)據(jù)標(biāo)準(zhǔn)體系建設(shè)外，中國寶武還引用了其他能力域。元數(shù)據(jù)管理是數(shù)據(jù)管理的重要能力之一，中國寶武為各類數(shù)據(jù)標(biāo)準(zhǔn)分別建立對應(yīng)的元數(shù)據(jù)標(biāo)準(zhǔn)，形成統(tǒng)一的數(shù)據(jù)字典，建立了數(shù)據(jù)標(biāo)準(zhǔn)管理的結(jié)構(gòu)體系，確保了數(shù)據(jù)標(biāo)準(zhǔn)統(tǒng)一規(guī)劃。在以數(shù)據(jù)標(biāo)準(zhǔn)為主線，元數(shù)據(jù)與數(shù)據(jù)標(biāo)準(zhǔn)結(jié)合為數(shù)據(jù)治理主體的數(shù)據(jù)治理架構(gòu)構(gòu)建中，還需要結(jié)合數(shù)據(jù)架構(gòu)、數(shù)據(jù)質(zhì)量、數(shù)據(jù)安全、數(shù)據(jù)生存周期、數(shù)據(jù)應(yīng)用等其他能力，搭建成完整的符合鋼鐵行業(yè)需求的數(shù)據(jù)治理規(guī)范體系，為鋼鐵行業(yè)大數(shù)據(jù)中心建設(shè)和數(shù)據(jù)治理邁出堅(jiān)實(shí)的一步。3結(jié)語隨著大數(shù)據(jù)時(shí)代的發(fā)展和進(jìn)步，企業(yè)數(shù)字化轉(zhuǎn)型已經(jīng)變得越來越重要。不同的行業(yè)都在逐步根據(jù)自身發(fā)展的需求推進(jìn)數(shù)據(jù)治理的進(jìn)程。中國寶武在以數(shù)據(jù)標(biāo)準(zhǔn)體系為核心的大數(shù)據(jù)中心建設(shè)及數(shù)據(jù)治理工作上取得一定的進(jìn)展，通過了D