企業(yè)大數(shù)據(jù)應(yīng)用下的數(shù)據(jù)治理

1、 企業(yè)大數(shù)據(jù)應(yīng)用下的數(shù)據(jù)治理 劉伯宇 陰皓 閆麗景Summary隨著社會經(jīng)濟(jì)的高速發(fā)展和科技不斷創(chuàng)新，信息的利用發(fā)生了翻天覆地的變化，在2017全球信息社會發(fā)展報告中指出，2017年全球信息社會指數(shù)（工si）達(dá)到0.5748，總體上即將從工業(yè)社會進(jìn)入信息社會。126個國家中，有57個國家進(jìn)入信息社會，發(fā)達(dá)國家全部進(jìn)入了信息社會，而絕大多數(shù)發(fā)展中國家正在加速向信息社會轉(zhuǎn)型，在經(jīng)歷國際金融危機(jī)沖擊后，各國積極把握信息技術(shù)新一輪大發(fā)展機(jī)遇，創(chuàng)新云計算、移動互聯(lián)網(wǎng)、物聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能等技術(shù)內(nèi)涵和應(yīng)用場景，全球信息社會發(fā)展再上新臺階，經(jīng)濟(jì)活力有效復(fù)蘇。【Key】大數(shù)據(jù) 數(shù)據(jù)資產(chǎn) 數(shù)據(jù)治理 數(shù)據(jù)質(zhì)量

2、 人工智能 機(jī)器學(xué)習(xí)目前大多數(shù)企業(yè)都上線投入運行了與自身管理經(jīng)營相關(guān)的業(yè)務(wù)系統(tǒng)，這些業(yè)務(wù)系統(tǒng)在輔助工作人員在工作效率提高方面取得了顯著成效，使企業(yè)管理更加規(guī)范和富有競爭力。通過使用業(yè)務(wù)應(yīng)用系統(tǒng)，企業(yè)積累了大量、甚至海量的數(shù)據(jù)，為了讓這些數(shù)據(jù)變成企業(yè)的數(shù)據(jù)資產(chǎn)，發(fā)揮更大的數(shù)據(jù)價值，開始建設(shè)如數(shù)據(jù)中心平臺、數(shù)據(jù)集成服務(wù)平臺等數(shù)據(jù)集中、管理、服務(wù)為一體的服務(wù)平臺，來滿足企業(yè)全面的數(shù)據(jù)管理和立體應(yīng)用，使數(shù)據(jù)資產(chǎn)更有效的服務(wù)于企業(yè)的生產(chǎn)、經(jīng)營和管理。1 數(shù)據(jù)治理概述數(shù)據(jù)治理就是集數(shù)據(jù)管理、數(shù)據(jù)質(zhì)量提升和數(shù)據(jù)應(yīng)用為一體的一個體系，通過因地制宜，構(gòu)建一系列的管理機(jī)制、管理辦法和規(guī)范以及管理輔助工具，使企業(yè)數(shù)

3、據(jù)依據(jù)設(shè)計規(guī)范進(jìn)行存儲，通過監(jiān)控手段不斷改善數(shù)據(jù)質(zhì)量，根據(jù)應(yīng)用確認(rèn)數(shù)據(jù)資產(chǎn)并不斷提升數(shù)據(jù)價值的過程，整個治理過程是一個相互關(guān)聯(lián)、互相促進(jìn)和完善的閉環(huán)過程，是解決數(shù)據(jù)不知道、數(shù)據(jù)不能控、數(shù)據(jù)無法用的一個過程。2 數(shù)據(jù)治理方案從數(shù)據(jù)的生成、質(zhì)量提升、應(yīng)用到注銷的全生命周期看，數(shù)據(jù)治理是一個長期性的、系統(tǒng)性的和全方位的工作，為了快速取得數(shù)據(jù)治理的效果，數(shù)據(jù)治理工作過程應(yīng)嚴(yán)格按照管（數(shù)據(jù)管理）、梳（數(shù)據(jù)梳理）、治（監(jiān)控核查）、用（高效利用）四字方針執(zhí)行，整個過程如圖1所示。2.1 數(shù)據(jù)管理數(shù)據(jù)管理是數(shù)據(jù)治理的關(guān)鍵也是數(shù)據(jù)治理的保障和基礎(chǔ)，通過數(shù)據(jù)管理我們可以解決目前企業(yè)有哪些數(shù)據(jù)，數(shù)據(jù)屬性以及數(shù)據(jù)之間

4、的關(guān)聯(lián)關(guān)系是什么？那些已經(jīng)被確認(rèn)為數(shù)據(jù)資產(chǎn)可以合理應(yīng)用，這些數(shù)據(jù)怎么使用？使用數(shù)據(jù)的管理流程是什么？根據(jù)數(shù)據(jù)管理的需求數(shù)據(jù)管理需做好如下4項工作：2.1.1 管理機(jī)制數(shù)據(jù)管理是全方位的，涉及公司的管理部門、應(yīng)用部門、使用部門，需要全員參與，建立數(shù)據(jù)管理組織機(jī)構(gòu)，制定職責(zé)。（1）數(shù)據(jù)治理領(lǐng)導(dǎo)委員會。成立由公司領(lǐng)導(dǎo)擔(dān)任組長，各業(yè)務(wù)部門負(fù)責(zé)人為成員的數(shù)據(jù)治理領(lǐng)導(dǎo)委員會，指導(dǎo)數(shù)據(jù)治理工作組開展工作，對工作過程中出現(xiàn)的重大問題進(jìn)行協(xié)調(diào)。（2）數(shù)據(jù)治理辦公室。成立由數(shù)據(jù)管理部門負(fù)責(zé)人為組長，數(shù)據(jù)治理工作涉及業(yè)務(wù)部門負(fù)責(zé)人為成員的數(shù)據(jù)治理辦公室，在領(lǐng)導(dǎo)委員會指導(dǎo)下，對數(shù)據(jù)治理整體工作進(jìn)行管理、監(jiān)督、控制。召

5、集各業(yè)務(wù)部門，定期召開例會，聽取數(shù)據(jù)治理工作組工作匯報，并對數(shù)據(jù)治理過程中發(fā)現(xiàn)的問題進(jìn)行協(xié)調(diào)，對問題解決方案進(jìn)行確認(rèn)。（3）數(shù)據(jù)治理工作組。成立由數(shù)據(jù)治理工作涉及業(yè)務(wù)系統(tǒng)顧問為成員的工作小組，根據(jù)管理辦公室要求對數(shù)據(jù)治理工作進(jìn)行組織、計劃和管理，配合數(shù)據(jù)治理辦公室完成各系統(tǒng)專項治理方案的制定，并按方案開展相關(guān)工作。通過數(shù)據(jù)質(zhì)量管控系統(tǒng)定期對各系統(tǒng)數(shù)據(jù)進(jìn)行稽查，形成數(shù)據(jù)質(zhì)量月（周）報，上報數(shù)據(jù)治理辦公室。對數(shù)據(jù)治理過程中發(fā)現(xiàn)的問題提供技術(shù)性解決方案。2.1.2 管理辦法及規(guī)范建立健全企業(yè)數(shù)據(jù)管理機(jī)制，完成企業(yè)數(shù)據(jù)管理辦法編制，從制度與流程、組織與人員、技術(shù)與工具等方面支撐數(shù)據(jù)資源的統(tǒng)一管理，確保

6、企業(yè)級數(shù)據(jù)資源集中融合、規(guī)范有序，有效共享，高效應(yīng)用。2.1.3 管理輔助工具建設(shè)數(shù)據(jù)資源管理工具，利用工具的元數(shù)據(jù)管理、數(shù)據(jù)資產(chǎn)管理、數(shù)據(jù)質(zhì)量監(jiān)控、數(shù)據(jù)接口配置、接口監(jiān)控、數(shù)據(jù)模型管理、數(shù)據(jù)流管理、數(shù)據(jù)資源查詢、系統(tǒng)數(shù)據(jù)集成流程管理、基礎(chǔ)數(shù)據(jù)維護(hù)等功能，實現(xiàn)對數(shù)據(jù)管理到梳理，梳理到監(jiān)控，監(jiān)控到質(zhì)量提升，再到支撐應(yīng)用，輔助數(shù)據(jù)管理人員全方位管理數(shù)據(jù)。2.1.4 數(shù)據(jù)安全數(shù)據(jù)從管理到應(yīng)用的整個過程涉及存儲、處理和共享應(yīng)用，為了保障數(shù)據(jù)的安全，在存儲方面需要制定高可用的存儲方案及應(yīng)急措施;在處理過程中要加強(qiáng)管理意識;在使用方面制定數(shù)據(jù)安全等級，依據(jù)數(shù)據(jù)安全級別訪問和使用數(shù)據(jù)。2.2 數(shù)據(jù)梳理企業(yè)數(shù)

7、據(jù)資源集成服務(wù)可完成企業(yè)數(shù)據(jù)資源的集成、集中和應(yīng)用，要發(fā)揮和提升這些數(shù)據(jù)資源的價值，必須對這些數(shù)據(jù)資源進(jìn)行梳理并規(guī)范化，使數(shù)據(jù)字典可用，數(shù)據(jù)可查，并經(jīng)過核對確認(rèn)后形成數(shù)據(jù)資產(chǎn)進(jìn)行流通使其產(chǎn)生更大的數(shù)據(jù)價值。2.3 數(shù)據(jù)質(zhì)量數(shù)據(jù)質(zhì)量是數(shù)據(jù)治理的核心工作，數(shù)據(jù)質(zhì)量越高數(shù)據(jù)價值就越高，無論何種數(shù)據(jù)分析，其結(jié)果的精準(zhǔn)性來自于高質(zhì)量的數(shù)據(jù)，因此數(shù)據(jù)質(zhì)量管理提升是數(shù)據(jù)質(zhì)量的核心。數(shù)據(jù)質(zhì)量管理提升是以數(shù)據(jù)管理體系為保障，以數(shù)據(jù)治理手段和數(shù)據(jù)治理信息系統(tǒng)為輔助，來提升和確保數(shù)據(jù)的及時性、完整性、準(zhǔn)確性、唯一性和時效性。數(shù)據(jù)治理手段主要包括數(shù)據(jù)監(jiān)控、數(shù)據(jù)稽查、數(shù)據(jù)驗證、數(shù)據(jù)更新，輔助系統(tǒng)工具包括數(shù)據(jù)質(zhì)量管控系統(tǒng)

8、、數(shù)據(jù)資源管理工具。2.4 數(shù)據(jù)應(yīng)用數(shù)據(jù)應(yīng)用是對數(shù)據(jù)質(zhì)量的有效驗證和對數(shù)據(jù)資產(chǎn)價值的有效體現(xiàn)途徑，通過數(shù)據(jù)應(yīng)用可是數(shù)據(jù)資產(chǎn)產(chǎn)生直接和間接的經(jīng)濟(jì)效益，效益主要體現(xiàn)在三個方面：（1）報表統(tǒng)計分析實現(xiàn)數(shù)據(jù)的智能化、自動化及可視化應(yīng)用，使大量手工工作實現(xiàn)自動化，大幅提高工作人員的工作效率;（2）大數(shù)據(jù)挖掘分析，幫助客戶挖掘更多的潛在客戶以及可能存在的市場機(jī)會，使公司管理層及時了解企業(yè)經(jīng)營情況;（3）人工智能、機(jī)器學(xué)習(xí)及預(yù)測分析，輔助企業(yè)更好的發(fā)展規(guī)劃和經(jīng)營決策。3 結(jié)語隨著信息化技術(shù)的不斷創(chuàng)新、互聯(lián)網(wǎng)應(yīng)用全覆蓋和企業(yè)市場競爭加劇，數(shù)據(jù)資產(chǎn)越加顯得舉足輕重，為了提升企業(yè)市場競爭力和智能化服務(wù)能力，需要擴(kuò)大數(shù)據(jù)集成服務(wù)范圍，加強(qiáng)數(shù)據(jù)價值的深度挖掘，為企業(yè)發(fā)展戰(zhàn)略和經(jīng)營提供輔助決策。是資產(chǎn)就會有價值，數(shù)據(jù)資產(chǎn)的價值形成不是一日之功，需要長期的數(shù)據(jù)積累