汽車制造企業(yè)數(shù)據(jù)治理實踐分析

汽車制造企業(yè)數(shù)據(jù)治理實踐

發(fā)揮龍頭企業(yè)研制主體、協(xié)同主體、使用主體和示范主體作用，持續(xù)提升自主創(chuàng)新、產品競爭和知識產權布局能力，利用資本市場做強做優(yōu)。鼓勵中小企業(yè)專精特新發(fā)展，不斷提升創(chuàng)新能力和專業(yè)化水平。引導龍頭企業(yè)為中小企業(yè)提供數(shù)據(jù)、算法、算力等資源，推動大中小企業(yè)融通發(fā)展和產業(yè)鏈上下游協(xié)同創(chuàng)新。支持有條件的垂直行業(yè)企業(yè)開展大數(shù)據(jù)業(yè)務剝離重組，提升專業(yè)化、規(guī)模化和市場化服務能力，加快企業(yè)發(fā)展。數(shù)據(jù)是數(shù)字經濟發(fā)展的關鍵要素，加快推進數(shù)據(jù)治理工作是保障數(shù)字經濟高質量發(fā)展的重要前提?！笆奈濉睍r期是我國工業(yè)經濟向數(shù)字經濟邁進的關鍵時期，對大數(shù)據(jù)產業(yè)發(fā)展提出了新的要求，產業(yè)將步入集成創(chuàng)新、快速發(fā)展、深度應用、結構優(yōu)化的新階段。汽車制造企業(yè)數(shù)據(jù)治理實踐1、汽車制造企業(yè)數(shù)據(jù)治理背景隨著業(yè)務飛速發(fā)展，汽車制造企業(yè)業(yè)務系統(tǒng)數(shù)量、復雜度和數(shù)據(jù)量都在呈幾何級數(shù)的上漲，這就對于企業(yè)IT能力和IT架構模式的要求越來越高。加之企業(yè)大力發(fā)展數(shù)字化營銷、新能源車等業(yè)務，希望通過持續(xù)優(yōu)化客戶體驗，創(chuàng)造可持續(xù)發(fā)展的數(shù)字化轉型之路。為更好應對數(shù)字化變革所帶來的挑戰(zhàn)，現(xiàn)有的豎井架構的數(shù)據(jù)體系難以滿足越來越多、越來越快的系統(tǒng)和數(shù)據(jù)交互、敏捷創(chuàng)新應用、數(shù)據(jù)共享、新業(yè)務拓展的需求。以數(shù)據(jù)驅動的數(shù)字化，將幫助車企全面了解用戶的需求變化，也能為企業(yè)在營銷、生產、服務等各個環(huán)節(jié)提供支撐，進一步提升企業(yè)的經營效率。數(shù)據(jù)治理平臺的核心理念在于數(shù)據(jù)取之于業(yè)務，用之于業(yè)務，即完整構建車企從數(shù)據(jù)生產到消費，消費后產生的數(shù)據(jù)再回流到生產流程的閉環(huán)過程。2、汽車制造企業(yè)數(shù)據(jù)治理解決方案（1）汽車制造企業(yè)數(shù)據(jù)治理咨詢服務在車企組織架構、制度體系和數(shù)據(jù)資產盤點的基礎上，結合國際、國內和行業(yè)標準，圍繞數(shù)據(jù)資產全生命周期管理，制定相關的數(shù)據(jù)規(guī)范體系。通過數(shù)據(jù)治理咨詢建設所涉項目的數(shù)據(jù)治理體系，包括標準、組織、規(guī)范、流程、制度等，實現(xiàn)營銷業(yè)務線、制造業(yè)務線、研發(fā)業(yè)務線數(shù)據(jù)分級分類標準制定，形成包含主數(shù)據(jù)、數(shù)據(jù)標準、數(shù)據(jù)模型、元數(shù)據(jù)、數(shù)據(jù)質量、數(shù)據(jù)安全、數(shù)據(jù)生命周期、數(shù)據(jù)架構等標準、流程與管理制度，并具備推廣至全公司業(yè)務線的能力。一是數(shù)據(jù)治理體系規(guī)劃。數(shù)據(jù)治理整體規(guī)劃方面包括數(shù)據(jù)管理愿景、組織模式、管理邊界和推動策略，數(shù)據(jù)管理體系設計方面包括數(shù)據(jù)治理基礎、數(shù)據(jù)管理核心領域、數(shù)據(jù)應用，任務及規(guī)劃方面包括數(shù)據(jù)管理任務識別、實施原則分析、實施計劃制定。二是數(shù)據(jù)治理組織規(guī)劃。根據(jù)數(shù)據(jù)管理工作的實際需要，在業(yè)務部門、技術管理部門和業(yè)務應用部門間要確定各個工作人員的職責。例如不同的業(yè)務部門應該明確各自業(yè)務開展對數(shù)據(jù)的具體要求和相關規(guī)則，而技術部門則會根據(jù)業(yè)務部門的需求負責具體的實施工作，包括將業(yè)務部門提出的要求轉化成技術語言，用于事前的控制（如字段的約束）、事中的邏輯控制（例如控制不能為空）、事后的核查，以及具體的技術操作和編制定期的報告等。（2）汽車制造企業(yè)數(shù)據(jù)治理平臺搭建集成自有大數(shù)據(jù)平臺、開放平臺、調度平臺與可視化平臺，管理數(shù)據(jù)資產、提升數(shù)據(jù)質量，打造數(shù)據(jù)資產中心、支撐業(yè)務創(chuàng)新的數(shù)據(jù)服務中心和應用中心。（3）汽車制造企業(yè)數(shù)據(jù)治理項目實施梳理營銷業(yè)務線、制造業(yè)務線、研發(fā)業(yè)務線數(shù)據(jù)資產，劃分數(shù)據(jù)域，構建數(shù)據(jù)應用，實現(xiàn)數(shù)據(jù)生命周期全流程打通。具體實施內容包括數(shù)據(jù)資產地圖、數(shù)據(jù)模型、數(shù)據(jù)標準、元數(shù)據(jù)管理、數(shù)據(jù)血緣、數(shù)據(jù)分級分類、數(shù)據(jù)質量規(guī)則及報告等。一是數(shù)據(jù)資產門戶。全局統(tǒng)計企業(yè)數(shù)據(jù)資產情況，讓企業(yè)管理者對數(shù)據(jù)的分布、增長、使用、質量情況有直觀的了解。包括不限于。1）數(shù)據(jù)指標的統(tǒng)計：數(shù)據(jù)源數(shù)量、表數(shù)量、存儲量、使用量、質量評分。2）數(shù)據(jù)趨勢的統(tǒng)計：數(shù)據(jù)分布情況、數(shù)據(jù)增長趨勢、數(shù)據(jù)使用熱度。3）數(shù)據(jù)使用排行：數(shù)據(jù)存儲排行；元數(shù)據(jù)質量：規(guī)范趨勢、規(guī)范排行。二是數(shù)據(jù)地圖。數(shù)據(jù)地圖的定位是可視化的數(shù)據(jù)資產中心，用戶可以在數(shù)據(jù)地圖模塊中查看平臺內的所有數(shù)據(jù)表情況，同時可以進行全方位管理數(shù)據(jù)資產。1）數(shù)據(jù)查找：匯聚平臺內的所有數(shù)據(jù)表信息，方便開發(fā)人員快速定位所需數(shù)據(jù)表，支持用戶根據(jù)類目、表名、所在項目、授權狀態(tài)進行過濾，或直接根據(jù)表名搜索。2）數(shù)據(jù)表元數(shù)據(jù)展現(xiàn)：用戶指定某張表后，可以查看此表的基本信息，包括表名、物理存儲量、生命周期、是否分區(qū)表、字段名稱、字段類型、分區(qū)信息等，同時可以進行預覽，直觀地查看表內數(shù)據(jù)情況。3）數(shù)據(jù)類目管理：當平臺內的數(shù)據(jù)表越來越多時，數(shù)據(jù)類目的重要性就會日益突出。提供3層類目的管理，用戶可自定義層級、名稱，并將數(shù)據(jù)表指定至某個節(jié)點上，數(shù)據(jù)開發(fā)者在尋找數(shù)據(jù)時可根據(jù)數(shù)據(jù)類目快速定位。4）數(shù)據(jù)審批授權：提供表級數(shù)據(jù)權限的管理，當用戶需要跨項目訪問表時（讀/寫）需先經項目管理員審批授權，審批通過后才可以對表進行跨項目訪問。同時，授權審批具備有效期的概念，超出有效期后自動取消授權，提升數(shù)據(jù)訪問的安全程度。4）生命周期管理：提供表的生命周期管理，用戶可在建表時指定生命周期，系統(tǒng)定時檢測每張表/分區(qū)的數(shù)據(jù)更新時間，超出時間后自動刪除數(shù)據(jù)，降低臨時數(shù)據(jù)造成的存儲壓力。5）數(shù)據(jù)血緣解析：提供自動解析同步任務和SQL代碼，自動建立各個數(shù)據(jù)表的表級、字段級血緣關系，用戶可直接在頁面上看到每個指標的前世今生便于快速排查指標問題，檢查指標統(tǒng)計邏輯，依賴鏈路是否正常等。三是數(shù)據(jù)質量。作為數(shù)據(jù)治理的內容，數(shù)據(jù)質量的保障與提升是大數(shù)據(jù)平臺的必備功能。數(shù)據(jù)質量的管理工作大致可以按照事前、事中、事后的流程化體系來進行，即事前的監(jiān)控規(guī)則定義、事中的數(shù)據(jù)生成監(jiān)控、事后的數(shù)據(jù)質量分析。1）事前管理：接入需要管理的數(shù)據(jù)源，并結合對業(yè)務需求和數(shù)據(jù)的理解，對需要監(jiān)控的數(shù)據(jù)配置監(jiān)控規(guī)則。2）事中管理：通過對定義好的監(jiān)控規(guī)則配置調度周期，系統(tǒng)自動執(zhí)行，校驗數(shù)據(jù)質量。3）事后管理：對校驗不滿足規(guī)則的數(shù)據(jù)，及時發(fā)出錯誤提醒。同時系統(tǒng)自動生成監(jiān)控報告，幫助用戶復盤總結數(shù)據(jù)問題。四是數(shù)據(jù)安全。1）數(shù)據(jù)權限控制：支持表級數(shù)據(jù)權限的管理，當用戶需要跨項目訪問表時（讀/寫）需先經項目管理員審批授權，審批通過后才可以對表進行跨項目訪問。同時，授權審批具備有效期的概念，超出有效期后自動取消授權，提升數(shù)據(jù)訪問的安全程度。支持數(shù)據(jù)資源服務的權限申請、審批，保障數(shù)據(jù)服務的安全性。2）生命周期管理：支持表的生命周期管理，用戶可在建表時指定生命周期，系統(tǒng)定時檢測每張表/分區(qū)的數(shù)據(jù)更新時間，超出時間后自動刪除數(shù)據(jù)，降低臨時數(shù)據(jù)造成的存儲壓力。3）數(shù)據(jù)影響解析：當用戶配置了同步任務，并通過SQL任務進行多個步驟的清洗、轉化處理之后最終會將結果數(shù)據(jù)輸出，在整個處理鏈路中，數(shù)據(jù)的血緣關系就隱含在同步任務和SQL代碼中，數(shù)據(jù)影響表示每個統(tǒng)計指標是如何從原始數(shù)據(jù)得到的過程。4）數(shù)據(jù)脫敏：支持自定義脫敏規(guī)則，可應用于不同的敏感數(shù)據(jù)防止數(shù)據(jù)預覽時造成數(shù)據(jù)泄露。包括支持根據(jù)國標自定義安全等級，對人、表進行分級分類定級；支持自定義腳本函數(shù)、正則表達式，按需關聯(lián)識別規(guī)則、識別函數(shù)及脫敏規(guī)則，自動動態(tài)識別敏感數(shù)據(jù)；支持內置多種敏感數(shù)據(jù)識別定期模板，即身份證、銀行卡號、郵箱、手機號、IP、固定電話、車牌號、姓名、公司、地址的識別，同時提供用戶自定義規(guī)則。3、汽車制造企業(yè)數(shù)據(jù)治理建設成果車企通過數(shù)據(jù)治理平臺項目，完成了數(shù)據(jù)規(guī)范、標準、質量、服務體系、治理組織架構等內容建設，基本能滿足企業(yè)2—3年數(shù)據(jù)發(fā)展的使用訴求。結合數(shù)據(jù)中臺+數(shù)據(jù)治理方案，在該階段取得了階段性的成果，概括如下幾個方向。一是構建強大數(shù)據(jù)開發(fā)與治理平臺體系，通過數(shù)據(jù)中平臺的建設，為車企實現(xiàn)數(shù)據(jù)基礎處理平臺、數(shù)據(jù)資產管理平臺、數(shù)據(jù)服務平臺。從而實現(xiàn)從標準化數(shù)據(jù)采集、數(shù)據(jù)質量管理、數(shù)據(jù)資產管理和數(shù)據(jù)應用的整套數(shù)據(jù)標準化處理流程，同時對接BI和報表工具，同時對元數(shù)據(jù)進行標準化的API管理能力。二是快速定位數(shù)據(jù)問題根本原因，有許多數(shù)據(jù)問題不一定是真正的數(shù)據(jù)問題，如果所有使用者一碰到難以理解的問題就找技術人員協(xié)助定位，技術人員則會花費過多時間在問題定位上的，最終導致數(shù)據(jù)問題會越堆積越多的。因此，本次項目為使用者提供自助排查的功能，協(xié)助用戶找到問題原因，實在解決不了的再找到技術人員協(xié)助解決。另外將數(shù)據(jù)流中間結果的數(shù)據(jù)可視化呈現(xiàn)，便于在最終結果報表缺失或有誤的情況下，能夠快速定位出是數(shù)據(jù)出錯環(huán)節(jié)。三是數(shù)據(jù)質量得到保障，數(shù)據(jù)價值高。數(shù)據(jù)質量可靠不僅提升了決策人員的決策效率以及成果，也可以降低發(fā)生風險的概率。當客戶用可靠的數(shù)據(jù)時，客戶可以更快、更一致地回答問題，做出決策。如果數(shù)據(jù)是高質量的，他們也能花更少的時間發(fā)現(xiàn)問題，而將更多的時間用于使用數(shù)據(jù)來獲得洞察力、做決策、服務用戶。打造繁榮有序產業(yè)生態(tài)（一）培育壯大企業(yè)主體發(fā)揮龍頭企業(yè)研制主體、協(xié)同主體、使用主體和示范主體作用，持續(xù)提升自主創(chuàng)新、產品競爭和知識產權布局能力，利用資本市場做強做優(yōu)。鼓勵中小企業(yè)專精特新發(fā)展，不斷提升創(chuàng)新能力和專業(yè)化水平。引導龍頭企業(yè)為中小企業(yè)提供數(shù)據(jù)、算法、算力等資源，推動大中小企業(yè)融通發(fā)展和產業(yè)鏈上下游協(xié)同創(chuàng)新。支持有條件的垂直行業(yè)企業(yè)開展大數(shù)據(jù)業(yè)務剝離重組，提升專業(yè)化、規(guī)?；褪袌龌漳芰Γ涌炱髽I(yè)發(fā)展。（二）優(yōu)化大數(shù)據(jù)公共服務建設大數(shù)據(jù)協(xié)同研發(fā)平臺，促進政產學研用聯(lián)合攻關。建設大數(shù)據(jù)應用創(chuàng)新推廣中心等載體，促進技術成果產業(yè)化。加強公共數(shù)據(jù)訓練集建設，打造大數(shù)據(jù)測試認證平臺、體驗中心、實訓基地等，提升評測咨詢、供需對接、創(chuàng)業(yè)孵化、人才培訓等服務水平。構建大數(shù)據(jù)產業(yè)運行監(jiān)測體系，強化運行分析、趨勢研判、科學決策等公共管理能力。（三）推動產業(yè)集群化發(fā)展推動大數(shù)據(jù)領域國家新型工業(yè)化產業(yè)示范基地高水平建設，引導各地區(qū)大數(shù)據(jù)產業(yè)特色化差異化發(fā)展，持續(xù)提升產業(yè)集群輻射帶動能力。鼓勵有條件的地方依托國家級新區(qū)、經濟特區(qū)、自貿區(qū)等，圍繞數(shù)據(jù)要素市場機制、國際交流合作等開展先行先試。發(fā)揮協(xié)會聯(lián)盟橋梁紐帶作用，支持舉辦產業(yè)論壇、行業(yè)大賽等活動，營造良好的產業(yè)發(fā)展氛圍。數(shù)據(jù)治理發(fā)展形勢從國際看，當今世界正經歷百年未有之大變局，進入以數(shù)字化生產力為主要標志的數(shù)字時代，數(shù)字重新定義一切、云計算服務一切、網(wǎng)絡連接一切、AI賦能一切，以互聯(lián)網(wǎng)、大數(shù)據(jù)、人工智能、物聯(lián)網(wǎng)等為代表的信息技術廣泛滲透到經濟社會各領域，世界各國都已將大數(shù)據(jù)作為重要戰(zhàn)略任務。隨著科技革命、產業(yè)變革縱深推進，抓住數(shù)據(jù)這一關鍵要素，充分釋放數(shù)字化發(fā)展的放大、疊加、倍增效應，是搶占新一輪發(fā)展制高點的關鍵。從國內看，我國已成為全球數(shù)據(jù)量最大、數(shù)據(jù)類型最豐富的國家之一，數(shù)據(jù)日益對經濟發(fā)展、社會治理、人民生活產生重要影響。近年來，印發(fā)了《促進大數(shù)據(jù)發(fā)展行動綱要》《數(shù)字經濟發(fā)展戰(zhàn)略綱要》等系列重要文件，對大數(shù)據(jù)發(fā)展管理作出全面部署。深入實施國家大數(shù)據(jù)戰(zhàn)略，形成新發(fā)展格局中實現(xiàn)更大作為。筑牢數(shù)據(jù)安全保障防線（一）完善數(shù)據(jù)安全保障體系強化大數(shù)據(jù)安全頂層設計，落實網(wǎng)絡安全和數(shù)據(jù)安全相關法律法規(guī)和政策標準。鼓勵行業(yè)、地方和企業(yè)推進數(shù)據(jù)分類分級管理、數(shù)據(jù)安全共享使用，開展數(shù)據(jù)安全能力成熟度評估、數(shù)據(jù)安全管理認證等。加強數(shù)據(jù)安全保障能力建設，引導建設數(shù)據(jù)安全態(tài)勢感知平臺，提升對敏感數(shù)據(jù)泄露、違法跨境數(shù)據(jù)流動等安全隱患的監(jiān)測、分析與處置能力。（二）推動數(shù)據(jù)安全產業(yè)發(fā)展支持重點行業(yè)開展數(shù)據(jù)安全技術手段建設，提升數(shù)據(jù)安全防護水平和應急處置能力。加強數(shù)據(jù)安全產品研發(fā)應用，推動大數(shù)據(jù)技術在數(shù)字基礎設施安全防護中的應用。加強隱私計算、數(shù)據(jù)脫敏、密碼等數(shù)據(jù)安全技術與產品的研發(fā)應用，提升數(shù)據(jù)安全產品供給能力，做大做強數(shù)據(jù)安全產業(yè)。大數(shù)據(jù)產業(yè)指導思想立足新發(fā)展階段，完整、準確、全面貫徹新發(fā)展理念，構建新發(fā)展格局，以推動高質量發(fā)展為主題，以供給側結構性改革為主線，以釋放數(shù)據(jù)要素價值為導向，圍繞夯實產業(yè)發(fā)展基礎，著力推動數(shù)據(jù)資源高質量、技術創(chuàng)新高水平、基礎設施高效能，圍繞構建穩(wěn)定高效產業(yè)鏈，著力提升產業(yè)供給能力和行業(yè)賦能效應，統(tǒng)籌發(fā)展和安全，培育自主可控和開放合作的產業(yè)生態(tài)，打造數(shù)字經濟發(fā)展新優(yōu)勢，為建設制造強國、網(wǎng)絡強國、數(shù)字中國提供有力支撐。一體化大數(shù)據(jù)資源中心工程（一）城市大數(shù)據(jù)資源中心完善數(shù)據(jù)目錄管理、供需對接、交換等功能。升級公共數(shù)據(jù)開放系統(tǒng)，完善目錄發(fā)布、指引發(fā)布、便捷檢索、統(tǒng)計分析、應用展示等功能。建設數(shù)據(jù)中臺，利用建模、映射、對標檢查、同態(tài)加密、數(shù)據(jù)標簽或水印等技術，開發(fā)數(shù)據(jù)元管理、數(shù)據(jù)模型、數(shù)據(jù)標準、數(shù)據(jù)質量、數(shù)據(jù)安全及審計等工具。（二）城市信息模型（CIM）以三維空間數(shù)據(jù)底座為核心，匯聚融合建筑、道路、軌道、隧道、橋梁、水體、地下空間等基礎設施，以及資源調查、規(guī)劃管控、公共專題、工程建設項目、物聯(lián)感知等數(shù)據(jù)，統(tǒng)籌建設時空基礎數(shù)據(jù)庫、資源調查數(shù)據(jù)庫、規(guī)劃管控數(shù)據(jù)、工程建設項目數(shù)據(jù)庫、公共專題數(shù)據(jù)庫、物聯(lián)感知數(shù)據(jù)庫等主題數(shù)據(jù)庫，形成融合共享、開放協(xié)同的GIS＋BIM＋IoT數(shù)據(jù)資源體系。數(shù)據(jù)治理發(fā)展目標數(shù)據(jù)共享開放質量顯著提升，數(shù)據(jù)治理與利用能力持續(xù)增強，數(shù)據(jù)聚通用發(fā)展水平大幅提升，一體化數(shù)據(jù)協(xié)同治理與安全防護體系全面建成。加快培育數(shù)據(jù)要素市場，持續(xù)優(yōu)化大數(shù)據(jù)應用發(fā)展生態(tài)，推動數(shù)字化高質量發(fā)展。以數(shù)據(jù)共享、數(shù)據(jù)開放、數(shù)據(jù)質量、數(shù)據(jù)安全、數(shù)據(jù)運營、數(shù)據(jù)交易、數(shù)據(jù)要素市場培育等政策法規(guī)、標準規(guī)范為補充，構建全方位、專業(yè)化的數(shù)字規(guī)則體系，數(shù)據(jù)治理體系建設的法治化、規(guī)范化再上新臺階。新型智慧城市運行管理中心全面建成，數(shù)據(jù)疊加、建模、分析等數(shù)據(jù)治理支撐能力顯著增強，推動數(shù)字化應用全業(yè)務覆蓋、全流程貫通、跨部門協(xié)同，實現(xiàn)一網(wǎng)統(tǒng)管、一網(wǎng)通辦、一網(wǎng)調度、一網(wǎng)治理。在城市運行、基層治理、交通出行等領域，打造一批在全國有影響力的智慧應用新范例?；緲嫿嘭熐逦臄?shù)據(jù)要素市場化配置規(guī)則、組織架構和監(jiān)管機制。數(shù)據(jù)要素市場規(guī)范有序發(fā)展，數(shù)據(jù)要素配置科學合理，數(shù)據(jù)要素市場主體持續(xù)活躍，數(shù)據(jù)治理服務相關產業(yè)集聚能力顯著增強。數(shù)據(jù)安全法規(guī)制度更加健全，數(shù)據(jù)安全管理平臺全面建成，數(shù)據(jù)共享開放、融合應用、跨境流通的數(shù)據(jù)安全風險管控能力顯著增強，數(shù)據(jù)安全保障水平顯著提高，形成規(guī)范有序、高效流通、安全可控的數(shù)據(jù)治理體系。發(fā)揮大數(shù)據(jù)特性優(yōu)勢（一）加快數(shù)據(jù)大體量匯聚支持企業(yè)通過升級信息系統(tǒng)、部署物聯(lián)感知設備等方式，推動研發(fā)、生產、經營、服務等全環(huán)節(jié)數(shù)據(jù)的采集。開展國家數(shù)據(jù)資源調查，繪制國家數(shù)據(jù)資源圖譜。建立多級聯(lián)動的國家工業(yè)基礎大數(shù)據(jù)庫和原材料、裝備、消費品、電子信息等行業(yè)數(shù)據(jù)庫，推動工業(yè)數(shù)據(jù)全面匯聚。（二）強化數(shù)據(jù)多樣性處