




版權說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權,請進行舉報或認領
文檔簡介
Informationtechnologyapplicationinnovation—DatamanagementtespecificationsforoperationI 2 2 2 2 2 3 3 3 3 4 4 5 5 5 6 7 7 7 7 7 8 8 8 9 9 9 9 9 9 9 9 本文件按照GB/T1.1—2020《標準化工作導則第1部分:標準化文件的結構和起草規(guī)則》的規(guī)定本文件起草單位:昆侖數(shù)智科技有限責任公司、北京京航計算通訊研究所、啟明信息技術股份有限公司、遠光軟件股份有限公司、國網(wǎng)信通億力科技有限責任公司、國網(wǎng)信息通信產(chǎn)業(yè)集團有限公司、四川中電啟明星信息技術有限公司、南方電網(wǎng)數(shù)字平臺科技(廣東)有限公司、廣東盈世計算機科技有限公司、北京中電普華信息技術有限公司、航天云網(wǎng)數(shù)據(jù)研究院(江蘇)有限公司、北京通州網(wǎng)絡安全產(chǎn)業(yè)園運營管理有限公司、藍象標準(北京)科技有限公司、嵩嘉標準化技術服務(北京)有限本文件主要起草人:李洪宇、徐永偉、杜阿衛(wèi)、張允君、羅奕、丁學英、郭仕銳、馮亞玲、郝家雨、王磊、劉永進、邊夢娜、戚瑋、楊志婭、胡興勇、段正軒、張德保、段小莉、熊凡凡、姜冰、周企業(yè)的經(jīng)營管理類軟件是構筑現(xiàn)代化企業(yè)的重要信息基礎,有助于提升企業(yè)經(jīng)營管理的科學性、降低企業(yè)管理成本、提升業(yè)務流程效率和業(yè)務決策水平,高效推動業(yè)務與財務、業(yè)務與業(yè)務、企業(yè)內(nèi)目前各企業(yè)經(jīng)營管理系統(tǒng)由于技術體系和標準不統(tǒng)一,容易造成企業(yè)內(nèi)部各部門、各系統(tǒng)之間以及企業(yè)與產(chǎn)業(yè)鏈上下游之間在數(shù)據(jù)共享協(xié)同方面的問題,因此亟需制定相關數(shù)據(jù)管理標準對信息技術通過技術規(guī)范的制定,對經(jīng)營管理系統(tǒng)的數(shù)據(jù)采集、存儲、集成、開發(fā)和應用等重要內(nèi)容標準化提供參考。本文件的制定一是可以為經(jīng)營管理系統(tǒng)數(shù)據(jù)管理方面相關設備及軟件供應商在數(shù)據(jù)存儲、數(shù)據(jù)集成等方面提供指導,確保各設備與系統(tǒng)之間更好兼容;二是可以為數(shù)據(jù)管理功能開發(fā)和運維團隊提供指引,保障不同平臺和系統(tǒng)之間的兼容和數(shù)據(jù)流通;三是可以為經(jīng)營管理系統(tǒng)數(shù)據(jù)的設計、實施、維護等數(shù)據(jù)開發(fā)和利用方面提供指導、同時為數(shù)據(jù)的統(tǒng)一管理和規(guī)范服務提供參考,保障數(shù)據(jù)的完整性、可靠性和可用性;四是可以為政府相關監(jiān)管部門在政策制定方面提供依據(jù)。本文件的制定結合了云計算、數(shù)據(jù)湖和數(shù)據(jù)倉庫的技術特征,并充分參考部分集團型制造企業(yè)的數(shù)據(jù)治理體系,為經(jīng)營管理數(shù)據(jù)的高效利用提供了成熟、先進且全面1信息技術應用創(chuàng)新經(jīng)營管理系統(tǒng)數(shù)據(jù)管理技術規(guī)范本文件給出了經(jīng)營管理系統(tǒng)的數(shù)據(jù)對象范圍和數(shù)據(jù)管理體系,規(guī)定了相應的元數(shù)據(jù)管理、主數(shù)據(jù)管理、數(shù)據(jù)建模、數(shù)據(jù)標準管理、數(shù)據(jù)集成和共享、數(shù)據(jù)質(zhì)量管理、數(shù)據(jù)安全管理等方面的技術規(guī)范本文件適用于組織和機構對經(jīng)營管理系統(tǒng)在數(shù)據(jù)管理與數(shù)據(jù)應用能力建設的指導和評下列文件中的內(nèi)容通過文中的規(guī)范性引用而構成本文件必不可少的條款。其中,注日期的引用文件,僅該日期對應的版本適用于本文件;不注日期的引用文件,其最新版本(包括所有的修改單)適GB/T36073數(shù)據(jù)管理能力成熟度評估GB/T42450信息技術大數(shù)據(jù)數(shù)據(jù)一種用于分析和報告來自多個來源的結構化和半結構化數(shù)據(jù)的,面向商務智能活動的數(shù)據(jù)管理系一種用于以原生格式存儲、處理和保護大量結構化、半結構化和非結構化數(shù)據(jù)的集關于數(shù)據(jù)或數(shù)據(jù)元素的數(shù)據(jù)(可能包括其數(shù)據(jù)描述),以及關于數(shù)據(jù)擁有權、存取路徑、訪問權2在數(shù)據(jù)處理系統(tǒng)中,提供對數(shù)據(jù)的訪問,執(zhí)行或監(jiān)控數(shù)據(jù)的存儲,以及控制輸入輸出操作等功能。4縮略語API:應用程序接口(ApplicationPrograERP:企業(yè)資源計劃(EnterpriseResourcePlanETL:數(shù)據(jù)的提取、轉換和加載(ExtJDBC:Java數(shù)據(jù)庫連接(JavaDatabaseco5.1定義經(jīng)營管理數(shù)據(jù)是指企業(yè)在經(jīng)營活動過程中產(chǎn)生的各類數(shù)據(jù),它們用于支持企業(yè)的日常管理決策、戰(zhàn)略規(guī)劃、業(yè)務分析以及運營優(yōu)化等活動。這些數(shù)據(jù)通常涵蓋銷售數(shù)據(jù)、財務數(shù)據(jù)、客戶數(shù)據(jù)、市場5.2特點經(jīng)營管理數(shù)據(jù)具備決策導向性、綜合性、及時性和動態(tài)性、相關性和可行動性、預測性、規(guī)范性5.3性質(zhì)經(jīng)營管理系統(tǒng)數(shù)據(jù)應表現(xiàn)其具備的業(yè)務屬性,包括類型、來源、格式、結構、內(nèi)容、質(zhì)量、時間、經(jīng)營管理系統(tǒng)數(shù)據(jù)應具備可通過API、數(shù)據(jù)庫連接、數(shù)據(jù)集成工具、文本傳輸協(xié)議、消息隊列、ETL工具、Web服務、數(shù)據(jù)共享平臺等技術手段,實現(xiàn)系統(tǒng)間應用集成和數(shù)據(jù)共享的能力。經(jīng)營管理系統(tǒng)數(shù)據(jù)應能適應企業(yè)內(nèi)外部環(huán)境和管理要求的變化,應具備數(shù)據(jù)轉換能力,可適應不3經(jīng)營管理系統(tǒng)數(shù)據(jù)應具備參數(shù)化配置性質(zhì),以滿足不同場景需求,例如定制規(guī)則引擎、工作流程設計器、報表和儀表板定制、數(shù)據(jù)導出和導入、擴展性插件、多5.4.1主數(shù)據(jù)指經(jīng)營管理系統(tǒng)主數(shù)據(jù),包括但不限于物料清單、工作中心能力和成本費率、工藝路線、倉庫和指由生產(chǎn)經(jīng)營活動在進行中產(chǎn)生的數(shù)據(jù)。如客戶指在經(jīng)營管理系統(tǒng)運行過程中,由信息系統(tǒng)按照既定的程序邏輯,對數(shù)據(jù)按生產(chǎn)業(yè)務需求進行運經(jīng)營管理系統(tǒng)數(shù)據(jù)管理體系見圖1,參考GB/T36073中對數(shù)據(jù)管理能力成熟度評估模型(DCMM)8個數(shù)據(jù)管理能力域的劃分,關注經(jīng)營管理系統(tǒng)數(shù)據(jù)從收集、數(shù)據(jù)治理到應用的過程。以元數(shù)據(jù)和主數(shù)據(jù)管理為基礎,以數(shù)據(jù)標準體系為支撐,標準化數(shù)據(jù)建模和數(shù)據(jù)開發(fā)過程,形成數(shù)據(jù)集成與共享能力。數(shù)據(jù)質(zhì)量管理和數(shù)據(jù)安全管理為整體過程提供質(zhì)量和安全保經(jīng)營管理系統(tǒng)元數(shù)據(jù)應包含但不限于以下三種類型:業(yè)務元數(shù)據(jù)、技可針對不同應用領域和功能,滿足對數(shù)據(jù)對象的描述、定位4經(jīng)營管理系統(tǒng)主數(shù)據(jù)應是具備高價值、高共享、相對穩(wěn)定的基礎數(shù)據(jù)。主數(shù)據(jù)技術體系應數(shù)據(jù)平臺和主數(shù)據(jù)集成兩個層面的設計。平臺層面應包括但不限于元模型管理、主數(shù)據(jù)清洗、主數(shù)據(jù)經(jīng)營管理系統(tǒng)數(shù)據(jù)模型具有強業(yè)務屬性,數(shù)據(jù)模型應具備解釋和可解釋性,能夠解釋模型原理和結果,以便理解和接受模型的決策。數(shù)據(jù)模型向上應能承接業(yè)務需求,向下應能數(shù)據(jù)標準體系應明確規(guī)范企業(yè)經(jīng)營管理業(yè)務活動中所涉及數(shù)據(jù)的規(guī)范化定義和統(tǒng)一解釋,命名和命名約定、數(shù)據(jù)分類和層次機構、數(shù)據(jù)格式和數(shù)據(jù)類型、數(shù)據(jù)采集和錄入規(guī)則、數(shù)據(jù)交換和集數(shù)據(jù)存儲應保障數(shù)據(jù)的安全性和可靠性。應依據(jù)數(shù)據(jù)的重要性和安全規(guī)定合理規(guī)范數(shù)據(jù)的準入準出標準和人員對數(shù)據(jù)的訪問權限,數(shù)據(jù)存儲應依據(jù)數(shù)據(jù)完整性和可靠性要求合理規(guī)劃備份策略,包括經(jīng)營管理系統(tǒng)數(shù)據(jù)集成和共享應能橫貫企業(yè)內(nèi)外部的目標異構系統(tǒng)、應用、數(shù)據(jù)源,具備經(jīng)營管理業(yè)務板塊和數(shù)據(jù)倉庫等系統(tǒng)的應用協(xié)同和數(shù)基于數(shù)據(jù)倉庫的結構化數(shù)據(jù)集成、基于數(shù)據(jù)湖的多類型數(shù)據(jù)融應在數(shù)據(jù)模型設計、數(shù)據(jù)資產(chǎn)管理、主數(shù)據(jù)管理、數(shù)據(jù)倉庫等解決方案和過程中執(zhí)行數(shù)據(jù)質(zhì)量管數(shù)據(jù)質(zhì)量報告、數(shù)據(jù)質(zhì)量規(guī)劃與策略以及相關數(shù)據(jù)質(zhì)量工具和技術,可改善各維度的數(shù)據(jù)問題應制定并采取各種策略、技術和活動,包括但不限于從組織建設、業(yè)務流程、規(guī)章制度、技術工具等方面確保數(shù)據(jù)的可用性、完整性和保密性,以及能夠控制數(shù)據(jù)安全風險或將風險帶來的企業(yè)經(jīng)營管理系統(tǒng)的元數(shù)據(jù)應包含但不限于業(yè)務元數(shù)據(jù)、技術元數(shù)據(jù)和操作元數(shù)據(jù)三類,要求如a)數(shù)據(jù)來源應具有唯一性,確保數(shù)據(jù)在一個數(shù)據(jù)集中或整個數(shù)據(jù)管理環(huán)境中的唯一性,包括使用主鍵、唯一性約束、數(shù)據(jù)去重、數(shù)據(jù)匹配與合并等能力保障每個數(shù)據(jù)實體只有一個唯一的b)業(yè)務元數(shù)據(jù)應包括對數(shù)據(jù)的定義、結構、來源、更新頻率、質(zhì)量評級等信息,范圍包含但不5c)技術元數(shù)據(jù)應包括數(shù)據(jù)庫架構、應用程序代碼、系統(tǒng)配置、安全權限等信息,范圍包含但不d)操作元數(shù)據(jù)應包括系統(tǒng)日志、用戶活動日志、性能指標、配置更改歷史等信息,范圍包含但e)數(shù)據(jù)平臺的元數(shù)據(jù)應包含但不限于數(shù)據(jù)倉庫、數(shù)g)應支持半結構化、非結構化數(shù)據(jù)元數(shù)據(jù)提c)支持對半結構化和非結構化數(shù)據(jù)采用圖像識別、自然語言處理等人工智能技術識別和采集元a)基于元數(shù)據(jù)管理工具構建符合公共倉庫元模型(CWM)規(guī)范的元數(shù)據(jù)倉庫,實現(xiàn)集中化管理;b)提供對元數(shù)據(jù)增、改、刪、查、發(fā)布等管理功能;c)支持元數(shù)據(jù)版本管理,支持按版本的查詢、對比和回溯操作;d)提供統(tǒng)一的元數(shù)據(jù)訪問接口服務,支持開放數(shù)據(jù)庫連接(ODBC)、JDBC、一組架構約束條件和原則(REST)API、內(nèi)容管理互操a)資源地圖內(nèi)容范圍包括業(yè)務流程、部門和職能、數(shù)據(jù)資產(chǎn)、應用程序、模塊和功能、報表和c)支持不同數(shù)據(jù)源導入生成資源地圖,對d)支持資源之間的關聯(lián)和依賴關系的呈現(xiàn),支持相關資源進行分組、支持利用標簽進行資源說e)支持用戶通過鼠標或觸控交互來展開或收起子圖、放大或縮小圖形、查看節(jié)點的詳細信息等;f)支持對于包含敏感信息的資源地圖的權限控制能力;h)支持針對大規(guī)模資源地圖對于加載速度和渲染性能的要求。追蹤數(shù)據(jù)的來源和去向,識別數(shù)據(jù)之間的關系和傳遞路徑,應符合下列a)血緣分析的內(nèi)容應包括數(shù)據(jù)來源、數(shù)據(jù)去向、數(shù)據(jù)傳遞路徑、數(shù)據(jù)轉換、數(shù)據(jù)關系、數(shù)據(jù)質(zhì)b)支持通過日志記錄、元數(shù)據(jù)提取、數(shù)據(jù)倉庫或數(shù)據(jù)湖等方式對數(shù)據(jù)進行采集和追蹤;c)支持建立元數(shù)據(jù)管理系統(tǒng),使用ApacheAtlas、Collibra、d)支持使用如ApacheNiFi、Talend、不同數(shù)據(jù)源數(shù)據(jù);使用如InformaticaDataQuality、Trifacta、或國內(nèi)自主可控的、先進6f)支持利用自動化腳本根據(jù)預定義的規(guī)則和算法,自動追蹤和分析數(shù)據(jù)的來源和去向;g)支持可視化展示技術,利用圖形化工具或Web可視化庫,并以樹狀圖、流程圖等形識別和評估數(shù)據(jù)或資源變更對組織或系統(tǒng)的影響,應符合a)當元數(shù)據(jù)發(fā)生變化時,應評估影響的范圍,包括變更對數(shù)據(jù)之間的依賴關系變化的影響、變更對業(yè)務過程產(chǎn)生的影響、變更對數(shù)據(jù)質(zhì)量的影響、變更對性能和資源消耗的影響、變更對b)支持使用數(shù)據(jù)監(jiān)控工具或具備同等能力的數(shù)據(jù)平臺能力對數(shù)據(jù)變更進行實時監(jiān)控,收集變更c)支持使用數(shù)據(jù)質(zhì)量工具或具備同等能力的數(shù)據(jù)平臺能力對數(shù)據(jù)進行質(zhì)量評估和分析,識別變e)支持使用圖形化工具或自主研發(fā)可自定義的可視化界面,將影響分析結果以圖表或報表的形f)支持使用版本控制機制,記錄和管理元a)元數(shù)據(jù)冷熱度分析內(nèi)容應包括但不限于數(shù)據(jù)訪問頻率、數(shù)據(jù)訪問模式(周期性訪問、突發(fā)性b)支持使用數(shù)據(jù)監(jiān)控工具,如ApacheNiFi、ApacheKafka或國內(nèi)自主可),f)支持對數(shù)據(jù)進行分級存儲,將熱數(shù)據(jù)存儲在高速存儲介質(zhì)中(如固態(tài)硬盤),將冷數(shù)據(jù)存儲基于反向工程將元數(shù)據(jù)模型(通常是邏輯模型)轉換為應用系統(tǒng)數(shù)據(jù)庫中的物理表,實現(xiàn)數(shù)據(jù)模a)應支持定義元數(shù)據(jù)模型,在設計工具或建模工具中創(chuàng)建邏輯數(shù)據(jù)模型,其中包含實體、屬性、b)應使用有權限控制的應用系統(tǒng)數(shù)據(jù)庫連接;OracleSQLDeveloperDataModeled)應支持利用反向工程工具映射元數(shù)據(jù)模型到數(shù)據(jù)庫表,將元數(shù)據(jù)模型中的實體、屬性、關系e)應支持生成和執(zhí)行數(shù)據(jù)庫模式定義語言(DDL)語句的能利用元數(shù)據(jù)記錄和管理數(shù)據(jù)在數(shù)據(jù)倉庫內(nèi)的流轉過程,對數(shù)據(jù)倉庫的設計和建模過程進行輔助和a)數(shù)據(jù)表信息:記錄數(shù)據(jù)倉庫中的數(shù)據(jù)表,7b)數(shù)據(jù)字段信息:記錄數(shù)據(jù)表中的字段,包括字段名稱、描述、數(shù)據(jù)類型、長度、精度、是否d)維度信息:記錄維度表的名稱、描述、屬性、層次結構等信息;e)事實信息:記錄事實表的名稱、描述、度量等信f)數(shù)據(jù)質(zhì)量規(guī)則:定義數(shù)據(jù)質(zhì)量規(guī)則h)數(shù)據(jù)安全和權限控制:記錄數(shù)據(jù)表或字段的安全策略、權限控制信息,以確保數(shù)據(jù)的訪問控i)數(shù)據(jù)變更歷史:記錄數(shù)據(jù)表或字段的變更歷史,包括創(chuàng)建j)數(shù)據(jù)文檔化:記錄數(shù)據(jù)表和字段的文檔描述,如數(shù)據(jù)字典、數(shù)據(jù)模k)數(shù)據(jù)可視化和報表設計:記錄數(shù)據(jù)可視化和報表的設計信息,以支持數(shù)據(jù)倉庫中的分析和報a)支持主數(shù)據(jù)分類,按一定的維度和特征對主數(shù)據(jù)劃分,包括但不限于根據(jù)數(shù)據(jù)域分類、根據(jù)數(shù)據(jù)特性分類、根據(jù)數(shù)據(jù)管理責任分類、根據(jù)數(shù)據(jù)使用分類、根據(jù)數(shù)據(jù)的生命周期分類、根b)支持主數(shù)據(jù)編碼,支持設置碼段、碼位、步長等,以滿足不同業(yè)務需求,編碼方式包括特征值編碼、固定值編碼、日期碼、流水碼、組c)支持設置中文名稱、英文名稱、字段類型、長度、唯一性約束、校驗規(guī)則等主數(shù)據(jù)屬性;d)提供主數(shù)據(jù)管理視圖配置功能,支持為不同分類主數(shù)據(jù)分配不同的屬性。a)主數(shù)據(jù)編碼不允許修改,以多版本形式維護屬性定義;b)業(yè)務流程無法使用凍結的主數(shù)據(jù)記錄,記錄維護主數(shù)據(jù)狀態(tài)的歷史信息;c)對于失效的主數(shù)據(jù)記錄進行歸檔操作,即遷移至歷史數(shù)據(jù)庫,對歸檔的主數(shù)據(jù)不可修改,只支持跟蹤主數(shù)據(jù)的血緣關系,通過可視化方式有效的管理數(shù)據(jù)變化和異常情況,應符合下列要求:a)記錄主數(shù)據(jù)的最初來源以及數(shù)據(jù)的變換和處理步驟;b)建立主數(shù)據(jù)之間的關系模型,包括數(shù)據(jù)源、數(shù)據(jù)倉庫和數(shù)據(jù)消費者之間的關聯(lián)關系;d)記錄主數(shù)據(jù)的血緣關系,編制數(shù)據(jù)血緣文a)支持包含國產(chǎn)數(shù)據(jù)庫在內(nèi)的多數(shù)據(jù)源抽取數(shù)據(jù),并能將數(shù)據(jù)加載到目標系統(tǒng)或數(shù)據(jù)倉庫的能c)具備數(shù)據(jù)匹配和去重能力,對于主數(shù)據(jù)集成,具備識別和處理不同數(shù)據(jù)源中的重復數(shù)據(jù),并8d)具備檢測和修復數(shù)據(jù)質(zhì)量問題的能e)具備數(shù)據(jù)安全和權限控制能力,主數(shù)據(jù)集成涉及敏感數(shù)據(jù),需具備嚴格的數(shù)據(jù)安全和權限控f)具備實時的數(shù)據(jù)抽取和傳輸能力;g)具備定義和管理數(shù)據(jù)轉換規(guī)則和映射關系的能力,確保數(shù)據(jù)在不同系統(tǒng)之間的正確轉換;h)具備容錯和數(shù)據(jù)回滾能力,在主數(shù)據(jù)集成過程中,對于可能會出現(xiàn)的錯誤或失敗情況,具備9數(shù)據(jù)建模9.1數(shù)據(jù)建模要求9.1.1數(shù)據(jù)結構化和標準化業(yè)務數(shù)據(jù)應以結構化的方式進行組織和存儲,確保數(shù)據(jù)的一致性和可比性,包括采用統(tǒng)一的數(shù)據(jù)9.1.2數(shù)據(jù)完整性和準確性數(shù)據(jù)模型應能夠確保業(yè)務數(shù)據(jù)的完整性和準確性,可定義適當?shù)臄?shù)據(jù)約束和驗證規(guī)則,確保數(shù)據(jù)在采集、存儲和處理過程中沒有缺失、錯誤或9.1.3數(shù)據(jù)可擴展性應采用合適的數(shù)據(jù)結構(如列表、數(shù)據(jù)、字典、樹、圖等)和關系模型(如表格、視圖、主外鍵、),9.1.4數(shù)據(jù)一致性和關聯(lián)性數(shù)據(jù)模型應能夠準確地反映業(yè)務實體之間的關聯(lián)關系,保持數(shù)據(jù)的一致性。通過定義適當?shù)闹麈I、9.1.5數(shù)據(jù)性能和查詢效率應合理設計索引、分區(qū)和分片策略,優(yōu)化數(shù)據(jù)訪問路徑和查詢性能,提高數(shù)據(jù)的檢索和分析效率。9.1.6數(shù)據(jù)安全和權限控制業(yè)務數(shù)據(jù)模型應考慮數(shù)據(jù)的安全性和權限控制,采用適當?shù)臄?shù)據(jù)加密和權限管理機制,確保數(shù)據(jù)9.1.7數(shù)據(jù)可視化和報表支持數(shù)據(jù)模型宜具備數(shù)據(jù)可視化和報表支持的能力,可通過圖表、報表和可視化工具,呈現(xiàn)數(shù)據(jù)的洞9.1.8支持系統(tǒng)級數(shù)據(jù)模型開發(fā)數(shù)據(jù)倉庫、應用系統(tǒng)的數(shù)據(jù)模型均應可基于企業(yè)級數(shù)據(jù)模型進行擴展,實現(xiàn)系統(tǒng)模型的正向建模。9.1.9支持數(shù)據(jù)模型的反向采集應支持對主流關系型數(shù)據(jù)庫的數(shù)據(jù)結構采集,并支持數(shù)據(jù)結構在數(shù)據(jù)模型管理工具中的統(tǒng)一管理。9.2數(shù)據(jù)模型查詢a)支持通過但不限于模型分類、標簽分級等能力進行b)支持全業(yè)務域模型總覽,能識別模型間拓撲關系,支持模型的逐級下鉆。99.3數(shù)據(jù)模型管理數(shù)據(jù)模型管理應具備基本的創(chuàng)建維護功能。在狀態(tài)和屬性發(fā)生變更時,能自動識別出當前服務的a)支持數(shù)據(jù)模型的增刪改等一系列基礎維護功能;b)支持模型變更管理和發(fā)布,按企業(yè)管理需要,支持簡單的審批流程配置功能;c)支持模型分版本管理,支持版本回9.4模型對比分析應支持不同模型間對比、模型內(nèi)不同版本對比,識別模型差異,形成差9.5模型開發(fā)a)在面向業(yè)務應用開發(fā)方面(OLTP),應提供面向需求的數(shù)據(jù)概念模型、面向設計的數(shù)據(jù)邏輯b)在面向數(shù)據(jù)倉庫應用開發(fā)方面(OLAP),應能夠提供相應的元數(shù)據(jù)和主數(shù)據(jù)輔助建模開發(fā),應詳細、準確定義企業(yè)級公共業(yè)務詞匯表,提供業(yè)務術語上下文的關聯(lián)應詳細、準確定義數(shù)據(jù)字典,包括數(shù)據(jù)元分類、數(shù)據(jù)元名稱、數(shù)據(jù)元編碼、數(shù)據(jù)元值域范圍應詳細、準確涵蓋指標的業(yè)務屬性、技術屬性和管理屬性,例如指標名稱、業(yè)務含義、統(tǒng)計維度、應提供數(shù)據(jù)標準版本管理功能,包括版本查看、版本發(fā)布、版本對比和回溯等功能。應提供數(shù)據(jù)稽查能力,參照數(shù)據(jù)管理標準,可實現(xiàn)對數(shù)據(jù)模型、數(shù)據(jù)字典等進行對比分析的能力,a)具有快速的響應時間,確保用戶能夠快速訪問和操作數(shù)據(jù);b)支持足夠的吞吐量,滿足同時處理用戶請求和數(shù)據(jù)交互的要求;d)具備均衡的數(shù)據(jù)分布能力,經(jīng)營管理系統(tǒng)數(shù)據(jù)量龐大,數(shù)據(jù)顆粒度較細,應確保資源分配均e)具備緩存和性能優(yōu)化能力,減少數(shù)據(jù)訪問時間,提高系統(tǒng)性能;f)具備定期數(shù)據(jù)備份能力,以應對意外數(shù)據(jù)丟失或損壞的情況,確保數(shù)據(jù)的可恢復性;g)具備冗余和容錯性,防止硬件故障引發(fā)數(shù)據(jù)丟失,可通過但不限于磁盤陣列(RAID)、備用h)確保數(shù)據(jù)的一致性,避免數(shù)據(jù)損壞或不一致的情況,例如,可通過事務處理和原子性、一致i)具備快速的故障恢復機制,以最小化系統(tǒng)停機時間,k)確保存儲系統(tǒng)的高可用性,可通過使用冗余和負載a)具備數(shù)據(jù)加密的能力,保護數(shù)據(jù)安全,對涉及到個人隱私或者企業(yè)機密的敏感信息進行加密,b)具備多層防御的能力,采用防火墻、入侵檢測系統(tǒng)、反病毒軟件等技術工具構建多層防御策c)具備訪問控制能力,根據(jù)不同的用戶角色設定不同的訪問權限,防止未授權的訪問和非法操d)定期組織安全審計,檢查是否存在安全隱患,及時發(fā)現(xiàn)和修復漏洞;e)建立完備的容災恢復能力,構建災難恢復計劃,在出現(xiàn)數(shù)據(jù)丟失或者系統(tǒng)崩潰的情況時,具a)保障數(shù)據(jù)完整性,確保數(shù)據(jù)在整個生命周期內(nèi)保持完整性和一致性不受破壞、刪除、修改或b)對數(shù)據(jù)實施嚴格的訪問控制,只允許經(jīng)過授權的人員訪問相關數(shù)據(jù),限制訪問權限和活動范c)根據(jù)數(shù)據(jù)的重要性及其敏感程度,將數(shù)據(jù)分為不同級別,分別設置相應的安全策略和保護措d)定期備份關鍵數(shù)據(jù),防止意外損失,同時具備快速恢復數(shù)據(jù)的能力,在遭遇災難時盡快恢復e)對在網(wǎng)絡上傳輸?shù)臄?shù)據(jù)進行加密,以防數(shù)據(jù)被竊取或篡改;f)記錄并保留所有涉及數(shù)據(jù)的高危操作,以便進行事后審查和追蹤,確保數(shù)據(jù)的安全性和合規(guī)h)定期對系統(tǒng)進行安全評估,檢查系統(tǒng)的安全性是否符合預期的標準,找出存在的安全風險并b)應支持多種標準的數(shù)據(jù)格式,如xml、json、csv等,以確保不同系統(tǒng)之間c)應在數(shù)據(jù)接收端應進行數(shù)據(jù)完整性檢查,以確保數(shù)據(jù)沒有被損壞或篡改;e)應考慮性能優(yōu)化,以確保在大量數(shù)據(jù)交換場景下保障數(shù)據(jù)傳輸?shù)男屎退俣?;f)應提供租戶隔離機制,基于不同的服務實例實現(xiàn)不同消費者對相同數(shù)據(jù)服務的獨立訪問;g)應遵從數(shù)據(jù)分級管理要求,在發(fā)布服務時對相關數(shù)據(jù)資產(chǎn)共享風險進行評估;h)可在傳輸過程中使用數(shù)據(jù)壓縮技術,以減少帶寬占a)對數(shù)據(jù)進行驗證,確保其符合預定的數(shù)據(jù)格式、范圍和規(guī)則,包括但不限于驗證數(shù)值字段、b)檢測和移除重復的數(shù)據(jù),標準化數(shù)據(jù)以確保一致性,例如,將日期格式標準化為統(tǒng)一的日期c)處理缺失數(shù)據(jù),可以填充缺失值、刪除包含缺失值的記錄,或者使用適當?shù)牟逖a方法來填充d)檢測和處理異常數(shù)據(jù),如超出范圍的數(shù)值、不符合規(guī)則的文本等,異常值可以被糾正、刪除f)確保數(shù)據(jù)在不同數(shù)據(jù)源之間的一致性,包括標準化單位、貨幣、單位代碼等。a)提供數(shù)據(jù)校驗功能,包括空值檢測、長度檢查、數(shù)值范圍檢查、正則表達式校驗b)提供數(shù)據(jù)表轉換功能,包括字段值替換、值映射、列轉行、行轉列、記錄合并、記錄排序、標簽管理包括數(shù)據(jù)的標識、分類和搜索,通過為數(shù)據(jù)添加標簽來實現(xiàn)更精準的數(shù)據(jù)發(fā)現(xiàn)和利用,a)建立統(tǒng)一的標簽體系,確保標簽的一致性和標準化,標簽定義明確,并與業(yè)務需求和數(shù)據(jù)特b)建立相應的標簽分類和層次結構體系,標簽的分類能夠覆蓋經(jīng)營管理領域的不同維度和主題,c)具備唯一性和標識性,并能夠準確地標識數(shù)據(jù)的某種特征或屬性,標簽的命名清晰、簡潔、e)提供高效的標簽搜索和檢索功能,用戶能夠根據(jù)關鍵字、屬性或標簽進行數(shù)據(jù)的查找和篩選,f)提供對標簽的版本管理功能,標簽有修改和更新時記錄標簽的歷史變更和版本信息,支持用數(shù)據(jù)目錄提供了數(shù)據(jù)資源的可管理性和可發(fā)現(xiàn)性,支持數(shù)據(jù)驅動的決策和合作,并確保數(shù)據(jù)的安業(yè)務數(shù)據(jù)目錄應能對數(shù)據(jù)進行有效的分類和組織,包含對數(shù)據(jù)目錄的層次結構設計、數(shù)據(jù)分類標業(yè)務數(shù)據(jù)目錄應提供方便快捷的數(shù)據(jù)檢索和搜索功能,包含但不限于通過關鍵字、標簽、屬性等進行數(shù)據(jù)的查找和篩選,利用高效的搜索引擎和索引機制,支持快速的數(shù)據(jù)檢索和定位。應具有對數(shù)據(jù)質(zhì)量指標的定義和計算、數(shù)據(jù)質(zhì)量規(guī)則的管理和應用、數(shù)據(jù)質(zhì)量報告、數(shù)據(jù)審計等業(yè)務數(shù)據(jù)目錄應具備數(shù)據(jù)安全和權限控制的能力,技術上包括對敏感數(shù)據(jù)的加密和脫敏處理、用戶和角色的權限管理、雙因素認證、水印防篡改、數(shù)據(jù)可追溯、訪問審計等安全措施,以保護數(shù)據(jù)的應支持與行業(yè)主流及主流國產(chǎn)化系統(tǒng)數(shù)據(jù)源、數(shù)據(jù)倉庫和分析工具集成能力,實現(xiàn)數(shù)據(jù)的無縫流b)數(shù)據(jù)清理工具:刪除不正確或重復數(shù)據(jù)條目,修整數(shù)據(jù)項的值域;c)數(shù)據(jù)分析
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預覽,若沒有圖紙預覽就沒有圖紙。
- 4. 未經(jīng)權益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負責。
- 6. 下載文件中如有侵權或不適當內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準確性、安全性和完整性, 同時也不承擔用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 二零二五商鋪物業(yè)委托管理合同(含社區(qū)健康管理與醫(yī)療支持)
- 二零二五年校園環(huán)境衛(wèi)生管理與綠化合同
- 二零二五年度農(nóng)村土地承包經(jīng)營權與農(nóng)村社會保障合作合同
- 二零二五年度夜店酒吧員工安全協(xié)議與安全教育培訓費用合同
- 2025年度電動車買賣協(xié)議模版
- 二零二五年度知識產(chǎn)權法律風險管理顧問合同
- 二零二五年度武漢房屋租賃合同物業(yè)管理約定
- 二零二五年度摩托車第三者責任保險合同
- 《物流系統(tǒng)分析》課件 項目九-任務三 (一)車輛路徑優(yōu)化模型1
- 2025年包頭a2貨運資格證模擬考試
- 汽車修理有限公司章程
- (多場景條款)過橋墊資借款合同
- JBT 7901-2023 金屬材料實驗室均勻腐蝕全浸試驗方法 (正式版)
- 小學科學人教鄂教版四年級下冊全冊教案2023春
- 非遺文化介紹課件:扎染
- 營銷培訓:揭秘銷售成功密碼
- 基于STM32Cube的嵌入式系統(tǒng)應用 教案
- 動畫分鏡頭腳本設計課件
- DB37T 5245-2022 橋梁智慧健康監(jiān)測技術標準
- 社區(qū)圖書館設計任務書
- 蒂森克虜伯電梯 meta200 MRL MOB 安裝培訓 AP (無腳手架安裝工藝)
評論
0/150
提交評論