《信息化項目設計階段數(shù)據庫設計編制規(guī)范》

1T/NMPA005—2024信息化建設階段數(shù)據庫設計編制規(guī)范本標準根據GB/T28821—2012規(guī)定的關系數(shù)據庫管理系統(tǒng)的基本要求和擴展要求，給出了相應的測試要求。本標準規(guī)定了內蒙古信息化建設階段中各應用系統(tǒng)數(shù)據庫的設計原則、數(shù)據庫命名編寫規(guī)范、數(shù)據庫結構設計、數(shù)據庫操作規(guī)范、大數(shù)據標準體系的總體結構與要求等方面內容。本標準適用于關系數(shù)據庫管理系統(tǒng)標準的符合性測試，并對內蒙古信息化建設階段中各應用系統(tǒng)的數(shù)據庫建設起指導作用。2規(guī)范性引用文件下列文件中的內容通過文中的規(guī)范性引用而構成本文件必不可少的條款。其中，注日期的引用文件，僅該日期對應的版本適用于本文件；不注日期的引用文件，其最新版本（包括所有的修改單）適用于本文件。GB18030—2005信息技術中文編碼字符集GB/T13016標準體系表編制原則和要求GB/T20273—2006信息安全技術數(shù)據庫管理系統(tǒng)安全技術要求GB/T28821—2012關系數(shù)據管理系統(tǒng)技術要求GB/T30994—2014關系數(shù)據庫管理系統(tǒng)檢測規(guī)范GB/T35295-2017信息技術大數(shù)據術語ISO/IEC9075信息技術數(shù)據庫語言SQL(Informationtechnology—Databaselanguages-SQL)數(shù)據倉庫元模型規(guī)范[CommonWarehouseMetamodel(CWM)Specification]JAVA數(shù)據庫互連規(guī)范(JavaDatabaseConnectivitySpecification)開放數(shù)據庫互連規(guī)范(OpenDatabaseConnectivitySpecification)對象連接與嵌入數(shù)據庫規(guī)范(ObjectLinkingandEmbeddingDatabaseSpecification)olap4j規(guī)范(Olap4jSpecification)用于分析的XML規(guī)范(XMLforAnalysisSpecification)XML查詢語言(XQuery:AnXMLQueryLanguage)3術語和定義GB/T28821—2012中界定的術語和定義適用于本文件。以下術語和定義適用于本文件。3.1數(shù)據庫Database按照概念結構組織的數(shù)據的匯集，它描述這些數(shù)據的特征及與數(shù)據對應的實體間的關系并支持一個或多個應用領域。3.2表Table數(shù)據庫中某種特定類型數(shù)據的結構化對象，由行(Row)和列(column)組成,表示有一定意義的信息的集合。3.3字段Field數(shù)字庫中表的單元屬性，以列(column)的方式呈現(xiàn)，表示與對象或類關聯(lián)的變量。2T/NMPA005—20243.4記錄Datarecord數(shù)據庫中表的單元屬性，以列(column)的方式呈現(xiàn)，表示與對象或類關聯(lián)的變量。3.5萬國碼8-bitUnicodeTransformationFormat簡稱UTF-8，一種針對Unicode的可變長度字符編碼。3.6數(shù)據交換Datasharing依據一定的規(guī)則，采取相應的技術，滿足不同信息系統(tǒng)之間數(shù)據資源的共享需求，實現(xiàn)不同信息系統(tǒng)之間數(shù)據資源共享的過程。3.7主鍵Primarykey稱主關鍵字，表中的一個或多個字段，它的值用于唯一的標識表中的某一條記錄。3.8第三范式Thirdnormalform第三范式(3NF)是符合第三級別的關系模式的集合。滿足第三范式的數(shù)據庫，是在滿足第二范式（2NF）的基礎上，要求一個數(shù)據庫表中不包含已在其他表中已包含的非主關鍵字信息。3.9數(shù)據倉庫Datawarehouse稱企業(yè)數(shù)據倉庫，是來自一個或多個不同數(shù)據源的集成數(shù)據的中央存儲庫。數(shù)據倉庫將當前和歷史數(shù)據存儲在一起，用于報告和數(shù)據分析的系統(tǒng)。3.10結構化數(shù)據Structureddata稱作行數(shù)據，是指由數(shù)據庫二維表結構來邏輯表達和實現(xiàn)的數(shù)據形式。結構化數(shù)據須嚴格遵循數(shù)據格式與長度規(guī)范，存儲和管理結構化數(shù)據常使用關系型數(shù)據庫產品。3.11非結構化數(shù)據Unstructureddata指不適于由數(shù)據庫二維表來邏輯表達和實現(xiàn)的數(shù)據形式，其中包括各類文檔報表、圖片和音頻、視頻信息等。存儲和管理非結構化數(shù)據常根據應用領域使用專用的數(shù)據庫產品。3.12TCP/IP協(xié)議TransmissionControlProtocol/InternetProtocol即傳輸控制/網絡協(xié)議，也稱作網絡通訊協(xié)議。它是在網絡的使用中的最基本的通信協(xié)議。TCP/IP傳輸協(xié)議對互聯(lián)網中各部分進行通信的標準和方法進行了規(guī)定。并且，TCP/IP傳輸協(xié)議是保證網絡數(shù)據信息及時、完整傳輸?shù)膬蓚€重要的協(xié)議。3.13HTTP協(xié)議HyperTextTransferProtocol超文本傳輸協(xié)議，是一個請求——響應協(xié)議，它通常運行在TCP之上，用于分布式、協(xié)作式和超媒體信息系統(tǒng)的應用層協(xié)議。HTTP是萬維網的數(shù)據通信的基礎。4縮略語下列縮略語適用于本文件。CWM:數(shù)據倉庫元模型(CommonWarehouseMetamodel)DBMS:數(shù)據庫管理系統(tǒng)(DatabaseManagementSystem)ETL:提取、轉換和加載(Extraction—Transformation-Loading)HOLAP:混合聯(lián)機分析處理(HybridOnlineAnalyticalProcessing)JDBC:JAVA數(shù)據庫互連(JavaDatabaseConnectivity)MOLAP:多維聯(lián)機分析處理(MultidimensionalOnlineAnalyticalProcessing)ODBC:開放數(shù)據庫互連(OpenDatabaseConnectivity)3T/NMPA005—2024OLAP:聯(lián)機分析處理(OnLineAnalyticalProcessing)OLEDB:對象鏈接與嵌入數(shù)據庫(ObjectLinkingandEmbeddingDatabase)ROLAP:關系聯(lián)機分析處理(RelationalOnlineAnalyticalProcessing)SMP:對稱多處理結構(SymmetricMulti—Processing)SQL:結構化查詢語言(StructuredQueryLanguage)XML:可擴展置標語言(ExtensibleMarkupLanguage)XMLA:用于分析的XML(XMLforAnalysis)5數(shù)據庫通用要求5.1數(shù)據庫基本要求1)數(shù)據庫應采用技術先進、穩(wěn)定可靠、易于擴展的設計方案，設計方案應遵循數(shù)據的完整性和一致性原則；管理技術平臺應安全、穩(wěn)定、高效。2)數(shù)據庫系統(tǒng)宜具備身份鑒別、主動訪問控制、安全審計等安全防護功能。3)數(shù)據庫系統(tǒng)的設計及功能等應符合GB50982-2014的相關要求。4)數(shù)據庫的表結構設計應滿足第三范式(3NF)的要求。5)數(shù)據庫系統(tǒng)宜構建若干子數(shù)據庫，對數(shù)據進行分類存儲和管理。6)數(shù)據庫系統(tǒng)宜針對具體需求提供數(shù)據備份功能，保障數(shù)據安全。7)數(shù)據庫架構設計應根據業(yè)務分析模型，選擇合適的數(shù)據庫類型。8)數(shù)據庫中的表宜根據其存儲數(shù)據的具體特征，設計合理的表結構。9)數(shù)據庫系統(tǒng)宜具備數(shù)據倉庫拓展功能或具備向數(shù)據倉庫系統(tǒng)遷移能力。10)數(shù)據庫架構設計，除執(zhí)行本規(guī)范外，尚應符合國家及行業(yè)現(xiàn)行相關標準的規(guī)定。5.2數(shù)據庫編碼要求5.2.1數(shù)據庫中表的要求1)表應使用“[表類型]_[模塊名]_[具體表名]”方式命名。2)位于同一模塊的表名前綴應相同，模塊名可采用英語簡寫方式命名。3)具體表名應與表中存儲數(shù)據相關，應避免使用拼音命名。4)具體表名宜使用完整的英語單詞，在單詞長度大于10個字符時，可采用單詞簡寫。5)若具體表名由多個單詞組成時，應使用“_”間隔。6)表名長度不宜超過30個字符。7)具體表應使用單獨的字段作為對應表的主鍵。5.2.2數(shù)據庫中表的字段要求1)字段使用“[實體]_[屬性]”方式命名。2)字段名宜使用完整的英語單詞，在單詞長度大于10個字符時，可采用單詞簡寫。3)若字段名由多個單詞組成時，應使用“_”間隔。4)字段名長度不宜超過30個字符。5)字段應設置NOTNULL限制，允許空值的字段設計不宜超過總字段數(shù)量的80%。6)字段長度應精確定義，應在保證字段實際使用需求的基礎上，縮短字段長度。5.2.3數(shù)據庫中表的主鍵要求1)主鍵應體現(xiàn)或計算得出其數(shù)據存儲的時間戳信息。2)主鍵字段宜創(chuàng)建聚集索引。5.3數(shù)據庫維護及安全要求數(shù)據庫的維護、安全要求應符合GB/T20273-2019及GB/T22239-2019相關要求。6數(shù)據交互4T/NMPA005—20246.1數(shù)據交互要求1)數(shù)據庫架構設計應考慮與其他數(shù)據庫系統(tǒng)或軟件系統(tǒng)的數(shù)據交換需求。2)數(shù)據庫表結構具體設計時，應添加清晰完整的字段說明信息，以便于數(shù)據交互。3)數(shù)據庫架構宜選取支持ODBC和JDBC等常用接口規(guī)范的方案。4)在設計數(shù)據庫數(shù)據交換方法時，數(shù)據交換雙方應商討統(tǒng)一的數(shù)據結構或中間數(shù)據格式。5)在數(shù)據庫交換時，雙方最終目標存儲數(shù)據的數(shù)據格式應自行負責轉換。6.2數(shù)據交互方式6.2.1以本文件為基礎設計的數(shù)據庫之間進行數(shù)據交互1)在權限允許和數(shù)據交互環(huán)境安全的條件下，可在數(shù)據庫層面采用同步的方式進行數(shù)據交互。2)依據本文件搭建雙方共享數(shù)據庫，對共享數(shù)據庫中表的讀寫權限進行分離。3)以TCP/IP協(xié)議為基礎，通過HTTP協(xié)議，基于JSON的數(shù)據格式，對外提供數(shù)據接口。6.2.2不以本文件為基礎設計的數(shù)據庫之間進行數(shù)據交互宜符合6.2.1條的2)或3)規(guī)定。6.2.3非結構化數(shù)據交互宜采用以FTP、網絡共享等共享結構目錄的方式進行的數(shù)據交互。7大數(shù)據標準體系7.1總體要求1)大數(shù)據標準體系結構應分為基礎、數(shù)據、技術方法、產品與服務、行業(yè)應用、管理、安全、質量與評價等部分。2)標準體系內標準應符合國家有關法律、法規(guī)、規(guī)章，圍繞大數(shù)據發(fā)展的方針、目標而制定。3)標準體系應系統(tǒng)全面、層次恰當、劃分明確、相互協(xié)調。4)應定期對標準體系進行評價，持續(xù)改進完善體系，確保其有效性和適宜性。5)應編制標準體系文件，內容包括但不限于標準體系結構圖、標準明細表、標準體系編制說明以及標準統(tǒng)計表。7.2基礎標準分體系基礎標準分體系主要由總則、術語以及參考架構等構成，對大數(shù)據技術研發(fā)、產品實現(xiàn)和服務提供過程中起指導性、基礎性的標準。7.3數(shù)據標準分體系數(shù)據標準分體系主要由數(shù)據資源與數(shù)據應用等構成，主要用于對大數(shù)據技術底層數(shù)據相關要素進行規(guī)范。其中數(shù)據資源標準體系包括原數(shù)據、數(shù)據元素、數(shù)據目錄等，數(shù)據應用標準體系包括數(shù)據共享、數(shù)據開放、數(shù)據交易和數(shù)據分析等。7.4技術方法標準分體系技術方法標準體系主要由數(shù)據采集、數(shù)據存儲、大數(shù)據集描述、數(shù)據處理、互操作技術以及可視化技術等構成，用于對大數(shù)據領域形成的新興技術及大數(shù)據分析應用方法。其中數(shù)據存儲技術方法標準體系包括存儲格式、關系型數(shù)據庫、非關系型數(shù)據庫、實時內存數(shù)據庫、分布式數(shù)據庫等，大數(shù)據集描述技術方法標準體系包括數(shù)據模型標準、分類分級方法標準、數(shù)據質量模型標準、數(shù)據溯源標準等，數(shù)據處理技術方法標準體系包括數(shù)據預處理、抽取、轉換、加載等。7.5產品及服務標準分體系產品及服務標準體系主要由礎設施產品、基礎平臺、處理框架、數(shù)據治理產品、分析應用產品、服務等構成，主要針對大數(shù)據技術產品及服務提供形成的標準。其中基礎平臺標準體系包括計算平臺、數(shù)5T/NMPA005—2024據存儲產品等，處理框架標準體系包括批處理產品、交互式處理產品、流產品等，服務標準體系包括消息推送服務、服務接口等。7.6行業(yè)應用標準分體系行業(yè)應用標準體系由政務大數(shù)據、工業(yè)大數(shù)據、物流大數(shù)據、交通大數(shù)據、民生大數(shù)據、醫(yī)療健康大數(shù)據、企業(yè)信用大數(shù)據、服務業(yè)大數(shù)據、農業(yè)大數(shù)據、生態(tài)環(huán)境大數(shù)據、電子商務大數(shù)據、城市綜合視頻圖像大數(shù)據、科學大數(shù)據等構成。主要圍繞相關領域技術應用展開研究。7.7管理標準分體系管理標準體系由數(shù)據管理、運維管理、系統(tǒng)測試、評估等構成，主要用于相關標準的研制。7.8安全隱私標準分體系安全隱私標準體系由方法指導、監(jiān)測評估、要求等構成，包括大數(shù)據安全、個人隱私保護領域的方法指導、監(jiān)測評估和要求等標準。7.9質量及評價標準分體系質量及評價標準體系主要由數(shù)據治理、質量定義、質量評