數(shù)據(jù)元、元數(shù)據(jù)、主數(shù)據(jù)、主數(shù)據(jù)管理、元數(shù)據(jù)管理、資源目錄解釋資料

1、數(shù)據(jù)中心建設(shè)概念解釋商占超共二十七頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁定義數(shù)據(jù)元 data element用一組屬性描述定義、標(biāo)識、表示和允許值的數(shù)據(jù)單元。GB/T 18391.12002，定義3.14 通過定義、標(biāo)識、表示以及允許值等一系列屬性（元數(shù)據(jù)）描述的數(shù)據(jù)單元，被認(rèn)定為是不可再分的最小的數(shù)據(jù)單元。MSA-S-PT-4：海事云數(shù)據(jù)中心技術(shù)標(biāo)準(zhǔn)-平臺數(shù)據(jù)標(biāo)準(zhǔn),4.1.2.1數(shù)據(jù)基本定義數(shù)據(jù)元一般來說由三部分組成：對象、特性、表示舉例“船舶種類代碼”為數(shù)據(jù)元，“0205

2、”為數(shù)據(jù)元的值，“船舶種類名稱”為數(shù)據(jù)元，“集裝箱船”為數(shù)據(jù)元的值“船舶種類代碼”中，“船舶”為對象詞，“種類”是該數(shù)據(jù)元的特性詞，“代碼”是該數(shù)據(jù)元的表示詞。所建立的數(shù)據(jù)庫中，數(shù)據(jù)（基本）表的字段名應(yīng)能從數(shù)據(jù)元集中選取且具有唯一對應(yīng)關(guān)系； MSA-S-PT-4：海事云數(shù)據(jù)中心技術(shù)標(biāo)準(zhǔn)-平臺數(shù)據(jù)標(biāo)準(zhǔn),4.1.2.2數(shù)據(jù)元編制規(guī)則。因此可理解表的列字段即為數(shù)據(jù)元數(shù)據(jù)(shj)元 共二十七頁數(shù)據(jù)元描述示例(shl)：船員登記號數(shù)據(jù)(shj)元 數(shù)據(jù)源特征數(shù)據(jù)元屬性屬性定義分類編號CY010100001：CY 01 0100 001船員 基本信息 登記 登記號數(shù)據(jù)庫表中展示內(nèi)容標(biāo)識符CrewRegN

3、um數(shù)據(jù)元類型字符型數(shù)據(jù)格式an9值域代碼結(jié)構(gòu)如 C+9位整數(shù)數(shù)字，C表示船員，數(shù)字表示編號。數(shù)據(jù)庫表中不展示內(nèi)容，用于理解數(shù)據(jù)元名稱船員登記號（“船員”是對象詞，“登記”是特性詞、“號”是表示詞）英文名稱Crew Registration Number中文全拼chuan-yuan-deng-ji-hao同義名詞船員編號相關(guān)環(huán)境適用于海事全系統(tǒng)定義船員的唯一識別號數(shù)據(jù)庫表中不展示內(nèi)容，用于管理注冊機(jī)構(gòu)海事局提供者部海事局船員處源系統(tǒng)船員管理系統(tǒng)維護(hù)者部海事局科技信息處限制項該類數(shù)據(jù)一旦定義后則不可更改，例外情況：（省略）共二十七頁數(shù)據(jù)元集信息(xnx)示例中文名稱（簡稱）標(biāo)識符英文名稱定義對象

4、類特性表示格式姓名名稱（姓名）PAT00_100020Person-name由人的姓和名組成的字符串。人姓名名稱AA(29)性別代碼PAT00_100031Person-sex，code男性與女性之間的生物學(xué)區(qū)分，用代碼表示。人性別代碼N年齡（歲）PAT00_100042Person-age, years表示人的實際年齡（歲）。人年齡物理量NN(2).N身份證件類別名稱PAT01_100024Type of identify card表示個人的身份證件類別，如居民身份證、軍官證、護(hù)照等。人件類別名稱AA(20)身份證件類別代碼PAT01_100025Type of identify card，

5、code表示個人身份證件類別的代碼。人件類別代碼N身份證件號碼PAT01_100026Number of identify card表示個人的身份證件的號碼。人證件號碼識別號NN(18)籍貫名稱（籍貫）PAT010101_100030Person-native place 表示人的籍貫。人籍貫名稱AA(20)國籍代碼PAT010101_100051Person-nationality, code表示人的國籍代碼。人國籍代碼N(3)民族代碼PAT010101_100052Person-race, code表示人的民族代碼。人民族代碼NN數(shù)據(jù)(shj)元 是不是和表結(jié)構(gòu)有些類似呢！共二十七頁數(shù)據(jù)(

6、shj)元 數(shù)據(jù)(shj)元作用數(shù)據(jù)元本身也是數(shù)據(jù)單元，即也是數(shù)據(jù)。它就是一個用來對各行業(yè)的數(shù)據(jù)進(jìn)行自身規(guī)范化的一個方法或一套指導(dǎo)的理論。用這一套方法對行業(yè)數(shù)據(jù)進(jìn)行統(tǒng)一的名、型、值規(guī)范及分類。規(guī)劃好行業(yè)數(shù)據(jù)元之后，可以為行業(yè)構(gòu)建出統(tǒng)一、集成的、穩(wěn)定的數(shù)據(jù)模型奠定基礎(chǔ)，同時它也為數(shù)據(jù)交換奠定基礎(chǔ)。共二十七頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁定義元數(shù)據(jù) MetaData就是“描述數(shù)據(jù)的數(shù)據(jù)”或“關(guān)于數(shù)據(jù)的結(jié)構(gòu)化數(shù)據(jù)”哈佛大學(xué)數(shù)字圖書館項目定義: 元數(shù)據(jù)是幫助查找、存取、使用和管理信息資源的信息。是關(guān)于數(shù)據(jù)倉庫的數(shù)據(jù)，指在數(shù)據(jù)倉庫建設(shè)過程中所產(chǎn)生的有關(guān)數(shù)據(jù)

7、源定義，目標(biāo)定義，轉(zhuǎn)換規(guī)則等相關(guān)的關(guān)鍵數(shù)據(jù)。描述數(shù)據(jù)的內(nèi)容（what）、覆蓋范圍（where, when）、質(zhì)量、管理方式、數(shù)據(jù)的所有者（who）、數(shù)據(jù)的提供方式（how）等信息，是數(shù)據(jù)與數(shù)據(jù)用戶之間的橋梁；舉例以一個船員培訓(xùn)為例一張表是船員基本信息：姓名、編號、培訓(xùn)班，另一張表存放船員的培訓(xùn)課程信息：課程編號、名稱、學(xué)分。姓名、編號、培訓(xùn)班、課程編號、學(xué)分都是數(shù)據(jù)元，但這些數(shù)據(jù)元有自己的元數(shù)據(jù)，即描述數(shù)據(jù)，分別是長度、類型、值域等。對于船員基礎(chǔ)信息表而言，姓名、編號、培訓(xùn)班是描述船員基礎(chǔ)信息的數(shù)據(jù)，是它的元數(shù)據(jù)。對于船員培訓(xùn)信息表而言，課程編號、名稱、學(xué)分是描述船員培訓(xùn)信息表的數(shù)據(jù)，是它的元

8、數(shù)據(jù)。元數(shù)據(jù)(shj)例子(l zi)太少啦！數(shù)據(jù)是手提箱，而元數(shù)據(jù)是它上面的姓名標(biāo)牌；數(shù)據(jù)是文件夾，而元數(shù)據(jù)是夾子的標(biāo)簽；數(shù)據(jù)是書的內(nèi)容，元數(shù)據(jù)是書脊上的杜威十進(jìn)制數(shù)碼。共二十七頁船員違法(wi f)記分示例元數(shù)據(jù)(shj)源系統(tǒng)名稱源系統(tǒng)IP源系統(tǒng)數(shù)據(jù)庫源系統(tǒng)表名源系統(tǒng)類型船員管理系統(tǒng)*.*.*.*sysbaseTABLE_XXX內(nèi)部_核心行政處罰系統(tǒng)*.*.*.*sysbaseTABLE_XXX內(nèi)部_核心抽取方式目標(biāo)表目標(biāo)字段源表源字段計算公式ETL目標(biāo)_TABLE目標(biāo)_字段源頭_TABLE源頭_字段源頭_字段=源頭_字段+目標(biāo)_字段WS目標(biāo)_TABLE目標(biāo)_字段源頭_TABLE源頭_字

9、段源頭_字段=目標(biāo)_字段靜態(tài)元數(shù)據(jù)名稱描述數(shù)據(jù)類型關(guān)系生成時間索引船員違法記分信息記錄船員違法記分信息數(shù)字型空2015/9/2XXX動態(tài)元數(shù)據(jù)入庫時間更新周期數(shù)據(jù)質(zhì)量統(tǒng)計信息狀態(tài)存儲位置存儲大小引用處2015/9/3天200條30000條正常XXX庫/源頭_TABLE200M船員主題/違規(guī)違法/記分信息數(shù)據(jù)源方面數(shù)據(jù)抽取轉(zhuǎn)換方面數(shù)據(jù)統(tǒng)計方面數(shù)據(jù)內(nèi)容方面流水號身份證號碼姓名服務(wù)簿號碼單位代碼單位名稱記分分值我們將要在共享數(shù)據(jù)庫項目中面對的元數(shù)據(jù)共二十七頁元數(shù)據(jù)(shj)元數(shù)據(jù)(shj)作用數(shù)據(jù)描述：對信息對象的內(nèi)容屬性等的描述能力是元數(shù)據(jù)最基本的功能。數(shù)據(jù)檢索：支持用戶發(fā)現(xiàn)資源的能力即利用元數(shù)據(jù)

10、來更好地組織信息對象建立它們之間的關(guān)系為用戶提供多層次多途徑的檢索體系從而有利于用戶便捷快速地發(fā)現(xiàn)其真正需要的信息資源數(shù)據(jù)選擇：支持用戶在不必瀏覽信息對象本身的情況下能夠?qū)π畔ο笥谢镜牧私夂驼J(rèn)識從而決定對檢出信息的取舍數(shù)據(jù)定位：提供信息資源本身的位置方面的信息如DOI URL URN 等信息由此可準(zhǔn)確獲知信息對象之所在便于信息的獲取數(shù)據(jù)管理：保存信息資源的加工存檔結(jié)構(gòu)使用管理等方面的相關(guān)信息以及權(quán)限管理版權(quán)所有權(quán)使用權(quán)防偽措施電子水印電子簽名等數(shù)據(jù)評估：保存資源被使用和被評價的相關(guān)信息通過對這些信息的統(tǒng)計分析方便資源的建立與管理者更好地組織資源并在一定程度上幫助用戶確定該信息資源在同類資源

11、中的重要性共二十七頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁主數(shù)據(jù)(shj)定義主數(shù)據(jù) Master Data指在整個企業(yè)/單位范圍內(nèi)各個系統(tǒng)間要共享的、高價值的核心業(yè)務(wù)實體數(shù)據(jù)主數(shù)據(jù)是指具有廣泛共享性的全局型數(shù)據(jù)。主數(shù)據(jù)的共享性由根據(jù)其數(shù)據(jù)性質(zhì)分為長期共享和定期共享。MSA-S-PT-4：海事云數(shù)據(jù)中心技術(shù)標(biāo)準(zhǔn)-平臺數(shù)據(jù)標(biāo)準(zhǔn),5.1.1.1海事數(shù)據(jù)的統(tǒng)一定義舉例海事基礎(chǔ)數(shù)據(jù)：船員基本信息、船員證書信息等海事動態(tài)數(shù)據(jù)：船員服務(wù)資歷信息、船員培訓(xùn)信息、船員記分信息等海事位置數(shù)據(jù)：船舶當(dāng)前位置信息共二十七頁海事主數(shù)據(jù)定義(dngy)示例主數(shù)據(jù)(shj)共二十七

12、頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁元數(shù)據(jù)管理元數(shù)據(jù)管理的建設(shè)目標(biāo)建立數(shù)據(jù)倉庫系統(tǒng)元模型，規(guī)范數(shù)據(jù)處理過程的結(jié)構(gòu)化描述，實現(xiàn)不同來源數(shù)據(jù)的元數(shù)據(jù)統(tǒng)一維護(hù)管理實現(xiàn)數(shù)據(jù)倉庫系統(tǒng)各層之間元數(shù)據(jù)定義與互通，促進(jìn)數(shù)據(jù)處理過程規(guī)范化實現(xiàn)數(shù)據(jù)抽取、加載、加工、調(diào)度的元數(shù)據(jù)管理，擴(kuò)充元數(shù)據(jù)服務(wù)接口提供完善的元數(shù)據(jù)管理維護(hù)機(jī)制，適應(yīng)各業(yè)務(wù)系統(tǒng)頻繁改造元數(shù)據(jù)管理為數(shù)據(jù)質(zhì)量管理提供基礎(chǔ)支撐，促進(jìn)數(shù)據(jù)質(zhì)量標(biāo)準(zhǔn)管理共二十七頁元數(shù)據(jù)管理元數(shù)據(jù)管理的范圍(fnwi)技術(shù)元數(shù)據(jù)描述系統(tǒng)中技術(shù)領(lǐng)域相關(guān)概念、關(guān)系和規(guī)則的數(shù)據(jù)，主要包括對數(shù)據(jù)結(jié)構(gòu)、數(shù)據(jù)處理方面的特征描述，覆蓋系統(tǒng)數(shù)據(jù)源接

13、口、數(shù)據(jù)倉庫與數(shù)據(jù)集市存儲、ETL、OLAP、數(shù)據(jù)封裝和前端展現(xiàn)等全部數(shù)據(jù)處理環(huán)節(jié)業(yè)務(wù)元數(shù)據(jù)描述系統(tǒng)中業(yè)務(wù)領(lǐng)域相關(guān)概念、關(guān)系和規(guī)則的數(shù)據(jù)，主要包括業(yè)務(wù)術(shù)語、信息分類、指標(biāo)定義和業(yè)務(wù)規(guī)則等信息管理元數(shù)據(jù)描述系統(tǒng)中管理領(lǐng)域相關(guān)概念、關(guān)系和規(guī)則的數(shù)據(jù)，主要包括人員角色、崗位職責(zé)和管理流程等信息共二十七頁元數(shù)據(jù)管理元數(shù)據(jù)管理的功能(gngnng)點應(yīng)用層對元數(shù)據(jù)管理的實際問題提供應(yīng)用解決方案，主要包括指標(biāo)庫管理、業(yè)務(wù)術(shù)語自助學(xué)習(xí)、維表庫管理、接口管理、數(shù)據(jù)倉庫軟件各層元數(shù)據(jù)互通、輔助應(yīng)用優(yōu)化、輔助安全管理、基于元數(shù)據(jù)的開發(fā)管理和數(shù)據(jù)質(zhì)量管理等。功能層元數(shù)據(jù)功能層為前端元數(shù)據(jù)應(yīng)用提供了基本的功能支撐，主

14、要包括元數(shù)據(jù)基本功能、元數(shù)據(jù)分析功能、元數(shù)據(jù)質(zhì)量管理、元數(shù)據(jù)服務(wù)接口和元數(shù)據(jù)權(quán)限管理五個部分。存儲層定義了元數(shù)據(jù)存儲所遵循的元模型，規(guī)范從獲取層得到的各類元數(shù)據(jù)的屬性要求和存儲格式要求，包括業(yè)務(wù)元數(shù)據(jù)、技術(shù)元數(shù)據(jù)和管理元數(shù)據(jù)。獲取層于整個體系架構(gòu)的最底層，元數(shù)據(jù)獲取層抽象概括了元數(shù)據(jù)獲取的各種途徑。業(yè)務(wù)和管理元數(shù)據(jù)通常以手工方式獲取，技術(shù)元數(shù)據(jù)覆蓋數(shù)據(jù)源系統(tǒng)以及數(shù)據(jù)倉庫系統(tǒng)數(shù)據(jù)的整個生命周期，要求以自動方式獲取，如數(shù)據(jù)字典和數(shù)據(jù)模型等。共二十七頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁主數(shù)據(jù)管理主數(shù)據(jù)管理的建設(shè)目標(biāo)明確的主數(shù)據(jù)管理流程主數(shù)據(jù)管理目標(biāo)完善的主

15、數(shù)據(jù)系統(tǒng)功能清晰的主數(shù)據(jù)管理范疇彈性的主數(shù)據(jù)系統(tǒng)架構(gòu)通暢的系統(tǒng)間交互接口良好的系統(tǒng)主數(shù)據(jù)質(zhì)量共二十七頁主數(shù)據(jù)管理主數(shù)據(jù)管理的范圍高質(zhì)量標(biāo)準(zhǔn)化主數(shù)據(jù)數(shù)據(jù)治理數(shù)據(jù)共享數(shù)據(jù)質(zhì)量數(shù)據(jù)集成共二十七頁主數(shù)據(jù)管理主流MDM產(chǎn)品對比廠商 企業(yè)數(shù)據(jù)類型MDM產(chǎn)品支持SOA支持的業(yè)務(wù)實體實施成本SAP主數(shù)據(jù)、業(yè)務(wù)數(shù)據(jù)(交易數(shù)據(jù)) SAP MDM是SAP的所有業(yè)備實體最高Oracle主數(shù)據(jù)、元數(shù)據(jù)、交易數(shù)據(jù)、計費數(shù)據(jù) 銷售數(shù)據(jù)、庫存數(shù)據(jù)等0racle MDM&OSB 或 0racle MDM&0DI Suite& OWB&Metadata Management 0SB是三類業(yè)務(wù)實體中心(Hub)客戶、產(chǎn)品、位置 類

16、似于IBM 的領(lǐng)域中等Microsoft主數(shù)據(jù)、元數(shù)據(jù)、分級數(shù)據(jù)、非結(jié)構(gòu)化數(shù)據(jù)、交易數(shù)據(jù) Master Data Service(MDS) 是未指定 任意實體和層級最低IBM主數(shù)據(jù)、元數(shù)據(jù) 變易數(shù)據(jù)、分析數(shù)據(jù)InfoSphere MDM server是四個領(lǐng)域(Domain)的業(yè)務(wù)實體：參與人、產(chǎn)品、賬盧、位置中等甲骨文主數(shù)據(jù)管理功能(gngnng)列表共二十七頁數(shù)據(jù)元元數(shù)據(jù)主數(shù)據(jù)元數(shù)據(jù)管理主數(shù)據(jù)管理數(shù)據(jù)服務(wù)資源目錄目錄(ml) 共二十七頁資源(zyun)目錄資源目錄要解決(jiju)的問題HOWWHOWHENWHATWHERE信息從哪里來？需要的信息在哪里？信息到哪里去？在哪里使用？通過什么使用？誰提供？誰加工？誰使用？什么時間可以使用？什么時間可以提供？什么時間用的？有什么資源？資源的內(nèi)容是什么？如何發(fā)布？如何查找？如何呈現(xiàn)？如何使用？如何管理？共二十七頁業(yè)務(wù)流程示意圖資源(zyun)目錄業(yè)務(wù)(yw)系統(tǒng)機(jī)構(gòu)業(yè)務(wù)系統(tǒng)業(yè)務(wù)系統(tǒng)1 資源編目資源目錄管理機(jī)構(gòu)2 注冊3 審核維護(hù)4 發(fā)布5 查詢6 發(fā)現(xiàn)7 獲取資源服務(wù)業(yè)務(wù)系統(tǒng)業(yè)務(wù)系統(tǒng)共二十七頁資源目錄(ml)功能點資源(zyun)目錄共二十七頁內(nèi)容摘要數(shù)據(jù)中心建設(shè)概念解釋。用一組屬性描述(mio sh)定義、標(biāo)識、表示和允許值的數(shù)據(jù)單元。MS