元數(shù)據(jù)管理工具介紹-神州數(shù)碼ppt課件

1、元數(shù)據(jù)管理工具引見Metadata MangerMM高級(jí)咨詢顧問： 冷 鵬神州數(shù)碼集效果勞 元數(shù)據(jù)根底知識(shí)MM軟件架構(gòu)MM軟件特點(diǎn)元數(shù)據(jù)運(yùn)用案例元數(shù)據(jù)(Metadata) 定義元數(shù)據(jù)是描畫數(shù)據(jù)的數(shù)據(jù)(Data about Data)?？闪私鉃楸绕胀ㄒ饬x的數(shù)據(jù)范疇更加廣泛的數(shù)據(jù)，不再僅僅表示數(shù)據(jù)的類型、稱號(hào)、值等信息，進(jìn)一步提供了數(shù)據(jù)的上下文描畫信息，比如數(shù)據(jù)的所屬域、取值范圍、數(shù)據(jù)間的關(guān)系、業(yè)務(wù)規(guī)那么，甚至是數(shù)據(jù)的來(lái)源。在分析型工程中，元數(shù)據(jù)可以協(xié)助DW管理員和DW開發(fā)人員非常方便地找到他們所關(guān)懷的數(shù)據(jù) 元數(shù)據(jù)是描畫分析型運(yùn)用內(nèi)數(shù)據(jù)的構(gòu)造、建立方法及流程的數(shù)據(jù)，可將其按用途的不同分為兩類：技術(shù)

2、元數(shù)據(jù)Technical Metadata和業(yè)務(wù)元數(shù)據(jù)Business Metadata。這些問題真是頭痛已存在系統(tǒng)，有哪些關(guān)鍵業(yè)務(wù)數(shù)據(jù)？關(guān)鍵業(yè)務(wù)數(shù)據(jù)在不同系統(tǒng)的業(yè)務(wù)定義？同一實(shí)體在不同系統(tǒng)中的命名規(guī)那么及其他屬性一致？同一實(shí)體與本系統(tǒng)或其他系統(tǒng)對(duì)象能否存在依賴關(guān)系？詳細(xì)的依賴關(guān)系描畫是怎樣樣的？實(shí)體一切者是誰(shuí)？誰(shuí)作過修正或變卦？一旦對(duì)象定義發(fā)生變化，其他開發(fā)團(tuán)隊(duì)會(huì)不會(huì)有影響？老板問，這張報(bào)表A目的值怎樣算出來(lái)的？原始數(shù)據(jù)從哪得到的？公司要上市，要審計(jì)公司信息化建立的安康程度，以什么為根據(jù)？總不能給人家看像山一樣高的word或excel 文檔吧？許多政策法規(guī)范要求數(shù)據(jù)透明例如美國(guó)的薩班斯-奧克

3、斯萊法案以及專業(yè)行業(yè)協(xié)會(huì)例如監(jiān)視環(huán)境維護(hù)、食品與藥物平安、勞動(dòng)行為以及運(yùn)輸平安的行業(yè)協(xié)會(huì)元數(shù)據(jù)的使命是企業(yè)智能化信息建立的DNA提供一份數(shù)據(jù)定義和元素的詳細(xì)表示圖, 有利于發(fā)現(xiàn)冗余的定義和元素企業(yè)元數(shù)據(jù)規(guī)范: 減少數(shù)據(jù)冗余性,添加數(shù)據(jù)共享,使運(yùn)用開發(fā)過程更有效費(fèi)用更低、防止異構(gòu)構(gòu)造定義、提高不同工具之間定義的反復(fù)利用率協(xié)助用戶了解數(shù)據(jù)來(lái)龍去脈、關(guān)系及相關(guān)屬性企業(yè)集成所必需的:：參照性、援用性、血緣分析、影響分析、變化分析。質(zhì)量審計(jì) ： 血緣分析支持需求變化 ： 變卦報(bào)告形狀元數(shù)據(jù)有利于加強(qiáng)企業(yè)運(yùn)營(yíng)效率、躲避錯(cuò)誤及風(fēng)險(xiǎn) 有一點(diǎn)是不變的: 利用數(shù)據(jù)處理企業(yè)問題的才干,依然是企業(yè)贏利和取勝的關(guān)鍵有用

4、的數(shù)據(jù)在哪里：好似在沙灘上尋覓一粒沙子答案：元數(shù)據(jù)元數(shù)據(jù)現(xiàn)狀各自為戰(zhàn)，所遵照的規(guī)范各異。元數(shù)據(jù)管理建模工具：ERwinPowerDesignerRoseOracle Designer數(shù)據(jù)集成工具PowerCenterDataStageSASSagentBI 工具：BOCognosMSTR元數(shù)據(jù)源RDBMSEXCELCWM XML元數(shù)據(jù)(Metadata) 規(guī)范化OMG (Object Management Group)是一個(gè)擁有500多會(huì)員的國(guó)際規(guī)范化組織，著名的CORBA規(guī)范即出自該組織。公共倉(cāng)庫(kù)元模型Common Warehouse Metamodel的主要目的是在異構(gòu)環(huán)境下，協(xié)助不同的數(shù)

5、據(jù)倉(cāng)庫(kù)工具、平臺(tái)和元數(shù)據(jù)知識(shí)庫(kù)進(jìn)展元數(shù)據(jù)交換。 CWM元模型的包構(gòu)造 倉(cāng)庫(kù)過程倉(cāng)庫(kù)操作轉(zhuǎn)換XML記錄型多維關(guān)系型資源業(yè)務(wù)信息軟件發(fā)布UML 1.3(根底，行為元素，模型管理)對(duì)象 (UML)OLAP分析數(shù)據(jù)發(fā)掘信息可視化業(yè)務(wù)術(shù)語(yǔ)數(shù)據(jù)類型表達(dá)式鍵索引類型映射管理資源分析根底對(duì)象模型元數(shù)據(jù)根底知識(shí)MM軟件架構(gòu)MM軟件特點(diǎn)元數(shù)據(jù)運(yùn)用案例Informatica Metadata Manager 體系構(gòu)造SourcesTargetsBusinessIntelligenceMetadataMetadataMetadataCustomMetadataData ModelingMetadataMetadata

6、 ManagerMetadata元數(shù)據(jù)體系構(gòu)造Metadata Manager RepositoryMetadata Object Browser and Graphical ReportsPowerCenter Integration ServerMetadata Manager WarehouseMetadata SourcesSG Integration RepositoryCWM Class MetaModelPresentation ServerMetadata XConnectsSG ConsoleRole based dashboards and Metadata Reports

7、GA 9/2/05Win 2000,2003, XPWarehouse Repo Oracle 8.1.7, 9iR2, 10g SQL Server 2000 SP3 DB2 UDB 8.1.5, 8.2 EE/EEEIntegration Repo Oracle 8.1.7, 9iR2, 10g SQL Server 2000 SP3 DB2 UDB 8.1.5, 8.2 EE/EEE REPOSITORIESPowerCenter Integration ServerMetadata Manager ServerMetadata Object Browser and Graphical

8、ReportsMetadata Manager WarehouseMetadata SourcesSG Integration RepositoryCWM Class MetaModelPresentation ServerMetadata XConnectsSG ConsoleRole based dashboards and Metadata ReportsSERVERSPC 8.5.1 Integration ServerPC 7.1.3 on : Windows, SOLARIS HP Unix, IBM AIX, RedHat Linux(PC supported versions)

9、DA 8.5.1 Apps ServerBrowser IE 6.0 using : iPlanet 6.1, IIS 6.0 OR Apache 1.3, 2.0BEA WL 8.1 SP4- Win 2000, Win 2003 SOLARIS 8.0, 9.0 HP Unix 11.0, 11i IBM AIX 5.1, 5.2, 5.3 RedHat Advanced Server 2.1,3.0Websphere 5.1.1.1 ND Win 2000, Win 2003 SOLARIS 8.0, 9.0 IBM AIX 5.1, 5.2 RedHat Advanced Server

10、 2.1,3.0JBOSS 3.2.1 - Win 2000, Win 2003 SOLARIS 8.0, 9.0 HP Unix 11.0, 11i IBM AIX 5.1, 5.2 RedHat Advanced Server 2.1,3.0GA 9/2/05Win 2000,2003, XPMetadata Manager XConnectMetadata Object Browser and Graphical ReportsPowerCenter Integration ServerMetadata Manager WarehouseMetadata SourcesSG Integr

11、ation RepositoryCWM Class MetaModelPresentation ServerMetadata XConnectsSG ConsoleRole based dashboards and Metadata ReportsETL PowerCenter 6.x, 7.x* PowerMart 6.x, 7.x*BI PowerAnalyzer 4.1.1, 5.0.2 BOBJ 5.1.x, 6.1.x COGN Impromptu 7.0.x, 7.1.x COGN ReportNet 1.0, 1.1 MSTR Designer 7.0, 7.5.x DB2 Cu

12、beViews 8.1 Hyperion Essbase OLAP 7.xCustom CSV Files (using Custom Metadata Configurator)XCONNECTS* (on Oracle 8.1.7 and above, SQL Server 2000 SP3 and DB2 8.x EE/EEE and above)Databases Oracle 8.1.7, 9i, 10g SQL Server 2000 Sybase 12.x TERADATA V2 R5 DB2 UDB 8.1.x, 8.2 EE/EEE IBM Informix 9.2Desig

13、n Tools ERwin 3.0 to 3.5.2, 4.0 SP1 to 4.1 Oracle Designer 1.3.2, 2.1.2, 6.0, 6i, 9i Sybase PowerDesigner PDM 6.1.x, 7.5 to 9.5 IBM Rational ER 98(I) to 2000,2000e to 2002 Microsoft VISIO Database (ERX) Embarcadero ERStudio 5.1 to 6.6GA 9/2/05Win 2000,2003, XP元數(shù)據(jù)根底知識(shí)MM軟件架構(gòu)MM軟件特點(diǎn)元數(shù)據(jù)運(yùn)用案例Metadata Manag

14、er 特性內(nèi)嵌的數(shù)據(jù)整合引擎可擴(kuò)展的Web-Based體系構(gòu)造私有目錄直觀的分析和報(bào)表智能數(shù)據(jù)體系私有元數(shù)據(jù)目錄跨系統(tǒng)、跨工程通用搜索講究的 knowledgebase角色, 系統(tǒng), 基于流程的視圖智能數(shù)據(jù)體系-提供了審計(jì)索引的功能功能豐富的 可視化圖形化回溯信息直到數(shù)據(jù)源準(zhǔn)確的、最新的元數(shù)據(jù)模型驅(qū)動(dòng)當(dāng)數(shù)據(jù)源改動(dòng)時(shí)關(guān)聯(lián)信息被刷新直觀的分析和報(bào)表功能-近在咫尺的洞察力“信息供應(yīng)鏈的全面質(zhì)量管理數(shù)據(jù)質(zhì)量, 運(yùn)用,沖突分析, 冗余分析儀表盤驅(qū)動(dòng) 監(jiān)控和信息公告元數(shù)據(jù)整合XConnectsSDK內(nèi)嵌的數(shù)據(jù)整合引擎-訪問到任何位置、任何元數(shù)據(jù) 任何數(shù)據(jù)源元數(shù)據(jù) 知識(shí)庫(kù),平面文件, 關(guān)系型數(shù)據(jù)庫(kù), 運(yùn)用程

15、序,XML, CWM-XMI易于運(yùn)用完全可視化的開發(fā) 環(huán)境用于元數(shù)據(jù)整合?DBMSEAIMS OfficeERPCASEBIETLFlat FilesXMLOthersList List Automatic 4. List可擴(kuò)展的Web-Based體系構(gòu)造-靈敏的開發(fā)和部署百分之百基于WebJ2EE兼容平臺(tái)內(nèi)嵌的私有化設(shè)置對(duì)象和功能層次的答應(yīng)可擴(kuò)展性任何信息, 任何關(guān)聯(lián), 任何元數(shù)據(jù)模型(基于OMG MOF協(xié)議)友好的入口Web效力, 完全SDK沒有隱藏的議程 開放的關(guān)系型數(shù)據(jù)庫(kù), 操作系統(tǒng),效力器支持集成Oracle ,Erwin, PowerCenter等多種工具的元數(shù)據(jù)PowerCent

16、er 內(nèi)Cobol 構(gòu)造的顯示靈敏的元數(shù)據(jù)抽取調(diào)度業(yè)務(wù)元數(shù)據(jù) 根本定義對(duì)象版本控制反響歷史變化元數(shù)據(jù)血緣分析 跨工具計(jì)算表達(dá)式數(shù)據(jù)源數(shù)據(jù)整合過程Metadata Manager 內(nèi)置元數(shù)據(jù)同步引擎定期或不定期地更新數(shù)據(jù)項(xiàng)的詳細(xì)內(nèi)容 可手工或調(diào)度執(zhí)行元數(shù)據(jù)同步義務(wù)Metadata Manager: 元數(shù)據(jù)模糊查詢Metadata Manager: 集成了百?gòu)埿畔⒔y(tǒng)計(jì)報(bào)表Metadata Manager登錄元數(shù)據(jù)根底知識(shí)MM軟件架構(gòu)MM軟件特點(diǎn)元數(shù)據(jù)運(yùn)用案例Thrivent Financial 挑戰(zhàn): 跨數(shù)據(jù)倉(cāng)庫(kù)多個(gè)過程的影響分析多個(gè)運(yùn)用根底架構(gòu)的管理一切手工的過程, Excel文件處理方案:環(huán)境

17、: PowerCenter, PowerAnalyzer on AIX, ER StudioSuperGlue 元數(shù)據(jù)目錄,搜索, 血緣分析和影響分析收益:可以實(shí)現(xiàn)以前所不能作到的多種分析協(xié)助決議數(shù)據(jù)倉(cāng)庫(kù)的本錢及根底架構(gòu)變卦分析，可及時(shí)傳播到各個(gè)團(tuán)隊(duì)Hewlett-PackardData Insight挑戰(zhàn): 多個(gè)不同數(shù)據(jù)源中，存在不準(zhǔn)確的、矛盾的數(shù)據(jù)不能跨系統(tǒng)的識(shí)別和找到相關(guān)內(nèi)容處理方案:環(huán)境: PowerCenter, Oracle, SQL Server; Erwin, Rational Rose, Business Objects, customSuperGlue 元數(shù)據(jù)目錄, 搜索,

18、 血緣分析 和影響分析收益:提高數(shù)據(jù)的準(zhǔn)確性和一致性提高了針對(duì)數(shù)據(jù)來(lái)源、數(shù)據(jù)流程及數(shù)據(jù)目錄的認(rèn)識(shí)程度減少運(yùn)營(yíng)報(bào)告的周期提高已存在數(shù)據(jù)元素的可重用性和規(guī)范化程度Waste Management自動(dòng)元數(shù)據(jù)的采集挑戰(zhàn): 不能實(shí)現(xiàn)自動(dòng)的源和目的數(shù)據(jù)源的元數(shù)據(jù)采集要為報(bào)表和信息系統(tǒng)提供準(zhǔn)確、及時(shí)的元數(shù)據(jù)定義要提高ETL過程的可見度處理方案:環(huán)境: Oracle 9i, PowerCenter 7.x, IBM AIX, DB2 on AS400, Erwin, PowerAnalyzerSuperGlue 元數(shù)據(jù)目錄, 搜索, 血緣分析 和影響分析收益: :高效的自動(dòng)元數(shù)據(jù)采集為業(yè)務(wù)用戶提供效力層次提高數(shù)據(jù)倉(cāng)庫(kù)中數(shù)據(jù)處置過程的可見度加強(qiáng)運(yùn)營(yíng)的技術(shù)元數(shù)據(jù)：轉(zhuǎn)換、計(jì)