Informatica主數據管理解決方案

統一主數據管理平臺方案

但彬

Informatica中國統一主數據管理平臺方案

但彬

InformInformatica

專注于數據集成的獨立軟件開發(fā)商成立時間:19932012年收入為:8.116億美元7年平均增長率:每年17%員工人數:2,810多人合作伙伴:

450多家主要的系統集成商、獨立軟件供應商、原始設備制造商和按需生產的先驅客戶:超過5,000家客戶遍布全球82個國家直接客戶遍布全球28個國家客戶忠誠度排名位居榜首

（已連續(xù)7年獲此殊榮）Informatica專注于數據集成的獨立軟件開發(fā)商成立時1.數據采集數據倉庫分析應用BI報表數據挖掘儀表盤任意格式任意數據源任意延時任意模式ERPCRM辦公PLM財務網站業(yè)務系統云計算套裝應用非結構化數據2.數據審計與發(fā)現(數據探查)3.數據質量管理(建立和管理數據質量規(guī)則，儀表盤，報警等)5.主數據和參考數據管理渠道區(qū)域產品客戶4.數據處理AnyformatAnysourceAnylatencyAnymode8.元數據管理(操作型,技術型,業(yè)務層)7.數據歸檔歸檔Retrieval6b.數據虛擬化外部數據復雜事件處理Informatica產品定位1.數據采集數據倉庫分析應用BI報表數據挖掘儀表盤任意格式內容提要從公司治理到主數據管理主數據平臺解決方案Informatica案例分享內容提要從公司治理到主數據管理集團企業(yè)數據利用的發(fā)展與挑戰(zhàn)

AccountOrganizationSalesRepPartnerOrganizationProductProductOrganizationAccountAccountZoneServicesAccountPricing財務管理投資管理客戶服務人力資源決策支持不同的系統管理各種業(yè)務流程走向精細化協同管理利用數據倉庫匯集數據但是企業(yè)內外協同受信息流現狀的制約面臨的問題數據標準數據質量管控流程……集團產業(yè)集團企業(yè)數據倉庫企業(yè)數據集成集團企業(yè)數據利用的發(fā)展與挑戰(zhàn)

AccountOrganiza公司治理影響公司業(yè)務方向、管理、和控制發(fā)展路線的一系列流程、策略、慣例、規(guī)章制度等。IT治理確保IT能夠支撐企業(yè)戰(zhàn)略目標的管理、組織架構、和流程。主數據治理確保企業(yè)主數據的有效性、可訪問性、質量、一致性、可審性、和安全性所需要的流程、策略、標準、和技術。從主數據入手，提升主數據質量，是業(yè)務管控的基礎業(yè)務流程CRMSystemERPSystemOrderMgmtSystemFinanceSystemHRSystem主數據的重要性——大多數的數據質量問題是主數據問題使治理目標和范圍明確主數據系統使咨詢內容落地AccountOrganizationSalesRepPartnerOrganizationProductProductOrganizationAccountAccountZoneServicesAccountPricing公司治理IT治理主數據治理從主數據入手，提升主數據質量，是業(yè)客戶、產品、服務、供應商、機構、資源等組成完整的360度主數據視圖客服金融客戶網上業(yè)務離港機票積分航段航空客戶物流客戶旅業(yè)客戶儲蓄住宅健康支付意外養(yǎng)老助學發(fā)件客戶配偶收件酒店票務物流旅行代理業(yè)務經理孩子企業(yè)航空保險代理不同主數據是業(yè)務的不同視角：客戶角度產品、服務機構資源產品角度客戶資源機構供應商角度產品機構角度產品客戶資源資源角度機構產品客戶完整的主數據視圖父母客戶、產品、服務、供應商、機構、資源等組成完整的360度主提高生產力和效率提高決策能力提高業(yè)務靈活性提高合規(guī)性……問題：貴公司實施主數據項目的主要原因是什么？業(yè)務需求技術需求面臨哪些難題……主數據管理的驅動力提高生產力和效率主數據管理的驅動力企業(yè)集團主數據平臺集中管理各類主數據

AcctRepOrganizationAccountCustomerProductMDM數據管理AccountOrganizationSalesRepPartnerOrganizationProductProductOrganizationAccountAccountZoneServicesAccountPricingDI/DQ社交媒體財務管理投資管理客戶服務人力資源決策支持DW數據服務企業(yè)集團主數據平臺集中管理各類主數據

AcctRepOrg靈活的數據模型可定制的業(yè)務邏輯和工作流程可配置的用戶界面/接口解決不同領域業(yè)務問題可用統一的平臺擴展到解決其他業(yè)務問題和領域預定義數據模型預定義的業(yè)務邏輯和工作流程預定義的用戶界面/接口解決特定領域的業(yè)務問題擴展到其他業(yè)務領域需要購買新的應用平臺級MDM應用級MDM根據客戶的特有需求進行配置，使用不同客戶需求預置的應用以解決特定的主數據問題(customer,product,financial)CustomerProductCOA客戶產品COA主數據管理的不同實現路徑靈活的數據模型預定義數據模型平臺級MDM應用級MDM根據InformaticaMDM簡介

經驗證的多域主數據方案部署情況市場影響力跨越多行業(yè)的平臺級解決方案

(FinancialServices,LifeSciences,HighTech…)大量案例證明在多域主數據部署的能力快速部署

平均上線時間:3-9個月最具伸縮性解決方案

最大450M主記錄數的成功案例可驗證的多域主數據

幾乎一半的客戶都在統一平臺上部署了客戶和產品域超過

50%的財富500企業(yè)和全球500強企業(yè)MerrillLynch,DeutscheBank,Johnson&Johnson,Pfizer,Apple,Kodak,Cadbury,…跨越多行業(yè)的客戶解決方案

(25+solutions)InformaticaMDM提供產品、客戶、賬戶等關鍵數據的統一視圖，快速低成本提升業(yè)務運營、客戶體驗、以及合規(guī)等能力InformaticaMDM簡介

經驗證的多域主數據方案Informatica主數據管理平臺統一管理多域主數據提升績效降低成本提升客戶服務質量管控風險與合規(guī)機構合并與剝離MDM

客戶

訂單

產品

地點提高決策精確度企業(yè)應用遺留系統云應用非結構數據第三方數據現有哪些應用系統涉及主數據？ERP、CRM、PLM、PDM……重點關注哪些主數據？客戶、產品、供應商……應用系統可能以哪種方式與主數據交互？批量、實時、準實時…Informatica主數據管理平臺統一管理多域主數據提升為應用和數據倉庫交付可信的數據管理統一、可信、真實的主數據數據清洗和標準化剖析、發(fā)現數據內容、一致性、數據結構從不同的應用和數據源訪問、獲取數據平臺需要的能力數據獲取數據探索數據清洗數據管理數據發(fā)布12345為應用和數據倉庫交付可信的數據管理統一、可信、真實的主數據數ESB統一客戶數據平臺架構企業(yè)數據集成平臺運營支撐分析決策數據集市儀表板分析報表業(yè)務應用遺留數據社交媒體和第三方數據數據質量數據探索123主數據管理4ODS數據管控模型管理合并管理重復識別數據關聯Ora數據倉庫運行、生產、銷售數據管理平臺TD數據倉庫客戶/市場ESB數據發(fā)布服務5ESB統一客戶數據平臺架構企業(yè)數據集成平臺運營支撐分析決策數Informatica產品在主數據管理中的定位OperationalAnalyticalCIFLegacy

SystemsDataWarehouseDataMartsPortal/DashboardBusinessIntelligenceLegacy

SystemsApplicationsApplicationsLegacyThirdPartyDataMasterDataManagementMDMFoundation實時交付可信的、相互關聯的主數據及時交付可信的、相互關聯的數據DataQualityDataProfilingDataIntegrationDataServices1235MasterDataManagement4Informatica產品在主數據管理中的定位Operat數據獲取關鍵需求:在任意的源和目標數據之間進行數據訪問和發(fā)布各種數據格式，各種地方不同的延遲需求

(批量,實時,消息隊列)高性能和高可用支持不同MDM部署風格元數據可視化數據集成1DataIntegration產品支持:InformaticaPowerCenterInformaticaPowerExchangeInformaticaB2BExchange數據獲取關鍵需求:數據集成1Data產品支持:數據探索關鍵需求:發(fā)現和記錄數據中的所有異常將問題進行分類（完備性、遵從性、一致性、準確性、唯一性、依賴性）數據探索2DataProfiling產品支持:InformaticaDataProfile數據探索關鍵需求:數據探索2Data產品支持:數據清洗關鍵需求:數據清洗數據豐富地址標準化數據監(jiān)控和報告基于SOA訪問DQ規(guī)則

根據條件的格式校驗規(guī)則數據變化，去噪，轉換開放式清洗架構數據清洗3DataQuality產品支持:InformaticaDataQualityAddressDoctor數據清洗關鍵需求:數據清洗3Data產品支持:數據質量問題實例完整性COMPLETENESS合法性CONFORMITY一致性CONSISTENCY重復性DUPLICATION關聯性INTEGRITY準確性\ACCURACY值域劃分RANGE完整性:丟失關鍵數值合法性:非法格式Consistency:IncorrectFormat一致性:數據是格式正確并完整，但不符合業(yè)務邏輯Duplication:Fuzzymatching重復性:模糊匹配關聯性:識別記錄關系關聯性:識別記錄關系準確性:須利用其他數據來驗證其準確程度值域劃分:界定數值范圍數據質量問題實例完整性合法性一致性重復性關聯性準確性值特性剖析解析清洗,標準化Comprehensive

dataquality數據豐富匹配,剔重功能從非結構化的模式推演數據的含義從非結構化的數據構建結構化數據識別、糾正數據錯誤；將數據轉化成標準格式/術語增加附加的屬性和分類識別和消除重復數據“l(fā)iquid”+”crystal”+”display”=

1conceptCamera=manufacturer,megapixels,zoom,andcolorWoodd=wood=wudPaperweight:

100gi.s.o.100kgDivingwatchwithWatchattribandDivingEquipmentattribPIM樣例2productsindifferentlanguagesareinfactthesameitemCDI樣例姓名:

姓+名字(CHS,KOR,JPN);FN+MN+PN+LN(Latin);Addr=#,street,city,state,zip,country;Bill=WilliamSt,Str=Street(ENU/DEU)St=Saint(FRA)HaidongSong:“single,1child,SummitEstate,DoNotMail”HaidongSong=宋海東=數據質量功能一覽特性剖析解析清洗,標準化Comprehensive

data共同參與數據質量工作數據質量1.分析

2.確定數據質量規(guī)則和目標3.制定質量提高計劃4.部署數據質量計劃5.數據質量報告與跟蹤數據經理業(yè)務主管IT開發(fā)人員數據管理人員記分卡基于WEB客戶端共同參與數據質量工作數據質量1.分析2.確定數據質量規(guī)使用Analyst對數據進行全方位的剖析使業(yè)務人員參與數據分析工作，提高生產力和工作效率，降低IT人員的依賴性DataStewardReusedataqualityrulesinprofilinganalysis使用Analyst對數據進行全方位的剖析使業(yè)務人員參與數據分使用Developer開發(fā)具體任務圖形化界面，功能強大，操作簡單使用Developer開發(fā)具體任務圖形化界面，功能強大，操作流間分析

在處理流程中任意位置進行分析剖析數據源剖析處理單元剖析規(guī)則流間分析

在處理流程中任意位置進行分析剖析數據源剖析處理單元量化質量，跟蹤監(jiān)控

基于web的積分卡便于共享簡單易用，不需要任何專業(yè)技術數據主管業(yè)務經理基于Web格式的記分卡

是你能夠:查看和共享數據質量記分卡下鉆到具體數據制定策略，降低對業(yè)務的影響量化質量，跟蹤監(jiān)控

基于web的積分卡便于共享簡單易用，不需DataQuality可提供每個實體對象記分卡及監(jiān)控納稅人稅金發(fā)票出口退稅規(guī)則DataQuality可提供每個實體對象記分卡及監(jiān)控納稅DQA-業(yè)務人員可手工管理不良數據DQA-業(yè)務人員可手工管理不良數據案例

DataQualityFramework

KPICalculationAndAggregationModel(CAAM)案例DataQualityFramework

KPRepresentationofDataQualityIndexDataQualitydashboardsByInfluencingfactorsBySourceofInformationDQIonEnduserreports數據質量分析/監(jiān)控RepresentationofDataQuality管控數據生命周期中的創(chuàng)建，使用，關聯，和監(jiān)控關聯多種主數據，建立關系視圖通過合并創(chuàng)建真實可信的統一的數據視圖快速匹配和精確識別重復數據通過靈活的模型支持，定義各種類型的主數據MDM關鍵功能–數據管理ModelRecognizeResolveRelateGovern數據管理4MasterDataManagement產品支持:InformaticaMDM管控數據生命周期中的創(chuàng)建，使用，關聯，和監(jiān)控關聯多種主數據，數據發(fā)布關鍵需求:同步可信的主數據到下游應用和數據倉庫獲得統一的主數據視圖和相關的交易數據數據發(fā)布5DataServices產品支持:InformaticaPowerCenterInformaticaPowerExchangeInformaticaDataServicesInformaticaComplexEventProcessing數據發(fā)布關鍵需求:數據發(fā)布5Data產品支持:模型的重點是方法和參考沒有完全適應的模型，所以定制能力很重要Informatica

MDM支持各種模型和定制同時我們有金融、制造、零售等多個行業(yè)成功實施的模型模型管理

——靈活的模型支持模型管理

——靈活的模型支持RECOGNIZERecognizeMasterDataManagement關鍵能力:根據配置的規(guī)則，識別在多個系統中存在的潛在的匹配對象根據閾值定義，確定是否匹配

將有疑似的匹配結果，通過業(yè)務流程提交人工確認將確認重復的數據進行合并Wang,Bao-QiangRECOGNIZECRMERP王寶強重復識別

——模糊匹配技術RECOGNIZERecognizeMaster關鍵能力:W綜合管理系統呼叫中心營銷系統UniqueIDNameGender111王彬男UniqueIDSourceSystemSystemID111CRM929992111ERPAKK-111111Legacy098388188PrimaryKeyNameGender929992王彬女PrimaryKeyNameGenderAKK-111王斌男PrimaryKeyFullName098388188WangBinIdentityResolution客戶樣例使用模糊匹配，標示相似的數據.使用數據子集進行精確匹配

(i.e.姓、名、聯系方式、ID信息、地址信息等)創(chuàng)建唯一的ID,并為黃金記錄選擇恰當的屬性創(chuàng)建交叉引用索引，指向原有系統的主鍵和系統標示數據合并

——業(yè)務整合銜接綜合管理系統呼叫中心營銷系統UniqueIDNameGen數據覆蓋原則

——數據合并的關鍵客戶主數據LiquidAssets$190,157$383,522$559,934Equity$3,342$40,666$109,354PublicYYYCreditRatingAAA-AA-AAADomicileFranceUSAUSAPartyNameIXISCorporate&InvestmentBankWellsFargo&Co.GeneralElectricCompanyAsofDate1/31/20063/27/20064/15/2006ADDR1ElmandCarltonStreets123MainStreet57,rueduFoubourgCITYMinneapolisNewHavenParisADDR5504231426375003ADDR4MNCTName_FullWellsFargo&Co.GeneralElectricCompanyIXISCorporate&InvestmentBankPolicy#308-03-8500005-10-4640917-13-8500個險AmericanMedicalAssociationDataRatingBaaAaaAAACountryUSUSFRCompanyNameWellsFargo&Co.IXISCIBGEPolicy#308038500410051046400291713850028AsofDate8/26/20076/15/20071/30/2008團險Address57rueduFoubourg6thandMarquette123MainStCityParisMinneapolisNewHavenZip7500355405StateMNCTCompanyNameIXISCIBWellsFargoGEFinancialCallin#852139999503829837762C.C.TickerSymbolWFCGETotalAssets$207,059$481,741$673,342COUNTRYUSAUSAFranceLiquidAssets$190,157$383,522$559,934Equity$3,342$40,666$109,354TotalAssets$207,059$481,741$673,342SICCode602160213511Industry602160213511數據覆蓋原則

——數據合并的關鍵客戶主數據LiquidAs關鍵要素:跨系統、跨應用能力為不同的商業(yè)目的，創(chuàng)建、管理多種不同的層次關系關聯不同的實體，構建360-度視圖保持所有實體、實體關系歷史RECOGNIZERelateMasterDataManagement同事雇員RELATE馮小剛王寶強華誼兄弟數據關聯

——構建360度視圖關鍵要素:RECOGNIZERelateMaster同事雇員傳統數據源整合社交媒體信息接口功能FacebookListentowall(ownandusers’whohaveauthorized)SearchPostsFetchUserProfileFetchUserfriendsOtherAPIs(Groups,Events,Photos,etc.)TwitterSearchTweetsFetchUserProfileFetchUserfollowersandfollowingFollowUseractivityStreaming(Filter,Samplehose)OtherAPIsLinkedInPeopleSearchbykeywordSearchUpdatesFetchUserProfileFetchConnectionsOtherAPIsKapowWebContentDataSiftSocialMediaFeeds(Facebook,Twitterandothers)SocialMediaAugmentationOtherAPI’s(HistoricQueries,DataDestinations&Recordings)PowerCenterPowerExchangeInformaticaMDMHubFMSCRM社交媒體整合社交媒體信息接口功能FacebookListento創(chuàng)建,使用,管理和監(jiān)控創(chuàng)建和維護高質量的主數據校驗，增加，豐富數據特定數據的審批和業(yè)務協作可定制的靈活的客戶數據搜索交互式客戶層次，關系瀏覽，維護快速客戶識別與合并處理任務分發(fā)管理和流程定義主數據歷史和血緣追蹤層次結構歷史記錄和對比主數據審計業(yè)務用戶數據管理界面Multidomain

MasterDataCreateConsumeManageMonitor數據管控

——控制數據過程創(chuàng)建,使用,管理和監(jiān)控業(yè)務用戶數據管理界面MultidoInformaticaMDM主要界面AdminConsole系統配置數據模型規(guī)則(清洗,匹配,信任，校驗,分發(fā)等)

JavaSwingConsoleInformaticaDataDirector數據管理員/用戶界面數據管控功能創(chuàng)建,管理,使用,監(jiān)控集成的工作流基于Web頁面的配置和使用界面InformaticaDataControls將主數據呈現給業(yè)務用戶層次關系管理歷史數據管理事前數據質量控制預防數據重復

InformaticaMDM主要界面AdminConsProducts管控界面Products管控界面數據匹配與任務管理數據匹配與任務管理首頁儀表板顯示待辦任務流程的當前MDM用戶會收到任務提醒，可以在此打開任務，進行數據操作，并批準或退回。首頁儀表板顯示待辦任務流程的當前MDM用戶會收到任務提醒，社交媒體整合

Bettie通過社交媒體交友、購物、表達觀點社交媒體整合

Bettie通過社交媒體交友、購物、表達觀點Bettie同時是我們的客戶……Bettie同時是我們的客戶……通過社交媒體數據，豐富客戶關聯關系通過社交媒體數據，豐富客戶關聯關系移動設備應用可配置基于角色的訪問控制簡單的查詢地理半徑式搜索集成的清洗功能層次關系視圖創(chuàng)建，編輯，查看主數據社會化信息供應交易數據接入移動設備應用可配置三類接口支持系統之間的集成數據管理平臺ERPCRM數據倉庫主數據層整合層業(yè)務層數據整合平臺（DIH）流程整合平臺（BPM）服務整合平臺（ESB）業(yè)務系統業(yè)務系統可以通過DIH、ESB、BPM三條總線分別從數據、服務、流程三個層次與主數據平臺的批量、實時、流程接口進行全面集成清洗轉換批量數據實時服務業(yè)務流程三類接口支持系統之間的集成ERPCRM數據倉庫主數據層整合層WebServicesMQSeriesJMSTIBCOwebMethodsSAPNetWeaverXIEncyryptedstreamPeoplesoftOracleAppsSiebelSAS…SAPNetWeaverSAPIDOCSAPBCISAPDMISAPBWOracleDB2UDBDB2/400SQLServerSybaseInformixTeradataODBCFlatFilesWebLogs…XMLIndustryFormatsFlatFilesFTPComplexFilesTapeFormats…ERPDatabasesXMLFlatfilesMainframeUnstructuredDataMessagesADABASDatacomDB2IDMSIMSVSAMC-ISAMTapeFormats.PDF.DOC.XLSEmailCloudAppsEDIDIDeveloper數據集成——業(yè)界最好的數據集成平臺MDMWebServicesPeoplesoftOracleXM服務集成——業(yè)界標準接口方式通過SOA服務方式，將MDM信息服務化，供不同應用使用不同粒度的API服務自動生成

提供SIFSDK服務集成——業(yè)界標準接口方式通過SOA服務方式，將MDM信息工作流集成ExitTask1StartTask2CRM/ERPTask3MDMCRM/ERP數據管理員數據發(fā)布InformaticaMDM內嵌任務管理功能InformaticaMDM內嵌簡單審批流程利用第三方工作流引擎可以：獲得/修改任務狀態(tài)通過WS查詢/修改主數據實現復雜審批流程工作流集成ExitTask1StartTask2CRM/安全訪問管理(SAM)實現訪問控制SAM采用基于角色的訪問控制框架資源，描述所有可訪問的對象每一個資源都有多種訪問權限一個角色可以具備對不同資源的不同權限一個用戶可與被授予一個或多個角色安全訪問管理(SAM)實現訪問控制SAM采用基于角色的訪問控安全控制清洗/匹配/信任交叉參考層次關系流程管理HubServer(ServicesIntegrationFramework)消費層分析應用.操作型應用DataWarehouseBIDataDirector業(yè)務系統/數據來源管理層應用邏輯層ApplicationServerOracleWebLogic,IBMWebSphere,jBossOperatingSystemsAIX,HP-UX,Linux(SUSE&RedHat),Solaris,Windows數據層RDBMS/DI/DQOracle9i,10g,11gDB2UDBPWC,IDQOperatingSystemsAIX,HP-UX,Linux,Solaris.WindowsXML,

Web

Services,EJB內部業(yè)務系統外部數據來源ETL,

SQL相關企業(yè)InformaticaMDM架構和平臺支持數據管理員歷史審計集成服務(WS/JMS/SQL)協同辦公財務管理綜合管理營銷管理人力資源管理資產管理交付發(fā)現清洗轉換訪問監(jiān)控主數據模型元數據模型中心數據庫系統管理系統設計數據管理協同辦公財務管理綜合管理營銷管理人力資源管理資產管理安全控制清洗/匹配/信任交叉參考層次關系流程管理HubSeRegistryMDMMultidomainMDM標示單一的客戶、病人、產品，形成客戶信息視圖用于支持DI/DW報表和分析要求，以及法規(guī)遵從面向銷售、市場、客戶服務支持操作型要求…統一的數據入口，同時支持分析型、操作型的需求RegistryConsolidationCoexistenceCentralized(Transactional)DataProfilingDataIntegrationRegistry(IdentityResolution)DataProfilingDataIntegrationandTransformationDataQualityMasterDataManagementsoftware整合模式——不是絕對的四種模式，可以根據業(yè)務搭配和演進SingleDomain(customer)MultipleDomains(customer,product,vendors,account,location,…)RecognizeRecognize&ResolveRelateCreateRegistryMDMMultidomainMDMRegRegistry——為查詢應用構建主數據“視圖”所以數據的新增、修改、刪除都在業(yè)務系統完成從各業(yè)務系統抽取數據到MDM查詢的時候根據匹配規(guī)則搜索相似記錄為查詢者生成“黃金記錄”視圖，但不合并相似記錄因為MDM不進行數據“寫”操作，所以沒有數據回寫到業(yè)務系統54王斌|男|1972.3.8王彬|NA|19720308王斌|男|1972.3.8王斌|01|1972.8.3王彬|男|1972.3.8-----------------------王斌|男|1972.3.8王彬|NA|19720308王斌|男|1972.3.8王斌|01|1972.8.3查詢“王彬”Registry——為查詢應用構建主數據“視圖”所以數據的新Consolidation——面向分析系統的單流向主數據整合所以數據的新增、修改、刪除都在業(yè)務系統完成從各業(yè)務系統抽取數據到MDMMDM根據規(guī)程清洗，查重，合并，生成“黃金記錄”和映射關系主數據用于查詢和數據倉庫等分析型應用因為MDM不進行數據“寫”操作，所以沒有數據回寫到業(yè)務系統55王斌|男|1972.3.8王彬|NA|19720308王斌|男|1972.3.8王斌|01|1972.8.3王彬|男|1972.3.8-----------------------王斌|男|1972.3.8王彬|NA|19720308王斌|男|1972.3.8王斌|01|1972.8.3查詢“王彬”CustomerContractPaymentDWConsolidation——面向分析系統的單流向主數據整合Coexistence——主數據在業(yè)務系統與MDM中一致共存業(yè)務系統和MDM都可以對主數據進行增、刪、改、查等操作數據變化同步(通過抽取、服務、或者異步消息)到MDMMDM更新主數據，并將數據變化同步到其他業(yè)務系統或數據倉庫，保持數據一致業(yè)務系統根據自身需求和特點，采用不同的方式處理從MDM同步過來的數據主數據用于查詢和數據倉庫等分析型應用56王斌|男|1972.3.8王彬|NA|19720308王斌|男|1972.3.8王斌|01|1972.8.3王彬|男|1972.3.8-----------------------王斌|男|1972.3.8王彬|NA|19720308王斌|男|1972.3.8王斌|01|1972.8.3查詢“王彬”CustomerContractPaymentDW修改“生日”王斌|男|1971.7.4王斌|男|1971.7.4王彬|男|1971.7.4寫入業(yè)務數據庫調用業(yè)務服務寫入映射表Coexistence——主數據在業(yè)務系統與MDM中一致共存Transactional——統一在MDM維護主數據最嚴格的控制業(yè)務系統都通過MDM主數據進行增、刪、改、查等所有操作只有MDM存放主數據變通的辦法業(yè)務系統都通過MDM主數據進行增、刪、改等維護操作，數據同步給需要的業(yè)務系統保留主數據的業(yè)務系統，可以查詢自己的主數據，其他系統直接查詢MDM57王彬|男|1972.3.8王彬|男|1972.3.8-----------------------(只有一份數據拷貝)通過MDM查詢“王彬”CustomerContractPaymentDW修改“生日”王彬|男|1971.7.4王彬|男|1971.7.4同步給保留主數據的系統王彬|男|1972.3.8王彬|男|1971.7.4在本地數據庫查詢“王彬”Transactional——統一在MDM維護主數據最嚴格的內容提要從公司治理到主數據管理主數據平臺解決方案Informatica案例分享內容提要從公司治理到主數據管理為全球多個行業(yè)的客戶提供主數據解決方案DifferentiationTrulyMultidomainMDMComplex

HierarchyManagementFastTime-to-ValueCompetitiveHighTechHealth&LifeSciencesBankingInsuranceOil&GasPublishingAutomotiveMediaCPGManufacturingBusiness-userFocusedAviationAgricultureWasteManagementRetail為全球多個行業(yè)的客戶提供主數據解決方案Differentia國內案例1：XX集團主數據管理

——面臨的挑戰(zhàn)和目標挑戰(zhàn)集團共性系統之間主數據管理彼此孤立不同系統的不同視角，導致數據一致性問題突出主數據共享困難，點對點傳輸是主數據問題更為突出組織架構主數據來源多，情況復雜目標制定XX集團主數據管理的策略制定XX集團主數據平臺的技術標準和功能范圍搭建XX集團組織主數據平臺國內案例1：XX集團主數據管理

——面臨的挑戰(zhàn)和目標挑戰(zhàn)整體架構

——集團總部與SBU/BU兩級主數據平臺整體架構

——集團總部與SBU/BU兩級主數據平臺201201020304050607080910第一階段：制定主數據管理規(guī)范第二階段：搭建集團組織主數據平臺項目啟動準備現狀調研與分析主數據管理規(guī)范組織主數據技術與集成標準組織主數據平臺概要設計組織主數據收集與清理詳細設計配置開發(fā)集成測試單元測試系統上線運維支持項目進展用戶培訓一期項目計劃201201020304050607080910第一階段：制集團共性系統主數據源InformaticaMDM平臺主數據管理PowerCenterServer

(ETL)整體架構說明OracleDatabase10.2.4InformaticaDataQualityInformaticaMDMHubInformatica9數據質量管理/主數據管理主數據分析報告數據質量報告公司層次管理SISHFMFMSTMSTIS6SCSHR集團共性系統主數據源InformaticaMDM平臺主數主數據展現（1）用戶可以通過InformaticaMDMDirector來管理主數據以及查看層級關系。多種組織結構展現形式，適應與不同的關系類型展現。公司詳細數據樹狀結構層次結構主數據展現（1）用戶可以通過InformaticaMDM選擇InformaticaMDM的原因Informatica平臺完全符合XX集團建立集團共性的主數據管理平臺的需求通過InformaticaPowerCenter實現主數據平臺與各業(yè)務系統之間的數據抽取、數據更新和數據推送。通過InformaticaDataQuality實現主數據的數據探查、數據匹配與比對，進行差異數據分析；通過InformaticaMDM平臺實現主數據的展現，控制，審計，管理等功能InformaticaMDM平臺可以擴展至其它主數據的業(yè)務需求可從目前組織機構主數據入手，擴展至未來的其它領域主數據需求；從組織機構的數據質量規(guī)范開始，建立企業(yè)級的數據質量管理控制平臺；實現企業(yè)級的數據集成選擇InformaticaMDM的原因Informatic數據資源管理平臺南方電網覆蓋五省區(qū)、緊密聯接港澳，并與周邊國家和地區(qū)多點相連。供電面積100萬平方公里，供電人口2.3億人，供電客戶6700萬戶。2012年全網統調最高負荷1.2億千瓦，全社會用電量8396億千瓦時。年度完成售電量

(千瓦時)西電東送量

(千瓦時)營業(yè)收入完成固定資產投資500強(公司排名)20127010億1243億4192億元858億元第152位20116667億966億3794億元900億元第149位20106027億1117億3696億元993億元第156位數據資源管理平臺南方電網覆蓋五省區(qū)、緊密聯接港澳，并與周邊國目標與挑戰(zhàn)——完善數據資源管理的關鍵是主數據管理數據資源管理組織及認責體系不完善數據資源管理的流程不完整數據資源管理的技術支撐不足數據標準及數據規(guī)劃落地執(zhí)行力度不夠企業(yè)目標：建成經營型、服務型、一體化、國內領先、國際知名的企業(yè)但是，數據已經成為公司生產運行和經營管理中的一個短板，這個問題不解決，企業(yè)的戰(zhàn)略就無法落地，主要表現在：目標與挑戰(zhàn)數據資源管理組織及認責體系不完善企業(yè)目標：建成經營國內案例2：國內某集團企業(yè)組件架構國內案例2：國內某集團企業(yè)組件架構案例2：系統集成關系數據資源管理平臺主數據管理數據標準管理數據質量管理平臺管理總部省級公司數據資源管理平臺信息集成平臺信息集成平臺資產管理系統營銷管理系統財務管理系統人力資源管理系統協同辦公系統綜合管理系統資產管理系統營銷管理系統財務管理系統人力資源管理系統協同辦公系統綜合管理系統數據中心按照兩級部署，通過信息集成平臺，實現系統的“橫向集成，縱向貫通”。主數據管理數據標準管理數據質量管理平臺管理編碼管理編碼管理案例2：系統集成關系數據資源管理平臺主數據管理數據標準管理數主數據域與模型系統資源、資產設備、用電客戶、拓撲連接、量測資源、公共支持等六大類70主數據域與模型系統資源、資產設備、用電客戶、拓撲連接、量測資主數據查詢列表展示界面，可按主數據不同屬性進行查詢和搜索條件定制按職能域分類整理主數據對象主數據對象按主數據不同屬性進行查詢和搜索條件定制根據輸入的查詢條件查詢出的結果列表界面開發(fā)示例——數據查詢主數據查詢列表展示界面，可按主數據不同屬性進行查詢和搜索條件主數據360視圖展示界面，實現主數據及其關聯對象的全景展現360視圖以主數據基本信息和打印視圖兩種視圖進行展現數據數據對象的主鍵信息數據對象詳細信息數據對象歷史數據數據對象審計信息數據對象的子對象信息界面開發(fā)示例——數據管理主數據360視圖展示界面，實現主數據及其關聯對象的全景展現3主數據歷史版本展示界面歷史數據展示界面開發(fā)示例——數據歷史主數據歷史版本展示界面歷史數據展示界面開發(fā)示例——數據歷史建立“五橫四縱”的數據治理框架，實現管理創(chuàng)新保障數據的唯一性與可信性輕松、全面的數據模型開發(fā)節(jié)約成本、提高效率完整客戶視圖解決部門間業(yè)務和數據交叉問題客戶收益建立“五橫四縱”的數據治理框架，實現管理創(chuàng)新客戶收益為什么選擇Informatica靈活的模型支持快速配置的業(yè)務規(guī)則易于二次開發(fā)應對業(yè)務變化為什么選擇Informatica靈活的模型支持謝謝！謝謝！統一主數據管理平臺方案

但彬

Informatica中國統一主數據管理平臺方案

但彬

InformInformatica

專注于數據集成的獨立軟件開發(fā)商成立時間:19932012年收入為:8.116億美元7年平均增長率:每年17%員工人數:2,810多人合作伙伴:

450多家主要的系統集成商、獨立軟件供應商、原始設備制造商和按需生產的先驅客戶:超過5,000家客戶遍布全球82個國家直接客戶遍布全球28個國家客戶忠誠度排名位居榜首

（已連續(xù)7年獲此殊榮）Informatica專注于數據集成的獨立軟件開發(fā)商成立時1.數據采集數據倉庫分析應用BI報表數據挖掘儀表盤任意格式任意數據源任意延時任意模式ERPCRM辦公PLM財務網站業(yè)務系統云計算套裝應用非結構化數據2.數據審計與發(fā)現(數據探查)3.數據質量管理(建立和管理數據質量規(guī)則，儀表盤，報警等)5.主數據和參考數據管理渠道區(qū)域產品客戶4.數據處理AnyformatAnysourceAnylatencyAnymode8.元數據管理(操作型,技術型,業(yè)務層)7.數據歸檔歸檔Retrieval6b.數據虛擬化外部數據復雜事件處理Informatica產品定位1.數據采集數據倉庫分析應用BI報表數據挖掘儀表盤任意格式內容提要從公司治理到主數據管理主數據平臺解決方案Informatica案例分享內容提要從公司治理到主數據管理集團企業(yè)數據利用的發(fā)展與挑戰(zhàn)

AccountOrganizationSalesRepPartnerOrganizationProductProductOrganizationAccountAccountZoneServicesAccountPricing財務管理投資管理客戶服務人力資源決策支持不同的系統管理各種業(yè)務流程走向精細化協同管理利用數據倉庫匯集數據但是企業(yè)內外協同受信息流現狀的制約面臨的問題數據標準數據質量管控流程……集團產業(yè)集團企業(yè)數據倉庫企業(yè)數據集成集團企業(yè)數據利用的發(fā)展與挑戰(zhàn)

AccountOrganiza公司治理影響公司業(yè)務方向、管理、和控制發(fā)展路線的一系列流程、策略、慣例、規(guī)章制度等。IT治理確保IT能夠支撐企業(yè)戰(zhàn)略目標的管理、組織架構、和流程。主數據治理確保企業(yè)主數據的有效性、可訪問性、質量、一致性、可審性、和安全性所需要的流程、策略、標準、和技術。從主數據入手，提升主數據質量，是業(yè)務管控的基礎業(yè)務流程CRMSystemERPSystemOrderMgmtSystemFinanceSystemHRSystem主數據的重要性——大多數的數據質量問題是主數據問題使治理目標和范圍明確主數據系統使咨詢內容落地AccountOrganizationSalesRepPartnerOrganizationProductProductOrganizationAccountAccountZoneServicesAccountPricing公司治理IT治理主數據治理從主數據入手，提升主數據質量，是業(yè)客戶、產品、服務、供應商、機構、資源等組成完整的360度主數據視圖客服金融客戶網上業(yè)務離港機票積分航段航空客戶物流客戶旅業(yè)客戶儲蓄住宅健康支付意外養(yǎng)老助學發(fā)件客戶配偶收件酒店票務物流旅行代理業(yè)務經理孩子企業(yè)航空保險代理不同主數據是業(yè)務的不同視角：客戶角度產品、服務機構資源產品角度客戶資源機構供應商角度產品機構角度產品客戶資源資源角度機構產品客戶完整的主數據視圖父母客戶、產品、服務、供應商、機構、資源等組成完整的360度主提高生產力和效率提高決策能力提高業(yè)務靈活性提高合規(guī)性……問題：貴公司實施主數據項目的主要原因是什么？業(yè)務需求技術需求面臨哪些難題……主數據管理的驅動力提高生產力和效率主數據管理的驅動力企業(yè)集團主數據平臺集中管理各類主數據

AcctRepOrganizationAccountCustomerProductMDM數據管理AccountOrganizationSalesRepPartnerOrganizationProductProductOrganizationAccountAccountZoneServicesAccountPricingDI/DQ社交媒體財務管理投資管理客戶服務人力資源決策支持DW數據服務企業(yè)集團主數據平臺集中管理各類主數據

AcctRepOrg靈活的數據模型可定制的業(yè)務邏輯和工作流程可配置的用戶界面/接口解決不同領域業(yè)務問題可用統一的平臺擴展到解決其他業(yè)務問題和領域預定義數據模型預定義的業(yè)務邏輯和工作流程預定義的用戶界面/接口解決特定領域的業(yè)務問題擴展到其他業(yè)務領域需要購買新的應用平臺級MDM應用級MDM根據客戶的特有需求進行配置，使用不同客戶需求預置的應用以解決特定的主數據問題(customer,product,financial)CustomerProductCOA客戶產品COA主數據管理的不同實現路徑靈活的數據模型預定義數據模型平臺級MDM應用級MDM根據InformaticaMDM簡介

經驗證的多域主數據方案部署情況市場影響力跨越多行業(yè)的平臺級解決方案

(FinancialServices,LifeSciences,HighTech…)大量案例證明在多域主數據部署的能力快速部署

平均上線時間:3-9個月最具伸縮性解決方案

最大450M主記錄數的成功案例可驗證的多域主數據

幾乎一半的客戶都在統一平臺上部署了客戶和產品域超過

50%的財富500企業(yè)和全球500強企業(yè)MerrillLynch,DeutscheBank,Johnson&Johnson,Pfizer,Apple,Kodak,Cadbury,…跨越多行業(yè)的客戶解決方案

(25+solutions)InformaticaMDM提供產品、客戶、賬戶等關鍵數據的統一視圖，快速低成本提升業(yè)務運營、客戶體驗、以及合規(guī)等能力InformaticaMDM簡介

經驗證的多域主數據方案Informatica主數據管理平臺統一管理多域主數據提升績效降低成本提升客戶服務質量管控風險與合規(guī)機構合并與剝離MDM

客戶

訂單

產品

地點提高決策精確度企業(yè)應用遺留系統云應用非結構數據第三方數據現有哪些應用系統涉及主數據？ERP、CRM、PLM、PDM……重點關注哪些主數據？客戶、產品、供應商……應用系統可能以哪種方式與主數據交互？批量、實時、準實時…Informatica主數據管理平臺統一管理多域主數據提升為應用和數據倉庫交付可信的數據管理統一、可信、真實的主數據數據清洗和標準化剖析、發(fā)現數據內容、一致性、數據結構從不同的應用和數據源訪問、獲取數據平臺需要的能力數據獲取數據探索數據清洗數據管理數據發(fā)布12345為應用和數據倉庫交付可信的數據管理統一、可信、真實的主數據數ESB統一客戶數據平臺架構企業(yè)數據集成平臺運營支撐分析決策數據集市儀表板分析報表業(yè)務應用遺留數據社交媒體和第三方數據數據質量數據探索123主數據管理4ODS數據管控模型管理合并管理重復識別數據關聯Ora數據倉庫運行、生產、銷售數據管理平臺TD數據倉庫客戶/市場ESB數據發(fā)布服務5ESB統一客戶數據平臺架構企業(yè)數據集成平臺運營支撐分析決策數Informatica產品在主數據管理中的定位OperationalAnalyticalCIFLegacy

SystemsDataWarehouseDataMartsPortal/DashboardBusinessIntelligenceLegacy

SystemsApplicationsApplicationsLegacyThirdPartyDataMasterDataManagementMDMFoundation實時交付可信的、相互關聯的主數據及時交付可信的、相互關聯的數據DataQualityDataProfilingDataIntegrationDataServices1235MasterDataManagement4Informatica產品在主數據管理中的定位Operat數據獲取關鍵需求:在任意的源和目標數據之間進行數據訪問和發(fā)布各種數據格式，各種地方不同的延遲需求

(批量,實時,消息隊列)高性能和高可用支持不同MDM部署風格元數據可視化數據集成1DataIntegration產品支持:InformaticaPowerCenterInformaticaPowerExchangeInformaticaB2BExchange數據獲取關鍵需求:數據集成1Data產品支持:數據探索關鍵需求:發(fā)現和記錄數據中的所有異常將問題進行分類（完備性、遵從性、一致性、準確性、唯一性、依賴性）數據探索2DataProfiling產品支持:InformaticaDataProfile數據探索關鍵需求:數據探索2Data產品支持:數據清洗關鍵需求:數據清洗數據豐富地址標準化數據監(jiān)控和報告基于SOA訪問DQ規(guī)則

根據條件的格式校驗規(guī)則數據變化，去噪，轉換開放式清洗架構數據清洗3DataQuality產品支持:InformaticaDataQualityAddressDoctor數據清洗關鍵需求:數據清洗3Data產品支持:數據質量問題實例完整性COMPLETENESS合法性CONFORMITY一致性CONSISTENCY重復性DUPLICATION關聯性INTEGRITY準確性\ACCURACY值域劃分RANGE完整性:丟失關鍵數值合法性:非法格式Consistency:IncorrectFormat一致性:數據是格式正確并完整，但不符合業(yè)務邏輯Duplication:Fuzzymatching重復性:模糊匹配關聯性:識別記錄關系關聯性:識別記錄關系準確性:須利用其他數據來驗證其準確程度值域劃分:界定數值范圍數據質量問題實例完整性合法性一致性重復性關聯性準確性值特性剖析解析清洗,標準化Comprehensive

dataquality數據豐富匹配,剔重功能從非結構化的模式推演數據的含義從非結構化的數據構建結構化數據識別、糾正數據錯誤；將數據轉化成標準格式/術語增加附加的屬性和分類識別和消除重復數據“l(fā)iquid”+”crystal”+”display”=

1conceptCamera=manufacturer,megapixels,zoom,andcolorWoodd=wood=wudPaperweight:

100gi.s.o.100kgDivingwatchwithWatchattribandDivingEquipmentattribPIM樣例2productsindifferentlanguagesareinfactthesameitemCDI樣例姓名:

姓+名字(CHS,KOR,JPN);FN+MN+PN+LN(Latin);Addr=#,street,city,state,zip,country;Bill=WilliamSt,Str=Street(ENU/DEU)St=Saint(FRA)HaidongSong:“single,1child,SummitEstate,DoNotMail”HaidongSong=宋海東=數據質量功能一覽特性剖析解析清洗,標準化Comprehensive

data共同參與數據質量工作數據質量1.分析

2.確定數據質量規(guī)則和目標3.制定質量提高計劃4.部署數據質量計劃5.數據質量報告與跟蹤數據經理業(yè)務主管IT開發(fā)人員數據管理人員記分卡基于WEB客戶端共同參與數據質量工作數據質量1.分析2.確定數據質量規(guī)使用Analyst對數據進行全方位的剖析使業(yè)務人員參與數據分析工作，提高生產力和工作效率，降低IT人員的依賴性DataStewardReusedataqualityrulesinprofilinganalysis使用Analyst對數據進行全方位的剖析使業(yè)務人員參與數據分使用Developer開發(fā)具體任務圖形化界面，功能強大，操作簡單使用Developer開發(fā)具體任務圖形化界面，功能強大，操作流間分析

在處理流程中任意位置進行分析剖析數據源剖析處理單元剖析規(guī)則流間分析

在處理流程中任意位置進行分析剖析數據源剖析處理單元量化質量，跟蹤監(jiān)控

基于web的積分卡便于共享簡單易用，不需要任何專業(yè)技術數據主管業(yè)務經理基于Web格式的記分卡

是你能夠:查看和共享數據質量記分卡下鉆到具體數據制定策略，降低對業(yè)務的影響量化質量，跟蹤監(jiān)控

基于web的積分卡便于共享簡單易用，不需DataQuality可提供每個實體對象記分卡及監(jiān)控納稅人稅金發(fā)票出口退稅規(guī)則DataQuality可提供每個實體對象記分卡及監(jiān)控納稅DQA-業(yè)務人員可手工管理不良數據DQA-業(yè)務人員可手工管理不良數據案例

DataQualityFramework

KPICalculationAndAggregationModel(CAAM)案例DataQualityFramework

KPRepresentationofDataQualityIndexDataQualitydashboardsByInfluencingfactorsBySourceofInformationDQIonEnduserreports數據質量分析/監(jiān)控RepresentationofDataQuality管控數據生命周期中的創(chuàng)建，使用，關聯，和監(jiān)控關聯多種主數據，建立關系視圖通過合并創(chuàng)建真實可信的統一的數據視圖快速匹配和精確識別重復數據通過靈活的模型支持，定義各種類型的主數據MDM關鍵功能–數據管理ModelRecognizeResolveRelateGovern數據管理4MasterDataManagement產品支持:InformaticaMDM管控數據生命周期中的創(chuàng)建，使用，關聯，和監(jiān)控關聯多種主數據，數據發(fā)布關鍵需求:同步可信的主數據到下游應用和數據倉庫獲得統一的主數據視圖和相關的交易數據數據發(fā)布5DataServices產品支持:InformaticaPowerCenterInformaticaPowerExchangeInformaticaDataServicesInformaticaComplexEventProcessing數據發(fā)布關鍵需求:數據發(fā)布5Data產品支持:模型的重點是方法和參考沒有完全適應的模型，所以定制能力很重要Informatica

MDM支持各種模型和定制同時我們有金融、制造、零售等多個行業(yè)成功實施的模型模型管理

——靈活的模型支持模型管理

——靈活的模型支持RECOGNIZERecognizeMasterDataManagement關鍵能力:根據配置的規(guī)則，識別在多個系統中存在的潛在的匹配對象根據閾值定義，確定是否匹配

將有疑似的匹配結果，通過業(yè)務流程提交人工確認將確認重復的數據進行合并Wang,Bao-QiangRECOGNIZECRMERP王寶強重復識別

——模糊匹配技術RECOGNIZERecognizeMaster關鍵能力:W綜合管理系統呼叫中心營銷系統UniqueIDNameGender111王彬男UniqueIDSourceSystemSystemID111CRM929992111ERPAKK-111111Legacy098388188PrimaryKeyNameGender929992王彬女PrimaryKeyNameGenderAKK-111王斌男PrimaryKeyFullName098388188WangBinIdentityResolution客戶樣例使用模糊匹配，標示相似的數據.使用數據子集進行精確匹配

(i.e.姓、名、聯系方式、ID信息、地址信息等)創(chuàng)建唯一的ID,并為黃金記錄選擇恰當的屬性創(chuàng)建交叉引用索引，指向原有系統的主鍵和系統標示數據合并

——業(yè)務整合銜接綜合管理系統呼叫中心營銷系統UniqueIDNameGen數據覆蓋原則

——數據合并的關鍵客戶主數據LiquidAssets$190,157$383,522$559,934Equity$3,342$40,666$109,354PublicYYYCreditRatingAAA-AA-AAADomicileFranceUSAUSAPartyNameIXISCorporate&InvestmentBankWellsFargo&Co.GeneralElectricCompanyAsofDate1/31/20063/27/20064/15/2006ADDR1ElmandCarltonStreets123MainStreet57,rueduFoubourgCITYMinneapolisNewHavenParisADDR5504231426375003ADDR4MNCTName_FullWellsFargo&Co.GeneralElectricCompanyIXISCorporate&InvestmentBankPolicy#308-03-8500005-10-4640917-13-8500個險AmericanMedicalAssociationDataRatingBaaAaaAAACountryUSUSFRCompanyNameWellsFargo&Co.IXISCIBGEPolicy#308038500410051046400291713850028AsofDate8/26/20076/15/20071/30/2008團險Address57rueduFoubourg6thandMarquette123MainStCityParisMinneapolisNewHavenZip7500355405StateMNCTCompanyNameIXISCIBWellsFargoGEFinancialCallin#852139999503829837762C.C.TickerSymbolWFCGETotalAssets$207,059$481,741$673,342COUNTRYUSAUSAFranceLiquidAssets$190,157$383,522$559,934Equity$3,342$40,666$109,354TotalAssets$207,059$481