數(shù)據(jù)中心模型

1、中中銀數(shù)據(jù)中心改造銀數(shù)據(jù)中心改造目錄1模型層簡介2數(shù)據(jù)分布簡介3數(shù)據(jù)模型層說明4數(shù)據(jù)冗余案例5原EDW層改造方案整體方案 SDATASDATA層是數(shù)據(jù)倉庫庫內(nèi)的落地的基礎(chǔ)數(shù)據(jù)層,根據(jù)不同的需求可調(diào)整數(shù)據(jù)保留時(shí)間 按來源系統(tǒng)劃分，對于每個(gè)系統(tǒng)進(jìn)行統(tǒng)一編目，統(tǒng)一系統(tǒng)編號 采用貼源結(jié)構(gòu)存放數(shù)據(jù)，表結(jié)構(gòu)與源系統(tǒng)保持一致，SDATA數(shù)據(jù)以全量形式為存于數(shù)據(jù)庫中SDATA-基礎(chǔ)數(shù)據(jù)層 PDATA數(shù)據(jù)層是為各級機(jī)構(gòu)各個(gè)業(yè)務(wù)部門的不同業(yè)務(wù)需求提供一致的、規(guī)范的數(shù)據(jù)。PDATA按照金融機(jī)構(gòu)業(yè)務(wù)主題領(lǐng)域和第三范式建模規(guī)則來組織數(shù)據(jù)，如客戶、產(chǎn)品、協(xié)議、事件、地理區(qū)域和渠道等，可以涵蓋金融機(jī)構(gòu)的主要業(yè)務(wù)范圍和相關(guān)數(shù)

2、據(jù) 是中性的、可擴(kuò)展的、動(dòng)態(tài)的模型，當(dāng)數(shù)據(jù)源業(yè)務(wù)系統(tǒng)改變時(shí)（如添加新的金融產(chǎn)品或者網(wǎng)點(diǎn)撤并等），能夠?qū)壿嫈?shù)據(jù)模型的影響減至最小甚至完全不受影響 通過主題劃分、高范式數(shù)據(jù)模型來整合數(shù)據(jù)PDATA-邏輯數(shù)據(jù)層 數(shù)據(jù)來源：SDATA 原EDW數(shù)據(jù)，通過時(shí)間戳方式存放（可考慮以視圖方式） 業(yè)務(wù)數(shù)據(jù)匯總層，涵蓋各業(yè)務(wù)系統(tǒng)所需接口數(shù)據(jù) 數(shù)據(jù)來源：PDATACDATA-業(yè)務(wù)數(shù)據(jù)匯總層 應(yīng)用接入層，展現(xiàn)形式應(yīng)該為大寬表 信評系統(tǒng)數(shù)據(jù)存放，項(xiàng)目后續(xù)新增應(yīng)用接入也訪問此數(shù)據(jù)層 數(shù)據(jù)來源：PDATA、SDATADM-應(yīng)用數(shù)據(jù)集市層目前冗余數(shù)據(jù)案例一般冗余出現(xiàn)在主檔信息表與事件信息表之間，且出現(xiàn)頻率較大，如下舉例

3、說明信息表與信息表之間信息表與事件表之間信息表與其他分類表之間目前冗余數(shù)據(jù)案例-信息表與信息表之間截取部分表字段查看其中一些冗余字段，可在PDATA中做清理FA_SECU_INFO-證券信息主表SK_SECURITIES證券信息IDSECU_NAME證券名稱SECU_ABBR證券簡稱SECU_ENAME證券英文名稱MARKT_ID交易市場ID(參數(shù))MARKT_CODE交易市場代碼MARKT_NAME交易市場名稱CLEAR_REG_AGENCY登記結(jié)算機(jī)構(gòu)(參數(shù))CLEAR_REG_CODE登記結(jié)算機(jī)構(gòu)代碼CLEAR_REG_NAME登記結(jié)算機(jī)構(gòu)名稱TRAD_CURR_ID交易幣種ID(參數(shù))

4、CURR_CODE幣種代碼CURR_NAME幣種名稱SECU_CLASS_ID證券大類ID(參數(shù))SECU_CLASS_CODE證券大類代碼-冗余SECU_CLASS_NAME證券大類名稱SECU_TYPE_ID證券子類ID(參數(shù))SECU_TYPE_CODE證券子類代碼SECU_TYPE_NAME證券子類名稱ISSUER發(fā)行人FA_BOND_INFO-債券信息SK_SECURITIES證券代理鍵FINC_CODE財(cái)匯證券內(nèi)碼-冗余SECU_CODE證券市場代碼-冗余FA_SECU_INFO.SECU_CODE 主表已存在MARKT_CODE所屬市場-冗余FA_SECU_INFO.MARKT_

5、CODE 主表已存在SECU_CLASS_CODE投資品種-冗余FA_SECU_INFO.SECU_CLASS_CODE 主表已存在SECU_TYPE_CODE證券品種-冗余FA_SECU_INFO.SECU_TYPE_CODE 主表已存在目前冗余數(shù)據(jù)案例-信息表與事件表之間截取部分表字段查看其中一些冗余字段，可在PDATA中做清理FA_SECU_INFO-證券信息主表SK_SECURITIES證券信息IDSECU_NAME證券名稱SECU_ABBR證券簡稱SECU_ENAME證券英文名稱MARKT_ID交易市場ID(參數(shù))MARKT_CODE交易市場代碼MARKT_NAME交易市場名稱CLE

6、AR_REG_AGENCY登記結(jié)算機(jī)構(gòu)(參數(shù))CLEAR_REG_CODE登記結(jié)算機(jī)構(gòu)代碼CLEAR_REG_NAME登記結(jié)算機(jī)構(gòu)名稱TRAD_CURR_ID交易幣種ID(參數(shù))CURR_CODE幣種代碼CURR_NAME幣種名稱SECU_CLASS_ID證券大類ID(參數(shù))SECU_CLASS_CODE證券大類代碼-冗余SECU_CLASS_NAME證券大類名稱SECU_TYPE_ID證券子類ID(參數(shù))SECU_TYPE_CODE證券子類代碼SECU_TYPE_NAME證券子類名稱ISSUER發(fā)行人FA_BOND_TRADE-債券交易表SK_EVENT事件代理鍵EXECUT_NUM成交編號

7、TRAD_DATE交易日期DLVY_DATE交割日期SK_PRODUCT產(chǎn)品代理鍵SK_SECURITIES持倉資產(chǎn)代理鍵SECU_MARKT_CODE證券市場代碼-冗余FA_SECU_INFO.SECU_CODE 主表已存在MARKT_CODE所屬市場代碼-冗余FA_SECU_INFO.MARKT_CODE 主表已存在SECU_CLASS_CODE投資品種-冗余FA_SECU_INFO.SECU_CLASS_CODE 主表已存在SECU_TYPE_CODE證券品種-冗余FA_SECU_INFO.SECU_TYPE_CODE 主表已存在目前冗余數(shù)據(jù)案例-信息表與其他表之間截取部分表字段查看其中

8、一些冗余字段，可在PDATA中做清理FA_BOND_HOLD-債券持倉表D_HOLDDATE持倉日期SK_PRODUCT產(chǎn)品代碼SK_SECURITY證券編碼SECU_CODE證券代碼FA_SECU_INFO.SECU_CODE 主表已存在SECU_NAME證券名稱FA_SECU_INFO.SECU_NAME 主表已存在MARKET_CODE市場代碼FA_SECU_INFO.MARKT_CODE 主表已存在SECU_CLASS_CODE證券大類代碼FA_SECU_INFO.SECU_CLASS_CODE 主表已存在SECU_TYPE_CODE證券子類代碼FA_SECU_INFO.SECU_TY

9、PE_CODE 主表已存在F_PRICE當(dāng)日行情FIN_BOND_QUOTE.F_PRICE_CCLOSE（）債券行情表中已存在該數(shù)據(jù)F_AMOUNT持倉數(shù)量F_COST成本F_COST_RATIO成本占比是否需要自行計(jì)算F_MKTVALUE市值F_MKTVALUE_RATIO市值占比是否需要自行計(jì)算F_VALUE_ADDED估值增值F_VALUE_PREMIUM折溢價(jià)F_VALUE_INTEREST應(yīng)收利息F_AMOUNT_LWKDATE數(shù)量（上一工作日）F_COST_LWKDATE成本（上一工作日）F_COST_RATIO_LWKDATE成本占比是否需要自行計(jì)算F_MKTVALUE_LWK

10、DATE市值（上一工作日）F_MKTTVALUE_LWKDATE_RATIO市值占比是否需要自行計(jì)算F_CHANGEFLAG變化標(biāo)志:0新入/1增加/2減少INNER_CLASS_CODE編碼大類系統(tǒng)中有代理主鍵INNER_CLASS_PROP編碼性質(zhì)INNER_TYPE_CODE編碼子類ACCOUNT_SUBJ_CLASS會(huì)計(jì)科目大類ACCOUNT_SUBJ會(huì)計(jì)科目解決方案根據(jù)上述幾種情況，可分析出，字段冗余一般與信息表相關(guān)字段?？赏ㄟ^相關(guān)信息表除主鍵外字段去查出對應(yīng)數(shù)據(jù)庫中相同字段進(jìn)行分析及冗余清理。信息表可參看PDATA中的L99-參數(shù)、L01-當(dāng)事人、L02-產(chǎn)品著手去分析解決方案各模型層表確定包括表清單，表字段刪減，最后表結(jié)構(gòu)的確定業(yè)務(wù)接口更新各業(yè)務(wù)系統(tǒng)的數(shù)據(jù)接口變化后對其提供最新接口ETL的更新由于模型層變動(dòng)及對應(yīng)表結(jié)構(gòu)變化，需對informatica進(jìn)行批處理邏輯更新PDATA的逐步完善目前