長(zhǎng)安汽車管理駕駛艙（一期）ETL詳細(xì)設(shè)計(jì)說(shuō)明書(shū)

1、長(zhǎng)安汽車管理駕駛艙（一期）ETL詳細(xì)設(shè)計(jì)說(shuō)明書(shū) 修訂歷史修訂日期文檔版本修訂描述文檔作者2014/04/03V0.1創(chuàng)建2015/03/03V0.2根據(jù)最新設(shè)計(jì)修改2015/04/10V1.0定稿目 錄1.文檔概述21.1.文檔目的21.2.項(xiàng)目背景21.3.文檔讀者21.4.參考資料21.5.名稱術(shù)語(yǔ)32.服務(wù)器設(shè)置42.1.目錄結(jié)構(gòu)42.2.節(jié)點(diǎn)設(shè)置53.ETL任務(wù)63.1.Initial63.1.1.10Ex63.1.2.20LD_ODS63.1.3.40ODS_DW73.1.4.41DW_DW103.2.Regular113.2.1.10Ex113.2.2.20LD_Delta113.

2、2.3.30Delta_ODS123.2.4.40ODS_DW133.2.5.41DW_DW133.3.通用133.3.1.50DW_DM133.3.1.60DM_DM163.4.其他473.5.Seq474.ETL流程設(shè)計(jì)484.1.ODS484.2.DW494.3.DM494.3.1.實(shí)際數(shù)KPI計(jì)算504.3.2.預(yù)算數(shù)KPI計(jì)算504.3.3.報(bào)表計(jì)算511. 文檔概述本文檔描述了長(zhǎng)安管理駕駛艙項(xiàng)目（一期）項(xiàng)目ETL設(shè)計(jì)詳細(xì)信息，包括詳細(xì)任務(wù)列表，執(zhí)行方法，輸入輸出參數(shù)，執(zhí)行順序等。1.1. 文檔目的本文檔旨在描述ETL設(shè)計(jì)的細(xì)節(jié)，方便運(yùn)維以及其他相關(guān)人員更好地理解ETL設(shè)計(jì)內(nèi)容，提高

3、工作效率。1.2. 項(xiàng)目背景從九五期間開(kāi)始，長(zhǎng)安汽車就開(kāi)始了信息化建設(shè)的嘗試。2003年長(zhǎng)安汽車ERP系統(tǒng)完成切換，系統(tǒng)正式上線運(yùn)行成功，標(biāo)志著長(zhǎng)安汽車開(kāi)始進(jìn)入建立企業(yè)一體化協(xié)調(diào)平臺(tái)的時(shí)代。在近十年的數(shù)據(jù)積累過(guò)程中，長(zhǎng)安汽車逐步意識(shí)到數(shù)據(jù)分析的重要性，以及依據(jù)數(shù)據(jù)分析結(jié)果為領(lǐng)導(dǎo)層提供戰(zhàn)略決策支持的必要性，因此長(zhǎng)安汽車提出了打造并建立行業(yè)領(lǐng)先的企業(yè)商務(wù)智能平臺(tái)，用以實(shí)現(xiàn)對(duì)企業(yè)信息系統(tǒng)數(shù)據(jù)的收集，整合，分析，從而提供支持企業(yè)整體運(yùn)營(yíng)決策的數(shù)據(jù)分析依據(jù)。隨著長(zhǎng)安汽車戰(zhàn)略規(guī)劃的深入實(shí)施，公司不斷深化所在業(yè)務(wù)經(jīng)營(yíng)領(lǐng)域，從而對(duì)管理精細(xì)化水平的要求相應(yīng)提高。為了更好的服務(wù)于管理層的決策過(guò)程，提供有效的數(shù)據(jù)支

4、持，通過(guò)對(duì)數(shù)據(jù)進(jìn)行多維分析和鉆取，有助于對(duì)問(wèn)題路徑進(jìn)行剖析和糾偏，從而進(jìn)一步提升管理、報(bào)告和控制等方面的洞察和執(zhí)行能力，為公司業(yè)務(wù)發(fā)展、績(jī)效管理和經(jīng)營(yíng)決策提供更全面、更深入和更有價(jià)值的服務(wù)。1.3. 文檔讀者l ETL設(shè)計(jì)人員l ETL開(kāi)發(fā)人員l ETL運(yùn)維人員1.4. 參考資料長(zhǎng)安管理駕駛艙平臺(tái)規(guī)劃長(zhǎng)安管理駕駛艙平臺(tái)選型長(zhǎng)安數(shù)據(jù)交換平臺(tái)軟硬件規(guī)劃說(shuō)明書(shū)長(zhǎng)安汽車管理駕駛艙（一期）ETL開(kāi)發(fā)規(guī)范長(zhǎng)安汽車管理駕駛艙（一期）ETL概要設(shè)計(jì)說(shuō)明書(shū)1.5. 名稱術(shù)語(yǔ)l BI：商業(yè)智能（Business Intelligence）l EDB：企業(yè)數(shù)據(jù)總線(Enterprise Data Bus)l EDW

5、：企業(yè)數(shù)據(jù)倉(cāng)庫(kù)(Enterprise Data Warehouse)l DM：數(shù)據(jù)集市（Data Mart）l ETL：數(shù)據(jù)抽取轉(zhuǎn)換加載（Extract-Transform-Load）l 3NF：數(shù)據(jù)模型三范式（3rd Normal Form）l ODS：操作型數(shù)據(jù)存儲(chǔ)l SSA：源系統(tǒng)數(shù)據(jù)緩沖區(qū)（Source Staging Area）l DXP：數(shù)據(jù)交換平臺(tái)（Data eXchange Portal）2. 服務(wù)器設(shè)置2.1. 目錄結(jié)構(gòu)目錄描述Initial初始化加載目錄10Ex從數(shù)據(jù)源抽取全量20LD_ODS加載到ODS40ODS_DW從ODS到DW41DW_DWDW內(nèi)部50DW_DM從D

6、W到DM60DM_DM從DM到DMSeqsequenceRegular日常處理(當(dāng)前按月)10Ex從數(shù)據(jù)源抽取全量20LD_Delta加載到DELTA30Delta_ODS從DELTA合并到ODS40ODS_DW從ODS到DW41DW_DWDW內(nèi)部50DW_DM從DW到DM60DM_DM從DM到DMSeqsequence2.2. 節(jié)點(diǎn)設(shè)置默認(rèn)2節(jié)點(diǎn)：node node1fastname dsdevlop1pools resource disk /home/dsadm/IBM/InformationServer/Server/Datasets pools resource scratchdisk

7、 /home/dsadm/IBM/InformationServer/Server/Scratch pools node node2fastname dsdevlop1pools resource disk /home/dsadm/IBM/InformationServer/Server/Datasets pools resource scratchdisk /home/dsadm/IBM/InformationServer/Server/Scratch pools 3. ETL任務(wù)3.1. Initial初始化全量加載時(shí)使用。3.1.1. 10Ex功能：完成從數(shù)據(jù)交換平臺(tái)到管理駕駛艙的數(shù)據(jù)抽

8、取，數(shù)據(jù)落地成Dataset文件用于后續(xù)加載。實(shí)現(xiàn)方式：使用DATASTAGE Job實(shí)現(xiàn)。Job NameSource TableDWXS_INT_ORDERS_ODSDWXS_INT_ORDERS_ODSDWSX_VAR_ONHAND_REPORT_ODSDWSX_VAR_ONHAND_REPORT_ODSDWXS_VAR_STORE_REPORT_ODSDWXS_VAR_STORE_REPORT_ODSTT_DEALER_INFOTT_DEALER_INFOTT_RETAIL_SALETT_RETAIL_SALETT_SERVICE_COST_NEWTT_SERVICE_COST_NEW

9、XXFIN_CWGL_INDEX_DETAILXXFIN_CWGL_INDEX_DETAILXXFIN_CWYS_ODSXXFIN_CWYS_ODSXXFIN_SUB_DETAILSXXFIN_SUB_DETAILS_ALLXXFIN_TF_PROD_MANUF1XXFIN_TF_PROD_MANUF1XXFIN_TF_PROD_SALE1XXFIN_TF_PROD_SALE1W_QIS_VEHICLE_REPAIR_F_ODSW_QIS_VEHICLE_REPAIR_FW_QIS_VEHICLE_SALE_F_ODSW_QIS_VEHICLE_SALE_FXXFIN_COST_ITEMS_O

10、DSXXFIN_COST_ITEMS3.1.2. 20LD_ODS功能：將10Ex抽取的Dataset文件加載到ODS表。實(shí)現(xiàn)方式：Datastage Job。采用tuncate然后insert的方式。Job NameODS TableDWXS_INT_ORDERS_ODS_20DWXS_INT_ORDERS_ODSDWSX_VAR_ONHAND_REPORT_ODS_20DWSX_VAR_ONHAND_REPORT_ODSDWXS_VAR_STORE_REPORT_ODS_20DWXS_VAR_STORE_REPORT_ODSTT_DEALER_INFO_20TT_DEALER_INFOTT

11、_RETAIL_SALE_20TT_RETAIL_SALETT_SERVICE_COST_NEW_20TT_SERVICE_COST_NEWXXFIN_CWGL_INDEX_DETAIL_20XXFIN_CWGL_INDEX_DETAILXXFIN_CWYS_ODS_20XXFIN_CWYS_ODSXXFIN_SUB_DETAILS_20XXFIN_SUB_DETAILS_ALLXXFIN_TF_PROD_MANUF1_20XXFIN_TF_PROD_MANUF1XXFIN_TF_PROD_SALE1_20XXFIN_TF_PROD_SALE1W_QIS_VEHICLE_REPAIR_F_OD

12、S_20W_QIS_VEHICLE_REPAIR_FW_QIS_VEHICLE_SALE_F_ODS_20W_QIS_VEHICLE_SALE_FXXFIN_COST_ITEMS_ODS_20XXFIN_COST_ITEMS3.1.3. 40ODS_DW功能：加載DW數(shù)據(jù)表，數(shù)據(jù)源是ODS。主要功能是代碼轉(zhuǎn)換。實(shí)現(xiàn)方式：Datastage Job。3.1.3.1. TF_KPI_BUD_VAL_ERP財(cái)務(wù)科目預(yù)算數(shù)據(jù)處理。源表XXFIN_CWYS_ODS目標(biāo)表TF_KPI_BUD_VAL_ERP代碼轉(zhuǎn)換內(nèi)容ERP責(zé)任中心轉(zhuǎn)換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼ERP帳套轉(zhuǎn)換成BI組織代碼

13、各帳套不一致的科目統(tǒng)一轉(zhuǎn)換財(cái)務(wù)科目轉(zhuǎn)換成對(duì)應(yīng)的BI指標(biāo)數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.3.2. TF_KPI_BUD_VAL_QLTY質(zhì)量成本預(yù)算數(shù)據(jù)處理。源表XXFIN_CWYS_ODS目標(biāo)表TF_KPI_BUD_VAL_QLTY代碼轉(zhuǎn)換內(nèi)容ERP責(zé)任中心轉(zhuǎn)換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼ERP帳套轉(zhuǎn)換成BI組織代碼數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.3.3. TF_KPI_ORIG_VAL_FIN財(cái)務(wù)科目實(shí)際數(shù)據(jù)處理。源表XXFIN_SUB_DETAILS目標(biāo)表TF_KPI_ORIG_VAL_FIN代碼轉(zhuǎn)換內(nèi)容ERP責(zé)任中心轉(zhuǎn)

14、換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼ERP帳套轉(zhuǎn)換成BI組織代碼各帳套不一致的科目統(tǒng)一轉(zhuǎn)換財(cái)務(wù)科目轉(zhuǎn)換成對(duì)應(yīng)的BI指標(biāo)數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.3.4. TF_KPI_ORIG_VAL_INV庫(kù)存（社會(huì)庫(kù)存+企業(yè)庫(kù)存）實(shí)際數(shù)據(jù)處理。源表DWSX_VAR_ONHAND_REPORTDWSX_VAR_STORE_REPORT目標(biāo)表TF_KPI_ORIG_VAL_INV代碼轉(zhuǎn)換內(nèi)容ERP庫(kù)存組織轉(zhuǎn)換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.3.5. TF_KPI_ORIG_VAL_PROD產(chǎn)量實(shí)際數(shù)

15、據(jù)處理。源表XXFIN_TF_PROD_MANUF1目標(biāo)表TF_KPI_ORIG_VAL_PROD代碼轉(zhuǎn)換內(nèi)容ERP庫(kù)存組織轉(zhuǎn)換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.3.6. TF_KPI_ORIG_VAL_QLTY質(zhì)量成本實(shí)際數(shù)據(jù)處理。源表XXFIN_SUB_DETAILS目標(biāo)表TF_KPI_ORIG_VAL_QLTY代碼轉(zhuǎn)換內(nèi)容ERP責(zé)任中心轉(zhuǎn)換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼ERP帳套轉(zhuǎn)換成BI組織代碼數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.3.7. TF_KPI_ORIG_VAL_SELL質(zhì)量

16、成本實(shí)際數(shù)據(jù)處理。源表XXFIN_TF_PROD_SALE1目標(biāo)表TF_KPI_ORIG_VAL_SELL代碼轉(zhuǎn)換內(nèi)容ERP庫(kù)存組織轉(zhuǎn)換成BI組織代碼車型狀態(tài)碼轉(zhuǎn)換成BI產(chǎn)品代碼根據(jù)批售對(duì)象獲取銷售區(qū)域數(shù)據(jù)清洗內(nèi)容在SQL中實(shí)現(xiàn)不規(guī)則車型狀態(tài)碼的數(shù)據(jù)清洗3.1.4. 41DW_DW功能：實(shí)現(xiàn)業(yè)務(wù)邏輯，處理一些DW內(nèi)部數(shù)據(jù)計(jì)算。實(shí)現(xiàn)方式：Datastage Job。3.1.4.1. TF_KPI_ORIG_VAL_FIN_BAL計(jì)算科目余額。源表TF_KPI_ORIG_VAL_FIN目標(biāo)表TF_KPI_ORIG_VAL_FIN_BAL3.2. Regular常規(guī)處理，當(dāng)前常規(guī)處理周期是月。常規(guī)處

17、理既可能是增量也可能是全量。3.2.1. 10Ex功能：實(shí)現(xiàn)數(shù)據(jù)交換平臺(tái)數(shù)據(jù)增量/全量抽取，落地成Dataset文件。實(shí)現(xiàn)方式：Datastage Job。Job NameSource TableDWXS_INT_ORDERS_ODS_10DWXS_INT_ORDERS_ODSDWSX_VAR_ONHAND_REPORT_ODS_10DWSX_VAR_ONHAND_REPORT_ODSDWXS_VAR_STORE_REPORT_ODS_10DWXS_VAR_STORE_REPORT_ODSTT_DEALER_INFO_10TT_DEALER_INFOTT_RETAIL_SALE_10TT_RE

18、TAIL_SALETT_SERVICE_COST_NEW_10TT_SERVICE_COST_NEWXXFIN_CWGL_INDEX_DETAIL_10XXFIN_CWGL_INDEX_DETAILXXFIN_CWYS_ODS_10XXFIN_CWYS_ODSXXFIN_SUB_DETAILS_10XXFIN_SUB_DETAILS_ALLXXFIN_TF_PROD_MANUF1_10XXFIN_TF_PROD_MANUF1XXFIN_TF_PROD_SALE1_10XXFIN_TF_PROD_SALE1W_QIS_VEHICLE_REPAIR_F_ODS_10W_QIS_VEHICLE_RE

19、PAIR_FW_QIS_VEHICLE_SALE_F_ODS_10W_QIS_VEHICLE_SALE_FXXFIN_COST_ITEMS_ODS_10XXFIN_COST_ITEMS3.2.2. 20LD_Delta功能：將10Ex抽取的文件加載到DELTA表，采用先truncate再insert的方式。實(shí)現(xiàn)方式：Datastage Job。Job NameODS TableDWXS_INT_ORDERS_ODS_20_DELTADWXS_INT_ORDERS_ODSDWSX_VAR_ONHAND_REPORT_ODS_20_DELTADWSX_VAR_ONHAND_REPORT_ODSDW

20、XS_VAR_STORE_REPORT_ODS_20_DELTADWXS_VAR_STORE_REPORT_ODSXXFIN_CWGL_INDEX_DETAIL_20_DELTAXXFIN_CWGL_INDEX_DETAILXXFIN_CWYS_ODS_20_DELTAXXFIN_CWYS_ODSXXFIN_SUB_DETAILS_20_DELTAXXFIN_SUB_DETAILS_ALLXXFIN_TF_PROD_MANUF1_20_DELTAXXFIN_TF_PROD_MANUF1XXFIN_TF_PROD_SALE1_20_DELTAXXFIN_TF_PROD_SALE1XXFIN_CO

21、ST_ITEMS_ODS_20_DELTAXXFIN_COST_ITEMS3.2.3. 30Delta_ODS功能：實(shí)現(xiàn)delta數(shù)據(jù)往ods數(shù)據(jù)的合并。對(duì)于全量數(shù)據(jù)采用truncate再insert的方式；對(duì)于增量數(shù)據(jù)，采用update+insert的方式，使用sequence中調(diào)用shell執(zhí)行(shell中嵌入sql)。實(shí)現(xiàn)方式：Datastage job。Job NameSource Table類型DWXS_INT_ORDERS_ODS_30DWXS_INT_ORDERS_ODSsequenceDWSX_VAR_ONHAND_REPORT_ODS_30DWSX_VAR_ONHAND_R

22、EPORT_ODSsequenceDWXS_VAR_STORE_REPORT_ODS_30DWXS_VAR_STORE_REPORT_ODSsequenceTT_DEALER_INFO_30TT_DEALER_INFOJobTT_RETAIL_SALE_30TT_RETAIL_SALEJobTT_SERVICE_COST_NEW_30TT_SERVICE_COST_NEWJobXXFIN_CWGL_INDEX_DETAIL_30XXFIN_CWGL_INDEX_DETAILsequenceXXFIN_CWYS_ODS_30XXFIN_CWYS_ODSsequenceXXFIN_SUB_DETA

23、ILS_30XXFIN_SUB_DETAILS_ALLsequenceXXFIN_TF_PROD_MANUF1_30XXFIN_TF_PROD_MANUF1sequenceXXFIN_TF_PROD_SALE1_30XXFIN_TF_PROD_SALE1sequenceW_QIS_VEHICLE_REPAIR_F_ODS_30W_QIS_VEHICLE_REPAIR_FJobW_QIS_VEHICLE_SALE_F_ODS_30W_QIS_VEHICLE_SALE_FJobXXFIN_COST_ITEMS_ODS_30XXFIN_COST_ITEMSsequence3.2.4. 40ODS_D

24、W功能：實(shí)現(xiàn)ODS往DW的數(shù)據(jù)處理，主要實(shí)現(xiàn)代碼轉(zhuǎn)換等工作。實(shí)現(xiàn)方式：Datastage Job。包含以下Job:TF_KPI_BUD_VAL_ERPTF_KPI_BUD_VAL_QLTYTF_KPI_ORIG_VAL_FINTF_KPI_ORIG_VAL_INVTF_KPI_ORIG_VAL_PRODTF_KPI_ORIG_VAL_QLTYTF_KPI_ORIG_VAL_SELL與initial類似，略。3.2.5. 41DW_DW功能：實(shí)現(xiàn)業(yè)務(wù)邏輯，處理一些DW內(nèi)部數(shù)據(jù)計(jì)算。實(shí)現(xiàn)方式：Datastage Job。有一個(gè)Job:TF_KPI_ORIG_VAL_FIN_BAL_41_DELTA

25、與initial類似，略。3.3. 通用以下ETL過(guò)程都是數(shù)據(jù)庫(kù)函數(shù)，initial和regular共用同一個(gè)函數(shù)，使用參數(shù)來(lái)控制處理數(shù)據(jù)的時(shí)間范圍。3.3.1. 50DW_DM功能：實(shí)現(xiàn)DW到DM業(yè)務(wù)邏輯，計(jì)算出KPI。實(shí)現(xiàn)方式：數(shù)據(jù)庫(kù)函數(shù)，調(diào)用時(shí)使用datastage sequence調(diào)用操作系統(tǒng)命令。3.3.1.1. F_DM_TF_KPI_ORIG_VAL_PL07單獨(dú)計(jì)算材料成本。源表ODS.XXFIN_COST_ITEMS_ODS，取單車材料成本ODS.XXFIN_TF_PROD_MANUF1，取產(chǎn)量代碼轉(zhuǎn)換DM.TR_ERP_ADM_ORG取管理組織DM.TD_PROD_DET取

26、車型DM.TR_ADM_LEGAL_ORG取EN組織目標(biāo)表DM.TF_KPI_ORIG_VAL注意事項(xiàng)每年的成本取法不一樣，因此需要每年修改程序。兩個(gè)月份參數(shù)必須是同一年。3.3.1.2. F_DM_TF_KPI_ORIG_VAL_BS資產(chǎn)負(fù)債表科目計(jì)算。源表DW.TF_KPI_ORIG_VAL_FIN，取科目數(shù)據(jù)代碼轉(zhuǎn)換DM.TR_SBJ_BS_KPI，取財(cái)務(wù)科目與資產(chǎn)負(fù)債表科目對(duì)應(yīng)關(guān)系目標(biāo)表DM.TF_KPI_ORIG_VAL注意事項(xiàng)還單獨(dú)計(jì)算了產(chǎn)品相關(guān)固定資產(chǎn)DP0101、非產(chǎn)品相關(guān)固定資產(chǎn)DP0102、現(xiàn)金回款CA0209、回款總額CA0207、借款PC020329和還款PC02035

27、23.3.1.3. F_DM_TF_KPI_ORIG_VAL_DMSDMS數(shù)據(jù)相關(guān)KPI計(jì)算，包含零售量、走保費(fèi)、材料費(fèi)、工時(shí)費(fèi)、救急費(fèi)、運(yùn)輸費(fèi)、服務(wù)活動(dòng)費(fèi)、特殊費(fèi)用、審減金額、累計(jì)維修數(shù)、走保車輛數(shù)。源表ODS.TT_RETAIL_SALE，取零售量ODS.TT_SERVICE_COST_NEW，去其他指標(biāo)代碼轉(zhuǎn)換DM.TD_PROD_DET，取車型DM.TR_ADM_LEGAL_ORG，去組織目標(biāo)表DM.TF_KPI_ORIG_VAL3.3.1.4. F_DM_TF_KPI_ORIG_VAL計(jì)算所有其他指標(biāo)。源表DW.TF_KPI_ORIG_VAL_FIN_BAL，取科余額數(shù)據(jù)，以及凈銷售

28、收入DW.TF_KPI_ORIG_VAL_FIN，取科目數(shù)據(jù)DW.TF_KPI_ORIG_VAL_PROD，取產(chǎn)量DW.TF_KPI_ORIG_VAL_SELL，取銷量和凈銷售收入DW.TF_KPI_ORIG_VAL_INV，取庫(kù)存DW.TF_KPI_ORIG_VAL_DFS，取DFS（DFS數(shù)據(jù)已經(jīng)改為補(bǔ)錄）DW.TF_KPI_ORIG_VAL_QLTY，取質(zhì)量成本ods.xxfin_cwgl_index_detail，補(bǔ)錄數(shù)據(jù)代碼轉(zhuǎn)換dm.tr_adm_legal_org，補(bǔ)錄數(shù)據(jù)組織轉(zhuǎn)換目標(biāo)表DM.TF_KPI_ORIG_VAL注意事項(xiàng)1、 凈銷售收入從兩部分取2、 有些kpi在DW已經(jīng)

29、轉(zhuǎn)換為BI指標(biāo)，有些BI指標(biāo)需要從科目算3、 物流成本按照業(yè)務(wù)需求特殊計(jì)算3.3.1.5. F_DM_TF_KPI_BUD_ORIG_VAL預(yù)算數(shù)據(jù)處理。源表DW.TF_KPI_BUD_VAL_ERP，取財(cái)務(wù)科目數(shù)據(jù)ods.xxfin_cwgl_index_detail，補(bǔ)錄數(shù)據(jù)ods.tf_kpi_bud_val，取模具攤銷、房產(chǎn)稅、運(yùn)行費(fèi)支出、研發(fā)人工成本、物流成本代碼轉(zhuǎn)換dm.tr_adm_legal_org，補(bǔ)錄數(shù)據(jù)組織轉(zhuǎn)換目標(biāo)表DM.TF_KPI_ORIG_VAL注意事項(xiàng)4、 凈銷售收入從兩部分取5、 有些kpi在DW已經(jīng)轉(zhuǎn)換為BI指標(biāo)，有些BI指標(biāo)需要從科目算6、 物流成本按照業(yè)務(wù)

30、需求特殊計(jì)算3.3.1. 60DM_DM功能：實(shí)現(xiàn)DM內(nèi)部計(jì)算，包括分?jǐn)偤喜⑦壿嫞瑘?bào)表基表數(shù)據(jù)生成等。實(shí)現(xiàn)方式：數(shù)據(jù)庫(kù)函數(shù)，調(diào)用時(shí)使用datastage sequence調(diào)用操作系統(tǒng)命令。3.3.1.1. F_DM_TF_KPI_SHARE_VAL_PL01PL01指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)合并層面不需要發(fā)動(dòng)機(jī)數(shù)據(jù)3.3.1.2. F_DM_TF_KPI_SHARE_VAL_PL02PL02指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF

31、_KPI_SHARE_VAL注意事項(xiàng)合并層面不需要發(fā)動(dòng)機(jī)數(shù)據(jù)3.3.1.3. F_DM_TF_KPI_SHARE_VAL_PL04（暫不需要）PL04指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。原則上PL04來(lái)源于補(bǔ)錄平臺(tái)，不需要單獨(dú)計(jì)算。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)合并層面不需要發(fā)動(dòng)機(jī)數(shù)據(jù)3.3.1.4. F_DM_TF_KPI_SHARE_VAL_PL05（暫不需要）PL05%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。原則上PL05%來(lái)源于補(bǔ)錄平臺(tái)，不需要單獨(dú)計(jì)算。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI

32、_SHARE_VAL注意事項(xiàng)合并層面不需要發(fā)動(dòng)機(jī)數(shù)據(jù)3.3.1.5. F_DM_TF_KPI_SHARE_VAL_PL14PL14指標(biāo)計(jì)算，實(shí)現(xiàn)按產(chǎn)品分?jǐn)?、組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)按產(chǎn)量分?jǐn)?.3.1.6. F_DM_TF_KPI_SHARE_VAL_PL28PL28%指標(biāo)計(jì)算，實(shí)現(xiàn)按產(chǎn)品分?jǐn)?、組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)按凈銷售收入分?jǐn)?.3.1.7. F_DM_TF_KPI_SHARE_VAL_PL06P

33、L06指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)3.3.1.8. F_DM_TF_KPI_SHARE_VAL_PL07PL07%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)現(xiàn)有邏輯使用產(chǎn)量*單車材料成本，使用的是標(biāo)準(zhǔn)成本。后續(xù)如果改用實(shí)際成本，程序需要修改。有往業(yè)務(wù)類型的分?jǐn)?，通過(guò)凈銷售收入分?jǐn)偂?.3.1.9. F_DM_TF_KPI_SHARE_VAL_PL15PL15%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM

34、.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)使用公式分?jǐn)?，因此需要工時(shí)數(shù)據(jù)。3.3.1.10. F_DM_TF_KPI_SHARE_VAL_PL11PL11%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)使用凈銷售收入分?jǐn)偂?.3.1.11. F_DM_TF_KPI_SHARE_VAL_PL16PL16%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)使用凈銷售收入分?jǐn)偂?

35、.3.1.12. F_DM_TF_KPI_SHARE_VAL_PL17PL17%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)使用凈銷售收入分?jǐn)偂?.3.1.13. F_DM_TF_KPI_SHARE_VAL_PL19PL19%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)使用凈銷售收入分?jǐn)偂?.3.1.14. F_DM_TF_KPI_SHARE_VAL_PL27PL27%指標(biāo)計(jì)算，實(shí)現(xiàn)組織上的合并邏輯。源表DM.TF_

36、KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)使用凈銷售收入分?jǐn)偂?.3.1.15. F_DM_TF_KPI_SHARE_VAL_PL29PL29指標(biāo)計(jì)算，通過(guò)其他指標(biāo)計(jì)算獲取，因此需要其他指標(biāo)預(yù)先算好。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)PL29=PL06-PL07%-(PL10+PC020112+PC020113)-PL15%-PL16%-PL17%-PL19%-PL28%+PC0104+PC0103+PL2701-PL2702+PC0117-PC01183.3.1.16. F_DM_

37、TF_KPI_SHARE_VAL_PL30PL30指標(biāo)計(jì)算，通過(guò)其他指標(biāo)計(jì)算獲取，因此需要其他指標(biāo)預(yù)先算好。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)PL30=PL29* OT07OT07是補(bǔ)錄數(shù)據(jù)3.3.1.17. F_DM_TF_KPI_SHARE_VAL_PL31PL31指標(biāo)計(jì)算，通過(guò)其他指標(biāo)計(jì)算獲取，因此需要其他指標(biāo)預(yù)先算好。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)PL30=PL29-PL29* OT07OT07是補(bǔ)錄數(shù)據(jù)3.3.1.18. F_DM_TF_KPI_

38、SHARE_VAL_LASTKPI其他指標(biāo)計(jì)算。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)參數(shù)選擇ALL時(shí)，將處理所有未經(jīng)過(guò)分?jǐn)偤喜⒌乃兄笜?biāo)；也可以使用參數(shù)控制，處理一個(gè)或一批指標(biāo)，例如傳入BS%或 BS0101033.3.1.19. F_DM_TF_KPI_SHARE_VAL_ADM組織轉(zhuǎn)換。將EN組織轉(zhuǎn)換為AM組織。源表DM.TF_KPI_ORIG_VAL代碼轉(zhuǎn)換關(guān)聯(lián)DM.TR_LEGAL_ADM_ORG表。目標(biāo)表DM.TF_KPI_SHARE_VAL注意事項(xiàng)參數(shù)選擇ALL時(shí)，將處理所有未經(jīng)過(guò)分?jǐn)偤喜⒌乃兄笜?biāo)；也可以使用參數(shù)控

39、制，處理一個(gè)或一批指標(biāo)，例如傳入BS%或 BS0101033.3.1.20. F_DM_TF_ADM_EXP管理費(fèi)用報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_ADM_EXP指標(biāo)損益類科目管理費(fèi)用PL17%單車管理費(fèi)用PC020417管理費(fèi)用占凈銷售收入比PC020326行政性規(guī)費(fèi)PC020325管理費(fèi)用 PC020324注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。當(dāng)前報(bào)表不需要分?jǐn)倲?shù)據(jù)，因此實(shí)際報(bào)表數(shù)據(jù)不從DM.TF_ADM_EXP來(lái)，這個(gè)表的數(shù)據(jù)為首頁(yè)指標(biāo)展現(xiàn)做準(zhǔn)備。3.3.1.21. F_DM_TF_OPER_PFT經(jīng)營(yíng)性利潤(rùn)報(bào)表

40、數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_OPER_PFT指標(biāo)經(jīng)營(yíng)性利潤(rùn)PC0101=PL06+PC0117-PC0118-PC020203-PL11-PL14-PC020209-PC020304-PC020324-PC020327凈利潤(rùn)PC0112=PL31利潤(rùn)總額PC0109=PL29邊際利潤(rùn)PC020118=PL06-PC020203-PL11-PL15%(變動(dòng))-PL16%(變動(dòng))-PL17%(變動(dòng))-PL19%(變動(dòng))材料成本PC020203=PL07%加工成本PC020209=PL15%銷售費(fèi)用PC02030

41、4=PL16%管理費(fèi)用PC020324=PL17%財(cái)務(wù)費(fèi)用PC020327=PL19%毛利PC020121=PL06-PC020203-PC020209-PL11凈資產(chǎn)收益率PC0116=PC0112*12/AVG(DP0103-DP0204)單車凈利率PC020421=PC0112/PC020101/PC020402單車毛利率PC020422=PC020122/PC020402單車凈利潤(rùn)PC020424=PC0112/PC020101單車毛利潤(rùn)PC020122=PC020121/PC020101凈利率PC0115=單車凈利率PC020421毛利率PC020123=單車毛利率PC020422注

42、意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.22. F_DM_TF_MAT_COST材料成本報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_MAT_COST指標(biāo)PC020203 材料成本PC020403 PC020203/PL02單車材料成本PC020208 PC020203/PL06 材料成本占凈銷售收入比注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.23. F_DM_TF_CONV_COST加工成本報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_CONV_CO

43、ST指標(biāo)PL15%加工成本,分科目，需要全年預(yù)算PC020209加工成本KPI，需要全年預(yù)算PC020211加工成本與凈銷售收入比PC020405單車加工成本PC020406單車人工費(fèi)用PC020407單車燃動(dòng)費(fèi)PC020408單車折舊費(fèi)PC020409單車專用工裝PC020410單車廢品損失PC020411單車制造費(fèi)用PL01產(chǎn)量，需要全年預(yù)算注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.24. F_DM_TF_PROD_MKT產(chǎn)銷量報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_PROD_MKT指標(biāo)PL01產(chǎn)量，需要全年預(yù)算

44、PL02批售量，需要全年預(yù)算DC0206市場(chǎng)占有率DP0110社會(huì)庫(kù)存OC0205庫(kù)銷比OC0201產(chǎn)銷比PC020103銷量增長(zhǎng)率注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.25. F_DM_TF_FIN_EXP財(cái)務(wù)費(fèi)用報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM.TF_FIN_EXP指標(biāo)損益類科目財(cái)務(wù)費(fèi)用PL19%財(cái)務(wù)費(fèi)用 PC020327單車財(cái)務(wù)費(fèi)用PC020418財(cái)務(wù)費(fèi)用占凈銷售收入比PC020339債券發(fā)行規(guī)模 PC020330債券發(fā)行利率 PC020331借款規(guī)模 PC020332=短期借款+長(zhǎng)期借款,BS0201010

45、1+BS02010201借款 PC020329還款 PC020352借款利率 PC020333-不需要注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。當(dāng)前報(bào)表不需要分?jǐn)倲?shù)據(jù)，因此實(shí)際報(bào)表數(shù)據(jù)不從DM.TF_ADM_EXP來(lái)，這個(gè)表的數(shù)據(jù)為首頁(yè)指標(biāo)展現(xiàn)做準(zhǔn)備。3.3.1.26. F_DM_TF_ASSET_INC_CAP資產(chǎn)效率報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_ASSET_INC_CAP指標(biāo)BS01%資產(chǎn)總額，分科目BS0101%流動(dòng)資產(chǎn)，分科目BS0102%非流動(dòng)資產(chǎn)，分科目PC0301資產(chǎn)創(chuàng)收能力PL06/AVG(BS01%)

46、PC0302產(chǎn)品相關(guān)固定資產(chǎn)創(chuàng)收能力PL06/DP0101PC0303非產(chǎn)品相關(guān)固定資產(chǎn)創(chuàng)收能力PL06/DP0102CA0101營(yíng)運(yùn)資金B(yǎng)S0101%-BS020101%DC0101總資產(chǎn)增長(zhǎng)率BS01%/BS01%(本年初)-1DC0102流動(dòng)資產(chǎn)增長(zhǎng)率BS0101%/BS0101%(本年初)-1DC0103非流動(dòng)資產(chǎn)增長(zhǎng)率BS0102%/BS0102%(本年初)-1OC0203產(chǎn)能利用率PL01/OC0202不需要到產(chǎn)品OC0101流動(dòng)資產(chǎn)周轉(zhuǎn)率PL06/AVG(BS010109%+BS010104%+BS010105%+BS010108%)(存貨+應(yīng)收賬款+預(yù)付款項(xiàng)+其他應(yīng)收款)OC0

47、102非流動(dòng)資產(chǎn)周轉(zhuǎn)率PL06/AVG(BS0102%)OC0103應(yīng)收帳款周轉(zhuǎn)率PL06/AVG(BS010104)OC0104存貨周轉(zhuǎn)率(PL07%+PL15%)/AVG(DP0109)OC0105產(chǎn)成品周轉(zhuǎn)率(PL07%+PL15%)/AVG(BS01010902)OC0107應(yīng)收賬款周轉(zhuǎn)天數(shù)360/OC0103OC0108存貨周轉(zhuǎn)天數(shù)360/OC0104OC0110產(chǎn)成品周轉(zhuǎn)天數(shù)360/OC0105注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.27. F_DM_TF_OPER_NCF現(xiàn)金流量報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目

48、標(biāo)表DM. TF_OPER_NCF指標(biāo)經(jīng)營(yíng)活動(dòng)現(xiàn)金凈流量CA0202SUM(CF0101%)-SUM(CF0102%)+BS010103(應(yīng)收票據(jù)，期末-期初)投資活動(dòng)現(xiàn)金凈流量CA0203SUM(CF0201%)-SUM(CF0202%)籌資活動(dòng)現(xiàn)金凈流量CA0204 SUM(CF0301%)-SUM(CF0302%)現(xiàn)金凈流量總額CA0201 =CA0202+CA0203+CA0204總資產(chǎn)創(chuàng)現(xiàn)能力CA0205CA0202/SUM(BS01%)銷售創(chuàng)現(xiàn)能力CA0206 CA0202/SUM(PL06%)回款率CA0208CA0207/1.17/SUM(PL06%)=CA0207/SUM(P

49、L06%)*1.17CA0207-手工現(xiàn)款率CA0210CA0209/CA0207CA0209、CA0207-手工現(xiàn)金安全余量CA0102手工資金支持CA0213CA0211+CA0212原始資金支持占凈銷售收入比CA0214CA0213/SUM(PL06%)個(gè)人信貸零售量占零售比重CA0217CA0216/SUM(PL03%)CA0216-手工現(xiàn)金流量與當(dāng)期債務(wù)比CA0103CA0202/SUM(BS020101%)注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.28. F_DM_TF_MGN_PFT邊際利潤(rùn)報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代

50、碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_ TF_MGN_PFT指標(biāo)經(jīng)營(yíng)活動(dòng)現(xiàn)金凈流量CA0202SUM(CF0101%)-SUM(CF0102%)+BS010103(應(yīng)收票據(jù)，期末-期初)投資活動(dòng)現(xiàn)金凈流量CA0203SUM(CF0201%)-SUM(CF0202%)籌資活動(dòng)現(xiàn)金凈流量CA0204 SUM(CF0301%)-SUM(CF0302%)現(xiàn)金凈流量總額CA0201 =CA0202+CA0203+CA0204總資產(chǎn)創(chuàng)現(xiàn)能力CA0205CA0202/SUM(BS01%)銷售創(chuàng)現(xiàn)能力CA0206 CA0202/SUM(PL06%)回款率CA0208CA0207/1.17/SUM(PL06%)=CA02

51、07/SUM(PL06%)*1.17CA0207-手工現(xiàn)款率CA0210CA0209/CA0207CA0209、CA0207-手工現(xiàn)金安全余量CA0102手工資金支持CA0213CA0211+CA0212原始資金支持占凈銷售收入比CA0214CA0213/SUM(PL06%)個(gè)人信貸零售量占零售比重CA0217CA0216/SUM(PL03%)CA0216-手工現(xiàn)金流量與當(dāng)期債務(wù)比CA0103CA0202/SUM(BS020101%)注意事項(xiàng)每次計(jì)算一個(gè)月數(shù)據(jù)。3.3.1.29. F_DM_TF_SELL_EXP銷售費(fèi)用報(bào)表數(shù)據(jù)準(zhǔn)備。源表DM.TF_KPI_SHARE_VALDM.TF_KPI_BUD_VAL代碼轉(zhuǎn)換無(wú)目標(biāo)表DM. TF_ TF_SELL_EXP指標(biāo)銷售費(fèi)用PL16%銷售費(fèi)用PC020304單車銷售費(fèi)用PC020413銷售費(fèi)用占凈銷售收入比PC020305前線業(yè)務(wù)PC020306專項(xiàng)業(yè)務(wù)PC020308職能管理業(yè)務(wù)PC020310前線業(yè)務(wù)占凈銷售