中國聯(lián)通經(jīng)營分析系統(tǒng) 數(shù)據(jù)模型培訓

1、234STG明細數(shù)據(jù)層(DWD)輕度匯總層(DWA)衍生數(shù)據(jù)產(chǎn)品視圖渠道視圖資源視圖DW匯總數(shù)據(jù)業(yè)務使用帳務結(jié)算客服營銷資源客戶視圖合作伙伴視圖CRM1BillingPRMSETT炫鈴平臺中央音樂平臺WAP網(wǎng)關(guān)?？蛻粲虍a(chǎn)品域帳務域 市場營銷域業(yè)務使用域 合作伙伴域 客服域地域域客服資源域DM中度匯總發(fā)展類收入類使用類服務類結(jié)算類財務類本地KPI指標指標庫指標數(shù)據(jù)本地報表數(shù)據(jù)集團報表數(shù)據(jù)報表數(shù)據(jù)專題數(shù)據(jù)集市地市數(shù)據(jù)集市數(shù)據(jù)集市集團KPI指標CUBE數(shù)據(jù)OLAP數(shù)據(jù)部門數(shù)據(jù)集市和生產(chǎn)系統(tǒng)一致明細級數(shù)據(jù)，EDM落地，關(guān)鍵統(tǒng)計口徑下移不跨域的到USER_ID的輕度匯總，提高性能形成統(tǒng)一客戶、統(tǒng)一產(chǎn)品、

2、統(tǒng)一渠道的360度視圖，支持深層分析直接支持不同應用不跨域的、不保留USER_ID的匯總，常用維度、指標支持6數(shù)據(jù)源數(shù)據(jù)源數(shù)據(jù)庫數(shù)據(jù)庫Oracle系統(tǒng)系統(tǒng) CRM（CRM1、CRM2） 帳務 計費 結(jié)算 PRM 結(jié)算7STAGESTAGE層層作用作用 提供業(yè)務系統(tǒng)數(shù)據(jù)文件的臨時存儲 數(shù)據(jù)稽核、數(shù)據(jù)質(zhì)量保證 屏蔽對業(yè)務系統(tǒng)的干擾 屏蔽數(shù)據(jù)源的差異主題主題 按照業(yè)務系統(tǒng)的數(shù)據(jù)模型組織數(shù)據(jù)模型數(shù)據(jù)模型 與業(yè)務系統(tǒng)一致數(shù)據(jù)存儲粒度數(shù)據(jù)存儲粒度 存儲詳單、客戶、帳務資料等細節(jié)數(shù)據(jù)的原始粒度數(shù)據(jù)存儲周期數(shù)據(jù)存儲周期 臨時性模型增加原則模型增加原則 與生產(chǎn)系統(tǒng)表結(jié)構(gòu)一致 表名以STG_XXXSTG_XXX，

3、XXX重新進行命名 數(shù)據(jù)類型轉(zhuǎn)化（VARCHAR、DATE）注意注意 增量/全量方式8DWDDWD層層作用作用 提供BSS系統(tǒng)細節(jié)數(shù)據(jù)的長期沉淀 為未來分析類需求的擴展提供歷史數(shù)據(jù)支撐 支撐輕度綜合層數(shù)據(jù)生成主題主題 按EDM模型組織數(shù)據(jù)模型數(shù)據(jù)模型 3NF,與企業(yè)級數(shù)據(jù)模型一致數(shù)據(jù)存儲粒度數(shù)據(jù)存儲粒度 存儲詳單、客戶在、帳務資料等細節(jié)數(shù)據(jù)的原始粒度數(shù)據(jù)存儲周期數(shù)據(jù)存儲周期 長期保留，大于12個月 詳單類數(shù)據(jù)單獨考慮模型增加原則模型增加原則 統(tǒng)一數(shù)據(jù)字典（表名、字段名、數(shù)據(jù)類型、域等） 表名以DWD_XXXDWD_XXX，XXX重新進行命名，代表明確的業(yè)務意義（特殊的DIMDIM、CFGCFG

4、、MONMON等）注意注意 編碼轉(zhuǎn)換、單位統(tǒng)一、相同含義的字段名稱統(tǒng)一編碼轉(zhuǎn)換、單位統(tǒng)一、相同含義的字段名稱統(tǒng)一9DWDW層層作用作用 擴展BSS核心業(yè)務實體（個人客戶、集團客戶集團客戶、訂購實例、產(chǎn)品、渠道渠道等）的衍生信息（行為、擴展屬性） 數(shù)據(jù)預處理，提高性能 支撐專題分析和數(shù)據(jù)挖掘 同CRM、Billing互動，形成閉環(huán)主題主題 按主題（實體）組織按主題（實體）組織數(shù)據(jù)模型數(shù)據(jù)模型 反范式設計（寬表、冗余、派生、標志位前移寬表、冗余、派生、標志位前移）數(shù)據(jù)存儲粒度數(shù)據(jù)存儲粒度 對客戶、訂購實例、渠道、產(chǎn)品等數(shù)據(jù)的輕度加工數(shù)據(jù)存儲周期數(shù)據(jù)存儲周期 長期保留模型增加原則模型增加原則 核心業(yè)

5、務實體的把握 表名以DW_DW_實體名實體名_XXX_XXX，XXX重新進行命名注意注意 10DMDM層層作用作用 面向分析類應用（報表、OLAP、KPI、專題等）所構(gòu)建的數(shù)據(jù)存儲 為主題分析提供數(shù)據(jù) 為報表和指標體系提供數(shù)據(jù)支撐 支持專題分析（注：根據(jù)專題所需數(shù)據(jù)粒度的不同，可以分別來自DW層和輕度綜合層。）主題主題 按分析類應用主題組織按分析類應用主題組織數(shù)據(jù)模型數(shù)據(jù)模型 多維模型（維度、粒度選擇）數(shù)據(jù)存儲粒度數(shù)據(jù)存儲粒度 中度、高度匯總數(shù)據(jù)數(shù)據(jù)存儲周期數(shù)據(jù)存儲周期 視應用需求而定模型增加原則模型增加原則 需求歸并、性能考慮、分表策略選擇需求歸并、性能考慮、分表策略選擇 表名以DM_實體名

6、_XXX，XXX重新進行命名。REP_XXXREP_XXX注意注意 需求梳理、歸并和控制，性能考慮和分表策略選擇需求梳理、歸并和控制，性能考慮和分表策略選擇11說明說明ETL：EXP由相應的業(yè)務源系統(tǒng)將數(shù)據(jù)卸載成相應的文本文件，存放相應的臨時文件存儲區(qū)。文件格式和約定遵從雙方約定的規(guī)則。對于BILLING系統(tǒng)的二批話單，入庫時將文件放在一個目錄下，有經(jīng)營分析系統(tǒng)去取，然后加載至STAGE層，并調(diào)用后續(xù)的數(shù)據(jù)處理過程。ETL：FTP有經(jīng)營分析系統(tǒng)到業(yè)務系統(tǒng)制定的文件存儲目錄，將相應的文件FTP至經(jīng)營分析系統(tǒng)。判定文件完成情況，有雙方約定來確定?？梢栽O定是否進行文件合法性校驗ETL：LOAD將ET

7、L轉(zhuǎn)變?yōu)镋LT，完成生產(chǎn)系統(tǒng)的數(shù)據(jù)加載至經(jīng)營分析系統(tǒng)STAGE層，為后續(xù)的數(shù)據(jù)處理做準備。ETL：TRANSFORM1完成編碼統(tǒng)一轉(zhuǎn)換。完成數(shù)據(jù)模型轉(zhuǎn)換。適度的數(shù)據(jù)冗余（打上一些標簽等）ETL：TRANSFORM2核心業(yè)務實體的行為屬性擴展處理。ETL：GROUP將數(shù)據(jù)轉(zhuǎn)化為按照星型模型組織的數(shù)據(jù)。12131551768485100109110發(fā)展用戶數(shù)(戶) 156日發(fā)展用戶數(shù)(戶) 186發(fā)展用戶數(shù)(戶)網(wǎng)上用戶數(shù)(戶) 156網(wǎng)上用戶數(shù)(戶) 186網(wǎng)上用戶數(shù)(戶)活躍用戶數(shù)(戶)離網(wǎng)用戶數(shù)(戶)凈增網(wǎng)上用戶數(shù)(戶)通話用戶數(shù)(戶)累計活躍用戶數(shù)(戶) GSM累計活躍用戶數(shù)(戶)累計通話

8、用戶數(shù)(戶) GSM累計通話用戶數(shù)(戶)停機30到60天用戶數(shù)(戶)停機60到90天用戶數(shù)(戶)開機數(shù)(戶)炫鈴新增用戶數(shù)(戶)炫鈴網(wǎng)上用戶數(shù)(戶)集團直銷渠道發(fā)展用戶數(shù)(戶)集團社會直銷（積分）渠道發(fā)展用戶數(shù)(戶)集團自有渠道新增移動用戶(戶)集團社會直銷（計件）渠道發(fā)展用戶數(shù)(戶)通話次數(shù)(萬次) 本地通話次數(shù)(次) 本地區(qū)內(nèi)通話次數(shù)(次) 本地長途通話次數(shù)(次) 漫游通話次數(shù)(次) 省內(nèi)漫游通話次數(shù)(次) 省際漫游通話次數(shù)(次) 港澳臺漫游通話次數(shù)(次) 國際漫游通話次數(shù)(次)虛擬網(wǎng)通話次數(shù)(次)通話時長(萬分鐘) 本地通話時長(分鐘) 本地區(qū)內(nèi)通話時長(分鐘) 本地長途通話時長(分鐘)

9、 漫游通話時長(分鐘) 省內(nèi)漫游通話時長(分鐘) 省際漫游通話時長(分鐘) 港澳臺漫游通話時長(分鐘) 國際漫游通話時長(分鐘)虛擬網(wǎng)通話時長(分鐘)計費時長(萬分鐘) 被叫通話計費時長(分鐘) 主叫通話計費時長(分鐘) 本地通話計費時長(分鐘) 本地區(qū)內(nèi)通話計費時長(分鐘) 本地長途通話計費時長(分鐘) 漫游通話計費時長(分鐘) 省內(nèi)漫游通話計費時長(分鐘) 省際漫游通話計費時長(分鐘) 港澳臺漫游通話計費時長(分鐘) 國際漫游通話計費時長(分鐘)虛擬網(wǎng)通話計費時長(分鐘)短信次數(shù)總計(萬次) 聯(lián)通在信次數(shù)(萬次) 短信點對點次數(shù)(萬次) 短信網(wǎng)內(nèi)點對點次數(shù)(萬次) 短信網(wǎng)間互通次數(shù)(萬次)

10、 短信電信互通次數(shù)(萬次) 短信移動互通次數(shù)(萬次) 短信國際互通次數(shù)(萬次) 短信其它次數(shù)(萬次)短信優(yōu)惠前收入總計(萬元) 聯(lián)通在信優(yōu)惠前收入(元) 短信點對點優(yōu)惠前收入(元) 短信網(wǎng)內(nèi)點對點優(yōu)惠前收入(元) 短信網(wǎng)間互通優(yōu)惠前收入(元) 短信移動互通優(yōu)惠前收入(元) 短信電信互通優(yōu)惠前收入(元) 短信國際互通優(yōu)惠前收入(元) 短信其它優(yōu)惠前收入(元)短信優(yōu)惠后收入總計(萬元) 聯(lián)通在信優(yōu)惠后收入(元) 短信點對點優(yōu)惠后收入(元) 短信網(wǎng)內(nèi)點對點優(yōu)惠后收入(元) 短信網(wǎng)間互通優(yōu)惠后收入(元) 短信移動互通優(yōu)惠后收入(元) 短信電信互通優(yōu)惠后收入(元) 短信國際互通優(yōu)惠后收入(元) 短信其它

11、優(yōu)惠后收入(元)炫鈴優(yōu)惠前收入(萬元)炫鈴優(yōu)惠后收入(萬元)GPRS業(yè)務優(yōu)惠前總收入(元)GPRS業(yè)務優(yōu)惠后總收入(元)GPRS業(yè)務優(yōu)惠前總收入(不含彩信,元)GPRS業(yè)務優(yōu)惠后總收入(不含彩信,元)GPRS業(yè)務彩信優(yōu)惠后收入(元)GPRS業(yè)務彩信優(yōu)惠前收入(元)3G增值業(yè)務費收入（元）總收入(萬元) 月租費(萬元) 基本月租費(元) VPN月租費(元) 特服月租費(元) SCP月租費（元） 通話費(萬元） 漫游通話費(元) 港澳臺漫游通話費(元) 省內(nèi)漫游通話費(元) 省際漫游通話費(元) 國際漫游通話費(元) 本地通話費(元) 本地長途通話費(元) 本地長途基本費(元) 本地長途長途費(元

12、) 本地區(qū)內(nèi)通話費(元) 本地區(qū)內(nèi)主叫通話費(元) 本地區(qū)內(nèi)被叫通話費(元) 虛擬網(wǎng)通話費(元) 短信費(萬元) 增值業(yè)務費收入(萬元) 增值業(yè)務流量費收入(元)綜合優(yōu)惠費(元) 語音優(yōu)惠費（元） 本地通話優(yōu)惠費（元） 本地長途通話優(yōu)惠費（元） 本地非長途通話優(yōu)惠費（元） 漫游通話優(yōu)惠費（元） 省內(nèi)漫游通話優(yōu)惠費（元） 省際漫游通話優(yōu)惠費（元） 國際漫游通話優(yōu)惠費（元） 港澳臺漫游通話優(yōu)惠費（元） 增值優(yōu)惠費（元） 短信優(yōu)惠費（元） 彩信優(yōu)惠費（元） GPRS（不包括彩信）優(yōu)惠費（元）本期發(fā)展用戶數(shù)(戶)本期凈增用戶數(shù)(戶)本期出帳用戶數(shù)(戶)本期新增出帳用戶數(shù)(戶)本期新增離網(wǎng)用戶數(shù)(戶)本期網(wǎng)上用戶數(shù)(戶)本期活躍用戶數(shù)(戶)本期通話用戶數(shù)(戶)本期新增被動停機等于三個月用戶數(shù)(戶)流失用戶數(shù)流失用戶數(shù)( (戶戶) )本期總通話次數(shù)(次)本期總通話時長(分鐘)本期總計費時長(分鐘)本期發(fā)展用戶計費時長(分鐘)本期發(fā)展用戶通