NMCC經(jīng)分20系統(tǒng)總體設(shè)計(jì)說明書-數(shù)據(jù)質(zhì)量

1、內(nèi)蒙古移動(dòng)經(jīng)營分析系統(tǒng)2.0集團(tuán)客戶系統(tǒng)總總體設(shè)計(jì)說明明書2008年100月本文檔及其所含含信息為機(jī)密密材料并且由中國移動(dòng)動(dòng)集團(tuán)公司和和NCR（中國國）有限公司司共同擁有。本文檔中的任何何部分未經(jīng)中中國移動(dòng)集團(tuán)團(tuán)和NCR（中國國）有限公司司書面授權(quán)，不得將材料泄露露給第三方,也不得以任任何手段、任任何形式進(jìn)行行復(fù)制與傳播播Copyrigght 2006 NCR版權(quán)保留所有的權(quán)利利目 錄sTOC o 1-3 h z HYPERLINK l _Toc212004220 1綜述33 HYPERLINK l _Toc212004221 1.1編寫目目的3 HYPERLINK l _Toc2120042

2、22 1.2讀者對對象3 HYPERLINK l _Toc212004223 1.3參考資資料3 TOC o 1-3 h z HYPERLINK l _Toc212004220 2系統(tǒng)總體體架構(gòu)4 HYPERLINK l _Toc212004221 2.1數(shù)據(jù)集集市數(shù)據(jù)質(zhì)量量管理方案4 HYPERLINK l _Toc212004222 2.2其他模模塊說明4 HYPERLINK l _Toc212004223 2.3數(shù)據(jù)質(zhì)質(zhì)量的交互方方式4 HYPERLINK l _Toc212004223 2.4FTPP的輪詢方式式5 HYPERLINK l _Toc212004220 3系統(tǒng)軟硬件件總體

3、結(jié)構(gòu) PAGEREF _Toc212004220 h 5 HYPERLINK l _Toc212004221 3.1硬件技術(shù)結(jié)結(jié)構(gòu) PAGEREF _Toc212004221 h 5 HYPERLINK l _Toc212004222 3.2軟件技技術(shù)結(jié)構(gòu) PAGEREF _Toc212004222 h 6TOC o 1-3 h z HYPERLINK l _Toc212004220 4技術(shù)設(shè)計(jì) PAGEREF _Toc212004220 h 5 HYPERLINK l _Toc212004221 4.1術(shù)術(shù)語說明 PAGEREF _Toc212004221 h 5 HYPERLINK l _

4、Toc212004222 4.2一般結(jié)結(jié)構(gòu)10 HYPERLINK l _Toc212004223 4.3建議的的結(jié)構(gòu)11 HYPERLINK l _Toc212004220 5數(shù)據(jù)質(zhì)量檢檢查互交格式式定義14 HYPERLINK l _Toc212004220 6平臺設(shè)計(jì)14 HYPERLINK l _Toc2120042221 6.1設(shè)計(jì)原則1 PAGEREF _Toc212004221 h 5 HYPERLINK l _Toc212004222 6.2系統(tǒng)數(shù)數(shù)據(jù)接口15 HYPERLINK l _Toc212004223 6.3數(shù)據(jù)轉(zhuǎn)轉(zhuǎn)換17 HYPERLINK l _Toc212004

5、223 6.4數(shù)據(jù)加加載17 HYPERLINK l _Toc212004220 7數(shù)據(jù)模型17 HYPERLINK l _Toc21200042211 7.1邏輯數(shù)據(jù)模模型17 HYPERLINK l _Toc212004222 7.2物理數(shù)數(shù)據(jù)模型17 HYPERLINK l _Toc212004223 7.3數(shù)據(jù)模模型管理18綜述編寫目的編寫本功能規(guī)格格說明書的目目的，主要是是對內(nèi)蒙移動(dòng)數(shù)據(jù)質(zhì)量量管理系統(tǒng)建建設(shè)項(xiàng)目的總總體設(shè)計(jì)思想想、功能的明明確闡述；使使用戶和軟件件開發(fā)者雙方方對數(shù)據(jù)質(zhì)量量管理系統(tǒng)的的功能點(diǎn)有一一個(gè)共同的理理解，為開展展數(shù)據(jù)質(zhì)量管管理系統(tǒng)的開開發(fā)工作提供供指導(dǎo)，保證證系

6、統(tǒng)功能滿滿足集團(tuán)要求求和用戶需要要。讀者對象本文檔適合于以以下人員閱讀讀和參考：開發(fā)、測試人員員。業(yè)務(wù)開發(fā)人員。系統(tǒng)分析師。系統(tǒng)架構(gòu)師。參考資料中國移動(dòng)省級級經(jīng)營分析系系統(tǒng)規(guī)范總冊冊v2.0中國移動(dòng)省級級經(jīng)營分析系系統(tǒng)數(shù)據(jù)質(zhì)量量管理系統(tǒng)業(yè)業(yè)務(wù)技術(shù)規(guī)范范v2.0.doc系統(tǒng)總體架構(gòu)數(shù)據(jù)集市數(shù)據(jù)質(zhì)質(zhì)量管理方案案其他模塊說明數(shù)據(jù)接口：是為為了保證數(shù)據(jù)據(jù)的結(jié)構(gòu)、意意義、編碼、保保持一致。數(shù)據(jù)質(zhì)量管理：確保從數(shù)據(jù)據(jù)源抽取的數(shù)數(shù)據(jù)質(zhì)量。數(shù)據(jù)模型：包括括邏輯數(shù)據(jù)模模型和物理數(shù)數(shù)據(jù)模型。數(shù)據(jù)質(zhì)量的交互互方式交互的頻率準(zhǔn)時(shí)時(shí)提供交互的方式Ftp文件輪詢詢交互的格式交互的格式為XXML，具體體的格式和說說明由Te

7、rradataa提供FTP輪詢方式式系統(tǒng)軟硬件總體體結(jié)構(gòu)硬件總體結(jié)構(gòu)產(chǎn)品型號產(chǎn)品名稱配置數(shù)量廠家及說明NCR54500數(shù)據(jù)倉庫服務(wù)器器92TB（裸盤盤）16節(jié)點(diǎn)NCR/生產(chǎn)系系統(tǒng)NCR53800數(shù)據(jù)倉庫服務(wù)器器12TB（裸盤盤）5節(jié)點(diǎn)NCR/生產(chǎn)系系統(tǒng)NCR53500數(shù)據(jù)倉庫服務(wù)器器9TB（裸盤）3節(jié)點(diǎn)NCR/生產(chǎn)系系統(tǒng)小計(jì)：103TB（熱熱備）22節(jié)點(diǎn)NCR/生產(chǎn)系系統(tǒng)L700磁帶庫8個(gè)LTO1驅(qū)驅(qū)動(dòng)器1臺NCR-LibbrarySL500磁帶庫18個(gè)LTO33驅(qū)動(dòng)器1臺NCR-LibbraryIBM P4660ETL服務(wù)器4CPU,8GGRAM,22*73GBB2臺IBMHP DL6330

8、應(yīng)用服務(wù)器2顆Interr CPU 1.4GHHz，2G內(nèi)存2臺HPHP rx46640WEB服務(wù)器4顆Interr CPU 1.4GHHz，4G內(nèi)存，2塊36G SCCSI硬盤2臺HP-PCSeerver軟件總體結(jié)構(gòu)NCR 54550/5380/5350 Teraddata數(shù)據(jù)據(jù)倉庫服務(wù)器器操作系統(tǒng)：NCCR UNIIX SVRR4 MP-RAS數(shù)據(jù)庫系統(tǒng)：NNCR Teeradatta海量并行行處理數(shù)據(jù)庫庫管理系統(tǒng)工具：NCR Teraddata公用用程序MultiLooadFastLoaadBteqFastExpportArcmainnNCR A166數(shù)據(jù)倉庫系系統(tǒng)管理工作作站操作系統(tǒng)：

9、NCCR UNIIX SVRR4 MP-RAS工作站管理軟件件ETL服務(wù)器操作系統(tǒng)：IBBM AIXX5.0工具：NCR Teraddata公用用程序MultiLooadFastLoaadBteqFastExpportPerlETL AuttomatiionOLAP服務(wù)器器操作系統(tǒng)：HPP Unixx工具：ESSBBASE多維維分析服務(wù)器器版本工具：NCR Teraddata公用用程序MultiLooadFastLoaadBteqFastExpportPerlETL AuttomatiionWEB服務(wù)器操作系統(tǒng)：HPP Unixx & Wiindowss2000 Serveer工具：Hypee

10、rion Brio Cliennt版本與BBEA WEEBLogiic技術(shù)設(shè)計(jì)內(nèi)蒙經(jīng)分系統(tǒng)關(guān)關(guān)鍵技術(shù)設(shè)計(jì)計(jì)是依靠Teeradatta數(shù)據(jù)庫的的PI及PAARTITIION等技術(shù)術(shù)，Teraadata是是Relattionall Dataabase Managgementt SysttemRDBMSS,可用于UUNIX，WWINDOWWS NT，對對應(yīng)于工業(yè)化化ANSI標(biāo)標(biāo)準(zhǔn),Terradataa用于大型數(shù)數(shù)據(jù)庫服務(wù)器器，支持并發(fā)發(fā)訪問,并發(fā)發(fā)操作請求使使其有能力處處理海量數(shù)據(jù)據(jù),可在單節(jié)節(jié)點(diǎn)或者多節(jié)節(jié)點(diǎn)上運(yùn)行,是企業(yè)級數(shù)數(shù)據(jù)庫的首選選解決方案.術(shù)語說明下表說明所使用用的專有名詞詞：名稱定義數(shù)據(jù)

11、庫(Dattabasee)數(shù)據(jù)庫(dattabasee)是一個(gè)區(qū)區(qū)域，其上可可建立對象，例例如表、視圖圖及宏。表是是數(shù)據(jù)儲存的的地方，而經(jīng)經(jīng)由視圖及宏宏可控制數(shù)據(jù)據(jù)的存取能力力。數(shù)據(jù)庫有配置磁磁盤空間。數(shù)據(jù)庫結(jié)構(gòu)是層層次性式架構(gòu)構(gòu)(hierrarchiical)，子子數(shù)據(jù)庫(cchild databbases) 建立在母母數(shù)據(jù)庫(pparentt dataabasess)之下。數(shù)據(jù)庫DBC是是一種特殊的的數(shù)據(jù)庫，它它在系統(tǒng)定義義時(shí)即已存在在，且為分類類及字典表(catallogue and ddictioonary tablees)的預(yù)設(shè)設(shè)區(qū)域。DBBC亦為數(shù)據(jù)據(jù)庫層次結(jié)構(gòu)構(gòu)的頂層。PI數(shù)據(jù)分

12、布的機(jī)制制，數(shù)據(jù)分布布是否均勻，直直接影響到查查詢的效率。PARTITIION（Partittionedd Primmary IIndex），分分區(qū)索引，通通過建立分區(qū)區(qū)主索引（PPPI），從從而更好的利利用Teraadata的的強(qiáng)大并行能能力，使我們們可以在主表表里同時(shí)儲存存歷史數(shù)據(jù)和和當(dāng)前數(shù)據(jù)，也也不會(huì)降低效效能，并降低低查詢的復(fù)雜雜性。用戶(Userr)用戶(userr)是一種可可登入至系統(tǒng)統(tǒng)的特殊的數(shù)數(shù)據(jù)庫。 每一位用戶皆被被配置一個(gè)嚴(yán)嚴(yán)格限制的永永久空間，讓讓用戶儲存?zhèn)€個(gè)人資料。永久空間(Peermaneent Sppace)永久空間 (pperm或perm spacee) 為系統(tǒng)統(tǒng)

13、中可用以容容納數(shù)據(jù)庫表表的磁盤空間間總合。永久久空間系配置置給數(shù)據(jù)庫以以便儲存數(shù)據(jù)據(jù)之用。只在一數(shù)據(jù)庫所所屬于的母數(shù)數(shù)據(jù)庫(paarent databbase)目目前有剩余可可用空間時(shí)才才能配置永久久空間給該數(shù)數(shù)據(jù)庫。一開始，Terradataa數(shù)據(jù)庫中的的所有空間皆皆為特殊數(shù)據(jù)據(jù)庫DBC所擁有有。Spool空間間(Spoool Spaace)Spool空間間(spoool)是數(shù)據(jù)據(jù)庫系統(tǒng)(DDBMS)需需要提供給表表用以在執(zhí)行行SQL陳述指指令期間暫時(shí)時(shí)儲存中間結(jié)結(jié)果的儲存量量總合。 預(yù)設(shè)作為spoool的空間間大小是，最最小必須有225%的可用用空間或最大大資料表的11.3倍，兩兩者取較大

14、者者。應(yīng)將此首要規(guī)則則視為最低要要求，且可視視處理程序而而改變。在沒沒有Spoool空間的情情況下，查詢詢無法執(zhí)行 。 通常Spooll空間是配置置給用戶而不不是數(shù)據(jù)庫。Spool的配置并非根據(jù)其直接母體(immediate parent) 的可用空間，而是一任意總量，用以限制一位使用者所能夠執(zhí)行的工作量。沒有spool的使用者無法執(zhí)行任何工作，而具有很大spool的使用者幾乎可以執(zhí)行任何復(fù)雜的SQL工作。 帳號字符串(AAccounnt Strrings)帳號字符串用以以識別用戶組組及用戶的系系統(tǒng)優(yōu)先權(quán)，它它們通常與個(gè)個(gè)別用戶組相相關(guān)而非特定定用戶，但可可以為特定用用戶建立它們們。宏(Mac

15、roo)宏是一組執(zhí)行一一項(xiàng)工作的SSQL，類似似預(yù)存程序(storeed proocedurre)，但完完全是SQLL程序代碼，不不包含其它程程序代碼語言言。 宏儲存在數(shù)據(jù)庫庫中且由用戶戶利用SQLL命令執(zhí)行。Teradatta數(shù)據(jù)倉庫所在的的數(shù)據(jù)庫系統(tǒng)統(tǒng)。一般結(jié)構(gòu)一個(gè)稱作DBCC的數(shù)據(jù)庫是是Teraddata數(shù)據(jù)據(jù)庫中的最高高層次。它擁擁有系統(tǒng)中所所有的資源。DBC數(shù)據(jù)庫中存在有各種系統(tǒng)及目錄對象(dictionary objects)。沒有任何用戶對DBC有擁有權(quán)。DBC具有其它它各種在系統(tǒng)統(tǒng)產(chǎn)生時(shí)自動(dòng)動(dòng)建立的數(shù)據(jù)據(jù)庫，且這些些數(shù)據(jù)庫與特特定的工程任任務(wù)及系統(tǒng)維維護(hù)任務(wù)相關(guān)關(guān)聯(lián)，例如SSy

16、stemmFE及Crashhdump數(shù)數(shù)據(jù)庫。對數(shù)數(shù)據(jù)庫及對象象的擁有權(quán)是是層次性的架架構(gòu)，且繼承承至其下層之之子對象。對對較高層或旁旁系階層之?dāng)?shù)數(shù)據(jù)庫、視圖圖或宏的存取取必須單獨(dú)給給予不同的權(quán)權(quán)利。在內(nèi)蒙移動(dòng)，在在DBC用戶戶下建立了一一個(gè) NMCCDDW數(shù)據(jù)庫，其其下包含了所所有關(guān)于數(shù)據(jù)據(jù)的數(shù)據(jù)庫， 包括數(shù)據(jù)、視圖、宏與用戶。NMCCDW將是內(nèi)蒙移動(dòng)數(shù)據(jù)庫管理員的管理員ID(administrator id)，并且擁有NMCCDW之下的所有對象。利用這種方式，管管理員DBCC可獨(dú)立出來來且不必要每每天對它作管管理工作。這這樣就可以保保證DBC用戶的的安全性并可可以避免未經(jīng)經(jīng)許可即對DDBC

17、目錄 (caatalogg) 及其它它系統(tǒng)表改變變。DBC及NMCCCDW這兩兩種用戶都必必須設(shè)定特定定的權(quán)利。數(shù)數(shù)據(jù)庫管理員員(DBAss)應(yīng)該使用用不同的身份份登錄數(shù)據(jù)庫庫并用不同的的ID來執(zhí)行數(shù)數(shù)據(jù)庫的管理理。建議的結(jié)構(gòu)數(shù)據(jù)庫層次的最最頂層為DBBC，如下圖： 名稱說明$NETVAUULT_CAATALOGGBakBonee NETVVAULT備備份工具CAATALOGG庫CrashDuumpsCrashDuumps數(shù)據(jù)據(jù)庫是系統(tǒng)重重新激活時(shí)，系統(tǒng)內(nèi)存傾傾瀉(sysstem mmemoryy dumpps)之儲存存區(qū)域。如此此可查看系統(tǒng)統(tǒng)重新激活時(shí)時(shí)發(fā)生的狀況況，而且對于于NCR實(shí)驗(yàn)室室

18、而言是解決決問題時(shí)很有有用的工具。此數(shù)據(jù)庫必須能能夠保存3個(gè)CrashhDumpss。DBCMngrrSysAdmiinSys_CallendarrDefaulttAllConsoleePublicTDPUserr這些全部都是體體系結(jié)構(gòu)的用用戶。 一般而言，這些些用戶ID不會(huì)指定定給特定人員員，但是會(huì)由由負(fù)責(zé)的 DDBA保留，用用它建立用戶戶并授予他們們存取權(quán)。DbqmTeradatta Queery Maanagemment工具具使用庫NETVAULLTNETVAULLT工具數(shù)據(jù)據(jù)庫恢復(fù)用戶戶，用戶可以以自行創(chuàng)建SystemFFE這個(gè)數(shù)據(jù)庫存有有NCR的數(shù)據(jù)據(jù)庫執(zhí)行維護(hù)護(hù)和監(jiān)督各項(xiàng)項(xiàng)活動(dòng)所需

19、要要的各種視圖圖NMCCDW獲得DBC的大大部分存儲資資源，存放經(jīng)經(jīng)營分析系統(tǒng)統(tǒng)基礎(chǔ)數(shù)據(jù)、匯匯總數(shù)據(jù)、視視圖、宏、日日志、用戶信信息等。MMART專題分析數(shù)據(jù)庫庫NMART應(yīng)用數(shù)據(jù)庫PData這是基本數(shù)據(jù)(base produuctionn dataa)的存放位位置。 同時(shí)也是數(shù)據(jù)模模型的資料表表的存放位置置 表是在LDM及及PDM中的資資料表。 只有DBA才有有權(quán)利在這個(gè)個(gè)數(shù)據(jù)庫中建建立新表在某種情況下，也也可以刪除、更更改數(shù)據(jù)庫中中數(shù)據(jù)SDATA數(shù)據(jù)臨時(shí)區(qū)，也也稱緩沖區(qū)PMART中間層匯總數(shù)據(jù)據(jù)庫及應(yīng)用層層數(shù)據(jù)庫Temp在測試工作中所所產(chǎn)生的臨時(shí)時(shí)資料表在這這里產(chǎn)生建立數(shù)據(jù)庫管理理員在數(shù)據(jù)

20、庫庫中建立和刪刪除表，在系系統(tǒng)正常運(yùn)行行后僅使用這這些表。在這個(gè)數(shù)據(jù)庫中中也可以保存存衍生的數(shù)據(jù)據(jù)和匯總表，這這些表不是LLDM/PDDM的一部分分，而是根據(jù)據(jù)系統(tǒng)實(shí)際需需要產(chǎn)生的。PView在這個(gè)數(shù)據(jù)庫中中保存系統(tǒng)正正式運(yùn)行后的的所有的視圖圖。這些是基本視圖圖，數(shù)據(jù)的視視圖為一般執(zhí)執(zhí)行系統(tǒng)作業(yè)業(yè)時(shí)執(zhí)行PView 對對PDataa有 Seleect的權(quán)利利。只有DBA才可可以在此數(shù)據(jù)據(jù)庫中建立對對象。ETL在這個(gè)數(shù)據(jù)庫中中包含所有能能夠執(zhí)行數(shù)據(jù)據(jù)轉(zhuǎn)換、備份份工作的用戶戶的ID 每個(gè)作業(yè)/腳本本都應(yīng)該有唯唯一的用戶IID 這些用戶ID并并不分配給特特定的人員，而而是分配給特特定作業(yè)和腳腳本。應(yīng)該

21、只對這又這這些用戶IDD才可以對正正式運(yùn)行的數(shù)數(shù)據(jù)，有Pddata及PVieww，的更新的的權(quán)限D(zhuǎn)BODB深度運(yùn)營平臺數(shù)數(shù)據(jù)庫MARTDB數(shù)據(jù)集市數(shù)據(jù)庫庫數(shù)據(jù)質(zhì)量檢查交交互格式定義義發(fā)送xml： rule-idd :檢查規(guī)則IDD,由TD提提供 instancce-id :檢查實(shí)例IDD,由TD提提供 rule-coode :檢查規(guī)則類型型,由TD提提供 should-execttime :應(yīng)該提交執(zhí)行行的時(shí)間,由由TD提供 data-daate :數(shù)據(jù)日期,由由TD提供 script-sql :檢查sql 接收xml： rule-idd :檢查規(guī)則IDD,由TD提提供,直接返返回即可 ins

22、tancce-id :檢查實(shí)例IDD,由TD提提供,直接返返回即可 rule-coode :檢查規(guī)則類型型,由TD提提供,直接返返回即可 should-execttime :應(yīng)該提交執(zhí)行行的時(shí)間,由由TD提供,直接返回即即可 data-daate :數(shù)據(jù)日期,由由TD提供,直接返回即即可 result-code :執(zhí)行結(jié)果代碼碼，00執(zhí)行行失敗，011執(zhí)行成功 result-valuee :執(zhí)行結(jié)果（具具體數(shù)值） result-desc :執(zhí)行信息（如如果失敗，報(bào)報(bào)錯(cuò)信息） 平臺設(shè)計(jì)數(shù)據(jù)管理體系結(jié)結(jié)構(gòu)的基本概概念是針對各各數(shù)據(jù)集市的的數(shù)據(jù)質(zhì)量管管理，采用統(tǒng)統(tǒng)一配置，分分布執(zhí)行，統(tǒng)統(tǒng)一管理的方方

23、式。 為了獲得最佳效效果，需在不不同的服務(wù)器器之間分配工工作負(fù)荷，工工具也相應(yīng)地地放置于最合合適的服務(wù)器器之內(nèi)。整個(gè)個(gè)數(shù)據(jù)管理系統(tǒng)統(tǒng)體系結(jié)構(gòu)圖圖如下圖所示示：設(shè)計(jì)原則對數(shù)據(jù)集市數(shù)據(jù)據(jù)質(zhì)量的管理理只在經(jīng)分建建立一套數(shù)據(jù)據(jù)質(zhì)量管理系系統(tǒng)，對個(gè)數(shù)數(shù)據(jù)集市開發(fā)發(fā)統(tǒng)一數(shù)據(jù)質(zhì)質(zhì)量規(guī)則接口口 統(tǒng)一在經(jīng)分?jǐn)?shù)據(jù)據(jù)質(zhì)量管理系系統(tǒng)中定義數(shù)數(shù)據(jù)集市各自自的數(shù)據(jù)質(zhì)量量檢測規(guī)則， 經(jīng)分定時(shí)傳遞規(guī)規(guī)則給集市，具具體執(zhí)行在各各個(gè)數(shù)據(jù)集市市上面完成。 集市將執(zhí)行的結(jié)結(jié)果返回給經(jīng)經(jīng)分的數(shù)據(jù)質(zhì)質(zhì)量管理系統(tǒng)統(tǒng)，進(jìn)行統(tǒng)一一判斷、告警警、管理和報(bào)報(bào)告系統(tǒng)數(shù)據(jù)接口目前有六種數(shù)據(jù)據(jù)來源：BOSS系統(tǒng): 屬于內(nèi)蒙移動(dòng)的的BOSS系統(tǒng)統(tǒng)，其中包

24、括括了計(jì)費(fèi)和營營帳系統(tǒng)與處處理帳務(wù)及客客戶資料的系系統(tǒng)。計(jì)費(fèi)系系統(tǒng)以HP 9000為為平臺，營帳帳系統(tǒng)同樣以HP 90000為平臺臺。BOSS系統(tǒng)的的計(jì)費(fèi)系統(tǒng)BOSS系統(tǒng)的的營帳系統(tǒng)商務(wù)分公司的短短信業(yè)務(wù)和移移動(dòng)夢網(wǎng)系統(tǒng)統(tǒng)數(shù)據(jù)分公司的上上網(wǎng)直通車業(yè)業(yè)務(wù)客戶服務(wù)中心的的大客戶服務(wù)務(wù)業(yè)務(wù)客戶服務(wù)系統(tǒng)：屬于客戶服務(wù)中中心的客戶服服務(wù)系統(tǒng)（11860），以以HP Unnix為平臺臺，建立在OOraclee數(shù)據(jù)庫上的的華為客服系系統(tǒng)。MISC系統(tǒng)：由卓望公司實(shí)施施。彩鈴平臺系統(tǒng)：由華為公司實(shí)施施。話務(wù)網(wǎng)管系統(tǒng)：由億陽公司實(shí)施施。中央音樂平臺：由集團(tuán)統(tǒng)一下發(fā)發(fā)接口。對于客戶資料應(yīng)應(yīng)將進(jìn)行匯總總整合，以利利

25、數(shù)據(jù)之一致致性并避免重重復(fù)。在總體體設(shè)計(jì)上，目目前是各個(gè)業(yè)業(yè)務(wù)系統(tǒng)將數(shù)數(shù)據(jù)通過接口口或者文件方方式傳送給BBOSS系統(tǒng)統(tǒng)作處理，NNCR建議由由BOSS系統(tǒng)統(tǒng)經(jīng)過處理后后統(tǒng)一傳送給給內(nèi)蒙移動(dòng)經(jīng)經(jīng)營分析系統(tǒng)統(tǒng)。我們計(jì)劃以上的的數(shù)據(jù)來源的的的傳送機(jī)制制都經(jīng)由ASSCII文件件。在BOSS系統(tǒng)統(tǒng)中通過FTTP的方法，傳傳送給ETLL加載服務(wù)器器，再由ETTL加載服務(wù)務(wù)器裝載入NNCR的數(shù)據(jù)倉庫服務(wù)務(wù)器中。對于新增加部分分和數(shù)據(jù)更新新部分，經(jīng)雙雙方共同確認(rèn)認(rèn)后，由內(nèi)蒙蒙移動(dòng)BOSSS系統(tǒng)，將將新增加部分分和更新部分分按數(shù)據(jù)傳送送規(guī)范，以FFTP方式傳傳送給NCRR的ETL數(shù)據(jù)加加載服務(wù)器。數(shù)據(jù)加載將會(huì)

26、自自動(dòng)化進(jìn)行，采采用程序輪詢詢的處理方法法。能及時(shí)發(fā)發(fā)現(xiàn)源系統(tǒng)已已經(jīng)傳送了新新的數(shù)據(jù)資料料，這些數(shù)據(jù)據(jù)文件將置于于ETL加載服服務(wù)器上的指指定目錄。程程序?qū)⒃贓TTL加載服務(wù)務(wù)器上執(zhí)行。它它們會(huì)尋找這這些檔案，如如果能取得這這些檔案，程程序就會(huì)獲取取這些檔案，并并傳送到轉(zhuǎn)換換服務(wù)器。程程序會(huì)進(jìn)行完完整性檢查，以以確保檔案的的傳送與接收收都正確。數(shù)據(jù)轉(zhuǎn)換這項(xiàng)操作一部分分將于ETLL加載服務(wù)器器上進(jìn)行。如如有需要，可可撰寫一些PPerl程序序，轉(zhuǎn)換程序序?qū)⒂诘?章章詳細(xì)說明。另另一部分在入入庫后，利用用數(shù)據(jù)庫強(qiáng)大大性能的支撐撐下由SQLL腳本實(shí)現(xiàn)。這這兩部分程序序都將會(huì)自動(dòng)動(dòng)化運(yùn)行。數(shù)據(jù)加載這項(xiàng)操

27、作將于EETL加載服服務(wù)器上進(jìn)行行，以包括FasstLoadd、MultiiLoad、Bteq等等等高效的Teeradatta加載公用用程序來執(zhí)行行。這部分程程序?qū)?huì)自動(dòng)動(dòng)化運(yùn)行。我們將會(huì)開發(fā)增增量加載程序序，這是針對對大數(shù)據(jù)量的的數(shù)據(jù)單元，我我們將使用增增量更新，而而非全量更新新。數(shù)據(jù)模型邏輯數(shù)據(jù)模型化化通過圖形技技術(shù)，來說明明對于Enttity (稱為實(shí)體) 具有重要性性的對象的相相關(guān)商業(yè)規(guī)則則；其中包括括實(shí)體認(rèn)為重重要的對象的的屬性或特性性，以及不同同對象之間的的關(guān)系。我們們使用邏輯一一詞，因?yàn)閺?qiáng)強(qiáng)調(diào)的重點(diǎn)是是了解資料的的基本邏輯結(jié)結(jié)構(gòu)，而非產(chǎn)產(chǎn)生這份資料料如何建設(shè)到到具體檔案或或數(shù)據(jù)庫之內(nèi)內(nèi)的設(shè)計(jì)。支支持任何商業(yè)業(yè)領(lǐng)域的邏輯輯數(shù)據(jù)模型通通常非常穩(wěn)