企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書-圖文

1、企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書-圖文以下是為大家整理的企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書- -圖文的相關(guān)范文，本文關(guān)鍵詞為企業(yè) , ,數(shù)據(jù)中心 , ,系統(tǒng), ,平臺, ,技術(shù), ,方案, ,建議書 , ,圖文 , ,，您可以從右上方搜索框檢索更多相關(guān)文章， 如果您覺得有用， 請繼續(xù)關(guān)注我們并推薦給您的好友， 您可以在教育文庫中查看更多范 文。企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書說明：本文為 wordword 格式，下載后可自由編輯）第 1 1 頁共 5050 頁企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書第 1 1 章總體建設(shè)方案1.11.1 總體建設(shè)思路圖、數(shù)據(jù)中心

2、構(gòu)建思路圖 按照對數(shù)據(jù)中心的理解，完整的數(shù)據(jù)中心應(yīng)該具備 ITIT 基礎(chǔ)設(shè)施（主機(jī)、存儲、網(wǎng)絡(luò)）、企業(yè)級 eTLeTL 平臺、數(shù)據(jù)存儲中心、數(shù)據(jù)共享 服務(wù)、應(yīng)用層、統(tǒng)一門戶、數(shù)據(jù)管控平臺。第 2 2 頁共 5050 頁企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書1.21.2 功能框架圖、功能框架系統(tǒng)功能框架分為企業(yè)級 eTLeTL 平臺、存儲與計算中心、服務(wù)層、應(yīng)用層、統(tǒng)一門戶、統(tǒng)一平臺管控。企業(yè)級 eTLeTL 平臺：負(fù)責(zé)企業(yè)數(shù)據(jù)中心數(shù)據(jù)采集、加工、匯總、分發(fā)的過程，完成企 業(yè)級數(shù)據(jù)標(biāo)準(zhǔn)化、集中化，實(shí)現(xiàn)數(shù)據(jù)脈絡(luò)化、關(guān)系化，實(shí)現(xiàn)統(tǒng)一的數(shù) 據(jù)處理加工，包括：非實(shí)時數(shù)據(jù)處理和實(shí)時數(shù)據(jù)處理， 提供數(shù)據(jù)抽取、

3、數(shù)據(jù)轉(zhuǎn)換、數(shù)據(jù)加載、數(shù)據(jù)匯總、數(shù)據(jù)分發(fā)、數(shù)據(jù)挖掘等能力。存儲與計算中心：建立統(tǒng)一的數(shù)據(jù)中心數(shù)據(jù)模型， 以及統(tǒng)一的數(shù)據(jù)存儲與計算， 具 體提供關(guān)系數(shù)據(jù)庫、分布式非關(guān)系數(shù)據(jù)庫、 分布式文件、分布式計算， 實(shí)現(xiàn)統(tǒng)一的數(shù)據(jù)存儲與計算。數(shù)據(jù)共享服務(wù)：第 3 3 頁共 5050 頁企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書 通過數(shù)據(jù)服務(wù)標(biāo)準(zhǔn)化開放訪問，幫助企業(yè) ITIT 建設(shè)中，應(yīng)用和數(shù) 據(jù)分離，引入更多的應(yīng)用開發(fā)商，促進(jìn)應(yīng)用的百花齊放和應(yīng)用的專業(yè) 性；基于標(biāo)準(zhǔn)化接口，實(shí)現(xiàn)對標(biāo)簽、客戶視圖、指標(biāo)等數(shù)據(jù)查詢 ApIApI 封裝，實(shí)現(xiàn)與周邊系統(tǒng)實(shí)時互動，體現(xiàn)數(shù)據(jù)價值，減少數(shù)據(jù)冗余，保 證數(shù)據(jù)安全，保證數(shù)據(jù)的一致性。應(yīng)

4、用層：應(yīng)用層的應(yīng)用使用服務(wù)層提供的各種數(shù)據(jù)服務(wù)。 本期應(yīng)用層包括： 經(jīng)分應(yīng)用、流量運(yùn)營、 esopesop 應(yīng)用、 VgopVgop 應(yīng)用、指標(biāo)庫、流量運(yùn)營戰(zhàn) 略地圖、掌上分析、自助業(yè)務(wù)分析、 區(qū)域洞察、渠道運(yùn)營、自助分析、 客戶標(biāo)簽庫、實(shí)時營銷、LTeLTe 互聯(lián)網(wǎng)管控策略。統(tǒng)一門戶： 提供統(tǒng)一域名分配、負(fù)載均衡、鑒權(quán)管理、統(tǒng)一管控平臺接入、 應(yīng)用注冊、應(yīng)用發(fā)布、應(yīng)用訪問數(shù)據(jù)信息等功能，同時提供數(shù)據(jù)中心 被應(yīng)用訪問的頻次，被應(yīng)用訪問的數(shù)據(jù)范圍，提供數(shù)據(jù)資產(chǎn)的評估， 為應(yīng)用上下線和數(shù)據(jù)開放提供依據(jù)。統(tǒng)一平臺管控： 面向開發(fā)人員、運(yùn)維人員實(shí)現(xiàn)數(shù)據(jù)、應(yīng)用、資源的統(tǒng)一管控，包 括：數(shù)據(jù)資產(chǎn)管控、開發(fā)

5、管理、監(jiān)控管理、調(diào)度管理、系統(tǒng)管理、安 全管理。1.31.3 技術(shù)架構(gòu)圖、技術(shù)架構(gòu) 第 4 4 頁共 5050 頁企業(yè)數(shù)據(jù)中心系統(tǒng)平臺技術(shù)方案建議書 系統(tǒng)技術(shù)架構(gòu)分為數(shù)據(jù)采集、計算存儲服務(wù)、數(shù)據(jù)共享服務(wù)、平 臺管控。采用 hadoophadoop 云技術(shù)，可以滿足計算能力線性擴(kuò)展、 多租戶 能力、 數(shù)據(jù)匯總能力； 批處理場景采取 hadoophadoop的 map/Reducemap/Reduce、hivehive 或者 sparkspark 來完成；流式數(shù)據(jù)處理，采用 esperesper 計算引擎實(shí)現(xiàn)。數(shù)據(jù)采集：采用 FlumeFlume 計算框架，實(shí)現(xiàn)文件和消息采集與解析；采用流式爬 蟲

6、、中文分詞、圖片識別技術(shù)，實(shí)現(xiàn)互聯(lián)網(wǎng)網(wǎng)頁信息實(shí)時采集；采用 FTpFTp 文件方式實(shí)現(xiàn)對數(shù)據(jù)文件的采集；采用 socketsocket 消息方式實(shí)現(xiàn)對消 息數(shù)據(jù)的采集；采用 sqoopsqoop 方式實(shí)現(xiàn)將數(shù)據(jù)庫數(shù)據(jù)裝載到 hDFshDFs 文件 系統(tǒng)。計算存儲服務(wù)：采用 hadoophadoop 中 hDFshDFs 文件系統(tǒng)提供統(tǒng)一的大數(shù)據(jù)數(shù)據(jù)存儲，滿足 全量數(shù)據(jù)留存；基于 YarnYarn 提供跨平臺的資源管理，滿足資源的統(tǒng)一 調(diào)度與管理；采用 hadoophadoop 實(shí)現(xiàn)非實(shí)時 eTLeTL 實(shí)現(xiàn)海量數(shù)據(jù)的批處理， 主要處理 oDoDs s層-DwD-DwD 層-Dw-Dw 層-sT

7、-sT 層的數(shù)據(jù)處理；視業(yè)務(wù)數(shù)據(jù)情 況部分 DwDw 層-sT-sT 層的數(shù)據(jù)處理采用 sparkspark 計算框架實(shí)現(xiàn)；采用 esperesper 和 rabbitmqrabbitmq 支撐流數(shù)據(jù)處理與復(fù)雜事件處理；利舊 Db2Db2 提供 sTsT 層數(shù) 據(jù)的存儲與計算，支持高并發(fā)的指標(biāo)級數(shù)據(jù)共享。數(shù)據(jù)共享：數(shù)據(jù)開放共享采用基于 hTTphTTp 協(xié)議 ResTResTX格的 openApIopenApI 完成同步 處理與基于消息隊列（mQmQ）完成異步處理，實(shí)現(xiàn)類 soAsoA 面向服務(wù)的 架構(gòu)體系。支持 oAuthoAuth 提供一個安全的、開放而又簡易的授權(quán)協(xié)議。 數(shù)據(jù)共享服務(wù)部署在集群環(huán)境中以應(yīng)對高并發(fā)的訪問請求， 并實(shí)現(xiàn)集 群的負(fù)載均衡。統(tǒng)一平臺管控：采用 JavaeeJavaee 技術(shù)，通過 mVcmVc 模式（modelViewcontrollermodelViewcontroller，是模型 視圖控制器）把業(yè)務(wù)邏輯、數(shù)據(jù)、界面顯示分離的方法組織代碼， 將業(yè)務(wù)邏輯