電信行業(yè)的大數(shù)據(jù)解決方案

行業(yè)背景電信運營商近幾年而對移動互聯(lián)網(wǎng)的高速發(fā)展，客戶的移動數(shù)據(jù)流量需求迅猛增長，數(shù)拯流量收入已超過點對點短信，成為拉動數(shù)據(jù)業(yè)務(wù)收入增長的主要驅(qū)動力的現(xiàn)實。在3G的全業(yè)務(wù)市場競爭環(huán)境下，急需根據(jù)競爭情況和客戶需求，加快實現(xiàn)流量的實時計費和提醒，優(yōu)化數(shù)據(jù)流量資費體系，降低套餐內(nèi)外的資費水平差距，提高精細化營銷能力，不斷提髙客戶的滿意度和大幅度降低流疑投訴。這就催生了對流量大數(shù)據(jù)分析的需要，大數(shù)據(jù)依賴于成熟的技術(shù)方案，應(yīng)用的矢鍵在于業(yè)務(wù)層而，因此大數(shù)據(jù)在運營商中應(yīng)用中催生了很多商業(yè)機會，同時運營商現(xiàn)有的系統(tǒng)架構(gòu)在而對大數(shù)據(jù)的挑戰(zhàn)和機會面前遇到了問題。商業(yè)機會改善用戶體驗?分析用戶行為，改進產(chǎn)品設(shè)計：?通過用戶愛好分析，進行及時、精準的業(yè)務(wù)推薦和客戶尖懷；優(yōu)化網(wǎng)絡(luò)質(zhì)量?分析流量、流屋變化，調(diào)整資源配置：分析網(wǎng)絡(luò)日志，進行網(wǎng)絡(luò)優(yōu)化和故障泄位；?合理給各類業(yè)務(wù)分配帶寬及優(yōu)先級等：助力市場決策通過業(yè)務(wù)、資源、財務(wù)等各類數(shù)據(jù)的綜合分析，快速準確確左公司管理和市場競爭策略；?基于用戶的職業(yè)、年齡、LBS等信息提供精準營銷手段：業(yè)務(wù)創(chuàng)新?在確保用戶隱私不被侵犯的前提下，對數(shù)據(jù)進行深度加工，對外提供信息服務(wù)，幫助企業(yè)盈利；?精確了解與預(yù)測用戶的需求的變化趨勢，為未來研發(fā)提供方向和指導(dǎo)；面臨問題系統(tǒng)分散建設(shè)，難以實現(xiàn)資源和應(yīng)用共享?經(jīng)營分析、信令監(jiān)測、綜合網(wǎng)絡(luò)分析、不良信息監(jiān)測、上網(wǎng)日志留存等大數(shù)據(jù)系統(tǒng)垂直建設(shè)較多，列外很多省分公司的系統(tǒng)建設(shè)存在重復(fù)建設(shè)、應(yīng)用重復(fù)開發(fā)、各類專家資源無法共享等情況；數(shù)據(jù)分散存儲，標準化程度低物理層 大容量存儲服努器 網(wǎng)絡(luò)漿統(tǒng)物理層 大容量存儲服努器 網(wǎng)絡(luò)漿統(tǒng)?各大數(shù)據(jù)系統(tǒng)數(shù)據(jù)模型不統(tǒng)一，跨系統(tǒng)綜合分析困難；?統(tǒng)一管理難度較髙；以O(shè)LTP為核心的傳統(tǒng)架構(gòu)，難以滿足新業(yè)務(wù)發(fā)展要求?多采用高端架構(gòu)建設(shè)（類I0E），成本極高；?僅具備結(jié)構(gòu)化數(shù)據(jù)處理能力，無法支持飛速增長的非結(jié)構(gòu)化、半結(jié)構(gòu)化數(shù)據(jù)處理：?對高速增長的數(shù)據(jù)，傳統(tǒng)架構(gòu)很難滿足存儲需求：大部分業(yè)務(wù)只對內(nèi)提供服務(wù)，未能有效地進行成規(guī)模商業(yè)利用?如何建立商業(yè)模式？?如何解決用戶隱私保護問題？方案架構(gòu)針對電信運營商大數(shù)據(jù)管理總體系統(tǒng)框架分為四層，分別是物理層，數(shù)據(jù)成，模型層應(yīng)用層，數(shù)據(jù)層是整個運營商大數(shù)據(jù)管理的核心部分，為上層應(yīng)用提供數(shù)據(jù)支撐C應(yīng)用層營銷目標客戶定位■針對營銷方案設(shè)計X模型層用戶位置信息莒銷效果評估用戶位置信息重入嚴特征堵譬使數(shù)振層文件手NOSQ業(yè)努使用統(tǒng)計其他ETLIM類SQL語言計髻度框 安全莒理客戶基本數(shù)娠Gb應(yīng)用層營銷目標客戶定位■針對營銷方案設(shè)計X模型層用戶位置信息莒銷效果評估用戶位置信息重入嚴特征堵譬使數(shù)振層文件手NOSQ業(yè)努使用統(tǒng)計其他ETLIM類SQL語言計髻度框 安全莒理客戶基本數(shù)娠Gb□數(shù)據(jù)WLAN數(shù)其他業(yè)務(wù)應(yīng)用丄話費詳單査詢系統(tǒng)解決方案針對話費詳單公眾查詢查詢業(yè)務(wù)，系統(tǒng)設(shè)計上要滿足海量歷史數(shù)據(jù)的獲取和存儲，同時也要滿足大并發(fā)雖的查詢和檢索。針對海量詳單査詢系統(tǒng)的架構(gòu)設(shè)汁如下：話費詳單公眾查詢系統(tǒng)特點：查詢數(shù)據(jù)和生產(chǎn)去耦合，生產(chǎn)數(shù)據(jù)中轉(zhuǎn)之后進行處理借助曙光XData大數(shù)據(jù)處理平臺，實現(xiàn)數(shù)據(jù)高效導(dǎo)入和查詢及處理大數(shù)據(jù)處理平臺線性擴展架構(gòu)，能夠而對數(shù)據(jù)量增加和查詢量增加而輕松擴展4■電信流量業(yè)務(wù)DPI系統(tǒng)解決方案目前流量業(yè)務(wù)管理存在諸如：用戶感知差，P2P濫用基站資源的有限帶寬資源，髙U金時段用戶感知差基站維護和增建，網(wǎng)絡(luò)優(yōu)化缺少依據(jù)。安全威脅多，黃色、暴力、反動等不良內(nèi)容充斥網(wǎng)絡(luò)，被黑客控制的僵尸網(wǎng)絡(luò)主機?？焖俾?，安全隱患嚴重，DDoS攻擊手段日新月異，攻擊行為泛濫且難于防范。運維管理困難，疲于應(yīng)付各種事件和問題，％個系統(tǒng)無規(guī)則迭加部署，眾多的離散系統(tǒng)，無法統(tǒng)管理，網(wǎng)絡(luò)的可用性和可維護性面臨挑戰(zhàn)。需要統(tǒng)一的系統(tǒng)對網(wǎng)絡(luò)應(yīng)用監(jiān)管，實現(xiàn)業(yè)務(wù)的保值到增值，而現(xiàn)如今而對業(yè)務(wù)多樣化，數(shù)據(jù)泛濫的系統(tǒng)，大數(shù)據(jù)理念給我提供優(yōu)良的解決方案。電信流量業(yè)務(wù)DPI系統(tǒng)解決方案架構(gòu)如下：

廠?用Q分析網(wǎng)站分析廠?用Q分析網(wǎng)站分析協(xié)點整達分布網(wǎng)元不a(E?i2i?用購日茗審計M5I8AM分析WebJTSi帯送電信流量業(yè)務(wù)DPI系統(tǒng)解決方案特點:采用高速設(shè)備直接從卄干網(wǎng)絡(luò)抓取數(shù)據(jù)曙光XData大數(shù)據(jù)平臺能過應(yīng)對大規(guī)模流疑做近實時的分析，感知整個網(wǎng)絡(luò)狀態(tài)，優(yōu)化網(wǎng)絡(luò)運行開發(fā)的大數(shù)據(jù)平臺能夠支撐多種應(yīng)用的開發(fā)在應(yīng)對海量數(shù)據(jù)處理、并發(fā)，大數(shù)據(jù)平臺由于傳統(tǒng)的矢系數(shù)據(jù)平臺，更加適合DPI業(yè)務(wù)處理基于開放架構(gòu)，高性價比的解決方案方案價值電信行業(yè)當前而臨的數(shù)據(jù)挑戰(zhàn)和