大數(shù)據(jù)業(yè)務(wù)介紹(21p)課件

1、中國(guó)電信集團(tuán)大數(shù)據(jù)RTB試點(diǎn)項(xiàng)目上海電信DMP業(yè)務(wù)與項(xiàng)目匯報(bào)2014年1月第1頁(yè)，共22頁(yè)。中國(guó)電信大數(shù)據(jù)運(yùn)營(yíng)1中國(guó)電信在作為國(guó)內(nèi)三大運(yùn)營(yíng)商之一，通過(guò)電信全業(yè)務(wù)經(jīng)營(yíng)、多產(chǎn)品融合的服務(wù)能力和渠道體系的運(yùn)營(yíng)，積累了各類豐富的大數(shù)據(jù)資源：客戶數(shù)據(jù)話單數(shù)據(jù)信令數(shù)據(jù)帳務(wù)數(shù)據(jù)服務(wù)數(shù)據(jù)位置信息數(shù)據(jù)渠道數(shù)據(jù)寬帶上網(wǎng)行為數(shù)據(jù)3G上網(wǎng)行為數(shù)據(jù)上網(wǎng)行為偏好標(biāo)簽數(shù)據(jù)Cookie數(shù)據(jù)搜索關(guān)鍵字?jǐn)?shù)據(jù)終端數(shù)據(jù)郵件數(shù)據(jù)業(yè)務(wù)數(shù)據(jù)大數(shù)據(jù)資產(chǎn)第2頁(yè)，共22頁(yè)。中國(guó)電信大數(shù)據(jù)對(duì)內(nèi)應(yīng)用實(shí)踐如何變現(xiàn)電信大數(shù)據(jù)資產(chǎn)大數(shù)據(jù)資源整合大數(shù)據(jù)能力整合一起構(gòu)建共贏的 大數(shù)據(jù)運(yùn)營(yíng)商業(yè)模式數(shù)據(jù)共享服務(wù)共享能力共享中國(guó)電信合作方第3頁(yè)，共22頁(yè)?？傮w描述

2、本次RTB試點(diǎn)，主要為了整合電信豐富的大數(shù)據(jù)資源和能力、合作方分析挖掘能力，并通過(guò)電信DMP平臺(tái)，實(shí)現(xiàn)對(duì)外提供高并發(fā)、低延時(shí)的標(biāo)簽類數(shù)據(jù)服務(wù)。第4頁(yè)，共22頁(yè)。業(yè)務(wù)內(nèi)容現(xiàn)狀市場(chǎng)規(guī)模商業(yè)附加值商業(yè)風(fēng)險(xiǎn)匯聚電信數(shù)據(jù)資產(chǎn)、外部關(guān)聯(lián)數(shù)據(jù)，經(jīng)過(guò)脫敏、分析挖掘等加工處理后依按需有償與權(quán)限最小化原則向第三方提供數(shù)據(jù)接口調(diào)用服務(wù)；如億贊普、集奧、phorm等。小小大數(shù)據(jù)能力開(kāi)放平臺(tái)的虛擬運(yùn)營(yíng)模式，第三方可以租用平臺(tái)的空間、計(jì)算和數(shù)據(jù)資源，開(kāi)展進(jìn)一步的數(shù)據(jù)分析和挖掘，實(shí)時(shí)應(yīng)用，滿足自身業(yè)務(wù)需要或向其客戶提供商業(yè)信息服務(wù)。如RTB-DMP、DSP等；大中中對(duì)電信數(shù)據(jù)、關(guān)聯(lián)外部數(shù)據(jù)進(jìn)行收集、存儲(chǔ)和加工，形成有價(jià)值的

3、商業(yè)咨詢報(bào)告，向第三方提供，幫助實(shí)現(xiàn)業(yè)務(wù)創(chuàng)新、擴(kuò)大銷售以及改善業(yè)務(wù)。上海已開(kāi)始閔行區(qū)政府流動(dòng)人口動(dòng)態(tài)統(tǒng)計(jì)；與埃森哲合作互聯(lián)網(wǎng)指數(shù)報(bào)告等中大小綜合數(shù)據(jù)出售、數(shù)據(jù)咨詢、數(shù)據(jù)能力業(yè)務(wù)，整合電信自有渠道和外部社會(huì)渠道資源，與電信產(chǎn)品集成，提供的一體化的數(shù)據(jù)應(yīng)用解決方案業(yè)務(wù)。如行業(yè)應(yīng)用、互聯(lián)網(wǎng)精確營(yíng)銷、callcenter精準(zhǔn)外呼大大小中國(guó)電信數(shù)據(jù)運(yùn)營(yíng)2數(shù)據(jù)出售數(shù)據(jù)能力數(shù)據(jù)解決方案電信數(shù)據(jù)運(yùn)營(yíng)數(shù)據(jù)咨詢第5頁(yè)，共22頁(yè)。從服務(wù)、行業(yè)、數(shù)據(jù)三個(gè)維度進(jìn)行能力組合和商業(yè)模式創(chuàng)新隨著業(yè)務(wù)發(fā)展，三個(gè)維度的內(nèi)容也在不斷的改進(jìn)和增加。中國(guó)電信大數(shù)據(jù)運(yùn)營(yíng)商業(yè)模式1行業(yè)維度用戶靜態(tài)屬性數(shù)據(jù)服務(wù)維度數(shù)據(jù)維度用戶位置信息數(shù)據(jù)用

4、戶寬帶上網(wǎng)行為數(shù)據(jù)用戶3G上網(wǎng)行為數(shù)據(jù)零售快消互聯(lián)網(wǎng)政府教育廣告媒體醫(yī)療衛(wèi)生用戶通話行為數(shù)據(jù)用戶行為偏好標(biāo)簽LBS位置服務(wù)模型標(biāo)簽輸出全局標(biāo)識(shí)服務(wù)統(tǒng)計(jì)咨詢報(bào)告整合解決方案數(shù)據(jù)能力服務(wù)第6頁(yè)，共22頁(yè)。中國(guó)電信大數(shù)據(jù)運(yùn)營(yíng)商業(yè)模式2行業(yè)維度零售快消互聯(lián)網(wǎng)政府教育廣告媒體醫(yī)療衛(wèi)生RTB-DMP廣告業(yè)務(wù)數(shù)據(jù)維度用戶靜態(tài)屬性數(shù)據(jù)用戶位置信息數(shù)據(jù)用戶寬帶上網(wǎng)行為數(shù)據(jù)用戶通話行為數(shù)據(jù)用戶行為偏好標(biāo)簽用戶3G上網(wǎng)行為數(shù)據(jù)服務(wù)維度LBS位置服務(wù)模型標(biāo)簽輸出全局標(biāo)識(shí)服務(wù)統(tǒng)計(jì)咨詢報(bào)告整合解決方案數(shù)據(jù)能力服務(wù)第7頁(yè)，共22頁(yè)。中國(guó)電信大數(shù)據(jù)運(yùn)營(yíng)商業(yè)模式3行業(yè)維度數(shù)據(jù)維度零售快消互聯(lián)網(wǎng)政府教育廣告媒體醫(yī)療衛(wèi)生上海閔行區(qū)

5、政府流動(dòng)人口監(jiān)控項(xiàng)目用戶靜態(tài)屬性數(shù)據(jù)用戶位置信息數(shù)據(jù)用戶寬帶上網(wǎng)行為數(shù)據(jù)用戶3G上網(wǎng)行為數(shù)據(jù)用戶通話行為數(shù)據(jù)用戶行為偏好標(biāo)簽服務(wù)維度LBS位置服務(wù)模型標(biāo)簽輸出全局標(biāo)識(shí)服務(wù)統(tǒng)計(jì)咨詢報(bào)告整合解決方案數(shù)據(jù)能力服務(wù)第8頁(yè)，共22頁(yè)。集團(tuán)下文要求 根據(jù)中國(guó)電信市場(chǎng)201386號(hào)文關(guān)于開(kāi)展“大數(shù)據(jù)RTB廣告業(yè)務(wù)”試點(diǎn)工作通知，為了驗(yàn)證大數(shù)據(jù)對(duì)外經(jīng)營(yíng)體系和RTB商業(yè)模式，集團(tuán)決定在上海分公司、廣東分公司、江蘇分公司、號(hào)百公司聯(lián)合開(kāi)展大數(shù)據(jù)RTB廣告業(yè)務(wù)試點(diǎn)運(yùn)行工作。承擔(dān)試點(diǎn)大數(shù)據(jù)部分工作。完成上海大數(shù)據(jù)平臺(tái)改造，集團(tuán)統(tǒng)一DMP平臺(tái)建設(shè)和運(yùn)營(yíng)負(fù)責(zé)DMP平臺(tái)對(duì)外經(jīng)營(yíng)，為廣告媒體運(yùn)營(yíng)提供高并發(fā)、快速響應(yīng)的數(shù)據(jù)服務(wù)

6、能力。1上海分公司職責(zé)要求與2014年4月1日前完成所有平臺(tái)建設(shè)，實(shí)現(xiàn)與合作伙伴系統(tǒng)對(duì)接，初步具備大數(shù)據(jù)RTB廣告業(yè)務(wù)運(yùn)營(yíng)能力。2項(xiàng)目進(jìn)度要求第9頁(yè)，共22頁(yè)。合作域的建立在本次試點(diǎn)中，電信將與外部合作方在大數(shù)據(jù)運(yùn)營(yíng)領(lǐng)域進(jìn)行合作，在數(shù)據(jù)側(cè)、平臺(tái)側(cè)、DMP側(cè)、對(duì)外服務(wù)側(cè)，構(gòu)建垂直多層次的合作域。合作域包括對(duì)外服務(wù)、數(shù)據(jù)處理、數(shù)據(jù)交互等多個(gè)方面。第10頁(yè)，共22頁(yè)。平臺(tái)架構(gòu)圖第11頁(yè)，共22頁(yè)。商業(yè)模式1的實(shí)現(xiàn)面向合作伙伴的數(shù)據(jù)加工支持根據(jù)合作方使用的脫敏數(shù)據(jù)內(nèi)容（字段級(jí)）和數(shù)量進(jìn)行收費(fèi)。根據(jù)合作方算法模型使用的電信大數(shù)據(jù)平臺(tái)資源數(shù)量收費(fèi)（存儲(chǔ)、CPU slot數(shù)量和使用時(shí)間）。商業(yè)模式1：面向合

7、作伙伴的數(shù)據(jù)加工支持合作方式主要為：電信向合作方有償提供電信脫敏數(shù)據(jù)資源的使用，由合作方提交算法和模型，經(jīng)電信安全測(cè)試后，部署于電信大數(shù)據(jù)平臺(tái)進(jìn)行分析、挖掘處理。分析結(jié)果統(tǒng)一上傳電信DMP平臺(tái)，通過(guò)K-V方式，對(duì)外提供實(shí)時(shí)標(biāo)簽數(shù)據(jù)查詢服務(wù)。電信按以下兩方面向合作方收取費(fèi)用第12頁(yè)，共22頁(yè)。商業(yè)模式2的實(shí)現(xiàn)面向外部客戶的標(biāo)簽產(chǎn)品服務(wù)商業(yè)模式2：面向外部客戶的標(biāo)簽產(chǎn)品服務(wù)要基于DMP對(duì)外實(shí)時(shí)查詢服務(wù)能力的實(shí)現(xiàn)：DMP實(shí)現(xiàn)對(duì)外提供 標(biāo)簽化數(shù)據(jù)的實(shí)時(shí)查詢服務(wù)（Key- Value）標(biāo)簽結(jié)果數(shù)據(jù)分為兩類：離線標(biāo)簽結(jié)果數(shù)據(jù)電信：電信或第三方合作方算法模型在大數(shù)據(jù)平臺(tái)分析處理脫敏離線數(shù)據(jù)后獲取的離線標(biāo)簽結(jié)

8、果。離線標(biāo)簽結(jié)果通常基于用戶長(zhǎng)時(shí)間的互聯(lián)網(wǎng)行為習(xí)慣的積累。如：用戶上網(wǎng)行為標(biāo)簽、偏好標(biāo)簽等。實(shí)時(shí)標(biāo)簽結(jié)果數(shù)據(jù)：電信或第三方合作方算法模型在大數(shù)據(jù)平臺(tái)分析平臺(tái)脫敏實(shí)時(shí)數(shù)據(jù)后獲取的實(shí)時(shí)標(biāo)簽結(jié)果。實(shí)時(shí)標(biāo)簽結(jié)果通?；谟脩糨^短時(shí)間（分鐘級(jí)或小時(shí)級(jí)）互聯(lián)網(wǎng)行為的標(biāo)簽化描述。如：用戶較短時(shí)間內(nèi)的搜索關(guān)鍵詞標(biāo)簽、上網(wǎng)瀏覽行為標(biāo)簽等第13頁(yè)，共22頁(yè)。商業(yè)模式2的實(shí)現(xiàn)面向外部客戶的標(biāo)簽產(chǎn)品服務(wù)商業(yè)模式2：2種查詢服務(wù)方式方式1：標(biāo)簽結(jié)果數(shù)據(jù)查詢（實(shí)時(shí)標(biāo)簽或離線標(biāo)簽的實(shí)時(shí)查詢）輸入輸出輸入內(nèi)容輸入方式輸出內(nèi)容輸出方式合作域標(biāo)識(shí)+客戶約定ID實(shí)時(shí)約定的離線標(biāo)簽結(jié)果輸出（用戶長(zhǎng)時(shí)間累積行為偏好標(biāo)簽）約定的實(shí)時(shí)標(biāo)簽結(jié)

9、果輸出（用戶短時(shí)間實(shí)時(shí)行為標(biāo)簽）實(shí)時(shí)方式2：用戶標(biāo)簽匹配查詢輸入輸出輸入內(nèi)容輸入方式輸出內(nèi)容輸出方式合作域標(biāo)識(shí)+標(biāo)簽集與標(biāo)簽值實(shí)時(shí)客戶約定的合作域ID列表準(zhǔn)實(shí)時(shí)第14頁(yè)，共22頁(yè)。DMP平臺(tái)S層：形成多種業(yè)務(wù)形態(tài)，對(duì)外提供高速K-V查詢服務(wù)DMP平臺(tái)K層：建立多套標(biāo)識(shí)體系關(guān)聯(lián)映射，作為Key值主鍵整合電信及合作方的多套標(biāo)簽結(jié)果，建立基于電信用戶標(biāo)識(shí)的多維標(biāo)簽樹(shù)提供開(kāi)放的大數(shù)據(jù)平臺(tái)能力，支持多方數(shù)據(jù)模型算法加載DMP平臺(tái)通過(guò)Key-Value-Service三層對(duì)外提供標(biāo)簽數(shù)據(jù)實(shí)時(shí)查詢服務(wù)DMP平臺(tái)整合大數(shù)據(jù)平臺(tái)分析挖掘能力，通過(guò)Key/Value/Service三層架構(gòu)，對(duì)外提供高并發(fā)、低延時(shí)

10、的標(biāo)簽數(shù)據(jù)服務(wù)。商業(yè)模式2的實(shí)現(xiàn)DMP數(shù)據(jù)服務(wù)能力第15頁(yè)，共22頁(yè)。DMP服務(wù)能力特色建立多維標(biāo)簽結(jié)果樹(shù)合作方輸入自己的ID標(biāo)識(shí)通過(guò)標(biāo)簽樹(shù)的關(guān)聯(lián)、映射，快速進(jìn)行各類標(biāo)識(shí)轉(zhuǎn)換、共享各類標(biāo)簽結(jié)果。整合電信和第三方的各類用戶ID標(biāo)識(shí)和標(biāo)簽體系，建立以（AD+UA）為根的多維標(biāo)簽結(jié)果樹(shù)。對(duì)外提供DMP服務(wù)?；陔娦抛杂袛?shù)據(jù)、電信平臺(tái)獲取的標(biāo)簽信息第16頁(yè)，共22頁(yè)。功能模塊圖DMP平臺(tái)新建大數(shù)據(jù)平臺(tái)改造優(yōu)化第17頁(yè)，共22頁(yè)。硬件邏輯圖功能新增數(shù)量業(yè)務(wù)管理2分發(fā)服務(wù)器2K-V數(shù)據(jù)庫(kù)（flash卡）8數(shù)據(jù)整合18數(shù)據(jù)ETL2日志采集2數(shù)據(jù)交換接口2大數(shù)據(jù)平臺(tái)46小計(jì)82第18頁(yè)，共22頁(yè)。硬件拓?fù)鋱D第

11、19頁(yè)，共22頁(yè)。平臺(tái)性能目標(biāo)1DMP性能要求DMP平臺(tái)具備10萬(wàn)并發(fā)、10ms響應(yīng)的高速數(shù)據(jù)查詢匹配服務(wù)能力。大數(shù)據(jù)平臺(tái)性能要求2大數(shù)據(jù)平臺(tái)具備10個(gè)挖掘應(yīng)用的并發(fā)處理能力。按照每天35TB的原始數(shù)據(jù),10個(gè)DSP模型的批量處理要求在5小時(shí)之內(nèi)完成。第20頁(yè)，共22頁(yè)。謝 謝 ！21第21頁(yè)，共22頁(yè)。1、不是井里沒(méi)有水，而是你挖的不夠深。不是成功來(lái)得慢，而是你努力的不夠多。2、孤單一人的時(shí)間使自己變得優(yōu)秀，給來(lái)的人一個(gè)驚喜，也給自己一個(gè)好的交代。3、命運(yùn)給你一個(gè)比別人低的起點(diǎn)是想告訴你，讓你用你的一生去奮斗出一個(gè)絕地反擊的故事，所以有什么理由不努力!4、心中沒(méi)有過(guò)分的貪求，自然苦就少?？诶?/p>

12、不說(shuō)多余的話，自然禍就少。腹內(nèi)的食物能減少，自然病就少。思緒中沒(méi)有過(guò)分欲，自然憂就少。大悲是無(wú)淚的，同樣大悟無(wú)言。緣來(lái)盡量要惜，緣盡就放。人生本來(lái)就空，對(duì)人家笑笑，對(duì)自己笑笑，笑著看天下，看日出日落，花謝花開(kāi)，豈不自在，哪里來(lái)的塵埃!5、心情就像衣服，臟了就拿去洗洗，曬曬，陽(yáng)光自然就會(huì)蔓延開(kāi)來(lái)。陽(yáng)光那么好，何必自尋煩惱，過(guò)好每一個(gè)當(dāng)下，一萬(wàn)個(gè)美麗的未來(lái)抵不過(guò)一個(gè)溫暖的現(xiàn)在。6、無(wú)論你正遭遇著什么，你都要從落魄中站起來(lái)重振旗鼓，要繼續(xù)保持熱忱，要繼續(xù)保持微笑，就像從未受傷過(guò)一樣。7、生命的美麗，永遠(yuǎn)展現(xiàn)在她的進(jìn)取之中;就像大樹(shù)的美麗，是展現(xiàn)在它負(fù)勢(shì)向上高聳入云的蓬勃生機(jī)中;像雄鷹的美麗，是展現(xiàn)在

13、它搏風(fēng)擊雨如蒼天之魂的翱翔中;像江河的美麗，是展現(xiàn)在它波濤洶涌一瀉千里的奔流中。8、有些事，不可避免地發(fā)生，陰晴圓缺皆有規(guī)律，我們只能坦然地接受;有些事，只要你愿意努力，矢志不渝地付出，就能慢慢改變它的軌跡。9、與其埋怨世界，不如改變自己。管好自己的心，做好自己的事，比什么都強(qiáng)。人生無(wú)完美，曲折亦風(fēng)景。別把失去看得過(guò)重，放棄是另一種擁有;不要經(jīng)常艷羨他人，人做到了，心悟到了，相信屬于你的風(fēng)景就在下一個(gè)拐彎處。10、有些事想開(kāi)了，你就會(huì)明白，在世上，你就是你，你痛痛你自己，你累累你自己，就算有人同情你，那又怎樣，最后收拾殘局的還是要靠你自己。11、人生的某些障礙，你是逃不掉的。與其費(fèi)盡周折繞過(guò)去

14、，不如勇敢地攀登，或許這會(huì)鑄就你人生的高點(diǎn)。12、有些壓力總是得自己扛過(guò)去，說(shuō)出來(lái)就成了充滿負(fù)能量的抱怨。尋求安慰也無(wú)濟(jì)于事，還徒增了別人的煩惱。13、認(rèn)識(shí)到我們的所見(jiàn)所聞都是假象，認(rèn)識(shí)到此生都是虛幻，我們才能真正認(rèn)識(shí)到佛法的真相。錢(qián)多了會(huì)壓死你，你承受得了嗎?帶，帶不走，放，放不下。時(shí)時(shí)刻刻發(fā)悲心，饒益眾生為他人。14、夢(mèng)想總是跑在我的前面。努力追尋它們，為了那一瞬間的同步，這就是動(dòng)人的生命奇跡。15、懶惰不會(huì)讓你一下子跌倒，但會(huì)在不知不覺(jué)中減少你的收獲;勤奮也不會(huì)讓你一夜成功，但會(huì)在不知不覺(jué)中積累你的成果。人生需要挑戰(zhàn)，更需要堅(jiān)持和勤奮!16、人生在世：可以缺錢(qián)，但不能缺德;可以失言，但不能失信;可以倒下，