外部數(shù)據(jù)獲取研究項(xiàng)目

集中化經(jīng)分外部數(shù)據(jù)獲取研究項(xiàng)目

軟課題技術(shù)方案目錄

數(shù)據(jù)獲取研究項(xiàng)目背景和理解1

軟課題項(xiàng)目工作內(nèi)容2亞信相關(guān)研究成果介紹3項(xiàng)目投入資源與成果4集中化經(jīng)分外部數(shù)據(jù)獲取研究項(xiàng)目背景雖然內(nèi)部數(shù)據(jù)積累了眾多數(shù)據(jù)，但是必須結(jié)合外部數(shù)據(jù)才能更好的對(duì)內(nèi)部數(shù)據(jù)進(jìn)行深

入的洞察，才能真正發(fā)揮數(shù)據(jù)的價(jià)值！B域數(shù)據(jù)O域數(shù)據(jù)其他數(shù)據(jù)（外省）其他行業(yè)數(shù)據(jù)大數(shù)據(jù)分析指導(dǎo)活動(dòng)黃頁(yè)信息網(wǎng)頁(yè)信息終端信息如：用戶的去超市購(gòu)物的行為與天氣的關(guān)系，機(jī)場(chǎng)航班的延誤及機(jī)場(chǎng)的人流與航班時(shí)間點(diǎn)的關(guān)系，用戶的手機(jī)到底是閱讀什么類型的書籍，這些類型的數(shù)據(jù)在我們的上網(wǎng)日志和位置信令是無(wú)法分析得到的，而豐富的互聯(lián)網(wǎng)的各類信息可以通過(guò)爬蟲獲取或者外部獲取數(shù)據(jù)，并用來(lái)指導(dǎo)我們的大數(shù)據(jù)分析生產(chǎn)活動(dòng)。中國(guó)移動(dòng)啟動(dòng)外部數(shù)據(jù)獲取的試點(diǎn)工作外部數(shù)據(jù)類別外部數(shù)據(jù)內(nèi)容試點(diǎn)省份手機(jī)信息獲?。ńK端品牌、型號(hào)、價(jià)格、商品頁(yè)面更新時(shí)間、銷量）天貓手機(jī)商品信息廣東京東手機(jī)商品信息重慶華為等手機(jī)廠商自有網(wǎng)站商城的手機(jī)商品信息陜西蘇寧易購(gòu)手機(jī)商品信息福建國(guó)美在線手機(jī)商品信息河南一經(jīng)終端信息庫(kù)補(bǔ)充終端品牌、型號(hào)、TAC、操作系統(tǒng)山西、黑龍江福建、河南黃頁(yè)信息獲取全網(wǎng)12580黃頁(yè)數(shù)據(jù)信息江蘇航班信息獲取航班號(hào)，起飛時(shí)間，到達(dá)時(shí)間、出發(fā)機(jī)場(chǎng)、到達(dá)機(jī)場(chǎng)河北內(nèi)容類商品信息獲取閱讀類商品信息重慶、陜西動(dòng)漫類商品信息福建、陜西第5頁(yè)

結(jié)合中國(guó)移動(dòng)經(jīng)分系統(tǒng)的發(fā)展規(guī)劃，和收集到的外部數(shù)據(jù)獲取及管理的需求，對(duì)外部數(shù)據(jù)獲取進(jìn)行調(diào)研，選擇合適的產(chǎn)品和方案進(jìn)行對(duì)比分析，選擇合適于中國(guó)移動(dòng)的架構(gòu)。在此基礎(chǔ)上，對(duì)外部數(shù)據(jù)產(chǎn)品進(jìn)行明確內(nèi)容，并且與外部數(shù)據(jù)管理形成兩級(jí)級(jí)聯(lián)的數(shù)據(jù)對(duì)內(nèi)對(duì)外共享平臺(tái)，可以構(gòu)建基礎(chǔ)的數(shù)據(jù)鏈接工具，作為數(shù)據(jù)連接的基礎(chǔ)設(shè)施和中介管理機(jī)構(gòu)，使得彼此的數(shù)據(jù)互動(dòng)變得容易。外部數(shù)據(jù)獲取及管理集中化經(jīng)分江蘇分公司黃頁(yè)信息數(shù)據(jù)接口京東手機(jī)信息天貓手機(jī)信息手機(jī)信息獲取終端信息庫(kù)山西分公司…….……..全網(wǎng)外部數(shù)據(jù)共享服務(wù)及管理華為手機(jī)信息黑龍江分公司……手機(jī)信息省份分公司專業(yè)公司江蘇分公司山西分公司……分公司本次項(xiàng)目的價(jià)值和理解目錄數(shù)據(jù)獲取研究項(xiàng)目背景和理解1軟課題項(xiàng)目工作內(nèi)容2亞信相關(guān)研究成果介紹3項(xiàng)目投入資源與成果4調(diào)研確定中國(guó)移動(dòng)經(jīng)分系統(tǒng)對(duì)外部數(shù)據(jù)獲取及管理的需求調(diào)研外部數(shù)據(jù)獲取及管理的案例調(diào)研調(diào)研互聯(lián)網(wǎng)公司和其它電信運(yùn)營(yíng)商的外部數(shù)據(jù)獲取及管理產(chǎn)品和架構(gòu)基于兩級(jí)級(jí)聯(lián)的外部數(shù)據(jù)獲取及管理技術(shù)方案提供外部數(shù)據(jù)獲取及管理工具原型進(jìn)行驗(yàn)證提供獲取外部數(shù)據(jù)形成標(biāo)準(zhǔn)數(shù)據(jù)產(chǎn)品標(biāo)準(zhǔn)本次軟課題整體內(nèi)容的理解項(xiàng)目研究方案：本次軟課題項(xiàng)目建設(shè)思路項(xiàng)目啟動(dòng)：確定業(yè)務(wù)目標(biāo)與技術(shù)目標(biāo)，工作范圍網(wǎng)羅知識(shí)：（1）國(guó)內(nèi)外廠商調(diào)研。

（2）省公司、專業(yè)公司書面調(diào)研。

（3）總部及省公司、專業(yè)公司現(xiàn)場(chǎng)調(diào)研。需求梳理：將通過(guò)與領(lǐng)域?qū)＜业慕涣?，獲取了在其他解決方案中成功解決的需求。整合進(jìn)入本課題的研究需求文檔。需求做原型：網(wǎng)羅知識(shí)中發(fā)現(xiàn)的新需求，將通過(guò)為需求做原型的方式，檢查與軟課題研究目標(biāo)的一致性并發(fā)現(xiàn)其中的潛在需求。需求整合：根據(jù)網(wǎng)羅知識(shí)的結(jié)果，軟課題研究小組將通過(guò)集中討論，確定了需要進(jìn)行研究的需求文檔。形成最終研究報(bào)告的第一版大綱。質(zhì)量審核：在小組每一次集中過(guò)程中，將通過(guò)小組討論確保了軟課題報(bào)告的質(zhì)量。分析設(shè)計(jì)建模：根據(jù)已明確的研究方向，軟課題進(jìn)入實(shí)質(zhì)分析、設(shè)計(jì)、建模階段。在此階段中，將提出流處理應(yīng)用技術(shù)建議書軟課題研究反饋：提交本次軟課題相關(guān)輸出成果。

調(diào)研互聯(lián)網(wǎng)公司產(chǎn)品和架構(gòu)從數(shù)據(jù)管理集中度和數(shù)據(jù)來(lái)源兩個(gè)角度，對(duì)市場(chǎng)現(xiàn)有數(shù)據(jù)共享和交換平臺(tái)進(jìn)行分析。數(shù)據(jù)來(lái)源第三方混合自有數(shù)據(jù)管理集中度分散混合集中京東萬(wàn)象Quandl數(shù)據(jù)聯(lián)盟P2P方式的數(shù)據(jù)管理數(shù)據(jù)需要采集到集中的IT平臺(tái)上管理DatamarketQlik晶贊UMADataHub.ioapigeefactual數(shù)據(jù)堂中關(guān)村數(shù)海AzureMarketplacexignitepremisegitHub百分點(diǎn)九次方新科蘭德聚合數(shù)據(jù)上海晶贊科技發(fā)展有限公司（簡(jiǎn)稱晶贊科技），成立于2011年，是互聯(lián)網(wǎng)專業(yè)數(shù)據(jù)服務(wù)供應(yīng)商（ProfessionalDataServiceProvider,PDSP）UMA是一個(gè)基于創(chuàng)新技術(shù)的聯(lián)合營(yíng)銷平臺(tái)，是中國(guó)互聯(lián)網(wǎng)業(yè)具有品牌影響力的優(yōu)質(zhì)受眾營(yíng)銷聯(lián)盟。截止2013年，UMA已覆蓋中國(guó)80%的互聯(lián)網(wǎng)用戶，月活躍用戶數(shù)達(dá)7億。晶贊科技為該聯(lián)盟搭建的UMA大數(shù)據(jù)平臺(tái)是一個(gè)集標(biāo)簽、歸類、機(jī)器學(xué)習(xí)于一體的自動(dòng)化平臺(tái)。這平臺(tái)只提供數(shù)據(jù)共享。Quandl成立于2012年,是加拿大科技公司，公司集成了上百家企業(yè)數(shù)據(jù)。通過(guò)統(tǒng)一配置及管理，方便數(shù)據(jù)用戶得到他們想要的數(shù)據(jù)格式。Quandl提供開(kāi)放數(shù)據(jù)和企業(yè)數(shù)據(jù)的數(shù)據(jù)平臺(tái)型網(wǎng)站。數(shù)據(jù)使用者可以在網(wǎng)站上搜索，查看數(shù)據(jù)，并通過(guò)api等數(shù)據(jù)使用者期望的方式調(diào)用數(shù)據(jù)（開(kāi)放數(shù)據(jù)集可直接下載），開(kāi)放數(shù)據(jù)以免費(fèi)形式開(kāi)放，企業(yè)數(shù)據(jù)通過(guò)企業(yè)定價(jià)交易的形式開(kāi)放。Quandl提供超過(guò)1500萬(wàn)的金融和經(jīng)濟(jì)數(shù)據(jù)來(lái)自500多個(gè)出版商和供應(yīng)商。Apigee是API管理平臺(tái)，幫助企業(yè)進(jìn)行API的推薦和監(jiān)控，Apigee還提供更專業(yè)的管理服務(wù)，如BaaS（后端即服務(wù)），以幫助客戶搭建應(yīng)用及軟件來(lái)進(jìn)行分析并預(yù)測(cè)。該公司有三款產(chǎn)品，旗艦產(chǎn)品ApigeeEdge用于API管理，ApigeeInsights用于預(yù)測(cè)性分析，ApigeeLink為設(shè)備制造商的物聯(lián)網(wǎng)方案創(chuàng)建API連接Apigee的API管理平臺(tái)是支持多供應(yīng)商SDN的一個(gè)獨(dú)立軟件，通過(guò)實(shí)時(shí)的API轉(zhuǎn)換，它可以把網(wǎng)絡(luò)管理系統(tǒng)與來(lái)自多個(gè)供應(yīng)商的SDN控制器進(jìn)行整合。新科蘭德科技（ThinkLandTechnology）創(chuàng)立于2010年3月，總部注冊(cè)于蘇州工業(yè)園區(qū)，是一家專業(yè)從事互聯(lián)網(wǎng)數(shù)據(jù)服務(wù)，智能手機(jī)軟件開(kāi)發(fā)的創(chuàng)新型企業(yè)。聚合數(shù)據(jù)平臺(tái)主要為APP開(kāi)發(fā)者、軟件公司、網(wǎng)站站長(zhǎng)、電商等提供原始數(shù)據(jù)及API接口服務(wù)，服務(wù)包括數(shù)據(jù)挖掘，數(shù)據(jù)優(yōu)化，數(shù)據(jù)存儲(chǔ)，數(shù)據(jù)備份。平臺(tái)數(shù)據(jù)類型覆蓋LBS、金融、電商、教育、公共交通、日常生活等多個(gè)大類。目前聚合數(shù)據(jù)平臺(tái)已成為國(guó)內(nèi)最大的基礎(chǔ)數(shù)據(jù)API服務(wù)平臺(tái)，數(shù)據(jù)總量及日使用量均為國(guó)內(nèi)領(lǐng)先。

調(diào)研互聯(lián)網(wǎng)公司產(chǎn)品和架構(gòu)互聯(lián)網(wǎng)公司產(chǎn)品和架構(gòu)總結(jié)各廠家因自身業(yè)務(wù)特點(diǎn)，從平臺(tái)架構(gòu)、數(shù)據(jù)源獲取、數(shù)據(jù)服務(wù)及應(yīng)用等各有不同。結(jié)合實(shí)際情況，通過(guò)對(duì)apigee、Quandl、晶贊UMA、聚合數(shù)據(jù)的對(duì)比分析，可以借鑒的方面如下表所示。平臺(tái)技術(shù)特點(diǎn)數(shù)據(jù)服務(wù)應(yīng)用數(shù)據(jù)交易支撐數(shù)據(jù)獲取方式晶贊UMA數(shù)據(jù)提供方快速實(shí)現(xiàn)數(shù)據(jù)開(kāi)放變現(xiàn)數(shù)據(jù)需求方通過(guò)接口調(diào)用快速實(shí)時(shí)查詢及更新數(shù)據(jù)數(shù)據(jù)定價(jià)、議價(jià)、數(shù)據(jù)審核能力垂直搜索能力、大數(shù)據(jù)可視化多源異構(gòu)數(shù)據(jù)融合數(shù)據(jù)脫敏處理、屏蔽處理、安全測(cè)試分散數(shù)據(jù)，P2P方式取信統(tǒng)一提供認(rèn)證、計(jì)費(fèi)等能力JS布碼獲取和監(jiān)測(cè)Quandl提供多種SDK方便使用開(kāi)放數(shù)據(jù)集可直接下載開(kāi)放數(shù)據(jù)以免費(fèi)形式開(kāi)放提供數(shù)據(jù)檢索、數(shù)據(jù)下載服務(wù)提供超過(guò)1500萬(wàn)的金融和經(jīng)濟(jì)數(shù)據(jù)來(lái)自500多個(gè)出版商和供應(yīng)商企業(yè)數(shù)據(jù)通過(guò)企業(yè)定價(jià)交易的形式開(kāi)放用戶授權(quán)數(shù)據(jù)實(shí)時(shí)獲取給合作伙伴服務(wù)換取數(shù)據(jù)搜索引擎爬取Apigee針對(duì)小企業(yè)推出免費(fèi)自助API的平臺(tái)平臺(tái)上每月的API請(qǐng)求數(shù)超過(guò)100億次根據(jù)流量和存儲(chǔ)能力不同定價(jià)API管理平臺(tái)提供API的一站式管理、分析平臺(tái)新手任務(wù)虛擬幣，移動(dòng)可采用支持多供應(yīng)商SDN聚合數(shù)據(jù)移動(dòng)設(shè)備開(kāi)發(fā)人員及圖商提供原始數(shù)據(jù)API服務(wù)提供各類基于位置查詢與調(diào)用服務(wù)提供定制化的服務(wù)，按照客戶提出的接口要求，定制所需要的不同種類的接口，按月進(jìn)行收費(fèi)合作伙伴數(shù)據(jù)網(wǎng)絡(luò)搜索數(shù)據(jù)專門團(tuán)隊(duì)采集與校驗(yàn)提供30+大類，100+種基礎(chǔ)數(shù)據(jù)API服務(wù)類似于GoogleAPIS的數(shù)據(jù)聚合中國(guó)移動(dòng)經(jīng)分系統(tǒng)對(duì)外部數(shù)據(jù)獲取及管理的理解全網(wǎng)數(shù)據(jù)A?。航K端信息數(shù)據(jù)共享平臺(tái)各現(xiàn)有數(shù)據(jù)分析系統(tǒng)B省：互聯(lián)網(wǎng)信息C?。篜OI信息。。。。。。眾包一點(diǎn)收集全網(wǎng)共享眾包模式：應(yīng)有大量人工操作，放在一點(diǎn)實(shí)行成本較大，故采用眾包的方式；總部將根據(jù)各省在建設(shè)全網(wǎng)協(xié)同數(shù)據(jù)所作出的貢獻(xiàn)上進(jìn)行激勵(lì)機(jī)制。中國(guó)移動(dòng)集團(tuán)集中化數(shù)據(jù)收集現(xiàn)狀分析數(shù)據(jù)通道經(jīng)分……數(shù)據(jù)源A省集中化經(jīng)分Hadoop云主數(shù)據(jù)倉(cāng)庫(kù)深度分析云經(jīng)分……B省經(jīng)分……C省業(yè)務(wù)系統(tǒng)……專業(yè)公司上傳下達(dá)上傳下達(dá)上傳下達(dá)上傳下達(dá)集中化經(jīng)分現(xiàn)階段實(shí)現(xiàn)對(duì)B域、M域、O域數(shù)據(jù)的省份公司數(shù)據(jù)采集，現(xiàn)階段主要通過(guò)兩級(jí)數(shù)據(jù)通道實(shí)現(xiàn)全省公司以及專業(yè)公司的數(shù)據(jù)上傳下達(dá)，實(shí)現(xiàn)的通過(guò)單點(diǎn)實(shí)現(xiàn)全網(wǎng)數(shù)據(jù)星型數(shù)據(jù)架構(gòu)。外部數(shù)據(jù)獲取與共享，需要對(duì)省份公司及專業(yè)公司之間，直接的數(shù)據(jù)流通，現(xiàn)階段還未實(shí)現(xiàn)。……通過(guò)外部數(shù)據(jù)獲取和管理共享使得集中化數(shù)據(jù)獲取的形式的改變數(shù)據(jù)通道經(jīng)分……數(shù)據(jù)源A省集中化經(jīng)分Hadoop云主數(shù)據(jù)倉(cāng)庫(kù)深度分析云經(jīng)分……B省經(jīng)分……C省業(yè)務(wù)系統(tǒng)……專業(yè)公司上傳下達(dá)上傳下達(dá)上傳下達(dá)上傳下達(dá)……對(duì)外獲取數(shù)據(jù)共享服務(wù)平臺(tái)利用對(duì)外獲取數(shù)據(jù)共享服務(wù)平臺(tái)，可以實(shí)現(xiàn)數(shù)據(jù)網(wǎng)狀傳輸，打通省公司之間的數(shù)據(jù)通道，可以實(shí)現(xiàn)通過(guò)總部共享服務(wù)平臺(tái)實(shí)現(xiàn)數(shù)據(jù)之間透?jìng)鳎偛抗蚕矸?wù)平臺(tái)對(duì)整個(gè)傳輸過(guò)程進(jìn)行消息控制管理，數(shù)據(jù)直接由提供方到需求方，通過(guò)總部共享服務(wù)平臺(tái)實(shí)現(xiàn)對(duì)數(shù)據(jù)注冊(cè)、管理、發(fā)布等工作。中國(guó)移動(dòng)經(jīng)分系統(tǒng)對(duì)外部數(shù)據(jù)獲取及管理兩級(jí)架構(gòu)數(shù)據(jù)源終端大數(shù)據(jù)：運(yùn)營(yíng)終端信息互聯(lián)網(wǎng)大數(shù)據(jù)：互聯(lián)網(wǎng)第三方信息社會(huì)大數(shù)據(jù)：企業(yè)黃頁(yè)、企業(yè)服務(wù)短信等行業(yè)大數(shù)據(jù)：虛擬運(yùn)營(yíng)商信息等外部大數(shù)據(jù)：外部數(shù)據(jù)等某省公司某專業(yè)公司某省公司某省公司信息收集與標(biāo)準(zhǔn)化整理集中化經(jīng)分對(duì)外獲取數(shù)據(jù)共享服務(wù)平臺(tái)數(shù)據(jù)描述及標(biāo)準(zhǔn)規(guī)范數(shù)據(jù)標(biāo)準(zhǔn)化訪問(wèn)終端信息共享信息互聯(lián)網(wǎng)信息黃頁(yè)信息虛擬運(yùn)營(yíng)商某省公司某專業(yè)公司某省公司某省公司信息獲取和應(yīng)用通過(guò)集中化經(jīng)分構(gòu)建數(shù)據(jù)共享平臺(tái)，將數(shù)據(jù)運(yùn)營(yíng)的任務(wù)分散到有實(shí)力的省公司，由省份公司收集和整理數(shù)據(jù)，通過(guò)集中化經(jīng)分平臺(tái)實(shí)現(xiàn)數(shù)據(jù)的處理和共享，實(shí)現(xiàn)全網(wǎng)數(shù)據(jù)市場(chǎng)交換。中國(guó)移動(dòng)經(jīng)分系統(tǒng)對(duì)外部數(shù)據(jù)獲取及管理實(shí)現(xiàn)技術(shù)架構(gòu)對(duì)外數(shù)據(jù)獲取數(shù)據(jù)共享服務(wù)集中化經(jīng)分?jǐn)?shù)據(jù)服務(wù)器數(shù)據(jù)共享客戶端數(shù)據(jù)共享客戶端數(shù)據(jù)提供方數(shù)據(jù)使用方消息控制流RestAPISub訂閱Pull獲取并存儲(chǔ)本地?cái)?shù)據(jù)存儲(chǔ)（需要預(yù)定義）Pub發(fā)布，可為自提供的API，亦了為托管區(qū)的API?？砂l(fā)布不同版本Push將數(shù)據(jù)從預(yù)定義的本地存儲(chǔ)推送到托管服務(wù)器（包括加密、序列化等工作）直接數(shù)據(jù)產(chǎn)品提供Pub托管式數(shù)據(jù)發(fā)布Push托管式數(shù)據(jù)推送用戶/認(rèn)證/授權(quán)/賬單/支付/社交對(duì)外數(shù)據(jù)獲取數(shù)據(jù)共享服務(wù)技術(shù)功能描述外部數(shù)據(jù)獲取管理共享能力：通過(guò)RestAPI接口和WEB界面提供用戶帳戶管理、認(rèn)證、授權(quán)、PUB/SUB、PUSH/PULL、數(shù)據(jù)資源管理、數(shù)據(jù)資源搜索、結(jié)算、支付、社交等服務(wù)提供兩種類型的數(shù)據(jù)連接：批量數(shù)據(jù)集DataSet（通過(guò)文件實(shí)現(xiàn)）和數(shù)據(jù)流DataFlow（通過(guò)Kafka實(shí)現(xiàn)）可以有兩種方式發(fā)布：公有數(shù)據(jù)集（所有用戶皆可使用，無(wú)需授權(quán)，可以自行設(shè)置收費(fèi)還是免費(fèi)），私有數(shù)據(jù)集（只能由自己或主動(dòng)授權(quán)的用戶/APP使用）工具鏈：消費(fèi)者端：數(shù)據(jù)訂購(gòu)以后，若數(shù)據(jù)有更新，會(huì)主動(dòng)調(diào)用回調(diào)函數(shù)（WEBHOOK）通知數(shù)據(jù)消費(fèi)者端的（流模式下的SDK，或者文件模式下的最終消費(fèi)者）提供者端：SDK可以定期查詢數(shù)據(jù)API的版本情況，或者提供回調(diào)函數(shù)，供數(shù)據(jù)提供方側(cè)提醒數(shù)據(jù)有更新，從而發(fā)起自動(dòng)的數(shù)據(jù)發(fā)布原型系統(tǒng)功能點(diǎn)和實(shí)現(xiàn)形式設(shè)計(jì)外部數(shù)據(jù)產(chǎn)品標(biāo)準(zhǔn)化APP內(nèi)容識(shí)別閱讀：圖書id影視：視頻id音樂(lè)：音樂(lè)id……用戶上網(wǎng)日志資源庫(kù)閱讀類資源表應(yīng)用Book_id圖書資源信息i悅讀0102983圖書名稱、作者……………………商戶類資源表應(yīng)用item_id商戶資源信息大眾點(diǎn)評(píng)0102983商戶名稱、地址…………………………識(shí)別：視頻名稱、頻道識(shí)別：圖書書名，作者識(shí)別：音樂(lè)名稱、演唱者、所屬專輯影視閱讀音樂(lè)上網(wǎng)內(nèi)容資源識(shí)別得到資源ID后，在資源庫(kù)中查詢智能爬蟲沉淀資源ID與資源信息的對(duì)應(yīng)關(guān)系可識(shí)別：商戶名稱、電話、地址、人均消費(fèi)商戶提供外部數(shù)據(jù)標(biāo)準(zhǔn)化數(shù)據(jù)接口目錄數(shù)據(jù)獲取研究項(xiàng)目背景和理解1軟課題項(xiàng)目工作內(nèi)容2亞信相關(guān)研究成果介紹3項(xiàng)目投入資源與成果4外部數(shù)據(jù)獲取相關(guān)建設(shè)應(yīng)用案例

亞信在這些項(xiàng)目中進(jìn)行外部數(shù)據(jù)獲取和管理運(yùn)用到多個(gè)中國(guó)移動(dòng)、中國(guó)聯(lián)通、中國(guó)電信流量運(yùn)營(yíng)分析、經(jīng)營(yíng)分析系統(tǒng)、大數(shù)據(jù)系統(tǒng)等相關(guān)系統(tǒng)，積累了豐富的大數(shù)據(jù)類平臺(tái)的建設(shè)經(jīng)驗(yàn)，具有豐富的系統(tǒng)建設(shè)、支撐、業(yè)務(wù)運(yùn)營(yíng)的實(shí)施經(jīng)驗(yàn)。訪問(wèn)URL采集與解析終端資源采集與解析應(yīng)用資源采集與解析終端信息整合一經(jīng)終端信息庫(kù)和GSM協(xié)會(huì)終端信息資料應(yīng)用信息整合用戶使用應(yīng)用的數(shù)據(jù)統(tǒng)計(jì)內(nèi)容信息整合用戶上網(wǎng)訪問(wèn)內(nèi)容分類信息可為省內(nèi)終端運(yùn)維、新終端識(shí)別和定制終端定價(jià)策略提供支撐可為應(yīng)用識(shí)別運(yùn)維、自有應(yīng)用推廣策略等提供數(shù)據(jù)支撐互聯(lián)網(wǎng)內(nèi)容熱點(diǎn)關(guān)聯(lián)用戶瀏覽內(nèi)容統(tǒng)計(jì)后，有效對(duì)熱點(diǎn)內(nèi)容進(jìn)行捕捉，對(duì)用戶上網(wǎng)瀏覽內(nèi)容進(jìn)行預(yù)測(cè)移動(dòng)某省公司外部數(shù)據(jù)獲取及管理定期采集內(nèi)容型業(yè)務(wù)內(nèi)容及互聯(lián)網(wǎng)業(yè)務(wù)內(nèi)容，建立統(tǒng)一的內(nèi)容信息管理庫(kù)，支撐統(tǒng)一的用戶運(yùn)營(yíng)及內(nèi)容運(yùn)營(yíng)。采集內(nèi)容類型：閱讀、視頻、音樂(lè)、游戲五類。采集范圍：自有內(nèi)容、互聯(lián)網(wǎng)內(nèi)容全采集精聚合強(qiáng)運(yùn)營(yíng)1.2.3.自有內(nèi)容互聯(lián)網(wǎng)內(nèi)容通過(guò)基地平臺(tái)接入，內(nèi)容周期性更新從互聯(lián)網(wǎng)中抓取內(nèi)容，包括熱點(diǎn)視頻、歌曲等信息，進(jìn)行數(shù)據(jù)共享。熱門內(nèi)容信息展示內(nèi)容地址信息展示統(tǒng)一內(nèi)容分類標(biāo)簽關(guān)鍵詞查詢各業(yè)務(wù)內(nèi)容準(zhǔn)確把握最佳營(yíng)銷時(shí)機(jī)實(shí)現(xiàn)觸發(fā)式、任務(wù)式、調(diào)用式運(yùn)營(yíng)活動(dòng)的時(shí)機(jī)管理，準(zhǔn)確把握營(yíng)銷活動(dòng)發(fā)起時(shí)機(jī)精確洞察客戶內(nèi)容需求多層次、多角度集中分析客戶行為，從客戶的對(duì)全內(nèi)容的使用行為特征綜合把握客戶偏好，挖掘客戶需求，用于支撐用戶級(jí)內(nèi)容運(yùn)營(yíng)選擇最佳營(yíng)銷渠道選擇客戶偏好的渠道作為營(yíng)銷活動(dòng)的執(zhí)行渠道進(jìn)行自有渠道和互聯(lián)網(wǎng)渠道相結(jié)合，并統(tǒng)一協(xié)同內(nèi)容聚合管理內(nèi)容信息庫(kù)內(nèi)容審核內(nèi)容整合內(nèi)容收集內(nèi)容維護(hù)內(nèi)容分群移動(dòng)某省公司外部網(wǎng)頁(yè)數(shù)據(jù)獲取及應(yīng)用管理亞信構(gòu)建多省大數(shù)據(jù)交易市場(chǎng)，有著豐富的外部數(shù)據(jù)源，實(shí)現(xiàn)全面數(shù)據(jù)共享目錄數(shù)據(jù)獲取研究項(xiàng)目背景和理解1軟課題項(xiàng)目工作內(nèi)容2亞信相關(guān)研究成果介紹3項(xiàng)目投入資源與成果4項(xiàng)目研究方案：項(xiàng)目計(jì)劃安排編號(hào)任務(wù)項(xiàng)歷時(shí)（天）時(shí)間段1外部數(shù)據(jù)獲取現(xiàn)狀調(diào)研582015年10月至11月1.1項(xiàng)目啟動(dòng)會(huì)及技術(shù)交流31.2制定需求調(diào)研表51.3總部支撐系統(tǒng)客戶訪談51.4省公司支撐系統(tǒng)客戶訪談151.5需求調(diào)研反饋結(jié)果及訪談?dòng)涗浄治?01.6制作現(xiàn)狀調(diào)研分析報(bào)告102案例研究和資料收集202015年10月2.1國(guó)內(nèi)外案例研究以及收集72.2

調(diào)研互聯(lián)網(wǎng)公司產(chǎn)品和架構(gòu)102.3案例分析報(bào)告33完成兩級(jí)級(jí)聯(lián)的外部數(shù)據(jù)獲取及管理技術(shù)方案302015年11月3.1

收集到外部數(shù)據(jù)獲取及管理的需求53.2

產(chǎn)品和方案進(jìn)行對(duì)比分析53.3

制定外部數(shù)據(jù)獲取標(biāo)準(zhǔn)方案103.4制定兩級(jí)外部數(shù)據(jù)獲取及管理技術(shù)方案104完成外部數(shù)據(jù)獲取及管理工具原型進(jìn)行驗(yàn)證602015年12月至2016年1月4.1

提供并完成原型系統(tǒng)工具304.2

原型系統(tǒng)功能、性能、壓力測(cè)試204.3

原型系統(tǒng)驗(yàn)證報(bào)告105完成共享獲取外部數(shù)據(jù)形成標(biāo)準(zhǔn)數(shù)據(jù)產(chǎn)品標(biāo)準(zhǔn)352016年1月至2月5.1

制定外部數(shù)據(jù)標(biāo)準(zhǔn)205.2

制定外部數(shù)據(jù)權(quán)限105.3

完成外部數(shù)據(jù)共享56項(xiàng)目總結(jié)及評(píng)審252015年3月至4月項(xiàng)目研究方案：項(xiàng)目人員安排(1)姓名宋亮性別男大數(shù)據(jù)、BI工作年限11年學(xué)歷本科畢業(yè)學(xué)校東北大學(xué)聯(lián)系方作經(jīng)歷201309-至今

：負(fù)責(zé)中國(guó)移動(dòng)集團(tuán)集中化經(jīng)分系統(tǒng)規(guī)劃、設(shè)計(jì)和項(xiàng)目管理工作；201301-201309：負(fù)責(zé)中國(guó)移動(dòng)南方基地經(jīng)分系統(tǒng)規(guī)劃、設(shè)計(jì)和項(xiàng)目建設(shè)管理工作；2011年-2013年：負(fù)責(zé)中國(guó)移動(dòng)集團(tuán)浙江、山東、青海、重慶省份經(jīng)營(yíng)系統(tǒng)規(guī)劃、設(shè)計(jì)和項(xiàng)目建設(shè)管理工作；2008年-2011年：負(fù)責(zé)中國(guó)聯(lián)通集團(tuán)公司集中化經(jīng)分系統(tǒng)設(shè)計(jì)、規(guī)劃和項(xiàng)目建設(shè)管理工作；項(xiàng)目總負(fù)責(zé)人：現(xiàn)場(chǎng)項(xiàng)目經(jīng)理：姓名葉鵬性別男大數(shù)據(jù)、BI工作年限9年學(xué)歷本科畢業(yè)學(xué)校新疆大學(xué)聯(lián)系方作經(jīng)歷2008-2015年5月：負(fù)責(zé)新疆移動(dòng)經(jīng)營(yíng)分析系統(tǒng)規(guī)劃，參與集團(tuán)經(jīng)營(yíng)分析系統(tǒng)規(guī)范編制工作；2015年5月-至今：負(fù)責(zé)亞信數(shù)據(jù)大數(shù)據(jù)PAAS平臺(tái)技術(shù)架構(gòu)、設(shè)計(jì)工作。項(xiàng)目研究方案：項(xiàng)目人員安排(2)姓名龔靜性別女大數(shù)據(jù)、BI工作年限7年學(xué)歷研究生畢業(yè)學(xué)校吉林大學(xué)聯(lián)系方作經(jīng)歷2015年8月-至今

亞信DataHub產(chǎn)品總監(jiān)，負(fù)責(zé)DataHub產(chǎn)品設(shè)計(jì)、產(chǎn)品運(yùn)營(yíng)。2010年3月-2015年7月

中國(guó)移動(dòng)通信集團(tuán)南方基地南方基地（西藏）經(jīng)營(yíng)分析系統(tǒng)三期擴(kuò)容改造工程項(xiàng)目建設(shè)負(fù)責(zé)人，負(fù)責(zé)系統(tǒng)規(guī)劃、功能設(shè)計(jì)、建設(shè)。南方基地經(jīng)分云應(yīng)用項(xiàng)目

項(xiàng)目建設(shè)負(fù)責(zé)人，負(fù)責(zé)系統(tǒng)規(guī)劃、功能設(shè)計(jì)、建設(shè)。南方基地西藏經(jīng)營(yíng)分析系統(tǒng)二期擴(kuò)容改造工程項(xiàng)目建設(shè)負(fù)責(zé)人，負(fù)責(zé)系統(tǒng)規(guī)劃、功能設(shè)計(jì)、建設(shè)。2009年7月-2010年3月

廣東移動(dòng)業(yè)務(wù)支撐中心業(yè)務(wù)支撐中心系統(tǒng)運(yùn)營(yíng)，負(fù)責(zé)廣東移動(dòng)電子渠道（網(wǎng)廳、短廳、自助終端）系統(tǒng)運(yùn)營(yíng)管理。

姓名閻妍嬌性別女大數(shù)據(jù)、BI工作年限7年學(xué)歷碩士畢業(yè)學(xué)校北京航空航天大學(xué)聯(lián)系方作經(jīng)歷

201408-至今：負(fù)責(zé)大數(shù)據(jù)運(yùn)營(yíng)商（中國(guó)電信、中國(guó)聯(lián)通）及外圍行業(yè)（生命健康、餐飲連鎖）BI產(chǎn)品規(guī)劃、經(jīng)分云化、大數(shù)據(jù)平臺(tái)及應(yīng)用建設(shè)所需的IT咨詢、方案規(guī)劃及落地后需求分析工作，主要省分有電信總部、廣東電信、遼寧電信、河南電信、天津電信、湖南電信、北京聯(lián)通、山東聯(lián)通、吉林聯(lián)通、博奧生物、海底撈等2012年-2014年：負(fù)責(zé)中國(guó)聯(lián)通U-CLOUD（全國(guó)一級(jí)云平臺(tái)）從企業(yè)咨詢管理層面開(kāi)展頂層設(shè)計(jì)與核心需求工作；2006年-2012年：負(fù)責(zé)中國(guó)