互聯(lián)網(wǎng)大數(shù)據(jù)庫

關(guān)于會議2014.1.8-北京-國家會議中心-大數(shù)據(jù)分會B關(guān)于會議關(guān)于會議關(guān)于會議新浪信息系統(tǒng)部高級數(shù)據(jù)挖掘經(jīng)理李云輝新浪大數(shù)據(jù)處理微軟托管技術(shù)高級架構(gòu)師王健籍CloudOS之力，鼓IDC云帆酷訊公司商業(yè)分析總負(fù)責(zé)人（BIleader）秦宇演講主題：大數(shù)據(jù)那些事阿里共享業(yè)務(wù)事業(yè)部數(shù)據(jù)挖掘?qū)＠顐鞲４笠?guī)模用戶行為數(shù)據(jù)分析樂蜂網(wǎng)大數(shù)據(jù)平臺部高級經(jīng)理羅萌樂蜂網(wǎng)大數(shù)據(jù)技術(shù)與應(yīng)用百度加速樂資深安全顧問秦波web安全大數(shù)據(jù)IBM新興市場部大數(shù)據(jù)中心總監(jiān)王曉梅大數(shù)據(jù)時代下的新機(jī)會，新價值關(guān)于會議關(guān)于會議關(guān)于主題2013出門不提大數(shù)據(jù)感覺都不是IDC圈的人！“大家還沒搞清PC時代的時候，移動互聯(lián)網(wǎng)來了，

還沒搞清移動互聯(lián)網(wǎng)的時候，大數(shù)據(jù)時代來了?！?/p>

——馬云BD大數(shù)據(jù)是啥？BDBD,為何你如此的屌！定義大數(shù)據(jù)？大交易數(shù)據(jù)大交互數(shù)據(jù)大數(shù)據(jù)集成大數(shù)據(jù)處理OLTPOLAP；數(shù)據(jù)倉庫社交媒體數(shù)據(jù)其他如（設(shè)備）HADOOP數(shù)據(jù)特征數(shù)據(jù)量速度多樣性價值TB->PB以上GB->TB持續(xù)，年增長60%數(shù)據(jù)量穩(wěn)定，增長不快多維數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)為主數(shù)據(jù)挖掘，預(yù)測統(tǒng)計和報表傳統(tǒng)數(shù)據(jù)大數(shù)據(jù)“大數(shù)據(jù)”指數(shù)據(jù)集的大小超過了現(xiàn)有典型的數(shù)據(jù)庫軟件和工具的處理能力。于此同時，及時捕捉、存儲、聚合、管理這些大數(shù)據(jù)以及對數(shù)據(jù)的深度分析的新技術(shù)和新能力。正在快速增長，就像摩爾定律一樣。 ——mckinneyglobalinstitute用大智慧去匹配大數(shù)據(jù)，探索新的價值?！R超TB->PB以上GB->TB持續(xù)，年增長60%數(shù)據(jù)量穩(wěn)定，增長不快多維數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)為主數(shù)據(jù)挖掘，預(yù)測統(tǒng)計和報表左右未來的四大趨勢社交網(wǎng)絡(luò)將不僅包含個人員，也將包括設(shè)備，以及產(chǎn)品的公司期待2013年使用內(nèi)部企業(yè)社交網(wǎng)絡(luò)應(yīng)用移動應(yīng)用程序下載首次超過PC銷售額的新開發(fā)應(yīng)用將集成分析功能左右未來的四大趨勢數(shù)據(jù)價值華爾街根據(jù)民眾情緒拋售股票；對沖基金依據(jù)購物網(wǎng)站的顧客評論，分

析企業(yè)產(chǎn)品銷售狀況；銀行根據(jù)求職網(wǎng)站的崗位數(shù)量，推斷就業(yè)率；投資機(jī)構(gòu)搜集并分析上市企業(yè)聲明，從中尋找破產(chǎn)的蛛絲馬跡；美國疾病控制和預(yù)防中心依據(jù)網(wǎng)民搜索，分析全球范圍內(nèi)流感等病疫的傳播狀況；6.美國總統(tǒng)奧巴馬的競選團(tuán)隊(duì)依據(jù)選民的微博，實(shí)時分析選民對總統(tǒng)競選人的喜好。對比傳統(tǒng)1.結(jié)構(gòu)化、關(guān)系性2.小樣本3.因果4.非實(shí)時1.數(shù)據(jù)全集2.大樣本（全集）3.關(guān)聯(lián)4.實(shí)時要求傳統(tǒng)數(shù)據(jù)大數(shù)據(jù)先行者們用大數(shù)據(jù)的人們啊，你們在干啥？淘寶雙11350億哪里來？阿里巴巴應(yīng)用業(yè)務(wù)系統(tǒng)離線建模任務(wù)提交調(diào)度管理數(shù)據(jù)源云梯業(yè)務(wù)系統(tǒng)在線數(shù)據(jù)天網(wǎng)調(diào)度數(shù)據(jù)挖掘服務(wù)器IDEGETWAY相似商品類目關(guān)聯(lián)相似店鋪用戶分群相似品牌購物周期品牌偏好價格偏好類目偏好店鋪偏好。。。搜索引擎推薦引擎投放系統(tǒng)。。。個性化LIST活動投放首頁搜索物流寶推薦。。。數(shù)據(jù)模型會員商家商品品牌物流會員分層體系會員誠信度評估用戶評價標(biāo)簽?zāi)挲g性別預(yù)測母嬰寶寶年齡預(yù)測用戶個性化偏好商家綜合排序商家成長指數(shù)商家誠信預(yù)警模型商家排序商品基本標(biāo)簽商品質(zhì)量評分關(guān)鍵屬性挖掘商品生命周期品牌分層模型品牌相識模型品牌排序模型品牌特性模型物流數(shù)據(jù)集市物流時效預(yù)測補(bǔ)貨模型分倉模型LBS模型數(shù)據(jù)集市基礎(chǔ)算法挖掘工具產(chǎn)品分析基礎(chǔ)支撐物流雷達(dá)350億！不容易！新浪大數(shù)據(jù)之路？全景圖用戶量大增長快產(chǎn)品多樣更新快海量數(shù)據(jù)處理能力hadoophbaseScribe\firehose需求量大變化快需求多樣計算復(fù)雜數(shù)據(jù)規(guī)范化易用化、擴(kuò)展能力數(shù)據(jù)倉庫業(yè)務(wù)數(shù)據(jù)集市SLA服務(wù)標(biāo)準(zhǔn)數(shù)據(jù)獲取周期長分析需求撞墻數(shù)據(jù)開放、安全管理能力數(shù)據(jù)指數(shù)自助統(tǒng)計查詢數(shù)據(jù)校準(zhǔn)管理業(yè)務(wù)多需穩(wěn)定計算實(shí)時性計算資源掌控能力資源管理調(diào)度系統(tǒng)實(shí)時計算數(shù)據(jù)穩(wěn)定性高數(shù)據(jù)口徑一致數(shù)據(jù)質(zhì)量管理能力數(shù)據(jù)質(zhì)量監(jiān)控異常返回分析元數(shù)據(jù)管理系統(tǒng)需求能力數(shù)據(jù)平臺建設(shè)路線服務(wù)體系數(shù)據(jù)倉庫hadoophbaseScribe\firehose調(diào)度系統(tǒng)監(jiān)控系統(tǒng)實(shí)時計算元數(shù)據(jù)管理系統(tǒng)分布式數(shù)據(jù)挖掘平臺hadoop優(yōu)化、hadoop2.0、數(shù)據(jù)分離高性能計算資源及數(shù)據(jù)管理各種主題倉庫數(shù)據(jù)倉庫各種主題倉庫第一階段第一階段第一階段面向普通用戶和企業(yè)用戶的實(shí)時查詢、統(tǒng)計分析系統(tǒng)各種服務(wù)體系應(yīng)用案例分詞詞庫情感詞庫分詞算法博文分析基礎(chǔ)分組興趣元距離用戶關(guān)系基礎(chǔ)用戶樣本庫用戶基礎(chǔ)視圖用戶屬性基礎(chǔ)用戶成熟度用戶影響力用戶行為基礎(chǔ)重點(diǎn)用戶流量監(jiān)測外部競爭基礎(chǔ)口碑模型用戶興趣圖譜話題識別內(nèi)容模型圈子屬性標(biāo)簽用戶圈子發(fā)現(xiàn)社區(qū)地位判別關(guān)系模型用戶狀態(tài)識別商業(yè)賬號識別商業(yè)模型用戶流失預(yù)測推薦模型用戶運(yùn)營模型多棲傾向發(fā)現(xiàn)競爭力模型競爭基礎(chǔ)輿情監(jiān)測微報告風(fēng)聲墻微指數(shù)風(fēng)云榜電影口碑六度人脈IBM我們準(zhǔn)備好了，你們來買吧！IBM金融犯罪管理解決方案方案案例分析師利用現(xiàn)有案例分析歷史數(shù)據(jù)，找出規(guī)律。業(yè)務(wù)規(guī)則分析師分解規(guī)則調(diào)查員使用IBM的ODMODM接受業(yè)務(wù)事件并執(zhí)行事件規(guī)則判斷，過來可以欺詐交易給規(guī)則引擎處理對于ODM規(guī)則引擎評分超過一定