大數(shù)據(jù)分析的應(yīng)用和產(chǎn)品

大數(shù)據(jù)分析的應(yīng)用和產(chǎn)品大數(shù)據(jù)分析的應(yīng)用和產(chǎn)品大數(shù)據(jù)分析的應(yīng)用和產(chǎn)品V:1.0精細(xì)整理，僅供參考大數(shù)據(jù)分析的應(yīng)用和產(chǎn)品日期：20xx年X月大數(shù)據(jù)分析的應(yīng)用和產(chǎn)品大數(shù)據(jù)很火。2月18日，微軟宣布投資三家中國云計(jì)算和大數(shù)據(jù)公司。2月19日，IBM宣布將與AT&T在大數(shù)據(jù)分析領(lǐng)域展開合作——AT&T計(jì)劃貢獻(xiàn)出一個(gè)全球可訪問的移動(dòng)網(wǎng)絡(luò)，用來收集數(shù)據(jù)并將其發(fā)送至應(yīng)用程序；IBM公司則主要致力于生產(chǎn)用于數(shù)據(jù)管理和分析的軟件?！白x心術(shù)”、“未卜先知”，都是大數(shù)據(jù)分析頭上的耀眼光環(huán)。不管你信不信，“數(shù)據(jù)”真的會(huì)說話。人們?cè)诨ヂ?lián)網(wǎng)上的一切行為都會(huì)留下數(shù)據(jù)，而通過對(duì)這些數(shù)據(jù)的分析，就能夠得到消費(fèi)習(xí)慣、職業(yè)、喜好甚至性格等信息。在這些信息的基礎(chǔ)上，政府可以治理交通，減少犯罪率，而企業(yè)則可以利用這些數(shù)據(jù)進(jìn)行有針對(duì)性的營銷，提升業(yè)績。雖然目前大數(shù)據(jù)分析還處于發(fā)展的初級(jí)階段，要從海量的非結(jié)構(gòu)性數(shù)據(jù)中提取出有用信息并不是一件容易的事兒，但是很多企業(yè)已經(jīng)開始利用大數(shù)據(jù)分析并推出了相關(guān)的應(yīng)用和產(chǎn)品。大數(shù)據(jù)分析究竟能做什么大數(shù)據(jù)分析又正在做什么讓我們一起來看看吧！洞察“人類大遷徙”“春運(yùn)”，被譽(yù)為人類歷史上規(guī)模最大、有周期性的人類大遷徙。過去，我們只是粗略地知道在40天左右的時(shí)間里，有幾十億人次的人口流動(dòng)。現(xiàn)在，隨著大數(shù)據(jù)時(shí)代的到來，我們可以描繪出能夠揭露更多細(xì)節(jié)的“遷徙地圖”。2014年的春運(yùn)，央視首次推出了“據(jù)說春運(yùn)”特別節(jié)目，基于“百度遷徙”提供的可視化大數(shù)據(jù)服務(wù)，實(shí)時(shí)播報(bào)國內(nèi)春節(jié)人口的遷徙情況，例如最熱門的遷出城市，最熱門的遷入城市等等。盡管采用的是大數(shù)據(jù)這一當(dāng)前最時(shí)髦的科技手段，但淺顯易懂的“遷徙地圖”，還是幾乎讓每個(gè)老百姓都看得明白。那么，這張“遷徙地圖”是如何繪制的呢原理上其實(shí)并不復(fù)雜。目前，幾乎每個(gè)中國人都擁有一部手機(jī)，而每部手機(jī)每一天基本上都會(huì)產(chǎn)生3次與位置相關(guān)的數(shù)據(jù)：既包括來自基站的數(shù)據(jù)，也包括用戶在使用定位、導(dǎo)航等與位置相關(guān)服務(wù)時(shí)產(chǎn)生的數(shù)據(jù)。因此，只要調(diào)用一個(gè)用戶春運(yùn)路程的起點(diǎn)和終點(diǎn)數(shù)據(jù)，并在樣本量足夠多的前提下，就可以繪制出能夠反映真實(shí)情況的“遷徙地圖”。透過“遷徙地圖”，人們就可以知道春運(yùn)的種種細(xì)節(jié)，這的確是件新鮮事兒。例如，“遷徙地圖”北京和成都之間的遷徙路線連續(xù)幾天成為最熱門的線路。事實(shí)上，這一通過數(shù)據(jù)采集和分析得出的結(jié)果，也與成都鐵路局的實(shí)際統(tǒng)計(jì)情況非常吻合，這顯然證明了大數(shù)據(jù)分析是很“靠譜兒”的一種手段。超級(jí)“營銷顧問”有沒有人比你自己還了解你的購物需求這并不是一個(gè)偽命題。通過精準(zhǔn)的大數(shù)據(jù)分析，有些消費(fèi)行為是可以被預(yù)測出來的。WeatherCo是美國一家能夠基于對(duì)人們查看天氣情況的時(shí)間、地點(diǎn)和頻次的分析預(yù)測消費(fèi)者行為的機(jī)構(gòu)。該公司積累了超過75年的氣象信息，覆蓋北美等地區(qū)的天氣、云量等方面的數(shù)據(jù)?；谶@些大數(shù)據(jù)，WeatherCo不僅能為用戶提供單純的天氣信息，而且可以通過數(shù)據(jù)挖掘，分析天氣會(huì)對(duì)用戶消費(fèi)產(chǎn)生什么影響。比如，某位消費(fèi)者有在下雨天購買零食的習(xí)慣，那么，當(dāng)他下次查詢到天氣預(yù)報(bào)可能有雨時(shí)，系統(tǒng)會(huì)自動(dòng)推送一些優(yōu)惠的零食商品信息給他。這種對(duì)用戶消費(fèi)行為的預(yù)判，不僅能讓用戶感受到一種全新的購物體驗(yàn)，而且還可以吸引那些對(duì)廣告投放精準(zhǔn)度要求較高的廣告主。例如，WeatherCo發(fā)現(xiàn)，在達(dá)拉斯，殺蟲劑在春天露點(diǎn)（濕度指標(biāo)）低于平均水平的時(shí)候會(huì)非常熱銷；但在波士頓殺蟲劑則是在春天露點(diǎn)高于平均水平的時(shí)候暢銷。寶潔的營銷總監(jiān)KevinCrociata表示，根據(jù)WeatherCo的特定數(shù)據(jù)，結(jié)合女性消費(fèi)者所處的準(zhǔn)確位置和天氣，可幫助投放高度精準(zhǔn)的廣告。他指出，對(duì)于在高溫濕熱地區(qū)查看天氣的女士，就應(yīng)該向她推送柔順產(chǎn)品；而如果處于低濕度的地區(qū)，她的頭發(fā)沒有彈性，那就應(yīng)該向她投放富彈性配方的洗發(fā)水廣告。今年1月，天津市大數(shù)據(jù)科技專項(xiàng)“大數(shù)據(jù)算法及其應(yīng)用”項(xiàng)目在天津大學(xué)啟動(dòng)。該項(xiàng)目可通過對(duì)海量數(shù)據(jù)集合分析，實(shí)現(xiàn)數(shù)據(jù)查詢，挖掘有用信息，通過記錄消費(fèi)者的網(wǎng)絡(luò)消費(fèi)行為，分析、計(jì)算出消費(fèi)者詳細(xì)的消費(fèi)習(xí)慣。想象一下，未來的網(wǎng)絡(luò)購物也許不是你去尋找商品，而是商品主動(dòng)推送到你面前，這樣的體驗(yàn)是不是很值得期待制作熱門電視劇Netflix是美國的一家在線視頻網(wǎng)站，其最近名聲大噪。這主要得益于其用大數(shù)據(jù)分析結(jié)果制作的電視劇《紙牌屋》在全世界40多個(gè)國家熱播，其股價(jià)也在短期內(nèi)實(shí)現(xiàn)了飆升。用大數(shù)據(jù)分析結(jié)果制作電視劇，這聽起來還真是非常有意思，Netflix是如何做到的呢早期，Netflix是北美家喻戶曉的在線影片租賃提供商，主營業(yè)務(wù)是通過郵寄方式租賃DVD。然而，在互聯(lián)網(wǎng)時(shí)代，這個(gè)盈利模式逐漸式微。于是，Netflix轉(zhuǎn)向在線流媒體播放，但轉(zhuǎn)型并不成功，一直被資本市場唱空。直到Netflix發(fā)現(xiàn)了“數(shù)據(jù)”的價(jià)值。據(jù)悉，Netflix在美國擁有2700萬訂閱用戶，每天用戶在Netflix上產(chǎn)生3000多萬個(gè)行為，同時(shí)用戶每天還會(huì)給出400多萬個(gè)評(píng)分以及300萬次搜索請(qǐng)求。借助這些數(shù)據(jù)，Netflix非常清楚用戶想看什么，也知道具備了哪些元素的電視劇將可能一夜爆紅。Netflix的工程師發(fā)現(xiàn)，喜歡BBC劇、導(dǎo)演大衛(wèi)·芬奇和老戲骨凱文·史派西的用戶存在交集，一部影片如果同時(shí)滿足這幾個(gè)要素，就可能大賣。Netflix決定賭一把，他們花1億美元買下了一部早在1990年就播出的BBC電視劇《紙牌屋》的版權(quán)（幾乎是美國一般電視劇價(jià)錢的兩倍），并請(qǐng)來大衛(wèi)·芬奇擔(dān)任導(dǎo)演，凱文·史派西擔(dān)當(dāng)男主角。事實(shí)證明Netflix賭對(duì)了?！都埮莆荨烦蔀榱薔etflix網(wǎng)站上有史以來觀看量最高的劇集，并在美國及40多個(gè)國家大熱。在嘗到了“大數(shù)據(jù)”的甜頭之后，Netflix正在著手推出更多基于大數(shù)據(jù)分析的自制電視劇。而Netflix將大數(shù)據(jù)分析技術(shù)應(yīng)用于電視劇制作中的做法，也得到了業(yè)界的認(rèn)可。有評(píng)論甚至認(rèn)為，Netflix已經(jīng)不再是視頻網(wǎng)站Youtube和Hulu的競爭對(duì)手，而已經(jīng)成為HBO未來的榜樣。貼身“愛情導(dǎo)師”你戀愛了嗎要擱以往，這問題的被問者肯定是當(dāng)事人自己。然而，現(xiàn)在世道真的變了，社交網(wǎng)站可能比你自己更早知道你的感情狀況。這一切都得拜大數(shù)據(jù)分析功能所賜。Facebook在今年情人節(jié)后發(fā)布了一張統(tǒng)計(jì)圖，表明了一個(gè)時(shí)間點(diǎn)前后某個(gè)賬戶的發(fā)帖數(shù)量變化，在這個(gè)時(shí)間點(diǎn)前的發(fā)帖量明顯高于之后，說明在這個(gè)時(shí)間點(diǎn)你戀愛了。Facebook數(shù)據(jù)研究部門科學(xué)家團(tuán)隊(duì)發(fā)現(xiàn)，利用網(wǎng)站的統(tǒng)計(jì)數(shù)據(jù)，可以判斷發(fā)帖的用戶是否、何時(shí)擦出了愛的火花。同傳統(tǒng)線下結(jié)為戀人的過程類似，社交網(wǎng)絡(luò)的用戶確立戀愛關(guān)系也會(huì)經(jīng)歷所謂的“求愛”階段。Facebook的科學(xué)家卡洛斯·迪烏克透露，沿著時(shí)間軸觀察，在一段網(wǎng)戀的求愛期，兩位Facebook用戶的發(fā)帖都會(huì)增多。而一旦真正認(rèn)準(zhǔn)了對(duì)方就是意中人，兩人在對(duì)方Facebook留言板上發(fā)的帖子都會(huì)減少，原因可能是共浴愛河的戀人花了更多的時(shí)間在線下相處。迪烏克介紹說，通過大量數(shù)據(jù)發(fā)現(xiàn)，在成為戀人之前的100天里，日后墜入情網(wǎng)的兩人相互發(fā)帖的數(shù)量緩慢地逐步增加。假設(shè)戀情正式開始的那天是“第零天”，這類帖子的數(shù)量是從“第零天”起越來越少。我們發(fā)現(xiàn)，“第零天”之前的12天里發(fā)帖數(shù)量達(dá)到高峰，平均每天發(fā)貼；而“第零天”以后的85天里發(fā)帖量最少，平均每天發(fā)貼。數(shù)據(jù)還顯示了另一個(gè)有趣的趨勢，即在告別單身之后，情侶之間普遍愛意大漲，互動(dòng)的內(nèi)容會(huì)越來越甜蜜，傳遞正能量。正如Facebook公布的趨勢線所示，在“第零天”和“第零天”之后的第一天，戀人之間發(fā)帖數(shù)量劇增。而通過大數(shù)據(jù)挖掘和分析，F(xiàn)acebook甚至還得出“一段戀愛關(guān)系能維持三個(gè)月以上時(shí)間，很可能會(huì)持續(xù)四年甚至更久”，“戀人分手可能性最大的月份是5月、6月和7月”等有趣的結(jié)論。這么說來，以后咱們?cè)僖膊挥谜倚睦韼熁蚴敲苡旬?dāng)愛情參謀了，大數(shù)據(jù)就能一手搞定！未卜先知的“預(yù)言帝”通過對(duì)歷史有效數(shù)據(jù)的分析，創(chuàng)建不受任何特別年份因素干擾的統(tǒng)計(jì)模型，然后根據(jù)歷史數(shù)據(jù)進(jìn)行測試、校正和不斷升級(jí)，最終這一模型就能夠預(yù)測未來。這一切聽起來是不是有些不可思議然而來自微軟紐約研究院的一名經(jīng)濟(jì)學(xué)家，利用大數(shù)據(jù)分析，成功預(yù)言了2012年美國大選選舉結(jié)果和2013年奧斯卡頒獎(jiǎng)禮獎(jiǎng)項(xiàng)歸屬，準(zhǔn)確性高于98%。2014年3月2日，第86屆奧斯卡頒獎(jiǎng)典禮將如約在杜比劇院舉行。提名入圍者誰將最終捧得小金人，是各界熱議的焦點(diǎn)，也成為各大博彩公司的熱門盤口。然而就在2013年，第85屆奧斯卡頒獎(jiǎng)禮的懸念卻被提前揭曉了，做到這一點(diǎn)的就是大數(shù)據(jù)分析。大衛(wèi)·羅斯柴爾德是微軟紐約研究院的一名經(jīng)濟(jì)學(xué)家，他率領(lǐng)的團(tuán)隊(duì)通過對(duì)入圍影片相關(guān)數(shù)據(jù)分析，成功預(yù)測出第85屆奧斯卡頒獎(jiǎng)禮13項(xiàng)大獎(jiǎng)的結(jié)果。而且早在2012年美國總統(tǒng)選舉中，大衛(wèi)·羅斯柴爾德就曾經(jīng)使用一個(gè)通用的數(shù)據(jù)驅(qū)動(dòng)型模型，準(zhǔn)確預(yù)測了美國50個(gè)州和哥倫比亞特區(qū)共計(jì)51個(gè)選區(qū)中50個(gè)地區(qū)的選舉結(jié)果，準(zhǔn)確性高于98%。大衛(wèi)在接受采訪時(shí)表示，“我預(yù)測奧斯卡金像獎(jiǎng)得主的方法與預(yù)測其他事情的方法完全相同，其中包括政治?？茖W(xué)是相同的，但證明哪些數(shù)據(jù)最有用卻存在千差萬別?！贝笮l(wèi)團(tuán)隊(duì)的工作方法是，首先關(guān)注最有效的數(shù)據(jù)，然后創(chuàng)建不受任何特別年份結(jié)果干擾的統(tǒng)計(jì)模型，在建模時(shí)要非常謹(jǐn)慎，確保模型能夠正確預(yù)測將來樣本結(jié)果，而不僅僅是過去發(fā)生的結(jié)果。投票數(shù)據(jù)、預(yù)測市場數(shù)據(jù)、基本數(shù)據(jù)和用戶產(chǎn)生的數(shù)據(jù)，這四種不同類型的數(shù)據(jù)是關(guān)注的重點(diǎn)。大衛(wèi)表示，在預(yù)測奧斯卡時(shí)，“我更關(guān)注的是預(yù)測市場數(shù)據(jù)，這是主要因素，同時(shí)采用部分用戶產(chǎn)生的數(shù)據(jù)，這有助于理解電影內(nèi)部和不同類別之間的相關(guān)度。”大衛(wèi)團(tuán)隊(duì)的實(shí)踐充分證明了大數(shù)據(jù)分析成為“預(yù)測帝”的能力。人們可以通過較為完善的建模，進(jìn)行快速的數(shù)據(jù)處理和分析，并讓這一分析結(jié)果用于商業(yè)用途。打造“神速”快遞網(wǎng)購如今已是人們喜愛的一種購物方式。在網(wǎng)購過程中，物流的及時(shí)性是影響消費(fèi)者體驗(yàn)的一個(gè)重要環(huán)節(jié)，每到“雙11”、春節(jié)這樣的網(wǎng)購高峰期，物流都會(huì)成為各大電商頭疼的問題。于是，很多電商企業(yè)通過自建物流的方式來改善用戶體驗(yàn)，但這畢竟是一項(xiàng)投資巨大的工程，有沒有什么其他辦法大數(shù)據(jù)正是一個(gè)非常合適的選擇。亞馬遜在去年12月獲得了一項(xiàng)名為“預(yù)測式發(fā)貨”的新專利。該專利通過對(duì)用戶數(shù)據(jù)進(jìn)行分析，在用戶還沒有下單購物前，就提前發(fā)出包裹。亞馬遜表示，這項(xiàng)技術(shù)可以壓縮消費(fèi)者從下單到收貨之間的時(shí)間間隔，在改善用戶體驗(yàn)的同時(shí)，也提升用戶的網(wǎng)購意愿。美國市場研究公司ForresterResearch分析師SucharitaMulpuru表示：“亞馬遜似乎在充分利用他們龐大的數(shù)據(jù)。根據(jù)他們對(duì)用戶的種種了解，他們便可依據(jù)多種因素來預(yù)測需求?！边@種預(yù)測式發(fā)貨的基礎(chǔ)，正是亞馬遜多年來在個(gè)人信息、消費(fèi)偏好和購物數(shù)據(jù)方面積累的龐大用戶數(shù)據(jù)?；诖髷?shù)據(jù)分析，亞馬遜可以構(gòu)建自己的競爭優(yōu)勢。有評(píng)論認(rèn)為，亞馬遜對(duì)谷歌構(gòu)成挑戰(zhàn)的關(guān)鍵之處就在于大數(shù)據(jù)。具體來說，亞馬遜會(huì)根據(jù)以往訂單和其他因素，比如商品搜索記錄、收藏