大數(shù)據(jù)時(shí)代培訓(xùn)資料課件

呼嘯而至的大數(shù)據(jù)時(shí)代第一頁，共三十頁。背景案例?BACKGROUND馬云說：“當(dāng)我們還沒有弄清什么是個(gè)人計(jì)算機(jī)的時(shí)候，互聯(lián)網(wǎng)時(shí)代就到來了；當(dāng)我們還沒有弄清什么是互聯(lián)網(wǎng)的時(shí)候，大數(shù)據(jù)時(shí)代已經(jīng)到來了?！苯裉欤覀兊念^頂上有云，我們的雙腳下有網(wǎng)，我們的周圍布滿了難以計(jì)量的數(shù)據(jù)。氣勢(shì)磅礴的大數(shù)據(jù)颶風(fēng)正從世界深處向我們呼嘯奔騰而來。你做好準(zhǔn)備了嗎？

前言FOREWORD第二頁，共三十頁。目錄大數(shù)據(jù)的時(shí)代特點(diǎn)1大數(shù)據(jù)與人才需求2CONTENTS第三頁，共三十頁。大數(shù)據(jù)的時(shí)代特點(diǎn)

1.1大數(shù)據(jù)的定義大數(shù)據(jù)就是很大的數(shù)據(jù)。但是在不同領(lǐng)域，又有不同的狀況。大數(shù)據(jù)作為一種數(shù)據(jù)集合，當(dāng)我們使用這個(gè)概念的時(shí)候，實(shí)際包含有三層含義，一是數(shù)據(jù)很大；二是變化很快；三是構(gòu)成復(fù)雜。但是，大數(shù)據(jù)里面蘊(yùn)藏著大知識(shí)、大智慧、大價(jià)值和大發(fā)展。大數(shù)據(jù)不光是一大堆數(shù)據(jù)的存在，更重要的是大數(shù)據(jù)還是一種思維方式和管理、治理路徑。因此，應(yīng)該引起充分的重視。我認(rèn)為，對(duì)于企業(yè)營(yíng)銷來說，大數(shù)據(jù)的出現(xiàn)，乃是一個(gè)可以大幅度提升營(yíng)銷效果的良好契機(jī)。第四頁，共三十頁。1.2大數(shù)據(jù)是怎么出現(xiàn)的大數(shù)據(jù)是數(shù)據(jù)量變積累達(dá)到質(zhì)變的結(jié)果。比如，一張人騎馬的照片就是一個(gè)人在騎馬。但是，這張照片每秒就拍攝一張，如果每秒拍攝24張，照片就變成了電影。量變實(shí)現(xiàn)了質(zhì)變。當(dāng)今的世界，基本上一切都可以用數(shù)字表達(dá)，所以叫數(shù)字化的世界。紙質(zhì)上的數(shù)據(jù)，只是很小的一部分。我們每天生產(chǎn)的電視電影、錄音歌曲，手機(jī)拍攝的照片，衛(wèi)星拍攝的圖片，乃至個(gè)人計(jì)算機(jī)上記錄的數(shù)據(jù)，可以說達(dá)到了海量之大。我們每個(gè)人都是數(shù)據(jù)的制造者。包括你打開電視機(jī)，走進(jìn)電梯間，行駛在高速公路，以及下班路上超市購(gòu)物單據(jù)，無不留下數(shù)據(jù)的足跡。大數(shù)據(jù)的時(shí)代特點(diǎn)第五頁，共三十頁。

其實(shí)，早在很多年前，人們就開始對(duì)數(shù)據(jù)進(jìn)行利用。例如，航空公司就利用數(shù)據(jù)弄清楚應(yīng)該給機(jī)票如何確定價(jià)位，銀行利用數(shù)搞清楚應(yīng)該把款項(xiàng)貸給誰。但是，直到最近，大數(shù)據(jù)才成為一種說法，成為人們?nèi)粘Ｉ畹囊徊糠帧?/p>

谷歌與臉譜的出現(xiàn)，使大數(shù)據(jù)改變了游戲規(guī)則。當(dāng)他們面對(duì)較少用戶時(shí)，儲(chǔ)存他們的數(shù)據(jù)足跡不是困難事，但是面對(duì)超過10億的好友，1萬億的網(wǎng)頁搜索，就不得不創(chuàng)建新的技術(shù)，來儲(chǔ)存、分析激增的數(shù)據(jù)。其他公司起而效仿，于是，大數(shù)據(jù)風(fēng)生水起。大數(shù)據(jù)的時(shí)代特點(diǎn)第六頁，共三十頁。1.3大數(shù)據(jù)與云計(jì)算的關(guān)系那么，大數(shù)據(jù)與云計(jì)算又是什么關(guān)系呢？微軟的一位副總裁解釋說：大數(shù)據(jù)與“云計(jì)算”就像一枚鋼镚的兩個(gè)面，二者相輔相成。大數(shù)據(jù)相當(dāng)于儲(chǔ)有海量信息的信息庫(kù)；“云計(jì)算”相當(dāng)于計(jì)算機(jī)和操作系統(tǒng)。如果沒有大數(shù)據(jù)的信息積淀，“云計(jì)算”的能力再?gòu)?qiáng)大，也沒有用武之地。大數(shù)據(jù)與“云計(jì)算”二者結(jié)合起來，將給世界帶來一場(chǎng)深刻的管理技術(shù)革命與社會(huì)治理創(chuàng)新，當(dāng)然，人才管理也包括在內(nèi)。大數(shù)據(jù)的時(shí)代特點(diǎn)第七頁，共三十頁。1.4大數(shù)據(jù)重視事物的關(guān)聯(lián)性大數(shù)據(jù)有一個(gè)重要特點(diǎn)，就是“不講為什么，重視關(guān)聯(lián)性”。如果發(fā)現(xiàn)了某種關(guān)聯(lián)性。就可以加以利用。在人才流動(dòng)方面，國(guó)家發(fā)改委的研究人員發(fā)現(xiàn)了“榨菜指數(shù)”、“方便面指數(shù)”，就是它們的銷售量與國(guó)內(nèi)人才流動(dòng)流向高度重合。例：沃爾瑪?shù)哪虿计【菩?yīng)大數(shù)據(jù)的時(shí)代特點(diǎn)第八頁，共三十頁。1.5大數(shù)據(jù)的價(jià)值重在挖掘?qū)τ诖髷?shù)據(jù)，不僅要搜集它，更重要的是挖掘它。挖掘就是分析。目的是從中尋找關(guān)系、重點(diǎn)、規(guī)律，洞察其發(fā)展趨勢(shì)。這就為管理者提供了莫大的幫助。憑借大數(shù)據(jù)，管理者將可以大幅度提升各行各業(yè)管理水平、治理能力。大數(shù)據(jù)的時(shí)代特點(diǎn)第九頁，共三十頁。1.6大數(shù)據(jù)將顛覆諸多傳統(tǒng)以往，社會(huì)科學(xué)研究常用的“抽樣調(diào)查”，曾經(jīng)被認(rèn)為是社會(huì)文明得以建立的牢固基石，應(yīng)用很廣。其實(shí)，它只是在技術(shù)受到限制的特定時(shí)期，解決特定問題的一種無奈方法?，F(xiàn)在，已經(jīng)可以收集到過去無法收集到的信息，所以“樣本就等于全部”。而且這樣做，比使用抽樣調(diào)查方法得出的結(jié)論要準(zhǔn)確的多。有專家稱：大數(shù)據(jù)將顛覆13個(gè)行業(yè)?；ヂ?lián)網(wǎng)金融就是一個(gè)明顯的案例。大數(shù)據(jù)的時(shí)代特點(diǎn)第十頁，共三十頁。1.7大數(shù)據(jù)的本質(zhì)是洞察（1）洞察工作重點(diǎn)。美國(guó)紐約市就有大量的井蓋，但是作為管理部門，現(xiàn)在，每天只要打開50個(gè)井蓋就可以保證城市平安運(yùn)行了。為什么？原來他們對(duì)每個(gè)井蓋都安裝了感應(yīng)器，實(shí)時(shí)匯聚各方信息，掌握了重要信息情報(bào)。。（2）洞察未來趨勢(shì)。2008年，谷歌的一支研發(fā)團(tuán)隊(duì)利用網(wǎng)上搜集來個(gè)人搜索詞匯的海量數(shù)據(jù)，趕在流行病專家之前兩個(gè)星期，提前預(yù)測(cè)到甲型H1N1流感即將爆發(fā)。而且比專業(yè)機(jī)構(gòu)還要提前，還要準(zhǔn)確。大數(shù)據(jù)的時(shí)代特點(diǎn)第十一頁，共三十頁。

（3）洞察管理規(guī)律。汽車交通死亡事故，有沒有規(guī)律性？大數(shù)據(jù)告訴人們有。例如，在美國(guó)高峰在每天的晚六點(diǎn)到晚九點(diǎn)。而且越是天氣熱，問題越嚴(yán)重。這是大數(shù)據(jù)介入管理后發(fā)現(xiàn)的規(guī)律。美國(guó)汽車保有量是中國(guó)的3倍，但死亡人數(shù)是中國(guó)的二分之一。（4）洞察調(diào)度奧妙。農(nóng)夫山泉原來沒有利用大數(shù)據(jù)，造成統(tǒng)計(jì)速度極慢。數(shù)據(jù)匯總需要24小時(shí)。這樣，就避免不了亂調(diào)度、鬧笑話，制造混亂。利用大數(shù)據(jù)后，數(shù)據(jù)匯總只需0.67秒，而且可以實(shí)時(shí)獲得準(zhǔn)確數(shù)據(jù)，進(jìn)行科學(xué)調(diào)度。大數(shù)據(jù)的時(shí)代特點(diǎn)第十二頁，共三十頁。

（5）洞察客戶需求?，F(xiàn)在的電子商務(wù)非?；鸨?。他們掌握了大量商品訂單，而且知道好的生產(chǎn)廠家是誰。電商將會(huì)變成最牛的生產(chǎn)公司。（6）洞察員工表現(xiàn)。國(guó)外高科技企業(yè)要員工做“工作日志”，就是把你一天的工作用計(jì)算機(jī)記錄下來。比如，你平時(shí)培訓(xùn)學(xué)習(xí)的時(shí)間是多久？學(xué)習(xí)進(jìn)度如何？等等這些數(shù)據(jù)都可以記錄下來形成你的“勤奮鏡像”；再加上你最近與客戶聯(lián)系過多少次，客戶對(duì)你的反映如何等等。這不僅能夠知道員工的真實(shí)表現(xiàn)，而且可以提前干預(yù)，避免績(jī)效下降。大數(shù)據(jù)的時(shí)代特點(diǎn)第十三頁，共三十頁。

（7）洞察客戶誠(chéng)信。眾所周知，銀行利潤(rùn)的一個(gè)重要來源就是貸款。但是，貸款有風(fēng)險(xiǎn)，最大的風(fēng)險(xiǎn)就是屆時(shí)還不回來。因此，中央一再要求要幫助中小企業(yè)解決貸款困難，實(shí)際上誰都知道為什么總解決不了這個(gè)問題。問題就卡在銀行無法知道哪家企業(yè)到底經(jīng)營(yíng)狀況如何。連報(bào)表都真假難說?，F(xiàn)在，有的銀行開始與大數(shù)據(jù)聯(lián)合，與電商聯(lián)手。通過第三方電商獲取的大數(shù)據(jù)，提升了貸款準(zhǔn)確性，避免了賠本風(fēng)險(xiǎn)。（8）洞察合適人選。利用大數(shù)據(jù)找人，已經(jīng)有成熟方法。各行各業(yè)都可以做到。對(duì)黨政人才的選拔能不能一試？現(xiàn)在國(guó)外已經(jīng)開始通過大數(shù)據(jù)挑選電視劇本的合適演員。整個(gè)過程有觀眾、影視粉絲參與。而且可以預(yù)測(cè)票房?jī)r(jià)值。大數(shù)據(jù)的時(shí)代特點(diǎn)第十四頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代人類社會(huì)的前進(jìn)腳步

采集社會(huì)農(nóng)業(yè)社會(huì)

工業(yè)社會(huì)信息社會(huì)計(jì)算機(jī)時(shí)代（機(jī)器可讀，數(shù)據(jù)可算）

互聯(lián)網(wǎng)時(shí)代（信息傳遞，信息服務(wù)）

大數(shù)據(jù)時(shí)代（生活、工作與思維的大變革）第十五頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代人類歷史上的五次媒介革命人類利用信息的歷史，經(jīng)歷了五次革命，媒介革命催生了數(shù)據(jù)大爆炸。以歐洲信息儲(chǔ)存量為例，過去50年增長(zhǎng)100%，今后3年將增長(zhǎng)100%。

第一次史前時(shí)期

語言出現(xiàn)第二次公元前3500年

文字出現(xiàn)第三次15世紀(jì)

印刷術(shù)普及第四次19世紀(jì)中葉

電話、廣播、電視發(fā)明

第五次20世紀(jì)中后期至今計(jì)算機(jī)互聯(lián)網(wǎng)數(shù)字化第十六頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代大數(shù)據(jù)推進(jìn)認(rèn)知革命美國(guó)科學(xué)家說，大數(shù)據(jù)的影響?yīng)q如4個(gè)世紀(jì)之前人類發(fā)明了顯微鏡一樣，把人類對(duì)自然界的觀察與測(cè)量推進(jìn)到“細(xì)胞”的級(jí)別，從而給人類社會(huì)帶來歷史性的進(jìn)步與革命；今天的大數(shù)據(jù)將成為人類下一個(gè)觀察自身行為的“顯微鏡”。這個(gè)新的顯微鏡，不僅將擴(kuò)大人類的認(rèn)知范圍，推動(dòng)人類知識(shí)增長(zhǎng)，而且還將成為監(jiān)測(cè)社會(huì)與自然的“儀表盤”，引領(lǐng)世界新的經(jīng)濟(jì)發(fā)展與繁榮。第十七頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代信息時(shí)代的三大定律徐繼華等人在他們的著作中指出，要想理解大數(shù)據(jù)，必須弄清信息時(shí)代的三大定律。

第一定律：摩爾定律

1965年，英特爾創(chuàng)始人之一戈登.摩爾提出。該定律認(rèn)為，同一面積的集成電路上，可容納的晶體管數(shù)目每18個(gè)月翻一番，同時(shí)，性能提升一倍。也就是說，全世界對(duì)數(shù)據(jù)的儲(chǔ)存與處理越來越快，越來越方便，越來越便宜。第十八頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代吉爾德定律喬治.吉爾德提出。這個(gè)定律又叫“勝利者浪費(fèi)定律”。他說，成功的商業(yè)運(yùn)作，總是將價(jià)格最低的資源盡可能地消費(fèi)掉，以保留價(jià)格昂貴的資源。在蒸汽機(jī)時(shí)代，蒸汽機(jī)成本低于馬匹成本時(shí)，聰明的商人總是將蒸汽機(jī)投入使用。今天，廉價(jià)的資源是計(jì)算機(jī)及其網(wǎng)絡(luò)，所以，未來主干網(wǎng)帶寬將6個(gè)月翻一番，再往后，人們可以免費(fèi)上網(wǎng)，永遠(yuǎn)在線。第十九頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代麥特卡爾夫定律麥特卡爾夫是“以太網(wǎng)”發(fā)明人。該定律認(rèn)為，網(wǎng)絡(luò)的價(jià)值與其用戶的平方成正比。也就是，N個(gè)連結(jié)能創(chuàng)造出N的平方的效益。這個(gè)定律的核心思想是“物以多為貴”。上網(wǎng)的人數(shù)越多，創(chuàng)造的價(jià)值越大。我們已經(jīng)看到，無論是伊拉克戰(zhàn)爭(zhēng)，還是科索沃戰(zhàn)爭(zhēng)，轟炸目標(biāo)都選在網(wǎng)絡(luò)節(jié)點(diǎn)上。為什么？因?yàn)楣?jié)點(diǎn)對(duì)網(wǎng)絡(luò)的功能重要性大。

第二十頁，共三十頁。為什么叫大數(shù)據(jù)時(shí)代數(shù)據(jù)成為戰(zhàn)略資源人類儲(chǔ)存信息量的增長(zhǎng)速度比世界經(jīng)濟(jì)增長(zhǎng)速度快4倍，而計(jì)算機(jī)處理能力的增長(zhǎng)速度比世界經(jīng)濟(jì)增長(zhǎng)速度快9倍。今天大數(shù)據(jù)已經(jīng)成為解決各種世界難題的有力武器。在奧巴馬看來，大數(shù)據(jù)是未來的新石油，對(duì)它的占有與控制，猶如對(duì)領(lǐng)地權(quán)、制海權(quán)、制空權(quán)的控制，反映的是一個(gè)國(guó)家的核心能力之大小。因此，他已經(jīng)將大數(shù)據(jù)上升到國(guó)家戰(zhàn)略高度。未來的世界可能會(huì)劃分為大數(shù)據(jù)、小數(shù)據(jù)、無數(shù)據(jù)三個(gè)世界。第二十一頁，共三十頁。大數(shù)據(jù)是怎么工作的

數(shù)據(jù)+背景=信息信息+提煉=知識(shí)價(jià)值遞增的變化趨勢(shì)3.1解釋：數(shù)據(jù)、信息與知識(shí)

1.85--------------------------------------數(shù)據(jù)奧巴馬身高1.85m----------------------信息大多數(shù)黑人男性身高超過1.85m-----知識(shí)第二十二頁，共三十頁。大數(shù)據(jù)是怎么工作的3.2我們都在不停地制造數(shù)據(jù)現(xiàn)代人每天都在制造數(shù)據(jù)。早晨起來一打開電視，就記錄了你在觀看哪類節(jié)目；離家乘坐電梯，你就被錄像保存?zhèn)洳?；上班打開計(jì)算機(jī)，你一天干了什么全有記錄。就是下班路上上一趟超市買菜，也被記錄的清清楚楚。所以，我們每個(gè)人每天都在制造數(shù)據(jù)。同樣，每個(gè)單位也在不斷制造數(shù)據(jù)。還有遍布全市的感應(yīng)器不斷地把各種各樣的信息反饋到一個(gè)指定的地方。這些信息匯集起來是相當(dāng)龐大的數(shù)據(jù)。每天上傳到社交網(wǎng)站的照片2.5億張，如果打印出來，有80個(gè)埃菲爾鐵塔那么高。第二十三頁，共三十頁。大數(shù)據(jù)是怎么工作的

3.3數(shù)據(jù)大了就有價(jià)值

今天的世界，一切都可以數(shù)據(jù)化（感情大概比較難）。數(shù)據(jù)少了用處不大：數(shù)據(jù)大了就很有用處，就能夠變成價(jià)值。大數(shù)據(jù)的利用，發(fā)展?jié)摿Υ?，?yīng)用廣泛。第二十四頁，共三十頁。大數(shù)據(jù)是怎么工作的3.4大數(shù)據(jù)促進(jìn)就業(yè)

@信息公開促進(jìn)就業(yè)。由于推動(dòng)信息公開、透明與共享，使得內(nèi)部與外部利益相關(guān)者都提高了工作效率，產(chǎn)生了公共效益。例如，上海從2006年起，中國(guó)人民銀行上海總部公開金融信息后，催生了一批金融信息咨詢服務(wù)公司，拉動(dòng)了10幾萬人就業(yè)。第二十五頁，共三十頁。大數(shù)據(jù)是怎么工作的

3.5大數(shù)據(jù)的利用過程大數(shù)據(jù)的利用涉及到諸多環(huán)節(jié)：搜集、匯總、保存、管理、分析、呈現(xiàn)。它很像我們以往對(duì)能源的利用一樣，必須經(jīng)過開采、匯集、保管、提煉、使用，這樣一一對(duì)應(yīng)起來方便理解。數(shù)據(jù)倉(cāng)庫(kù)、數(shù)據(jù)挖掘、商業(yè)智能。這些詞匯，都可以使人產(chǎn)生聯(lián)想，打開數(shù)據(jù)利用的想象空間。你就這樣想吧——

天上有云，地上有網(wǎng)，中間有數(shù)據(jù)。也有學(xué)者把大數(shù)據(jù)處理劃分為四個(gè)階段——

（1）采集（利用多個(gè)數(shù)據(jù)庫(kù)接受發(fā)自客戶端的數(shù)據(jù)，并發(fā)數(shù)高）（2）導(dǎo)入/預(yù)處理（將數(shù)據(jù)導(dǎo)入到一個(gè)集中的大型分布式數(shù)據(jù)庫(kù)，做一些簡(jiǎn)單的清洗和預(yù)處理）（3）統(tǒng)計(jì)/分析（進(jìn)行普通分析和分類匯總）（4）挖掘（無預(yù)先設(shè)置的主題，在現(xiàn)有數(shù)據(jù)的基礎(chǔ)上進(jìn)行各種算法的計(jì)算，起到預(yù)測(cè)效果。有聚類等幾種典型的算法）現(xiàn)在人們常說，與大數(shù)據(jù)相關(guān)的技術(shù)與能力已經(jīng)成為一個(gè)國(guó)家至關(guān)重要的核心戰(zhàn)略資源。第二十六頁，共三十頁。社會(huì)需要大批大數(shù)據(jù)人才美國(guó)《哈佛商業(yè)評(píng)論》雜志認(rèn)為，21世紀(jì)最熱的職業(yè)是數(shù)據(jù)科學(xué)家。數(shù)據(jù)科學(xué)家的首要任務(wù)是，在數(shù)據(jù)的海洋中探索發(fā)現(xiàn)。他們要把散亂的數(shù)據(jù)變成結(jié)構(gòu)化的、可供分析的數(shù)據(jù)，找出豐富的數(shù)據(jù)源，整合可能不完整的數(shù)據(jù)源，并清理成結(jié)果數(shù)據(jù)集，從而幫助決策者穿梭于各種分析，揭示蘊(yùn)含在數(shù)據(jù)中的規(guī)律。到2015年，全球市場(chǎng)需要4