大數(shù)據(jù)時代課件

大數(shù)據(jù)時代Iscoming……

二0一5年6月讀書觀后感大數(shù)據(jù)時代迄今為止全世界最好的一本大數(shù)據(jù)專著。

·《大數(shù)據(jù)時代》作者維克托·邁爾-舍恩伯格，大數(shù)據(jù)時代的預(yù)言家，《科學》《自然》等著名學術(shù)期刊最推崇的互聯(lián)網(wǎng)研究者之一，“大數(shù)據(jù)商業(yè)應(yīng)用第一人”，擁有在哈佛大學、牛津大學、耶魯大學和新加坡國立大學等多個互聯(lián)網(wǎng)研究重鎮(zhèn)任教的經(jīng)歷。內(nèi)容簡介

維克托·爾耶·舍恩伯格在本書中前瞻性地指出，大數(shù)據(jù)帶來的信息風暴正在變革我們的生活、工作和思維，大數(shù)據(jù)開啟了一次重大的時代轉(zhuǎn)型，并用三個部分講述了大數(shù)據(jù)時代的思維變革、商業(yè)變革和管理變革。

維克托最具洞見之處在于，他明確指出，大數(shù)據(jù)時代最大的轉(zhuǎn)變就是，放棄對因果關(guān)系的渴求，而取而代之關(guān)注相關(guān)關(guān)系。也就是說只要知道“是什么”，而不需要知道“為什么”。這顛覆了千百年來人類的思維慣例，對人類的認知和與世界交流的方式提出了全新的挑戰(zhàn)。

《大數(shù)據(jù)時代》認為大數(shù)據(jù)的核心就是預(yù)測。大數(shù)據(jù)將為人類的生活創(chuàng)造前所未有的可量化的維度。大數(shù)據(jù)已經(jīng)成為了新發(fā)明和新服務(wù)的源泉，而更多的改變正蓄勢待發(fā)。書中展示了谷歌、微軟、亞馬遜、IBM、蘋果、facebook、twitter、VISA等大數(shù)據(jù)先鋒們最具價值的應(yīng)用案例。大數(shù)據(jù)★《亞洲周刊》“年度十大好書”，持續(xù)暢銷；從0到1，開中國先河，領(lǐng)跑大數(shù)據(jù)時代最好的書，經(jīng)典之作——第一次詳盡講述“大數(shù)據(jù)浪潮”的來龍去脈；第一次深入解讀“大數(shù)據(jù)時代”如何改變政府、商業(yè)和我們每個人的生活；第一次犀利闡明“數(shù)據(jù)”怎樣推動民主進程……

涂子沛，著名信息管理專家，江西吉安人，曾在美國學習、工作多年，2014年12月從美國硅谷回國，出任阿里巴巴集團副總裁。本科畢業(yè)于華中科技大學計算機系，研究生就讀于卡內(nèi)基梅隆大學，獲公共管理碩士和信息技術(shù)科學碩士學位。赴美留學前，曾在武警部隊和公共部門磨礪10年，深刻洞悉中美兩國的科技動態(tài)和文化理念。作者還先后擔任上海真愛夢想基金會理事、中國旅美科技協(xié)會副主席等職務(wù)，并在國內(nèi)多所大學有客座教職?！洞髷?shù)據(jù)》這本書在中國社會開大數(shù)據(jù)之先河，引發(fā)了對大數(shù)據(jù)戰(zhàn)略、數(shù)據(jù)治國和開放數(shù)據(jù)的討論，被盛贊“為華文世界開創(chuàng)了一個重要話題”。作者的另一本著作《數(shù)據(jù)之巔》，提出當前信息技術(shù)的發(fā)展，已經(jīng)讓中國獲得了后發(fā)優(yōu)勢，中國要在大數(shù)據(jù)時代的全球競爭中勝出，需要把大數(shù)據(jù)從科技符號提升成為文化符號，在全社會倡導數(shù)據(jù)文化。大數(shù)據(jù)時代認識大數(shù)據(jù)大數(shù)據(jù)帶來的變革大數(shù)據(jù)背景下的企業(yè)管理大數(shù)據(jù)的商業(yè)價值大數(shù)據(jù)的風險facebook社交網(wǎng)絡(luò)淘寶、ebuy電子商務(wù)微博、Apps移動互聯(lián)21世紀是數(shù)據(jù)信息大發(fā)展的時代，移動互聯(lián)、社交網(wǎng)絡(luò)、電子商務(wù)等極大拓展了互聯(lián)網(wǎng)的邊界和應(yīng)用范圍，各種數(shù)據(jù)正在迅速膨脹并變大。互聯(lián)網(wǎng)（社交、搜索、電商）、移動互聯(lián)網(wǎng)（微博）、物聯(lián)網(wǎng)（傳感器，智慧地球）、車聯(lián)網(wǎng)、GPS、醫(yī)學影像、安全監(jiān)控、金融（銀行、股市、保險）、電信（通話、短信）都在瘋狂產(chǎn)生著數(shù)據(jù)。“大數(shù)據(jù)”的誕生：半個世紀以來，隨著計算機技術(shù)全面融入社會生活，信息爆炸已經(jīng)積累到了一個開始引發(fā)變革的程度。它不僅使世界充斥著比以往更多的信息，而且其增長速度也在加快。信息爆炸的學科如天文學和基因?qū)W，創(chuàng)造出了“大數(shù)據(jù)”這個概念*。如今，這個概念幾乎應(yīng)用到了所有人類智力與發(fā)展的領(lǐng)域中。大數(shù)據(jù)時代的背景迎接大數(shù)據(jù)時代的到來硬件成本的降低網(wǎng)絡(luò)帶寬的提升云計算的興起網(wǎng)絡(luò)技術(shù)的發(fā)展智能終端的普及電子商務(wù)、社交網(wǎng)絡(luò)、電子地圖等的全面應(yīng)用物聯(lián)網(wǎng)1.Volume2.Variety3.value4.Velocity結(jié)構(gòu)化數(shù)據(jù)、半結(jié)構(gòu)化數(shù)據(jù)和非結(jié)構(gòu)化數(shù)據(jù)如今的數(shù)據(jù)類型早已不是單一的文本形式，訂單、日志、音頻，對處理能力提出了更高的要求沙里淘金，價值密度低以視頻為例，一部一小時的視頻，在連續(xù)不間斷監(jiān)控過程中，可能有用的數(shù)據(jù)僅僅只有一兩秒。如何通過強大的機器算法更迅速地完成數(shù)據(jù)的價值“提純”是目前大數(shù)據(jù)洶涌背景下亟待解決的難題實時獲取需要的信息大數(shù)據(jù)區(qū)分于傳統(tǒng)數(shù)據(jù)最顯著的特征。如今已是ZB時代，在如此海量的數(shù)據(jù)面前，處理數(shù)據(jù)的效率就是企業(yè)的生命大數(shù)據(jù)是指無法在一定時間內(nèi)用傳統(tǒng)數(shù)據(jù)庫軟件工具對其內(nèi)容進行抓取、管理和處理的數(shù)據(jù)集合什么是BigData數(shù)據(jù)量巨大全球在2010年正式進入ZB時代，IDC預(yù)計到2020年，全球?qū)⒖偣矒碛?5ZB的數(shù)據(jù)量大數(shù)據(jù)精髓大數(shù)據(jù)的關(guān)鍵并非是數(shù)據(jù)的大，而是數(shù)據(jù)的全。我們通過多角度/多維度的記錄一個人的行為軌跡來判斷原本的本來面目，通過互聯(lián)網(wǎng)的數(shù)據(jù)歸集來對世界進行判斷。大數(shù)據(jù)能給我們帶來什么？？大數(shù)據(jù)時代全新的生活方式購物：不受時空限制，隨時隨地購物。在看不到商品的情況下，口碑就是質(zhì)量。大數(shù)據(jù)時代全新的生活方式旅行：足不出戶，安排好一切。大數(shù)據(jù)時代全新的思維方式分析事物時，依賴該事物的所有數(shù)據(jù)，不再是進行樣本分析。在大數(shù)據(jù)時代，允許不精確。更注重相關(guān)關(guān)系，而不是因果關(guān)系。TARGET公司與懷孕少女根據(jù)2012年6月16號紐約時報的一篇報道介紹了一個美國的父親很生氣的找到美國TARGET公司，因為TARGET公司說她女兒懷孕了，而他的女兒才15歲。但是1個月后他又來到了TARGET公司道歉承認他的女兒確實懷孕了，TARGET是一家優(yōu)惠券發(fā)行及網(wǎng)上零售公司，TARGET公司利用大數(shù)據(jù)發(fā)現(xiàn)懷孕的婦女有不同的購買習慣，比如懷孕3個月后會購買無香料的洗發(fā)水等，5-6個月后會買補品等，通過類似的搜索，發(fā)現(xiàn)相應(yīng)的客戶。大數(shù)據(jù)時代全新的商業(yè)模式《紙牌屋》。Netflix并不是任何一個電視臺，而是電視臺和電影院的平臺，是北美最大的付費訂閱視頻網(wǎng)站?；谄?000萬北美用戶觀看視頻時留下的行為數(shù)據(jù)，預(yù)測出凱文·史派西、大衛(wèi)·芬奇和“BBC出品”三種元素結(jié)合在一起的電視劇產(chǎn)品將會大火特火。此外，Netflix還通過“大數(shù)據(jù)”觀測到另一流行趨勢：越來越多的人不再像30年前那樣，在固定晚上的固定時刻守在電視機前，等著收看電視劇的最新劇集，而是“攢”起來，直到整季劇情全部播放完畢之后，才選一個自己方便的時間段和地點，在方便的設(shè)備（多數(shù)是網(wǎng)絡(luò)設(shè)備，如電腦、iPad）上一次性觀看。小時代小時代火爆-排片率達到了45%，為什么呢？我們在吐槽故事情節(jié)的狗血，空洞之余，為什么火爆？郭敬明的粉絲4000萬人+楊冪的粉絲/微博沃爾瑪啤酒與尿布沃爾瑪調(diào)查發(fā)現(xiàn)啤酒與尿布的銷量正相關(guān)，啤酒賣的多的時候，尿布的相應(yīng)也增加。此外沃爾瑪還發(fā)現(xiàn)刮暴風雨的時候，蛋撻賣的好，雨天的時候蛋糕賣的好，隨著氣溫的升高，三明治賣的好。=大數(shù)據(jù)與因果關(guān)系大數(shù)據(jù)將我們原來以原來思考問題的因果關(guān)系的判斷，直接打破，不需要推導的過程，不需要因果關(guān)系，直接要結(jié)果。商業(yè)社會直接利用啤酒與尿布/蛋糕與天氣來推銷與調(diào)劑庫存。在賣啤酒的柜臺附近放置尿布廣告/在雨天的時候，多庫存蛋糕，晴天少配置蛋糕，氣溫高的時候多賣三明治，正是這樣大數(shù)據(jù)分析使歐洲的蛋糕店利潤率提高了20%。馬云對2008年經(jīng)濟危機的預(yù)測話說馬云成功預(yù)測2008年經(jīng)濟危機，并幫助他成千上萬的中小制造商準備過冬的糧食。讓馬云贏得了崇高的聲譽。“2008年初,阿里巴巴平臺上整個買家詢盤數(shù)急劇下滑，歐美對中國采購在下滑。海關(guān)是賣了貨,出去以后再獲得數(shù)據(jù);而我們提前半年時間從詢盤上推斷出世界貿(mào)易發(fā)生變化了?！卑⒗锇桶偷拇髷?shù)據(jù)力量馬云對未來的預(yù)測，是建立在對用戶行文分析的基礎(chǔ)上。通常而言，買家在采購商品前，會比較多家供應(yīng)商的產(chǎn)品，反映到阿里巴巴網(wǎng)站統(tǒng)計數(shù)據(jù)中，就是查詢點擊的數(shù)量和購買點擊的數(shù)量會保持一個相對的數(shù)值，綜合各個維度的數(shù)據(jù)可建立用戶行為模型。因為數(shù)據(jù)樣本巨大，保證用戶行為模型的準確性。因此在這個案例中，詢盤數(shù)據(jù)的下降，自然導致買盤的下降大數(shù)據(jù)時代的企業(yè)管理數(shù)據(jù)從哪里來？數(shù)據(jù)怎么用？除了上帝，任何人都必須用數(shù)據(jù)來說話。數(shù)據(jù)來源于業(yè)務(wù)。量化一切，數(shù)據(jù)化的核心。大數(shù)據(jù)時代的企業(yè)信息化企業(yè)信息化管理的是大數(shù)據(jù)中的結(jié)構(gòu)化數(shù)據(jù)的那部分，因此精確度可以達到100%。管理設(shè)計合理+業(yè)務(wù)操作正確=正確的數(shù)據(jù)企業(yè)管理的數(shù)據(jù)數(shù)據(jù)是企業(yè)最寶貴的財富。2、基于業(yè)務(wù)數(shù)據(jù)的BI，分析數(shù)據(jù)挖掘數(shù)據(jù)寶藏，為決策提供數(shù)據(jù)依據(jù)。---數(shù)據(jù)的價值在于應(yīng)用！3、大數(shù)據(jù)在企業(yè)管理中的應(yīng)用1）預(yù)測

預(yù)測對企業(yè)的各項職能活動包括采購原材料、擴充機器設(shè)備、補充人員等需要……3、大數(shù)據(jù)在企業(yè)管理中的應(yīng)用2）更有效地組織企業(yè)以節(jié)省資金

把ERP作為整個企業(yè)的通訊系統(tǒng)，使得企業(yè)整體合作的意識和作用加強。通過準確和及時的信息傳遞，把大家的精力集中在同一個方向上，以工作流程的觀點和方式來運營和管理企業(yè)，而不是把企業(yè)看作是一個個部門的組合。在這種情況下，特別是在市場銷售和生產(chǎn)制造部門之間可以形成從未有過的、深刻的合作，共同努力滿足客戶需求，贏得市場。

案例：使用新的大數(shù)據(jù)源，可以使供應(yīng)鏈中的物流業(yè)可以變得更高效。送貨的卡車內(nèi)的電子車載定位功能可以告訴我們他們在哪里、通過結(jié)合道路狀況、交通信息和天氣條件以及客戶的位置等數(shù)據(jù)，驅(qū)動送貨的卡車進行最優(yōu)路徑的運送，可以大大節(jié)省您的時間和金錢。3、大數(shù)據(jù)在企業(yè)管理中的應(yīng)用3）真正實時的了解客戶案例：亞馬遜已然將這一點做到了極致，他們?yōu)榭蛻敉扑]的產(chǎn)品絕不是一個巧合。亞馬遜的推薦引擎完全是基于客戶在過去一段時間的購買行為所做的：客戶的購物車中所收藏的商品、客戶喜歡的商品、其它用戶瀏覽或購買的商品。亞馬遜使用的該算法，為每位客戶定制了專屬的個人主頁。利用該策略是：該公司在其第三財政季度期間銷售增長27%，達到了131.8億美元，而去年同期的銷售額則為96億美元。使用互連的社交媒體數(shù)據(jù)、移動數(shù)據(jù)、網(wǎng)絡(luò)分析和其他數(shù)據(jù)分析，企業(yè)可以充分了解每一位客戶，實時的知道他們想要什么，以及何時想要。真正了解客戶，意味著可以結(jié)合客戶的個性化特點，給出有針對性的建議或顯示廣告。PRADA的芯片PRADA在紐約的旗艦店每件衣服上安裝了一個芯片，在每件衣服在拿到試衣室的時候會在試衣室的門上感應(yīng)一下，同時利用每件衣服最終銷售了哪些，通過這些數(shù)據(jù)的交叉就會發(fā)現(xiàn)哪些衣服看上去款式很好，可能因為一些剪

cai等原因就不好銷售，因此就容易發(fā)現(xiàn)問題，進行相應(yīng)的調(diào)整，通過這樣的方法PRADA就上升了15%.互聯(lián)網(wǎng)金融互聯(lián)網(wǎng)金融在服務(wù)中小企業(yè)融資及個人消費貸款等方面具有獨特的優(yōu)勢，包括貸款審批流程簡單、放款速度快、產(chǎn)品類型豐富多樣等。例如，專注于小微企業(yè)融資服務(wù)的阿里信貸，利用其天然優(yōu)勢，即阿里巴巴B2B、淘寶、支付寶等電子商務(wù)平臺上客戶積累的信用數(shù)據(jù)及行為數(shù)據(jù)，引入網(wǎng)絡(luò)數(shù)據(jù)模型和在線資信調(diào)查模式，通過交叉檢驗技術(shù)輔以第三方驗證確認客戶信息的真實性，將客戶在電子商務(wù)網(wǎng)絡(luò)平臺上的行為數(shù)據(jù)映射為企業(yè)和個人的信用評價，向這些通常無法在傳統(tǒng)金融渠道獲得貸款的弱勢群體批量發(fā)放“金額小、期限短、隨借隨還”的小額貸款。其淘寶商戶貸流程包括：3分鐘申請、沒有人工審批、1秒到款到賬。近年來，互聯(lián)網(wǎng)金融發(fā)展勢頭異常迅猛，其中阿里金融自2010年成立以來，已累計為超過13萬家的中小企業(yè)提供融資服務(wù)，貸款總額達280億，2012年上半年就累計發(fā)放貸款130億，新增獲貸企業(yè)4萬家，不良貸款率為僅為0.72%。

互聯(lián)網(wǎng)金融模式不僅可以達到與直接融資和間接融資一樣的資源配置效率，而且還能大幅減少交易成本。中國投資有限責任公司副總經(jīng)理謝平指出，20年后“互聯(lián)網(wǎng)直接融資市場”或“互聯(lián)網(wǎng)金融模式”，可能形成一個既不同于商業(yè)銀行間接融資、也不同于資本市場直接融資的第三種金融運行機制。GOOLGO的無人駕駛汽車GoogleDriverlessCar是谷歌公司的GoogleX實驗室研發(fā)中的全自動駕駛汽車，不需要駕駛者就能啟動、行駛以及停止。目前正在測試，已駕駛了48萬公里。項目由Google街景的共同發(fā)明人塞巴斯蒂安·特龍（SebastianThrun）領(lǐng)導。這些車輛使用照相機、雷達感應(yīng)器和激光測距機來“看”其他的交通狀況，并且使用詳細地圖來為前方的道路導航。谷歌說，這些車輛比有人駕駛的車更安全，因為它們能更迅速、更有效地作出反應(yīng)。車頂上的掃描器發(fā)射64束激光射線，然后激光碰到車輛周圍的物體，又反射回來，這樣就計算出了物體的距離。另一套在底部的系統(tǒng)測量出車輛在三個方向上的加速度、角速度等數(shù)據(jù)，然后再結(jié)合GPS數(shù)據(jù)計算出車輛的位置，所有這些數(shù)據(jù)與車載攝像機捕獲的圖像一起輸入計算機，軟件以極高的速度處理這些數(shù)據(jù)。這樣，系統(tǒng)就可以非常迅速的作出判斷。將谷歌地圖/谷歌街景等測繪的大量數(shù)據(jù)與汽油相結(jié)合。未來的將翻譯人員及律師等白領(lǐng)將失業(yè)目前IBM已經(jīng)研發(fā)出來了一個及時翻譯的穿戴式設(shè)備，通過該穿戴式設(shè)備，可以在0.7秒內(nèi)將阿拉伯語翻譯成英文。當這樣的設(shè)備將會迅速的替代翻譯人員。故宮的電子導覽器與導游律師/中介，通過互聯(lián)網(wǎng)大數(shù)據(jù)的信息流逐漸的壓扁了，減少了原來的信息流的不對稱等。大數(shù)據(jù)的市場空間及對社會的貢獻數(shù)據(jù)的再利用：由于在信息價值鏈中的特殊位置，有些公司可能會收集到大量的數(shù)據(jù)，但他們并不急需使用也不擅長再次利用這些數(shù)據(jù)。例如，移動電話運營商手機用戶的位置信息來傳輸電話信號，這對以他們來說，數(shù)據(jù)只有狹窄的技術(shù)用途。但當它被一些發(fā)布個性化位置廣告服務(wù)和促銷活動的公司再次利用時，則變得更有價值。大數(shù)據(jù)價值鏈的3大構(gòu)成：數(shù)據(jù)本身、技能與思維其中三者兼具的有谷歌公司，谷歌在剛開始收集數(shù)據(jù)的時候就已經(jīng)有多次使用數(shù)據(jù)的想法。比方說，它的街景采集車手機全球定位系統(tǒng)數(shù)據(jù)不光是為了創(chuàng)建谷歌地圖，也是為了制成全自動汽車以及谷歌眼鏡等與實景交匯的產(chǎn)品。未來，企業(yè)會依靠洞悉數(shù)據(jù)中的信息更加了解自己，也更加了解客戶?！洞髷?shù)據(jù)時代》傳統(tǒng)行業(yè)最終都會轉(zhuǎn)變?yōu)榇髷?shù)據(jù)行業(yè)，無論是金融服務(wù)也、醫(yī)藥還是制造業(yè)。大數(shù)據(jù)的應(yīng)用互聯(lián)網(wǎng)公司受益于大數(shù)據(jù)中國工程院院士鄔賀銓說道，“智慧城市是使用智能計算技術(shù)使得城市的關(guān)鍵基礎(chǔ)設(shè)施的組成和服務(wù)更智能、互聯(lián)和有效，隨著智慧城市的建設(shè)，社會將步入“大數(shù)據(jù)”時代?！敝腔壅?wù)智慧交通智慧電網(wǎng)智慧教育智慧醫(yī)療……公共管理部門受益于大數(shù)據(jù)根據(jù)國家信息中心信息化研究部統(tǒng)計，目前我國提出智慧城市建設(shè)的城市總數(shù)已達到154個，預(yù)計投資規(guī)模超過1.5萬億元。智慧城市必將產(chǎn)生大數(shù)據(jù)，利用大數(shù)據(jù)的思維來改變公共管理部門的形象。醫(yī)療可利用多種大數(shù)據(jù)手段臨床操作