大數(shù)據(jù)思考與報(bào)告

1、大數(shù)據(jù)(shj)不僅僅是第七次信息革命！From 第一頁，共三十三頁。134什么(shn me)是大數(shù)據(jù)精彩(jn ci)案例大數(shù)據(jù)可以(ky)做什么contents2大數(shù)據(jù)的背后推手第二頁，共三十三頁。引言(ynyn)第一次信息(xnx)革命第二次信息(xnx)革命第三次信息革命第四次信息革命第五次信息革命第六次信息革命語言的創(chuàng)造猿人信息得以交流和傳遞文字的出現(xiàn)信息可以被儲(chǔ)存在文字中進(jìn)行傳播，解決了語言的時(shí)間和空間的局限性印刷術(shù)的發(fā)明擴(kuò)大了信息的交流、傳遞的容量和范圍無線電的發(fā)明電磁波傳播信息，速度增長幾十億倍電視的出現(xiàn)聲音、圖片影像、文字實(shí)現(xiàn)同時(shí)遠(yuǎn)距離實(shí)時(shí)傳播（摘自人民出版社大數(shù)據(jù)領(lǐng)導(dǎo)干部

2、讀本）計(jì)算機(jī)與互聯(lián)網(wǎng)的使用突破了人類大腦及感覺器官加工利用信息的能力，人類進(jìn)入信息社會(huì)時(shí)代第三頁，共三十三頁。引言(ynyn)第七次信息(xnx)革命？現(xiàn)在我們(w men)正經(jīng)歷著一場信息革命。這不是在技術(shù)上、機(jī)器設(shè)備上、軟件上或速度上的一場革命，而是一場“概念”上的革命。以往50年信息技術(shù)的重點(diǎn)在“技術(shù)”上，目的在于提升信息傳播范圍、傳播能力和傳播效率。而新的信息革命的重點(diǎn)將會(huì)在“信息”上。彼得德魯克 21世紀(jì)的管理挑戰(zhàn)第四頁，共三十三頁。一、什么(shn me)是大數(shù)據(jù)？0103什么(shn me)是大數(shù)據(jù)大數(shù)據(jù)(shj)的特點(diǎn)02大數(shù)據(jù)的地位第五頁，共三十三頁。第一個(gè)吃螃蟹公司(n s

3、)：亞馬遜成立于1995年，一開始只是個(gè)網(wǎng)上書店；最早借助“購書評論”這一數(shù)據(jù)提升銷售業(yè)績，并成功轉(zhuǎn)型、跨界?，F(xiàn)在已成為全球商品(shngpn)品種最多的網(wǎng)上零售商、全球第二大互聯(lián)網(wǎng)企業(yè)、全球最大的云計(jì)算服務(wù)提供商。2022年2月，Brand Finance發(fā)布2022年度全球500強(qiáng)品牌榜單，亞馬遜排名第三。1.什么(shn me)是大數(shù)據(jù)第六頁，共三十三頁。1.什么(shn me)是大數(shù)據(jù)IDC 將大數(shù)據(jù)定義(dngy)為4個(gè)V：Volume、Velocity、Variety、Value大數(shù)據(jù)不僅僅是“大的數(shù)據(jù)”。21世紀(jì)前10年第七頁，共三十三頁。阿里巴巴CTO王堅(jiān)認(rèn)為，大數(shù)據(jù)的重點(diǎn)是在

4、線。在線數(shù)據(jù)，由數(shù)以億計(jì)的公民記者（citizen journalist，指互聯(lián)網(wǎng)上參與式報(bào)道的普通民眾）收集、組織、發(fā)布，又被無數(shù)(wsh)的用戶閱讀、傳播和反饋，其形式包括數(shù)值、文本、圖像、視頻等多種多樣。社交媒體的產(chǎn)生，數(shù)據(jù)開始呈現(xiàn)爆炸式的增長，大數(shù)據(jù)的提法開始進(jìn)入大眾的視野并獲得了越來越多的關(guān)注。2.大數(shù)據(jù)(shj)的特點(diǎn)在線第八頁，共三十三頁。2.大數(shù)據(jù)(shj)的特點(diǎn)類型多75%網(wǎng)絡(luò)日志、音頻、視頻、圖片、地理位置信息社交媒體中產(chǎn)生的數(shù)據(jù)25%“1、2、3、4”等傳統(tǒng)數(shù)字以及符號(hào)非結(jié)構(gòu)化數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)第九頁，共三十三頁。2.大數(shù)據(jù)(shj)的特點(diǎn)容量大美國(mi u)的國會(huì)圖書館5

5、000百度(bi d)每天處理數(shù)據(jù)量根據(jù)IDC（國際數(shù)據(jù)公司）的監(jiān)測統(tǒng)計(jì)，2022年全球數(shù)據(jù)總量已經(jīng)達(dá)到1.8ZB，而這個(gè)數(shù)值還在以每兩年翻一番的速度增長，預(yù)計(jì)到2022年全球?qū)⒖偣矒碛?5ZB的數(shù)據(jù)量，增長近20倍，相當(dāng)于我們地球上所有海灘沙?？倲?shù)的57倍。截至2022年，人類擁有的信息總量大概是1.2Z存儲(chǔ)數(shù)據(jù)量最大的圖書館之一。2022年4月，擁有235TB的數(shù)據(jù)一首歌4M10241024一部電影1G1024一圖書館藏書1T1024谷歌每小時(shí)處理1P13億中國人人手1本500頁書的信息量總和=1E1024吉（G）兆（M）太（T）拍（P）艾（E）澤（Z）約為5000個(gè)美國圖書館總和第十頁，

6、共三十三頁。2.大數(shù)據(jù)(shj)的特點(diǎn)數(shù)據(jù)產(chǎn)生得快一臺(tái)大型粒子對撞機(jī)里共有1.5億個(gè)傳感器每秒鐘發(fā)生粒子對撞6億次僅僅使用十萬分之一一年積累25PB的數(shù)據(jù)1TB的硬盤25000個(gè)剔除99.999%數(shù)據(jù)處理速度快大數(shù)據(jù)通過云計(jì)算，以上數(shù)據(jù)儲(chǔ)存僅需20分鐘共計(jì)1PB，速度1G/s，還剩144小時(shí)已完成50%存取速度快第十一頁，共三十三頁。9、 人的價(jià)值，在招收誘惑的一瞬間被決定。2022/9/12022/9/1Thursday, September 1, 202210、低頭要有勇氣，抬頭要有低氣。2022/9/12022/9/12022/9/19/1/2022 10:27:44 PM11、人總是珍

7、惜為得到。2022/9/12022/9/12022/9/1Sep-2201-Sep-2212、人亂于心，不寬余請。2022/9/12022/9/12022/9/1Thursday, September 1, 202213、生氣是拿別人做錯(cuò)的事來懲罰自己。2022/9/12022/9/12022/9/12022/9/19/1/202214、抱最大的希望，作最大的努力(n l)。01 九月 20222022/9/12022/9/12022/9/115、一個(gè)人炫耀什么，說明他內(nèi)心缺少什么。九月 222022/9/12022/9/12022/9/19/1/202216、業(yè)余生活要有意義，不要越軌。20

8、22/9/12022/9/101 September 202217、一個(gè)人即使已登上頂峰，也仍要自強(qiáng)不息。2022/9/12022/9/12022/9/12022/9/1第十二頁，共三十三頁。2.大數(shù)據(jù)(shj)的特點(diǎn)應(yīng)用價(jià)值大大數(shù)據(jù)之“大”，其實(shí)并不在于(ziy)其表面的“大容量”，而在于(ziy)其潛在的“大價(jià)值”。如果不能把擁有的數(shù)據(jù)轉(zhuǎn)化為價(jià)值，那么擁有再多的數(shù)據(jù)也是毫無意義的。個(gè)人位置大數(shù)據(jù)服務(wù)8000億美元的市場規(guī)模麥肯錫研究院對美國(mi u)的測算零售業(yè)大數(shù)據(jù)幫助企業(yè)增加60%的利潤制造業(yè)大數(shù)據(jù)降低50%的產(chǎn)品開發(fā)制造裝配成本第十三頁，共三十三頁。2.大數(shù)據(jù)(shj)的特點(diǎn)具備大

9、智能更加智能的社會(huì)傳感器、可穿戴式設(shè)備等微小的計(jì)算設(shè)備將進(jìn)一步普及“萬物皆互聯(lián)、無處不計(jì)算”實(shí)時(shí)收集數(shù)據(jù)確保安全行駛谷歌無人駕駛汽車第十四頁，共三十三頁。農(nóng)耕時(shí)代最重要的資源是土地(td)工業(yè)時(shí)代最重要的資源是石油信息時(shí)代最重要的資源是？數(shù)據(jù)數(shù)據(jù)數(shù)據(jù)3.大數(shù)據(jù)(shj)的地位第十五頁，共三十三頁。很多做語音識(shí)別的公司，技術(shù)(jsh)上相當(dāng)，屬于同一代技術(shù)(jsh)。大公司都在做語音識(shí)別，包括Google、微軟在內(nèi)?？拼笥嶏w憑什么笑傲中文語音識(shí)別？一個(gè)重要的原因是：數(shù)據(jù)數(shù)據(jù)數(shù)據(jù)科大訊飛擁有最多的中文語音數(shù)據(jù)！3.大數(shù)據(jù)的地位(dwi)：一個(gè)例子同一代技術(shù)第十六頁，共三十三頁。123保存數(shù)據(jù)的能力

10、(nngl)在增強(qiáng)處理數(shù)據(jù)的能力(nngl)在增強(qiáng)生產(chǎn)(shngchn)數(shù)據(jù)的能力在增強(qiáng)二、大數(shù)據(jù)的 背后推手第十七頁，共三十三頁。1.隨著存儲(chǔ)器硬件能力的提升，人類保存(bocn)數(shù)據(jù)的能力在增強(qiáng)世界上第一款硬盤IBM商用硬盤存儲(chǔ)器一兆字節(jié)(z ji)的存儲(chǔ)量需要6000多美元1955年2022年一兆字節(jié)(z ji)的存儲(chǔ)量僅需要0.005美分2022年1T硬盤=一杯咖啡的錢=一個(gè)圖書館的全部信息第十八頁，共三十三頁。2.隨著物聯(lián)網(wǎng)技術(shù)的發(fā)展，機(jī)器生產(chǎn)(shngchn)數(shù)據(jù)的能力在增強(qiáng)機(jī)器產(chǎn)生的數(shù)據(jù)傳感器感知和運(yùn)輸不斷(bdun)生產(chǎn)的數(shù)據(jù)移動(dòng)設(shè)備(shbi)收集了大量的用戶數(shù)據(jù)第十九頁，共

11、三十三頁。2.隨著互聯(lián)網(wǎng)經(jīng)濟(jì)的發(fā)展，人類生產(chǎn)數(shù)據(jù)的能力(nngl)在增強(qiáng)人創(chuàng)造的數(shù)據(jù)社交(shjio)媒體及互聯(lián)網(wǎng)經(jīng)濟(jì)的發(fā)展移動(dòng)設(shè)備(shbi)收集了大量的用戶數(shù)據(jù)記錄各自的活動(dòng)和行為留下支付行為、空間位置、興趣愛好、信用歷史等發(fā)微博 寫微信網(wǎng)上購物每個(gè)網(wǎng)民都是數(shù)據(jù)的生產(chǎn)者第二十頁，共三十三頁。在線數(shù)據(jù)的積累，受益于互聯(lián)網(wǎng)的飛速發(fā)展?；ヂ?lián)網(wǎng)基礎(chǔ)設(shè)施（包括TCP/IP協(xié)議、http協(xié)議、超鏈接等）是在線數(shù)據(jù)積累的基礎(chǔ)。人類在互聯(lián)網(wǎng)上的一切活動(dòng)，都被這些(zhxi)互聯(lián)網(wǎng)基礎(chǔ)設(shè)施忠實(shí)地記錄下來，因此在線數(shù)據(jù)不但快速積累，而且更加客觀。在線數(shù)據(jù)的客觀性表現(xiàn)在，人們只要在互聯(lián)網(wǎng)上，無論瀏覽、點(diǎn)擊、評論

12、，都會(huì)產(chǎn)生一系列上網(wǎng)者都沒有注意到的在線數(shù)據(jù)。2.人類生產(chǎn)數(shù)據(jù)的能力在增強(qiáng)，而且(r qi)會(huì)被自動(dòng)記錄下來第二十一頁，共三十三頁。3.隨著(su zhe)云計(jì)算的誕生與發(fā)展，人類處理數(shù)據(jù)的能力在增強(qiáng)A 大數(shù)據(jù)B 云計(jì)算云計(jì)算一般由數(shù)量驚人的計(jì)算機(jī)群構(gòu)成，谷歌云計(jì)算擁有的服務(wù)器超過100萬臺(tái)；云計(jì)算系統(tǒng)是一個(gè)極其龐大的資源池子，用戶可以隨時(shí)、隨地、按需靈活地購買，就像購買煤氣和自來水一樣(yyng)便利；云計(jì)算讓普通人體驗(yàn)每秒10萬億次的運(yùn)算能力。而如此強(qiáng)大的計(jì)算能力，可以模擬核爆炸、預(yù)測氣候變化和市場發(fā)展趨勢。第二十二頁，共三十三頁。 三、大數(shù)據(jù)可以(ky)做什么？0103大數(shù)據(jù)可以(ky)

13、發(fā)現(xiàn)規(guī)律大數(shù)據(jù)可以應(yīng)對(yngdu)變化02大數(shù)據(jù)是跨界的推動(dòng)力第二十三頁，共三十三頁。這不是一個(gè)笑話，而是發(fā)生在美國沃爾瑪連鎖店超市的真實(shí)案例，并一直為商家所津津樂道。原來，美國的婦女們經(jīng)常會(huì)囑咐她們的丈夫下班以后要為孩子買尿布。而丈夫在買完尿布之后又要順手買回自己愛喝的啤酒，因此啤酒和尿布在一起購買的機(jī)會(huì)還是很多的。 是什么讓沃爾瑪發(fā)現(xiàn)了尿布和啤酒之間的關(guān)系呢？正是商家通過對超市一年多交易的大數(shù)據(jù)進(jìn)行(jnxng)詳細(xì)的分析，才發(fā)現(xiàn)了這對神奇的組合。1.大數(shù)據(jù)可以發(fā)現(xiàn)(fxin)規(guī)律第二十四頁，共三十三頁。人生如棋，棋如人生！世界上唯一不變的就是變化！。 從棋盤盤面可能出現(xiàn)的形狀來看：圍棋

14、由181枚黑子和180枚白子組成，棋盤由縱橫19道線形成的361個(gè)交叉點(diǎn)組成。每一個(gè)點(diǎn)都可能處出現(xiàn)下黑子、下白子或空著不擺子三種情況。那么，361個(gè)交叉點(diǎn)，就有3的361次方變化的可能。從一盤棋下棋開始的每一步的變化則是：棋盤由縱橫19道線形成的361個(gè)交叉點(diǎn)組成，第一步可以下的有361個(gè)點(diǎn)，第二步則是360個(gè)點(diǎn)可以選擇(xunz)，這樣理論上就是361360359358357321個(gè)變化的可能。2.大數(shù)據(jù)可以應(yīng)對(yngdu)變化（在狹小的領(lǐng)域內(nèi)）第二十五頁，共三十三頁。未來所有(suyu)汽車，每個(gè)部件都是聯(lián)網(wǎng)的，在你撞車那一秒，京東就已知道哪個(gè)部件必須更換、哪個(gè)部件只需維修。撞車那一刻，

15、京東的理賠就已經(jīng)到位；你還沒把車拖到4s店，京東就已經(jīng)把需要更換的配件全部送達(dá)。車險(xiǎn)欺詐很嚴(yán)重，很多利潤被4S店剝走，配件價(jià)格不透明。遍布全國的京東12萬快遞員，未來既送快遞，還擔(dān)起保險(xiǎn)員，無論是上門服務(wù)還是現(xiàn)場勘探定損，都極其恐怖！這是一個(gè)跨界打劫你，卻無力反擊的時(shí)代！這是一個(gè)你醒來太慢，就不用再醒來的時(shí)代！3.大數(shù)據(jù)(shj)是跨界的推動(dòng)力第二十六頁，共三十三頁。1234大數(shù)據(jù)讓政府治理更精準(zhǔn)(jn zhn)透明大數(shù)據(jù)(shj)讓公共服務(wù)更智慧大數(shù)據(jù)讓金融投資(tu z)更理性大數(shù)據(jù)讓經(jīng)濟(jì)治理更有效 四、精彩案例第二十七頁，共三十三頁。1.大數(shù)據(jù)讓政府(zhngf)治理更精準(zhǔn)透明設(shè)計(jì)人員編

16、入流感關(guān)鍵詞，如溫度計(jì)、流感癥狀、肌肉疼痛、胸悶等只要用戶輸入這些關(guān)鍵詞，系統(tǒng)就會(huì)展開跟蹤分析，創(chuàng)建地區(qū)流感圖表和流感地圖預(yù)測出世界上不同國家和地區(qū)的流感傳播情況2009年，甲型H1N1流感暴發(fā)的幾周前，“谷歌流感趨勢”成功預(yù)測了流感在美國境內(nèi)的傳播，其分析結(jié)果甚至具體到特定的地區(qū)和州，并非常及時(shí)，令公共衛(wèi)生官員備感震驚。而傳統(tǒng)上，美國疾病控制中心要在流感暴發(fā)一兩周之后才可以做到這些。谷歌流感趨勢谷歌工程師認(rèn)為，搜索流感信息的人數(shù)與實(shí)際患病人數(shù)之間存在密切關(guān)聯(lián)。谷歌一周(y zhu)疫情報(bào)告第二十八頁，共三十三頁。2.大數(shù)據(jù)讓經(jīng)濟(jì)(jngj)治理更有效支付寶“芝麻信用”“芝麻信用分”，授權(quán)開通

17、后，每個(gè)支付寶用戶(yngh)都可以看到自己的芝麻信用分。分?jǐn)?shù)越高代表信用程度越好，違約可能性越低。天貓?zhí)詫毺詫氹娪八M(fèi)電費(fèi)工商學(xué)歷學(xué)籍公安內(nèi)部(nib)數(shù)據(jù)外部數(shù)據(jù)支付寶網(wǎng)購相關(guān)行為數(shù)據(jù)政府已經(jīng)開放的外部數(shù)據(jù)芝麻信用分高芝麻信用分低租車、住酒店無押金簽證無需財(cái)產(chǎn)證明找不到工作租不到房子貸不到款第二十九頁，共三十三頁。3.大數(shù)據(jù)(shj)讓公共服務(wù)更智慧高德(o d)導(dǎo)航高德公司基于位置服務(wù)(fw)大數(shù)據(jù)的能力，與烏鎮(zhèn)、古北水鎮(zhèn)兩家旅游公司合作，上線了全國首個(gè)“智慧景區(qū)”服務(wù)(fw)，解決游客在景區(qū)容易遇到的迷路、擁堵、排隊(duì)等問題。地圖渲染高德在地圖上增加游覽車、游船的線路地址，增加了重要景點(diǎn)

18、的渲染圖分類篩選商店、衛(wèi)生間餐廳、燈景區(qū)重要地點(diǎn)信息一目了然導(dǎo)游語音當(dāng)游客走到某個(gè)對應(yīng)景點(diǎn)附近，導(dǎo)游語音會(huì)自動(dòng)播放智慧景區(qū)引入熱力圖，游客可以看到該處游客人數(shù)的多少，合理安排游覽時(shí)間第三十頁，共三十三頁。4.大數(shù)據(jù)(shj)讓金融投資更理性量化投資(tu z)量化投資是指通過數(shù)量化方式及計(jì)算機(jī)程序化發(fā)出買賣指令，以獲取穩(wěn)定收益為目的的交易方式。作為一個(gè)概念，量化投資并不算新，國內(nèi)投資者早有耳聞。但真正的量化基金在國內(nèi)還比較罕見(hn jin)。同時(shí)，機(jī)器學(xué)習(xí)的發(fā)展也對量化投資起了促進(jìn)作用。量化選股利用數(shù)量化的方法選擇股票組合，期望該股票組合能夠獲得超越基準(zhǔn)收益率的投資行為這也是機(jī)構(gòu)投資者最普遍采用的策略。量化擇時(shí)利用數(shù)據(jù)來判斷大勢的走勢情況，是上漲還是下跌或者是盤整。高頻交易從那些人們無法利用的極為短暫的市場變化中尋求獲利的計(jì)算機(jī)化交易。算法交易利用電子平臺(tái)，輸入涉及算法的指令，以執(zhí)行預(yù)先設(shè)定好的交易策略。由“機(jī)器人”發(fā)起指令，而無需人工干預(yù)。第三十一頁，共三十三頁。9、 人的價(jià)值，在招收誘惑的一瞬間被決定。2022/9/12022/9/1Thursday, September 1, 202210、低頭要有勇氣，抬頭要有低氣。2022/9/12022/9/12022/9/19/1/2022 10:27:44 PM11、人總是