《大數(shù)據(jù)時代》簡介

樂山師范學(xué)院文學(xué)與新聞學(xué)院2012級新聞班徐瑜梅李培謙黃冰冰張亞慶

胡雪梅周凱頔蔣敏焦倩茹2015年5月8日前瞻性地指出，大數(shù)據(jù)帶來的信息風(fēng)暴正在變革我們的生活、工作和思維，大數(shù)據(jù)開啟了一次重大的時代轉(zhuǎn)型，并用三個部分講述了大數(shù)據(jù)時代的思維變革、商業(yè)變革和管理變革。維克托.邁爾.舍恩伯格引言1、大數(shù)據(jù)變革公共衛(wèi)生2、大數(shù)據(jù)變革商業(yè)3、大數(shù)據(jù)變革思維4、大數(shù)據(jù)開啟時代轉(zhuǎn)型5、預(yù)測是大數(shù)據(jù)的核心6、大數(shù)據(jù)是大挑戰(zhàn)1、大數(shù)據(jù)變革公共衛(wèi)生2009年的甲型h1n1流感，在短短幾周之內(nèi)迅速傳播。互聯(lián)網(wǎng)巨頭谷歌公司的工程師們設(shè)立一個系統(tǒng)關(guān)注特定檢索詞條的頻繁使用與流感在時間和空間上的傳播之間的聯(lián)系。軟件發(fā)現(xiàn)了45條檢索詞條的組合，一旦將它們用于一個數(shù)學(xué)模型，他們的預(yù)測與官方數(shù)據(jù)的相關(guān)性高達97%。和疾控中心一樣，他們由此判斷出流感是從哪里傳播出來的，而且他們的判斷非常及時。這是當(dāng)今社會所獨有的一種新型能力：以一種前所未有的方式，通過對海量數(shù)據(jù)進行分析，獲得有巨大價值的產(chǎn)品和服務(wù)，或深刻的洞見?；谶@樣的技術(shù)理念和數(shù)據(jù)儲備，下一次流感來襲的時候，世界將會擁有一種更好的預(yù)測工具，以預(yù)防流感的傳播。

2、大數(shù)據(jù)變革商業(yè)

購買飛機票就是一個很好的例子。哈佛大學(xué)首屆計算機科學(xué)專業(yè)的畢業(yè)生奧倫·埃齊奧尼在一次飛機票價不等的打擊下開發(fā)一個系統(tǒng)，這個系統(tǒng)用來推測當(dāng)前網(wǎng)頁上的機票價格是否合理。這個系統(tǒng)需要分析所有特定航線機票的銷售價格并確定票價與提前購買天數(shù)的關(guān)系。這個預(yù)測系統(tǒng)，它幫助虛擬的乘客節(jié)省了很多錢。之后這個項目變?yōu)轱L(fēng)險投資基金支持的科技創(chuàng)業(yè)公司，名為farecast。如今，farecast已經(jīng)擁有驚人的約2000億條飛行數(shù)據(jù)記錄。3、大數(shù)據(jù)變革思維

半個世紀以來，隨著計算機技術(shù)全面融入社會生活，信息爆炸已經(jīng)積累到了一個開始引發(fā)變革的程度。它不僅使世界充斥著比以往更多的信息，而且其增長速度也在加快。

人們不再認為數(shù)據(jù)是靜止和陳舊的。信息總量的變化還導(dǎo)致了信息形態(tài)的變化——量變引發(fā)了質(zhì)變。最先經(jīng)歷信息爆炸的學(xué)科，如天文學(xué)和基因?qū)W，創(chuàng)造出了“大數(shù)據(jù)”這個概念。如今，這個概念幾乎應(yīng)用到了所有人類致力于發(fā)展的領(lǐng)域中。4、大數(shù)據(jù)開啟時代轉(zhuǎn)型2003年，人類第一次破譯人體基因密碼的時候，辛苦工作了十年才完成了三十億對堿基對的排序。大約十年之后，世界范圍內(nèi)的基因儀每15分鐘就可以完成同樣的工作。在金融領(lǐng)域，美國股市每天的成交量高達70億股。而其中三分之二的交易都是由建立在算法公式上的計算機程序完成的。這些程序運用海量數(shù)據(jù)來預(yù)測利益和降低風(fēng)險。5、預(yù)測是大數(shù)據(jù)的核心

大數(shù)據(jù)的核心就是預(yù)測。它通常被視為人工智能的一部分，或者更確切地說，被視為一種機器學(xué)習(xí)。大數(shù)據(jù)不是要教機器像人一樣思考。相反，它是把數(shù)學(xué)算法運用到海量的數(shù)據(jù)上來預(yù)測事情發(fā)生的可能性。

就像互聯(lián)網(wǎng)通過給計算機添加通信功能而改變了世界，大數(shù)據(jù)也將改變我們生活中最重要的方面，因為它為我們的生活創(chuàng)造了前所未有的可量化的維度。大數(shù)據(jù)已經(jīng)成為了新發(fā)明和新服務(wù)的源泉，而更多的改變正蓄勢待發(fā)。6、大數(shù)據(jù)是大挑戰(zhàn)

數(shù)據(jù)化意味著我們把一切都透明化，甚至包括很多我們以前認為和“信息”根本搭不上邊的事情。大數(shù)據(jù)時代開啟了一場尋寶游戲，而人們對于數(shù)據(jù)的看法以及對于由因果關(guān)系向相關(guān)關(guān)系轉(zhuǎn)化時釋放出的潛在價值的態(tài)度，正是主宰這場游戲的關(guān)鍵。內(nèi)容簡介大數(shù)據(jù)時代的思維變革

第一部分第二部分大數(shù)據(jù)時代的商業(yè)變革

大數(shù)據(jù)時代的管理變革

第三部分反思201主要觀點更多——不是隨機樣本，而是全體數(shù)據(jù)更雜——不是精確性，而是混雜性更好——不是因果關(guān)系，而是相關(guān)關(guān)系

數(shù)百年來我們都是以抽樣調(diào)查的方式作為統(tǒng)計的基礎(chǔ)，而在大數(shù)據(jù)時代，這種狀況會發(fā)生重大改變。由于這些年存儲技術(shù)的發(fā)展以及互聯(lián)網(wǎng)在全世界的普及，既有了存儲巨大數(shù)據(jù)量的技術(shù)基礎(chǔ)，也有了數(shù)據(jù)來源，再加上云計算的快速分析技術(shù)，大數(shù)據(jù)時代是以全體數(shù)據(jù)作為樣本進行分析，而非從前那樣在隨機抽取一定樣本數(shù)量的基礎(chǔ)之上進行分析。當(dāng)數(shù)據(jù)處理技術(shù)得到了較大的發(fā)展之后，數(shù)據(jù)分析就采取了全數(shù)據(jù)模式，樣本=總體，比如淘寶進行用戶行為分析時會就一個用戶在淘寶里的所有行為進行技術(shù)分析，而谷歌對流感的預(yù)測則是對所有相關(guān)詞匯搜索行為進行技術(shù)分析。更多

數(shù)據(jù)的來源很廣闊，數(shù)據(jù)的數(shù)量很龐大，在此基礎(chǔ)之上帶來的必然是各種數(shù)據(jù)的混雜，但混雜性并不會影響到大數(shù)據(jù)的分析結(jié)果的可用性，因為數(shù)據(jù)量的龐大遠遠抵消了混雜的錯誤數(shù)據(jù)對于分析結(jié)果的影響。數(shù)據(jù)量的顯著增大必然會讓我們付出一些代價——一些不準確的數(shù)據(jù)會混入數(shù)據(jù)庫，結(jié)果也可能不準確。對“小數(shù)據(jù)”而言，最重要的要求就是減少錯誤；在大數(shù)據(jù)的采集里，在技術(shù)尚未達到完美無缺之前，混亂是無可避的。雖然我們得到的信息不再那么準確，但是收集到的數(shù)量龐大的信息讓我們放棄嚴格精確的選擇變的更為劃算。更雜

不是因果關(guān)系，而是相關(guān)關(guān)系。知道“是什么”就夠了，沒必要知道“為什么”。更好

尤其對于社會經(jīng)濟的參與者來說，及時的知道相關(guān)關(guān)系并且拿出合適的策略比搞明白“為什么”更重要。無疑大數(shù)據(jù)將使許多企業(yè)的效率得到質(zhì)的提升。

淘寶數(shù)據(jù)有一個視頻內(nèi)容是各個省份的人購物情況的分析統(tǒng)計，比如在見不到大海的新疆，購買比基尼卻是最多的，那么淘寶并不需要知道新疆人為什么喜歡買比基尼，是因為氣候還是生活習(xí)慣并不重要，重要的是淘寶要多為新疆用戶推薦比基尼，可以獲得更高的轉(zhuǎn)化率。（推薦視頻《淘寶數(shù)據(jù)盛典——你所不知道的城市秘密》大數(shù)據(jù)時代的商業(yè)變革02內(nèi)容數(shù)據(jù)化、數(shù)據(jù)價值實現(xiàn)、數(shù)據(jù)公司類型三部分

大數(shù)據(jù)蘊藏著巨大的商業(yè)價值。根據(jù)提供價值的不同來源，大數(shù)據(jù)價值鏈包括三大構(gòu)成部分。包括第一種是基于數(shù)據(jù)本身的公司。這些公司擁有大量數(shù)據(jù)或者至少可以收集到大量數(shù)據(jù)，卻不一定有從數(shù)據(jù)中提取價值或者用數(shù)據(jù)催生創(chuàng)新思想的技能。第二種是基于技能的公司。它們通常是咨詢公司、技術(shù)供應(yīng)商或者分析公司。它們掌握了專業(yè)技能但并不一定擁有數(shù)據(jù)或者提出數(shù)據(jù)創(chuàng)性用途的才能。沃爾瑪和Pop-Tarts這兩個零售商就是借助天睿公司的分析來獲得營銷點子，天睿就是一家大數(shù)據(jù)分析公司。皮特.華登，Jetpac的聯(lián)合創(chuàng)始人，就是通過想法獲得價值的一個例子，他通過用戶分享到網(wǎng)上的旅行照片來為人們推薦下一次旅行目的地。03大數(shù)據(jù)引起了一場管理規(guī)范的變革互聯(lián)網(wǎng)時代，我們的隱私受到了威脅，大數(shù)據(jù)時代一定是有過之而無不及。大數(shù)據(jù)還會帶來更多的威脅，因為大數(shù)據(jù)的核心就是用規(guī)模劇增來改變現(xiàn)狀。很多數(shù)據(jù)在收集的時候并無意用作其他用途，而最終卻產(chǎn)生了很多創(chuàng)新性的用途，也是一個未知的挑戰(zhàn)。在大數(shù)據(jù)時代，不管是告知與許可、模糊化還是匿名化，這三大隱私保護策略都失效了。同時，我們將面對另一個挑戰(zhàn)，即運用大數(shù)據(jù)預(yù)測來判斷和懲罰人類的潛在行為，這是對公平公正以及自由意志的一種褻瀆

同時還輕視了決策過程中深思熟慮的重要性。人們不是因為所做而受到懲罰，而是因為將做，即使他們事實上并沒有犯罪。大數(shù)據(jù)時代很容易讓我們陷入數(shù)據(jù)獨裁的困境中。大數(shù)據(jù)時代，對原有的規(guī)范的修修補補已經(jīng)滿足不了需要，也不足以抑制大數(shù)據(jù)帶來的風(fēng)險。我們需要全新的制度規(guī)范，而不是修改原有規(guī)范的適用范圍。大數(shù)據(jù)時代的管理變革背人動因VS預(yù)測分析，大數(shù)據(jù)時代，關(guān)于公正的概念需要重新定義以維護個人動因的想法：人們選擇自我行為的自由意志。簡單地說，就是個人可以并應(yīng)該為他們的行為而非傾向負責(zé)。3擊碎黑盒子，大數(shù)據(jù)算法師的崛起，外部算法師扮演公正的審計員的角色，內(nèi)部算法師在機構(gòu)內(nèi)部工作，監(jiān)督其大數(shù)據(jù)活動，不僅要考慮公司的利益，也要顧及受到公司大數(shù)據(jù)分析影響的其他人的利益；管理變革4反數(shù)據(jù)壟斷大亨，為了促進大數(shù)據(jù)平臺上的良性競爭，政府必須運用反壟斷條例1保護個人隱私，從個人許可到讓數(shù)據(jù)使用者承擔(dān)責(zé)任；管理變革管理變革內(nèi)容8風(fēng)險：讓數(shù)據(jù)主宰一切的隱憂事物都有兩面性，大數(shù)據(jù)也不例外。大數(shù)據(jù)時代我們幾乎沒有真正的隱私可言，因此這也就給監(jiān)管層提出了更嚴格的要求。就像槍一樣，可以用來保衛(wèi)家園，也可以用來濫殺無辜，如果將大數(shù)據(jù)用于歪道，那威力也會比從前提升不少8掌握:責(zé)任與自由并舉的信息管理大數(shù)據(jù)是必然趨勢，并且在全世界的鋪開以及應(yīng)用會遠快于我們多數(shù)人的反應(yīng)速度，不像數(shù)百年前的印刷術(shù)，給了人類近三百年的適應(yīng)期，大數(shù)據(jù)，可能也就幾年時間。數(shù)據(jù)使用者擔(dān)責(zé)，以行為為依據(jù)而非預(yù)測，防止大數(shù)據(jù)變成黑匣子，防止數(shù)據(jù)壟斷者的出現(xiàn)，這些可能都是以后應(yīng)被注意的甚至是寫進法律里的。案例：大數(shù)據(jù)也是一把雙刃劍，在帶來巨大便利的同時，其背后也隱藏著一些隱患，我們的隱私也可能會被二次利用。聯(lián)想到近期好萊塢爆出的艷照事件，有外國黑客疑利用蘋果公司的iCloud云盤系統(tǒng)的漏洞