Chaer廈門(mén)大學(xué)林子雨大數(shù)據(jù)技術(shù)原理與應(yīng)用第一章大數(shù)據(jù)概述

廈門(mén)大學(xué)計(jì)算機(jī)科學(xué)系2015年版

第一章大數(shù)據(jù)概述

（PPT版本號(hào)：2015年6月第1.0版）

《大數(shù)據(jù)技術(shù)原理與應(yīng)用》溫馨提示：編輯幻燈片母版，可以修改每頁(yè)P(yáng)PT的廈大校徽和底部文字提綱1.1大數(shù)據(jù)時(shí)代1.2大數(shù)據(jù)概念1.3大數(shù)據(jù)的影響1.4大數(shù)據(jù)的應(yīng)用1.5大數(shù)據(jù)關(guān)鍵技術(shù)1.6大數(shù)據(jù)計(jì)算模式1.7大數(shù)據(jù)產(chǎn)業(yè)1.8大數(shù)據(jù)與云計(jì)算、物聯(lián)網(wǎng)的關(guān)系歡迎訪問(wèn)《大數(shù)據(jù)技術(shù)原理與應(yīng)用》教材官方網(wǎng)站：本PPT是如下教材的配套講義：21世紀(jì)高等教育計(jì)算機(jī)規(guī)劃教材《大數(shù)據(jù)技術(shù)原理與應(yīng)用——概念、存儲(chǔ)、處理、分析與應(yīng)用》（2015年6月第1版）廈門(mén)大學(xué)林子雨編著，人民郵電出版社ISBN:978-7-115-39287-91.1大數(shù)據(jù)時(shí)代1.1.1第三次信息化浪潮根據(jù)IBM前首席執(zhí)行官郭士納的觀點(diǎn)，IT領(lǐng)域每隔十五年就會(huì)迎來(lái)一次重大變革信息化浪潮發(fā)生時(shí)間標(biāo)志解決問(wèn)題代表企業(yè)第一次浪潮1980年前后個(gè)人計(jì)算機(jī)信息處理Intel、AMD、IBM、蘋(píng)果、微軟、聯(lián)想、戴爾、惠普等第二次浪潮1995年前后互聯(lián)網(wǎng)信息傳輸雅虎、谷歌、阿里巴巴、百度、騰訊等第三次浪潮2010年前后物聯(lián)網(wǎng)、云計(jì)算和大數(shù)據(jù)信息爆炸將涌現(xiàn)出一批新的市場(chǎng)標(biāo)桿企業(yè)表1-1三次信息化浪潮1.1.2信息科技為大數(shù)據(jù)時(shí)代提供技術(shù)支撐圖1-1存儲(chǔ)價(jià)格隨時(shí)間變化情況1.存儲(chǔ)設(shè)備容量不斷增加1.1.2信息科技為大數(shù)據(jù)時(shí)代提供技術(shù)支撐圖1-3CPU晶體管數(shù)目隨時(shí)間變化情況2.CPU處理能力大幅提升

1.1.2信息科技為大數(shù)據(jù)時(shí)代提供技術(shù)支撐圖1-4網(wǎng)絡(luò)帶寬隨時(shí)間變化情況3.網(wǎng)絡(luò)帶寬不斷增加1.1.3數(shù)據(jù)產(chǎn)生方式的變革促成大數(shù)據(jù)時(shí)代的來(lái)臨圖1-5數(shù)據(jù)產(chǎn)生方式的變革1.1.4大數(shù)據(jù)的發(fā)展歷程階段時(shí)間內(nèi)容第一階段：萌芽期上世紀(jì)90年代至本世紀(jì)初隨著數(shù)據(jù)挖掘理論和數(shù)據(jù)庫(kù)技術(shù)的逐步成熟，一批商業(yè)智能工具和知識(shí)管理技術(shù)開(kāi)始被應(yīng)用，如數(shù)據(jù)倉(cāng)庫(kù)、專(zhuān)家系統(tǒng)、知識(shí)管理系統(tǒng)等。第二階段：成熟期本世紀(jì)前十年Web2.0應(yīng)用迅猛發(fā)展，非結(jié)構(gòu)化數(shù)據(jù)大量產(chǎn)生，傳統(tǒng)處理方法難以應(yīng)對(duì)，帶動(dòng)了大數(shù)據(jù)技術(shù)的快速突破，大數(shù)據(jù)解決方案逐漸走向成熟，形成了并行計(jì)算與分布式系統(tǒng)兩大核心技術(shù)，谷歌的GFD和MapReduce等發(fā)數(shù)據(jù)技術(shù)受到追捧，Hadoop平臺(tái)開(kāi)始大行其道第三階段：大規(guī)模應(yīng)用期2010年以后大數(shù)據(jù)應(yīng)用滲透各行各業(yè)，數(shù)據(jù)驅(qū)動(dòng)決策，信息社會(huì)智能化程度大幅提高表1-2大數(shù)據(jù)發(fā)展的三個(gè)階段1.2大數(shù)據(jù)概念數(shù)數(shù)據(jù)量大大根據(jù)IDC作出的估估測(cè)，數(shù)數(shù)據(jù)一直直都在以以每年50%的速度增增長(zhǎng)，也也就是說(shuō)說(shuō)每?jī)赡昴昃驮鲩L(zhǎng)長(zhǎng)一倍（（大數(shù)據(jù)據(jù)摩爾定定律）人類(lèi)在最最近兩年年產(chǎn)生的的數(shù)據(jù)量量相當(dāng)于于之前產(chǎn)產(chǎn)生的全全部數(shù)據(jù)據(jù)量預(yù)計(jì)到2020年，全球球?qū)⒖偣补矒碛?5ZB的數(shù)據(jù)量量，相較較于2010年，數(shù)據(jù)據(jù)量將增增長(zhǎng)近30倍數(shù)數(shù)據(jù)類(lèi)型型繁多大數(shù)據(jù)是是由結(jié)構(gòu)構(gòu)化和非非結(jié)構(gòu)化化數(shù)據(jù)組組成的10%的結(jié)構(gòu)化化數(shù)據(jù)，，存儲(chǔ)在在數(shù)據(jù)庫(kù)庫(kù)中90%的非結(jié)構(gòu)構(gòu)化數(shù)據(jù)據(jù)，它們們與人類(lèi)類(lèi)信息密密切相關(guān)關(guān)非結(jié)構(gòu)化化數(shù)據(jù)類(lèi)類(lèi)型多樣樣郵件、視視頻、微微博位置信息息、鏈接接信息手機(jī)呼叫叫、網(wǎng)頁(yè)頁(yè)點(diǎn)擊“長(zhǎng)微博””處處理速度度快從數(shù)據(jù)的的生成到到消耗，，時(shí)間窗窗口非常常小，可可用于生生成決策策的時(shí)間間非常少少1秒定律：：這一點(diǎn)點(diǎn)也是和和傳統(tǒng)的的數(shù)據(jù)挖挖掘技術(shù)術(shù)有著本本質(zhì)的不不同價(jià)價(jià)值密度度低價(jià)值密度度低，商商業(yè)價(jià)值值高以視頻為為例，連連續(xù)不間間斷監(jiān)控控過(guò)程中中，可能能有用的的數(shù)據(jù)僅僅僅有一一兩秒，，但是具具有很高高的商業(yè)業(yè)價(jià)值1.3大大數(shù)據(jù)的的影響大數(shù)據(jù)對(duì)對(duì)科學(xué)研研究、思思維方式式和社會(huì)會(huì)發(fā)展都都具有重重要而深深遠(yuǎn)的影影響。在科學(xué)研研究方面面，大數(shù)數(shù)據(jù)使得得人類(lèi)科科學(xué)研究究在經(jīng)歷歷了實(shí)驗(yàn)驗(yàn)、理論論、計(jì)算算三種范范式之后后，迎來(lái)來(lái)了第四四種范式式——數(shù)數(shù)據(jù)在思維方方式方面面，大數(shù)數(shù)據(jù)具有有“全樣樣而非抽抽樣、效效率而非非精確、、相關(guān)而而非因果果”等三三大顯著著特征，，完全顛顛覆了傳傳統(tǒng)的思思維方式式在社會(huì)發(fā)發(fā)展方面面，大數(shù)數(shù)據(jù)決策策逐漸成成為一種種新的決決策方式式，大數(shù)數(shù)據(jù)應(yīng)用用有力促促進(jìn)了信信息技術(shù)術(shù)與各行行業(yè)的深深度融合合，大數(shù)數(shù)據(jù)開(kāi)發(fā)發(fā)大大推推動(dòng)了新新技術(shù)和和新應(yīng)用用的不斷斷涌現(xiàn)在就業(yè)市市場(chǎng)方面面，大數(shù)數(shù)據(jù)的興興起使得得數(shù)據(jù)科科學(xué)家成成為熱門(mén)門(mén)職業(yè)在人才培培養(yǎng)方面面，大數(shù)數(shù)據(jù)的興興起，將將在很大大程度上上改變中中國(guó)高校校信息技技術(shù)相關(guān)關(guān)專(zhuān)業(yè)的的現(xiàn)有教教學(xué)和科科研體制制1.4大大數(shù)據(jù)的的應(yīng)用大數(shù)據(jù)無(wú)無(wú)處不在在，包括括金融、、汽車(chē)、、零售、、餐飲、、電信、、能源、、政務(wù)、、醫(yī)療、、體育、、娛樂(lè)等等在內(nèi)的的社會(huì)各各行各業(yè)業(yè)都已經(jīng)經(jīng)融入了了大數(shù)據(jù)據(jù)的印跡跡1.5大大數(shù)據(jù)關(guān)關(guān)鍵技術(shù)術(shù)表1-5大數(shù)據(jù)技技術(shù)的不不同層面面及其功功能技術(shù)層面功能數(shù)據(jù)采集利用ETL工具將分布的、異構(gòu)數(shù)據(jù)源中的數(shù)據(jù)如關(guān)系數(shù)據(jù)、平面數(shù)據(jù)文件等，抽取到臨時(shí)中間層后進(jìn)行清洗、轉(zhuǎn)換、集成，最后加載到數(shù)據(jù)倉(cāng)庫(kù)或數(shù)據(jù)集市中，成為聯(lián)機(jī)分析處理、數(shù)據(jù)挖掘的基礎(chǔ)；或者也可以把實(shí)時(shí)采集的數(shù)據(jù)作為流計(jì)算系統(tǒng)的輸入，進(jìn)行實(shí)時(shí)處理分析數(shù)據(jù)存儲(chǔ)和管理利用分布式文件系統(tǒng)、數(shù)據(jù)倉(cāng)庫(kù)、關(guān)系數(shù)據(jù)庫(kù)、NoSQL數(shù)據(jù)庫(kù)、云數(shù)據(jù)庫(kù)等，實(shí)現(xiàn)對(duì)結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化海量數(shù)據(jù)的存儲(chǔ)和管理數(shù)據(jù)處理與分析利用分布式并行編程模型和計(jì)算框架，結(jié)合機(jī)器學(xué)習(xí)和數(shù)據(jù)挖掘算法，實(shí)現(xiàn)對(duì)海量數(shù)據(jù)的處理和分析；對(duì)分析結(jié)果進(jìn)行可視化呈現(xiàn)，幫助人們更好地理解數(shù)據(jù)、分析數(shù)據(jù)數(shù)據(jù)隱私和安全在從大數(shù)據(jù)中挖掘潛在的巨大商業(yè)價(jià)值和學(xué)術(shù)價(jià)值的同時(shí)，構(gòu)建隱私數(shù)據(jù)保護(hù)體系和數(shù)據(jù)安全體系，有效保護(hù)個(gè)人隱私和數(shù)據(jù)安全1.6大大數(shù)據(jù)計(jì)計(jì)算模式式大數(shù)據(jù)計(jì)算模式解決問(wèn)題代表產(chǎn)品批處理計(jì)算針對(duì)大規(guī)模數(shù)據(jù)的批量處理MapReduce、Spark等流計(jì)算針對(duì)流數(shù)據(jù)的實(shí)時(shí)計(jì)算Storm、S4、Flume、Streams、Puma、DStream、SuperMario、銀河流數(shù)據(jù)處理平臺(tái)等圖計(jì)算針對(duì)大規(guī)模圖結(jié)構(gòu)數(shù)據(jù)的處理Pregel、GraphX、Giraph、PowerGraph、Hama、GoldenOrb等查詢分析計(jì)算大規(guī)模數(shù)據(jù)的存儲(chǔ)管理和查詢分析Dremel、Hive、Cassandra、Impala等表1-3大數(shù)數(shù)據(jù)計(jì)算算模式及及其代表表產(chǎn)品1.7大大數(shù)據(jù)產(chǎn)產(chǎn)業(yè)大數(shù)據(jù)產(chǎn)產(chǎn)業(yè)是指指一切與與支撐大大數(shù)據(jù)組組織管理理和價(jià)值值發(fā)現(xiàn)相相關(guān)的企企業(yè)經(jīng)濟(jì)濟(jì)活動(dòng)的的集合產(chǎn)業(yè)鏈環(huán)節(jié)包含內(nèi)容IT基礎(chǔ)設(shè)施層包括提供硬件、軟件、網(wǎng)絡(luò)等基礎(chǔ)設(shè)施以及提供咨詢、規(guī)劃和系統(tǒng)集成服務(wù)的企業(yè)，比如，提供數(shù)據(jù)中心解決方案的IBM、惠普和戴爾等，提供存儲(chǔ)解決方案的EMC，提供虛擬化管理軟件的微軟、思杰、SUN、Redhat等數(shù)據(jù)源層大數(shù)據(jù)生態(tài)圈里的數(shù)據(jù)提供者，是生物大數(shù)據(jù)（生物信息學(xué)領(lǐng)域的各類(lèi)研究機(jī)構(gòu)）、交通大數(shù)據(jù)（交通主管部門(mén)）、醫(yī)療大數(shù)據(jù)（各大醫(yī)院、體檢機(jī)構(gòu)）、政務(wù)大數(shù)據(jù)（政府部門(mén)）、電商大數(shù)據(jù)（淘寶、天貓、蘇寧云商、京東等電商）、社交網(wǎng)絡(luò)大數(shù)據(jù)（微博、微信、人人網(wǎng)等）、搜索引擎大數(shù)據(jù)（百度、谷歌等）等各種數(shù)據(jù)的來(lái)源數(shù)據(jù)管理層包括數(shù)據(jù)抽取、轉(zhuǎn)換、存儲(chǔ)和管理等服務(wù)的各類(lèi)企業(yè)或產(chǎn)品，比如分布式文件系統(tǒng)（如Hadoop的HDFS和谷歌的GFS）、ETL工具（Informatica、Datastage、Kettle等）、數(shù)據(jù)庫(kù)和數(shù)據(jù)倉(cāng)庫(kù)（Oracle、MySQL、SQLServer、HBase、GreenPlum等）數(shù)據(jù)分析層包括提供分布式計(jì)算、數(shù)據(jù)挖掘、統(tǒng)計(jì)分析等服務(wù)的各類(lèi)企業(yè)或產(chǎn)品，比如，分布式計(jì)算框架MapReduce、統(tǒng)計(jì)分析軟件SPSS和SAS、數(shù)據(jù)挖掘工具Weka、數(shù)據(jù)可視化工具Tableau、BI工具（MicroStrategy、Cognos、BO）等等數(shù)據(jù)平臺(tái)層包括提供數(shù)據(jù)分享平臺(tái)、數(shù)據(jù)分析平臺(tái)、數(shù)據(jù)租售平臺(tái)等服務(wù)的企業(yè)或產(chǎn)品，比如阿里巴巴、谷歌、中國(guó)電信、百度等數(shù)據(jù)應(yīng)用層提供智能交通、智慧醫(yī)療、智能物流、智能電網(wǎng)等行業(yè)應(yīng)用的企業(yè)、機(jī)構(gòu)或政府部門(mén)，比如交通主管部門(mén)、各大醫(yī)療機(jī)構(gòu)、菜鳥(niǎo)網(wǎng)絡(luò)、國(guó)家電網(wǎng)等1.8大大數(shù)據(jù)與與云計(jì)算算、物聯(lián)聯(lián)網(wǎng)的關(guān)關(guān)系云計(jì)算、、大數(shù)據(jù)據(jù)和物聯(lián)聯(lián)網(wǎng)代表表了IT領(lǐng)域最新新的技術(shù)術(shù)發(fā)展趨趨勢(shì)，三三者相輔輔相成，，既有聯(lián)聯(lián)系又有有區(qū)別1.8.1云計(jì)計(jì)算云計(jì)算實(shí)實(shí)現(xiàn)了通通過(guò)網(wǎng)絡(luò)絡(luò)提供可可伸縮的的、廉價(jià)價(jià)的分布布式計(jì)算算能力，，用戶只只需要在在具備網(wǎng)網(wǎng)絡(luò)接入入條件的的地方，，就可以以隨時(shí)隨隨地獲得得所需的的各種IT資源源圖1-7云計(jì)算的的服務(wù)模模式和類(lèi)類(lèi)型1.云計(jì)算概概念1.8.1云計(jì)計(jì)算云計(jì)算關(guān)關(guān)鍵技術(shù)術(shù)包括：：虛擬化化、分布布式存儲(chǔ)儲(chǔ)、分布布式計(jì)算算、多租租戶等2.云計(jì)算關(guān)關(guān)鍵技術(shù)術(shù)1.8.1云計(jì)計(jì)算云計(jì)算數(shù)數(shù)據(jù)中心心是一整整套復(fù)雜雜的設(shè)施施，包括括刀片服服務(wù)器、、寬帶網(wǎng)網(wǎng)絡(luò)連接接、環(huán)境境控制設(shè)設(shè)備、監(jiān)監(jiān)控設(shè)備備以及各各種安全全裝置等等數(shù)據(jù)中心心是云計(jì)計(jì)算的重重要載體體，為云云計(jì)算提提供計(jì)算算、存儲(chǔ)儲(chǔ)、帶寬寬等各種種硬件資資源，為為各種平平臺(tái)和應(yīng)應(yīng)用提供供運(yùn)行支支撐環(huán)境境3.云計(jì)算數(shù)數(shù)據(jù)中心心1.8.1云計(jì)計(jì)算政務(wù)云上上可以部部署公共共安全管管理、容容災(zāi)備份份、城市市管理、、應(yīng)急管管理、智智能交通通、社會(huì)會(huì)保障等等應(yīng)用，，通過(guò)集集約化建建設(shè)、管管理和運(yùn)運(yùn)行，可可以實(shí)現(xiàn)現(xiàn)信息資資源整合合和政務(wù)務(wù)資源共共享，推推動(dòng)政務(wù)務(wù)管理創(chuàng)創(chuàng)新，加加快向服服務(wù)型政政府轉(zhuǎn)型型教育云可可以有效效整合幼幼兒教育育、中小小學(xué)教育育、高等等教育以以及繼續(xù)續(xù)教育等等優(yōu)質(zhì)教教育資源源，逐步步實(shí)現(xiàn)教教育信息息共享、、教育資資源共享享及教育育資源深深度挖掘掘等目標(biāo)標(biāo)中小企業(yè)業(yè)云能夠夠讓企業(yè)業(yè)以低廉廉的成本本建立財(cái)財(cái)務(wù)、供供應(yīng)鏈、、客戶關(guān)關(guān)系等管管理應(yīng)用用系統(tǒng)，，大大降降低企業(yè)業(yè)信息化化門(mén)檻，，迅速提提升企業(yè)業(yè)信息化化水平，，增強(qiáng)企企業(yè)市場(chǎng)場(chǎng)競(jìng)爭(zhēng)力力醫(yī)療云可可以推動(dòng)動(dòng)醫(yī)院與與醫(yī)院、、醫(yī)院與與社區(qū)、、醫(yī)院與與急救中中心、醫(yī)醫(yī)院與家家庭之間間的服務(wù)務(wù)共享，，并形成成一套全全新的醫(yī)醫(yī)療健康康服務(wù)系系統(tǒng)，從從而有效效地提高高醫(yī)療保保健的質(zhì)質(zhì)量4.云計(jì)算應(yīng)應(yīng)用1.8.1云計(jì)計(jì)算云計(jì)算產(chǎn)產(chǎn)業(yè)作為為戰(zhàn)略性性新興產(chǎn)產(chǎn)業(yè)，近近些年得得到了迅迅速發(fā)展展，形成成了成熟熟的產(chǎn)業(yè)業(yè)鏈結(jié)構(gòu)構(gòu)，產(chǎn)業(yè)業(yè)涵蓋硬硬件與設(shè)設(shè)備制造造、基礎(chǔ)礎(chǔ)設(shè)施運(yùn)運(yùn)營(yíng)、軟軟件與解解決方案案供應(yīng)商商、基礎(chǔ)礎(chǔ)設(shè)施即即服務(wù)（（IaaS）、平臺(tái)臺(tái)即服務(wù)務(wù)（PaaS）、軟件件即服務(wù)務(wù)（SaaS）、終端端設(shè)備、、云安全全、云計(jì)計(jì)算交付付/咨詢/認(rèn)證等環(huán)環(huán)節(jié)圖1-8云計(jì)算產(chǎn)產(chǎn)業(yè)鏈5.云計(jì)算產(chǎn)業(yè)業(yè)1.8.2物聯(lián)網(wǎng)物聯(lián)網(wǎng)是物物物相連的的互聯(lián)網(wǎng)，，是互聯(lián)網(wǎng)網(wǎng)的延伸，，它利用局局部網(wǎng)絡(luò)或或互聯(lián)網(wǎng)等等通信技術(shù)術(shù)把傳感器器、控制器器、機(jī)器、、人員和物物等通過(guò)新新的方式聯(lián)聯(lián)在一起，，形成人與與物、物與與物相聯(lián)，，實(shí)現(xiàn)信息息化和遠(yuǎn)程程管理控制制1.物聯(lián)網(wǎng)概念念圖1-9物物聯(lián)網(wǎng)體體系架構(gòu)1.8.2物聯(lián)網(wǎng)物聯(lián)網(wǎng)中的的關(guān)鍵技術(shù)術(shù)包括識(shí)別別和感知技技術(shù)（二維維碼、RFID、傳感器等等）、網(wǎng)絡(luò)絡(luò)與通信技技術(shù)、數(shù)據(jù)據(jù)挖掘與融融合技術(shù)等等2.物聯(lián)網(wǎng)關(guān)鍵鍵技術(shù)圖1-10矩陣式式二維碼圖1-11采用RFID芯芯片的公交交卡圖1-12不同類(lèi)類(lèi)型的傳感感器1.8.2物聯(lián)網(wǎng)物聯(lián)網(wǎng)已經(jīng)經(jīng)廣泛應(yīng)用用于智能交交通、智慧慧醫(yī)療、智智能家居、、環(huán)保監(jiān)測(cè)測(cè)、智能安安防、智能能物流、智智能電網(wǎng)、、智慧農(nóng)業(yè)業(yè)、智能工工業(yè)等領(lǐng)域域，對(duì)國(guó)民民經(jīng)濟(jì)與社社會(huì)發(fā)展起起到了重要要的推動(dòng)作作用3.物聯(lián)網(wǎng)應(yīng)用用1.8.2物聯(lián)網(wǎng)完整的物聯(lián)聯(lián)網(wǎng)產(chǎn)業(yè)鏈鏈主要包括括核心感應(yīng)應(yīng)器件提供供商、感知知層末端設(shè)設(shè)備提供商商、網(wǎng)絡(luò)提提供商、軟軟件與行業(yè)業(yè)解決方案案提供商、、系統(tǒng)集成成商、運(yùn)營(yíng)營(yíng)及服務(wù)提提供商等六六大環(huán)節(jié)圖1-8物物聯(lián)網(wǎng)產(chǎn)產(chǎn)業(yè)鏈4.物聯(lián)網(wǎng)產(chǎn)業(yè)業(yè)1.8.3大數(shù)據(jù)與與云計(jì)算、、物聯(lián)網(wǎng)的的關(guān)系云計(jì)算、大大數(shù)據(jù)和物物聯(lián)網(wǎng)代表表了IT領(lǐng)域最新的的技術(shù)發(fā)展展趨勢(shì)，三三者既有區(qū)區(qū)別又有聯(lián)聯(lián)系圖1-9大大數(shù)據(jù)、、云計(jì)算和和物聯(lián)網(wǎng)之之間的關(guān)系系本章小結(jié)本章介紹了了大數(shù)據(jù)技技術(shù)的發(fā)展展歷程，并并指出信息息科技的不不斷進(jìn)步為為大數(shù)據(jù)時(shí)時(shí)代提供了了技術(shù)支撐撐，數(shù)據(jù)產(chǎn)產(chǎn)生方式的的變革促成成了大數(shù)據(jù)據(jù)時(shí)代的來(lái)來(lái)臨大數(shù)據(jù)具有有數(shù)據(jù)量大大、數(shù)據(jù)類(lèi)類(lèi)型繁多、、處理速度度快、價(jià)值值密度低等等特點(diǎn)，統(tǒng)統(tǒng)稱“4V”。大數(shù)據(jù)對(duì)對(duì)科學(xué)研究究、思維方方式、社會(huì)會(huì)發(fā)展、就就業(yè)市場(chǎng)和和人才培養(yǎng)養(yǎng)等方面，，都產(chǎn)生了了重要的影影響，深