《企業(yè)財務(wù)分析》10.大數(shù)據(jù)

3.4亟待挖掘的寶藏：大數(shù)據(jù)目

錄引領(lǐng)未來——大數(shù)據(jù)發(fā)展趨勢物盡其用——大數(shù)據(jù)如何改變生活？探秘尋寶——什么是數(shù)據(jù)挖掘？撥云見霧——大數(shù)據(jù)究竟是什么？2遵章守法——大數(shù)據(jù)時代的法律問題3.4.1撥云見霧——大數(shù)據(jù)究竟是什么？數(shù)據(jù)（Data）是指對客觀事件進行記錄并可以鑒別的符號，是對客觀事物的性質(zhì)、狀態(tài)以及相互關(guān)系等進行記載的物理符號或這些物理符號的組合。它是可識別的、抽象的符號。它不僅指狹義上的數(shù)字，還可以是具有一定意義的文字、字母、數(shù)字符號的組合、圖形、圖像、視頻、音頻等，也是客觀事物的屬性、數(shù)量、位置及其相互關(guān)系的抽象表示。例如，“0、1、2......”“陰、雨、下降、氣溫”“學(xué)生的檔案記錄、貨物的運輸情況”等都是數(shù)據(jù)。33.4.1撥云見霧——大數(shù)據(jù)究竟是什么？

關(guān)于大數(shù)據(jù)(bigdata)，麥肯錫全球研究所給出的定義是：一種規(guī)模大到在獲取、存儲、管理、分析方面大大超出了傳統(tǒng)數(shù)據(jù)庫軟件工具能力范圍的數(shù)據(jù)集合，具有海量的數(shù)據(jù)規(guī)模、快速的數(shù)據(jù)流轉(zhuǎn)、多樣的數(shù)據(jù)類型和價值密度低四大特征。其實，到目前為止大數(shù)據(jù)還沒有確切的定義，通過字面意思去理解，大數(shù)據(jù)簡單的來說就是海量的數(shù)據(jù)。4大數(shù)據(jù)特征（5V）

容量（Volume）：數(shù)據(jù)的大小決定所考慮的數(shù)據(jù)的價值和潛在的信息；種類（Variety）：數(shù)據(jù)類型的多樣性；價值（Value）：合理運用大數(shù)據(jù)，以低成本創(chuàng)造高價值；高速（Velocity）：數(shù)據(jù)增長速度快，處理速度也快，時效性要求高;質(zhì)量（Veracity）：數(shù)據(jù)的準確性和可信賴度，即數(shù)據(jù)的質(zhì)量。5數(shù)據(jù)存儲單位

數(shù)據(jù)在計算機內(nèi)存儲的最小基本單位是bit（位）。數(shù)據(jù)存儲單位按從小到大順序可分為：bit、Byte（字節(jié)）、KB、MB、GB、TB、PB、EB、ZB、YB、BB、NB、DB。單位之間按照進率1024（2的十次方）來計算。如：1Byte=8bit1KB=1024Byte=210Byte1MB=1024KB=220Byte……6大數(shù)據(jù)的結(jié)構(gòu)

大數(shù)據(jù)包括結(jié)構(gòu)化、半結(jié)構(gòu)化和非結(jié)構(gòu)化數(shù)據(jù)，非結(jié)構(gòu)化數(shù)據(jù)越來越成為數(shù)據(jù)的主要部分。據(jù)互聯(lián)網(wǎng)數(shù)據(jù)中心（InternetDataCenter）的調(diào)查報告顯示：企業(yè)中80%的數(shù)據(jù)都是非結(jié)構(gòu)化數(shù)據(jù)，這些數(shù)據(jù)每年都按指數(shù)增長60%。結(jié)構(gòu)化數(shù)據(jù)結(jié)構(gòu)化數(shù)據(jù)是指按照一定結(jié)構(gòu)和排列順序來存儲的數(shù)據(jù)。比如，目前各種流行的關(guān)系型數(shù)據(jù)庫中的二維表數(shù)據(jù)就是典型的結(jié)構(gòu)化數(shù)據(jù)。這種結(jié)構(gòu)類似于Excel表，由行和列交叉形成單元格，單元格中存放數(shù)據(jù)。如表3-2所示：7表3-2學(xué)生信息表8姓名性別專業(yè)張三男計算機應(yīng)用技術(shù)半結(jié)構(gòu)化數(shù)據(jù)半結(jié)構(gòu)化數(shù)據(jù)類似于結(jié)構(gòu)化數(shù)據(jù)，但又不完全符合結(jié)構(gòu)化數(shù)據(jù)的存儲結(jié)構(gòu)特點。常見的半結(jié)構(gòu)化數(shù)據(jù)有XML和JSON。如下面的XML文件所示：<Person> <name>張三</name> <age>21</age> <major>計算機應(yīng)用技術(shù)</major></Person>9非結(jié)構(gòu)化數(shù)據(jù)非結(jié)構(gòu)化數(shù)據(jù)是指數(shù)據(jù)結(jié)構(gòu)沒有特定的規(guī)則和表現(xiàn)形式。這種結(jié)構(gòu)的數(shù)據(jù)可以是文本、圖片、聲音、視頻等。10文本圖片聲音視頻大數(shù)據(jù)的意義阿里巴巴創(chuàng)辦人馬云就曾經(jīng)提到，未來的時代將不是IT時代，而是DT(DataTechnology)時代，顯示大數(shù)據(jù)對于阿里巴巴集團來說舉足輕重。有人把數(shù)據(jù)比喻為蘊藏能量的煤礦。煤炭按照性質(zhì)有焦煤、無煙煤、肥煤、貧煤等分類，而露天煤礦、深山煤礦的挖掘成本又不一樣。與此類似，大數(shù)據(jù)并不在“大”，而在于“有用”。價值含量、挖掘成本比數(shù)量更為重要。對于很多行業(yè)而言，如何利用這些大規(guī)模數(shù)據(jù)是贏得競爭的關(guān)鍵。11大數(shù)據(jù)的價值體現(xiàn)在以下幾個方面：對大量消費者提供產(chǎn)品或服務(wù)的企業(yè)可以利用大數(shù)據(jù)進行精準營銷；做小而美模式的中小微企業(yè)可以利用大數(shù)據(jù)做服務(wù)轉(zhuǎn)型；面臨互聯(lián)網(wǎng)壓力之下必須轉(zhuǎn)型的傳統(tǒng)企業(yè)需要與時俱進充分利用大數(shù)據(jù)的價值。視野拓展大數(shù)據(jù)給貴州帶來了什么？123.4.2探秘尋寶——什么是數(shù)據(jù)挖掘？數(shù)據(jù)挖掘一般是指從大量的數(shù)據(jù)中通過算法搜索隱藏于其中信息的過程。數(shù)據(jù)挖掘通常與計算機科學(xué)有關(guān)，并通過統(tǒng)計、在線分析處理、情報檢索、機器學(xué)習、專家系統(tǒng)（依靠過去的經(jīng)驗法則）和模式識別等諸多方法來實現(xiàn)。13數(shù)據(jù)挖掘方法分類估計預(yù)測相關(guān)性分組或關(guān)聯(lián)規(guī)則聚類描述和可視化14數(shù)據(jù)挖掘的意義隨著信息技術(shù)的高速發(fā)展，積累的數(shù)據(jù)量急劇增長，動輒以TB、ZB計，如何從海量的數(shù)據(jù)中提取有用的知識成為時代當務(wù)之急問題。數(shù)據(jù)挖掘就是順應(yīng)這種需要去應(yīng)運而生發(fā)展起來的數(shù)據(jù)處理技術(shù)是知識發(fā)現(xiàn)的關(guān)鍵步驟。隨著企業(yè)信息化管理改革的不斷深化。面對企業(yè)的海量數(shù)據(jù)，企業(yè)管理面臨著如何有效從大量復(fù)雜的數(shù)據(jù)中提取有用信息，以利于企業(yè)更好的經(jīng)營管理的問題。而大數(shù)據(jù)可應(yīng)用于各行各業(yè)，將人們收集到的龐大數(shù)據(jù)進行分析整理，實現(xiàn)資訊的有效利用。15視野拓展啤酒+尿布的故事思考與討論利用數(shù)據(jù)挖掘技術(shù)可以解決學(xué)習中的哪些問題？163.4.3物盡其用——大數(shù)據(jù)如何改變生活？大數(shù)據(jù)在各行業(yè)的應(yīng)用大數(shù)據(jù)無處不在，大數(shù)據(jù)應(yīng)用于各個行業(yè)，包括金融、汽車、餐飲、電信、能源、體育和娛樂等在內(nèi)的社會各行各業(yè)都已經(jīng)融入了大數(shù)據(jù)的印跡。17制造業(yè)利用工業(yè)大數(shù)據(jù)提升制造業(yè)水平，包括產(chǎn)品故障診斷與預(yù)測、分析工藝流程、改進生產(chǎn)工藝，優(yōu)化生產(chǎn)過程能耗、工業(yè)供應(yīng)鏈分析與優(yōu)化、生產(chǎn)計劃與排程農(nóng)業(yè)大數(shù)據(jù)對農(nóng)業(yè)的影響，讓農(nóng)民可以及時的知道，哪些農(nóng)產(chǎn)品在某些地方好賣？哪些農(nóng)產(chǎn)品在某些地方需求量是多大？及時的了解信息，調(diào)整產(chǎn)品，減少浪費，以及在種植方面更加精準管理，使農(nóng)產(chǎn)品的產(chǎn)量和品質(zhì)更加的高金融行業(yè)大數(shù)據(jù)在高頻交易、社交情緒分析和信貸風險分析三大金融創(chuàng)新領(lǐng)域發(fā)揮重大作用?；ヂ?lián)網(wǎng)行業(yè)借助于大數(shù)據(jù)技術(shù)，可以分析客戶行為，進行商品推薦和針對性廣告投放。能源行業(yè)隨著智能電網(wǎng)的發(fā)展，電力公司可以掌握海量的用戶用電信息，利用大數(shù)據(jù)技術(shù)分析用戶用電模式，可以改進電網(wǎng)運行，合理設(shè)計電力需求響應(yīng)系統(tǒng)，確保電網(wǎng)運行安全物流行業(yè)利用大數(shù)據(jù)優(yōu)化物流網(wǎng)絡(luò)，提高物流效率，降低物流成本城市管理可以利用大數(shù)據(jù)實現(xiàn)智能交通、環(huán)保監(jiān)測、城市規(guī)劃和智能安防183.4.4引領(lǐng)未來——大數(shù)據(jù)發(fā)展趨勢

數(shù)據(jù)的商品化未來數(shù)據(jù)也將會像普通商品一樣進行出售，這些經(jīng)過處理，挖掘出來的有價值的數(shù)據(jù)對于各行各業(yè)來說都是寶貴的戰(zhàn)略資源，因此，數(shù)據(jù)的商品化也會使數(shù)據(jù)的價值體現(xiàn)的更加充分新數(shù)據(jù)存儲技術(shù)大數(shù)據(jù)時代，如何將不同結(jié)構(gòu)的數(shù)據(jù)進行有效的存取也是未來內(nèi)存制造企業(yè)要面臨的新的課題對數(shù)學(xué)學(xué)科的促進大數(shù)據(jù)研究是對數(shù)學(xué)理論的研究，大數(shù)據(jù)的數(shù)據(jù)挖掘算法的核心還是數(shù)學(xué)模型問題，所以未來大數(shù)據(jù)技術(shù)要想獲得更大的發(fā)展，就必然會促使人們對數(shù)學(xué)理論進行深入研究，只有數(shù)學(xué)理論的突破才能促進大數(shù)據(jù)技術(shù)的更深、更快發(fā)展大數(shù)據(jù)與其他技術(shù)的融合發(fā)展現(xiàn)階段，人們談到計算機新技術(shù)，基本就是云計算、大數(shù)據(jù)、物聯(lián)網(wǎng)、人工智能、虛擬現(xiàn)實技術(shù)、5G技術(shù)。其中，大數(shù)據(jù)是云計算、人工智能的數(shù)據(jù)支持；物聯(lián)網(wǎng)、5G技術(shù)、VR技術(shù)又是數(shù)據(jù)的獲取通道。所以，未來大數(shù)據(jù)的發(fā)展會和這些新技術(shù)的發(fā)展結(jié)合的越來越密切，新技術(shù)的發(fā)展也會助力大數(shù)據(jù)技術(shù)的不斷發(fā)展193.4.5遵章守法——大數(shù)據(jù)時代的法律問題大數(shù)據(jù)時代法律的重要性我們生活在一個法治社會，任何活動都不能觸犯國家法律。特別是在大數(shù)據(jù)時代，數(shù)據(jù)保護已成全球性問題。在互聯(lián)網(wǎng)及大數(shù)據(jù)技術(shù)極速發(fā)展過程中，信息安全問題逐漸成為涉及政治、經(jīng)濟、文化、社會、軍事等各個領(lǐng)域的綜合問題，越來越多地與政治外交、經(jīng)貿(mào)發(fā)展、個人隱私權(quán)益等交織在一起。信息安全問題在當今時代日益凸顯，隨著大數(shù)據(jù)和人工智能技術(shù)的發(fā)展，數(shù)據(jù)的挖掘、整合、交易越來越便利，各種數(shù)據(jù)使用主體對個人信息掌握和使用越來越深入，大量個人信息在網(wǎng)絡(luò)上存儲、生成、使用和交換。隨著人工智能及大數(shù)據(jù)相關(guān)技術(shù)日益深入我們的日常生活，技術(shù)變革帶來數(shù)據(jù)獲取渠道與使用方式的多樣化，用戶隱私權(quán)、安全面臨越來越嚴峻的挑戰(zhàn)。2021數(shù)據(jù)保護應(yīng)該技術(shù)與立法并行。數(shù)據(jù)的價值就在于能夠把人的特征、行為、選擇等信息化，反過來為人類的社會、工作、生活提供方便，但大數(shù)據(jù)時代不能變成沒有隱私、沒有禁忌的時代，而應(yīng)該是更加注重保護隱私的時代。這就要求隱私的保護在技術(shù)上要保證數(shù)據(jù)來源與處理方式的透明性、可控性以及載體的安全性，在立法方面應(yīng)當盡早明確數(shù)據(jù)與個人信息的法律規(guī)定與保護，通過完善相關(guān)立法，依法嚴厲打擊非法泄露和出賣個人數(shù)據(jù)等行為，構(gòu)建統(tǒng)一有序的法律環(huán)境。我國相關(guān)技術(shù)研究與立法研究都著眼這方面進行不斷努力。隨著越來越多的現(xiàn)實生活內(nèi)容連接到原本虛擬的互聯(lián)網(wǎng)上，日益敏感的且具有挖掘價值的公民個人信息被各家企業(yè)存