《大數(shù)據(jù)技術(shù)應(yīng)用基礎(chǔ)》課件 項(xiàng)目一模塊四 大數(shù)據(jù)分析工具

項(xiàng)目一大數(shù)據(jù)認(rèn)知《大數(shù)據(jù)技術(shù)應(yīng)用基礎(chǔ)》模塊四

大數(shù)據(jù)分析工具核心目標(biāo)職業(yè)能力1.掌握大數(shù)據(jù)的概念與特征，做好數(shù)據(jù)分析的全面準(zhǔn)備工作；2.了解大數(shù)據(jù)分析工具的基本使用方法；3.能根據(jù)學(xué)習(xí)需要查閱相關(guān)資料。職業(yè)素養(yǎng)1.養(yǎng)成用大數(shù)據(jù)思維去看待問題的習(xí)慣；2.養(yǎng)成對事物分析的客觀、敏感的職業(yè)思維。知識圖譜項(xiàng)目背景在當(dāng)今數(shù)據(jù)驅(qū)動的世界中，企業(yè)和組織每天都會生成大量的數(shù)據(jù)。從這些數(shù)據(jù)中提取見解和知識的能力對于做出明智的決策和指導(dǎo)未來的操作至關(guān)重要。大數(shù)據(jù)已成為各國政府和企業(yè)的重要戰(zhàn)略資源，就像計算機(jī)和互聯(lián)網(wǎng)一樣，大數(shù)據(jù)即將成為新一輪的技術(shù)革命。認(rèn)識大數(shù)據(jù)、學(xué)習(xí)相關(guān)大數(shù)據(jù)知識地必要性不言而喻。作為一名大學(xué)生的小張也不甘落后，想要深入學(xué)習(xí)大數(shù)據(jù)的相關(guān)知識，并選用合適的大數(shù)據(jù)分析工具完成對實(shí)際問題探索與研究。0102PowerBI基本介紹與應(yīng)用Python基本介紹與應(yīng)用問題引入小張意識到自己僅僅只了解大數(shù)據(jù)分析方法還不夠，還需要掌握一些大數(shù)據(jù)的分析工具，小張?jiān)诰W(wǎng)上查找資料的時候發(fā)現(xiàn)可用于大數(shù)據(jù)分析的工具有很多，不僅有常見的Excel，還有許多崗位都要求的Python和PowerBI等。好學(xué)的小張又找到老師請求幫助，希望能在老師的指導(dǎo)下，對這些原本不熟悉的軟件有一個基本認(rèn)識，決定了解之后再選定一個工具進(jìn)行詳細(xì)學(xué)習(xí)。Python基本介紹與應(yīng)用01一、Python基本介紹與應(yīng)用作為一門計算機(jī)編程語言，Python是如何能夠在眾多同行中脫穎而出，占據(jù)數(shù)據(jù)分析軟件的大半江山的呢？一、Python基本介紹與應(yīng)用Python是一種代表簡單主義思想的語言，自帶十分簡單的說明文檔，新手可以隨時上手各種代碼的用法，其強(qiáng)制縮進(jìn)的規(guī)定使得其風(fēng)格清晰整潔且美觀。簡單、易學(xué)且易讀，對編程新手十分友好使用者可以自由的查看Python的源代碼并修改它。免費(fèi)且開源（一）基本介紹一、Python基本介紹與應(yīng)用可以幫助處理各種工作，包括正則表達(dá)式、文檔生成、單元測試、線程、數(shù)據(jù)庫、網(wǎng)頁瀏覽器、CGI、FTP、電子郵件、XML、XML-RPC、HTML、WAV文件、密碼系統(tǒng)、GUI（圖形用戶界面）、Tk和其他與系統(tǒng)有關(guān)的操作。這被稱作Python的“功能齊全”理念。除了標(biāo)準(zhǔn)庫以外，還有許多其他高質(zhì)量的庫，如wxPython、Twisted和Python圖像庫等等，數(shù)據(jù)分析的絕大多數(shù)流程都可以通過這些豐富的庫來完成。Python擁有豐富的庫，標(biāo)準(zhǔn)庫很龐大（一）基本介紹一、Python基本介紹與應(yīng)用Python是一種免費(fèi)、自由的編程語言，可以稱得上既簡單又強(qiáng)大的編程語言。廣泛應(yīng)用于數(shù)據(jù)分析、數(shù)據(jù)挖掘、數(shù)據(jù)可視化等場景，是一款強(qiáng)大的數(shù)據(jù)分析、數(shù)據(jù)挖掘工具。GuidovanRossumPython之父Lifeisshort,YouneedPython.（一）基本介紹一、Python基本介紹與應(yīng)用Python的應(yīng)用場景非常廣泛。（二）應(yīng)用電商領(lǐng)域物流運(yùn)輸領(lǐng)域商業(yè)分析場景農(nóng)業(yè)領(lǐng)域一、Python基本介紹與應(yīng)用（二）應(yīng)用物流運(yùn)輸領(lǐng)域獲取各種路況以及交通工具的信息進(jìn)行建模，規(guī)劃效率最高的運(yùn)輸路線，為物流運(yùn)輸減少金錢成本、時間成本。物流公司市政道路規(guī)劃一、Python基本介紹與應(yīng)用（二）應(yīng)用通過獲取用戶的歷史信息，建立模型進(jìn)行用戶畫像，提供給用戶可能心動的產(chǎn)品組合。幫助用戶更好的挑選到自己心儀的產(chǎn)品幫助商戶更好的匹配自己的用戶人群以改進(jìn)產(chǎn)品并提高銷量電商領(lǐng)域一、Python基本介紹與應(yīng)用（二）應(yīng)用強(qiáng)大的可視化功能繪制各種清晰美觀的圖表，給分析者帶來更大的便利。商業(yè)分析場景一、Python基本介紹與應(yīng)用（二）應(yīng)用農(nóng)業(yè)領(lǐng)域?qū)崿F(xiàn)目標(biāo)檢測的功能，及時辨別作物上的害蟲。例如：桑樹上辨識是蠶還是其他害蟲。實(shí)現(xiàn)對害蟲的及時防治，保證作物的健康，防止因?yàn)橄x害導(dǎo)致的農(nóng)業(yè)減產(chǎn)。PowerBI基本介紹與應(yīng)用02二、PowerBI基本介紹與應(yīng)用Python已經(jīng)這么優(yōu)秀了，為什么還有第二個選擇PowerBI呢？二、PowerBI基本介紹與應(yīng)用PowerBI的優(yōu)點(diǎn)操作更加簡單，且易于使用，學(xué)習(xí)PowerBI與學(xué)習(xí)Microsoftoffice軟件一樣簡單，相對來說門檻更低。功能強(qiáng)大、足夠靈活，不依賴技術(shù)人員就可以輕松處理海量數(shù)據(jù)，并實(shí)時快速地發(fā)現(xiàn)數(shù)據(jù)中蘊(yùn)含的信息，隨時隨地回答相關(guān)的業(yè)務(wù)問題。對于個人用戶來說，PowerBIDesktop是完全免費(fèi)的，對于中小企業(yè)來說選擇PowerBI的成本也較低甚至可以做到零成本。二、PowerBI基本介紹與應(yīng)用不管是簡單的Excel工作簿，還是基于云數(shù)據(jù)倉庫和本地混合數(shù)據(jù)倉庫的集合，PowerBI都可輕松連接到數(shù)據(jù)源，可視化重要信息，并根據(jù)需要與任何人共享。微軟的PowerBI是一系列的軟件服務(wù)、應(yīng)用和連接器，這些軟件服務(wù)、應(yīng)用和連接器協(xié)同工作，將不相關(guān)的數(shù)據(jù)源轉(zhuǎn)化為合乎邏輯、視覺上逼真的交互式見解。（一）基本介紹二、PowerBI基本介紹與應(yīng)用操作簡單且速度快，能夠基于Excel工作簿或本地數(shù)據(jù)庫創(chuàng)建快速見解。可用作個人報表和可視化工具，還可用作團(tuán)隊(duì)項(xiàng)目、部門甚至整個企業(yè)的分析和決策引擎。（如圖所示）同時，也是可靠的企業(yè)級服務(wù)，不僅可隨時用于廣泛的建模和實(shí)時分析，還可用于自定義開發(fā)。（一）基本介紹特點(diǎn)：二、PowerBI基本介紹與應(yīng)用PowerBI可以連接一百二十多種數(shù)據(jù)源簡化數(shù)據(jù)的準(zhǔn)備工作，即時完成數(shù)據(jù)的統(tǒng)計分析,并生成豐富的交互式可視化報告，發(fā)布到網(wǎng)頁和移動設(shè)備上，供相關(guān)人員隨時隨地查閱，以便監(jiān)測企業(yè)各項(xiàng)業(yè)務(wù)的運(yùn)行狀況。（一）基本介紹二、PowerBI基本介紹與應(yīng)用PowerQuery編輯器數(shù)據(jù)準(zhǔn)備可將取自獲取文件、文件夾、數(shù)據(jù)庫、網(wǎng)頁等的數(shù)據(jù)進(jìn)行深度加工處理，然后把這些處理步驟進(jìn)行保存，后期數(shù)據(jù)更新時無須再次重復(fù)操作。有可視化的操作界面，同時支持用M語言進(jìn)行高級編輯。（一）基本介紹二、PowerBI基本介紹與應(yīng)用數(shù)據(jù)建模利用PowerQuery處理好的數(shù)據(jù)或其他數(shù)據(jù)建立分析維度，實(shí)現(xiàn)模型搭建。PowerPivotDAX是數(shù)據(jù)分析表達(dá)式，是一種專門為計算數(shù)據(jù)模型中的商業(yè)邏輯?設(shè)計的語言，是PowerBI中數(shù)據(jù)建模語言。DAX具有與Excel函數(shù)相似的編輯方式。DAX（DataAnalysisExpression）可視化方面，PowerBI擁有20多個內(nèi)置的可視化圖形和上百個自定義可視化圖形庫，用戶可以輕松使用可視化分析來有效地傳達(dá)信息并應(yīng)對業(yè)務(wù)挑戰(zhàn)。（一）基本介紹二、PowerBI基本介紹與應(yīng)用（二）應(yīng)用幫助從業(yè)人員快速的分析處理相關(guān)商業(yè)業(yè)務(wù)案例，并展示出可以與共事者即時分享修改的精美圖表，有利于管理人員在短時間內(nèi)作出更加準(zhǔn)確的商業(yè)決策。工商管理領(lǐng)域