Python數(shù)據(jù)分析與可視化案例教程（微課版）notebook版PPT全套完整教學(xué)課件

Python數(shù)據(jù)分析與可視化案例教程（微課版）notebook版0-Python的數(shù)據(jù)分析.pptx 1-語法基礎(chǔ).pptx 2-流程控制.pptx 基于Python的數(shù)據(jù)分析2022-4-10引例學(xué)習(xí)方法教學(xué)法（jupyternotebook）可視化（如餅圖）1997年石河子大學(xué)數(shù)學(xué)系學(xué)習(xí)2001年華北工學(xué)院工作（現(xiàn)中北大學(xué)）2006年中北大學(xué)碩士畢業(yè)2012年加拿大YorkUniversity訪問學(xué)者2013年中北大學(xué)博士畢業(yè)2014年評(píng)為碩導(dǎo)2019年海南醫(yī)學(xué)院工作1997年石河子大學(xué)數(shù)學(xué)系學(xué)習(xí)2001年中北大學(xué)工作（原華北工學(xué)院）2012年加拿大YorkUniversity訪問學(xué)者2019年海南醫(yī)學(xué)院工作6200920132017201820192020202020212022.62022.4對于真正的人工智能而言，最重要的永遠(yuǎn)是數(shù)據(jù)，只有擁有完整的數(shù)據(jù)，人工智能才能真正的發(fā)展起來。如果說人工智能是一把寶刀，需要有一塊好的磨刀石才能讓它更加銳利，而大數(shù)據(jù)恰好就是這塊最好的磨刀石。這也說明，完整的數(shù)據(jù)對于人工智能多么重要。任何拋開數(shù)據(jù)談人工智能的，全都是耍流氓。什么是大數(shù)據(jù)？大數(shù)據(jù)的5V特點(diǎn)：Volume（大量）、Velocity（高速）、Variety（多樣）、Value（低價(jià)值密度）、

Veracity（真實(shí)性）。大數(shù)據(jù)的那些V瀏覽網(wǎng)頁和網(wǎng)購后的商品推薦什么是數(shù)據(jù)分析？能分析出什么？算術(shù)平均值、幾何平均值、平方平均值、調(diào)和平均值、加權(quán)平均值算術(shù)平均值：一組數(shù)據(jù)中所有數(shù)據(jù)之和再除以數(shù)據(jù)的個(gè)數(shù)。

姓名12345678910111213141516171819202122成績9998100989910010099981009810098999880171016141512整體平均值是在數(shù)據(jù)呈均勻分布或者正態(tài)分布的情況下才會(huì)有意義，如果忽略整個(gè)數(shù)據(jù)的分布情況，只提平均值，其實(shí)是沒有意義的。球員

表現(xiàn)2分球3分球總投球數(shù)投中投中率總投球數(shù)投中投中率A25020080.00%50510.00%B1009090.00%1505033.33%球員整體表現(xiàn)總投球數(shù)投中投中率A30020568.33%B25014056.00%辛普森悖論

在分組比較中都占優(yōu)勢的一方，有的時(shí)候在總評(píng)中反而是失勢的一方?！两Y(jié)論算術(shù)平均值特別敏感，它很容易受到極端數(shù)據(jù)的影響。整體平均值是在數(shù)據(jù)均勻分布或者正態(tài)分布下才會(huì)有意義。辛普森悖論：分組結(jié)論和整體平均值結(jié)論可能會(huì)大相徑庭。姓名12345678910111213141516171819202122成績9998100989910010099981009810098999880171016141512球員整體表現(xiàn)總投球數(shù)投中投中率A30020568.33%B25014056.00%為什么是python？Lifeisshort，IneedPython！人生苦短，我用Python。Python除了極少的事情不能做之外，其它基本上可以說全能：Python是當(dāng)今炙手可熱的數(shù)據(jù)分析工具。Python是一種面向?qū)ο蟮慕忉屝驼Z言；特點(diǎn)是簡單易學(xué)、免費(fèi)開源、高層語言、可移植性強(qiáng)、面向?qū)ο?、可擴(kuò)展性、可嵌入型、豐富的庫、規(guī)范的代碼等。Python能做什么系統(tǒng)運(yùn)維、圖形處理、科學(xué)計(jì)算、文本處理、數(shù)據(jù)庫編程、網(wǎng)絡(luò)編程、web編程、多媒體應(yīng)用、pymo引擎、黑客編程、爬蟲編寫、機(jī)器學(xué)習(xí)、人工智能等等。1.Python語言基礎(chǔ)語法2.Python數(shù)據(jù)分析常用類庫3.Python爬蟲4.數(shù)據(jù)可視化matplotlib、epycharts數(shù)據(jù)獲取爬取數(shù)據(jù)部分?jǐn)?shù)據(jù)可視化部分?jǐn)?shù)據(jù)分析部分關(guān)于Python的教學(xué)方法建議課件.ipynbmarkdown呈現(xiàn)內(nèi)容豐富可以保存為html格式可以保存為ipynb格式課堂案例實(shí)時(shí)更新多使用社會(huì)熱點(diǎn)關(guān)注事件案例機(jī)器學(xué)習(xí)初學(xué)者—手把手教你做數(shù)字圖像識(shí)別Kaggle—DigitRecognizer鏈接：/JosephPai/article/details/78898003120487362ThankYou

ForYourAttention基于Python的數(shù)據(jù)分析余本國2021-07-271-語法基礎(chǔ)1997年石河子大學(xué)數(shù)學(xué)系學(xué)習(xí)2001年華北工學(xué)院工作（現(xiàn)中北大學(xué)）2006年中北大學(xué)碩士畢業(yè)2012年加拿大YorkUniversity訪問學(xué)者2013年中北大學(xué)博士畢業(yè)2014年評(píng)為碩導(dǎo)2019年海南醫(yī)學(xué)院工作36200920132017201820192020202020212022.62022.4什么是大數(shù)據(jù)？大數(shù)據(jù)的5V特點(diǎn)：Volume（大量）、Velocity（高速）、Variety（多樣）、Value（低價(jià)值密度）、

Veracity（真實(shí)性）。大數(shù)據(jù)的那些V為什么是python？Lifeisshort，IneedPython！人生苦短，我用Python。Python除了極少的事情不能做之外，其它基本上可以說全能：Python是當(dāng)今炙手可熱的數(shù)據(jù)分析工具。Python是一種面向?qū)ο蟮慕忉屝驼Z言；特點(diǎn)是簡單易學(xué)、免費(fèi)開源、高層語言、可移植性強(qiáng)、面向?qū)ο?、可擴(kuò)展性、可嵌入型、豐富的庫、規(guī)范的代碼等。Python能做什么系統(tǒng)運(yùn)維、圖形處理、科學(xué)計(jì)算、文本處理、數(shù)據(jù)庫編程、網(wǎng)絡(luò)編程、web編程、多媒體應(yīng)用、pymo引擎、黑客編程、爬蟲編寫、機(jī)器學(xué)習(xí)、人工智能等等。關(guān)于代碼舉例演示說明所有code演示案例，請到JupyterNoteBook演示！因?yàn)閕pynb格式可以有markdown演示文本(群內(nèi)已提供)，可實(shí)時(shí)演示代碼，下課時(shí)可導(dǎo)出為html格式發(fā)給學(xué)生或掛到網(wǎng)上供學(xué)生課后復(fù)習(xí)，便于課堂知識(shí)再現(xiàn)。所以本PPT不提供大量的舉例。數(shù)據(jù)清洗一、Python基本語法注釋符：#分層次：4空格也可Tab鍵但不能混用冒號(hào)下空四格foriin[1,2,3]:print(i,end=′;′)Ifscore>60:print(′及格′)else：print(′不及格′)>>>print(‘輸出顯示’)#可以添加參數(shù)end=‘;’轉(zhuǎn)義符：\\n\tb=′C:\news\yubg.txt′′C:\\news\\yubg.txt′r′C:\news\yubg.txt′\′引號(hào)符：′′′′′′成對使用str單雙引號(hào)無差異三引號(hào)注釋多行a=′輸出顯示′b=′c:\news\yubg.txt′print()函數(shù)：用于屏幕輸出顯示。>>>a=′輸出顯示′>>>print(“變量a的值為：”,a)變量a的值為：輸出顯示print()函數(shù)可帶參數(shù)end=′′>>>foriin[1,2,3]:print(i)123>>>>>>foriin[1,2,3]:print(i,end=‘;’)

1;2;3;>>>變量命名規(guī)則標(biāo)識(shí)符就是用于給程序中變量、類、方法命名的符號(hào)（簡單來說，標(biāo)識(shí)符就是合法的名字）。Python需要使用標(biāo)識(shí)符給變量命名。標(biāo)識(shí)符必須以字母、下畫線（_）開頭，后面可以跟任意數(shù)目的字母、數(shù)字和下畫線（_）。Python語言是區(qū)分大小寫的。標(biāo)識(shí)符不能是Python關(guān)鍵字，但可以包含關(guān)鍵字。標(biāo)識(shí)符不能包含空格。注意：此處的字母并不局限于26個(gè)英文字母，可以包含中文字符、日文字符等。標(biāo)識(shí)符可以由字母、數(shù)字、下畫線（_）組成，其中數(shù)字不能打頭。Python關(guān)鍵字二、字符串strstr定義str就是一串字符，是編程語言中表示文本的數(shù)據(jù)類型。在Python中可以使用一對引號(hào)（單雙引號(hào)均可）定義一個(gè)字符串?？梢允褂胕ndex獲取一個(gè)str中指定位置的字符，索引計(jì)數(shù)從0開始。也可以使用for循環(huán)遍歷字符串中每一個(gè)字符。在Python語言中，數(shù)據(jù)類型分為str、int/float、list、tuple、dict、set。例：a=′teacher′b=′2′#同input()接收到的輸入查增刪改查[start:stop:step]索引：s=′python′012345-6-5-4-3-2-1index切片：[start:stop][start:stop:step]范圍[start:stop)>>>s[2:4]>>>s[1:5:2]#同s[2:4:1]th#

yhstr方法1、統(tǒng)計(jì)某字符出現(xiàn)次數(shù)：str.count(sub,start=0,end=len(string))可選參數(shù)為在字符串搜索的開始與結(jié)束位置。>>>a=′teacher′>>>a.count(‘e’)#返回22、檢測字符串中是否包含子字符串：str.find(str,beg=0,end=len(string))str–指定檢索的字符串beg–開始索引，默認(rèn)為0。end–結(jié)束索引，默認(rèn)為字符串的長度。如果指定beg（開始）和end（結(jié)束）范圍，則檢查是否包含在指定范圍內(nèi)，如果包含子字符串返回開始的索引值，否則返回-1。3、檢測字符串中是否包含子字符串:str.index(substr)如果指定beg（開始）和end（結(jié)束）范圍，則檢查是否包含在指定范圍內(nèi).該方法與find()方法一樣，只不過如果str不在string中會(huì)報(bào)一個(gè)異常。/marvin_wind/article/details/79903175>>>a='teacher’>>>a.find('ch’)#返回3>>>a='teacher'>>>a.index(‘h’)#返回左到右的第一個(gè)，44、字符串中的old字符串替換成new：str.replace(old,new[,max])如果指定第三個(gè)參數(shù)max，則替換不超過max次。5、字符串分割為列表：str.split(str=

"",num)如果參數(shù)num有指定值，則僅分隔num+1個(gè)子字符串>>>a='teacher'>>>a.split('e’)['t','ach','r']>>>a='teacher'>>>a.replace('er','or’)'teachor’

>>>a.split('e',1)

['t','acher']注釋符用井號(hào)#,賦值str型引號(hào)找;

單引雙引無差異,同時(shí)使用要注意;

分層次，用空格,冒號(hào)之下空四格;

索引序號(hào)從0起,逆序–1也可以.基本語法三、列表list列表是最常用的數(shù)據(jù)類型，用方括號(hào)表示。列表的數(shù)據(jù)項(xiàng)（元素）不需要具有相同的類型。創(chuàng)建一個(gè)列表，只要把逗號(hào)分隔的不同的元素使用方括號(hào)括起來即可。例如：list1=['physics','chemistry',1997,2000]查增刪改查查看列表中的元素同str的切片方法。>>>list0=[1,2,3,’py’,’海醫(yī)’]>>>list0[1:4]增增刪改查>>>[1,2,3,’py’].append(‘hn’)>>>[1,2,3,’py’,’hn’]

>>>[1,2,3].insert(2,‘hn’)>>>[1,2,‘hn’,3]

刪增刪改查

刪除list元素有兩種方式：>>>[1,2,3,’py’].pop()>>>[1,2,3,2].remove(2)>>>delL[1:2]>>>delL[1:3]>>>delL>>>[1,2,3,’py’].pop(3)>>>L=[1,2,3,’py’]>>>L=[1,2,3,’py’]>>>L=[1,2,3,’py’]改增刪改查>>>list0=[1,2,3,’py’,’海醫(yī)’]>>>list0[4]=’hy’對位置上的元素直接賦值即可修改。[1,2,3,’py’,’hy’]otherStr轉(zhuǎn)化為list：list(str)>>>str_0=’hainan’>>>list(str_0)

['h','a','i','n','a','n']list的排序：sorted(L)>>>L=['h','a','i','n','a','n’]>>>sorted(dd)['a','a','h','i','n','n']>>>L=['h','a','i','n','a','n’]>>>L.sort()>>>L['a','a','h','i','n','n']四、元組tuple元組與列表類似，不同之處在于元組的元素不能修改。tuple使用小括號(hào)，list使用方括號(hào)。tuple創(chuàng)建在括號(hào)中添加元素，并使用逗號(hào)隔開。例如：tu1=('physics','chemistry',1997,2000)查增刪改查查看tuple中的元素同str的切片方法。tuple好處在于不能被修改，所以list可轉(zhuǎn)化為元組瀏覽，訪問比list快。>>>a=[1,2,3]>>>t=tuple(a)#list轉(zhuǎn)tuple>>>a0=list(t)#tuple轉(zhuǎn)list五、集合set集合（set）是一個(gè)無序的不重復(fù)元素序列。創(chuàng)建集合用{}，元素用逗號(hào)隔開。創(chuàng)建一個(gè)空集合必須用set()而不是{}，{}是用來創(chuàng)建一個(gè)空字典。常用它過濾list、tuple等重復(fù)值。例如：set1={'physics','chemistry',1997,2000}查增刪改查>>>set_0={"a","b","c"}>>>"b"inset_0TrueSet是無序的，故沒有index，但要看某元素在不在set中，用in。改增刪改查set存儲(chǔ)的元素必須是不變對象，故任何可變對象是不能放入set中的。>>>a={"a","b","c"}>>>a={"a","b","c",[1,2]}#會(huì)報(bào)錯(cuò)增增刪改查Set增加元素也有兩種方式：

>>>{1,2,’py’}.add(3)>>>{1,2,3}.update({3,4,5}){1,2,3,4,5}刪增刪改查Set刪除元素方式有三：

>>>a={1,2,3,4,”a”,”b”}>>>a.discard(3)>>>a.remove(“b”)>>>a.pop()除了discard()函數(shù)外，其他的方法在刪除的元素不存在時(shí)會(huì)報(bào)錯(cuò)。otherSet其他操作，如集合的并、交、差等。對稱差分：兩個(gè)集合(s和t)的對稱差分是指另外一個(gè)集合C，該集合中的元素，只能是屬于集合s或者集合t的成員，不能同時(shí)屬于兩個(gè)集合。函數(shù)方法等價(jià)方法功能描述s.union(t)s|t合并操作ersection(t)s&t交集操作s.difference(t)s–t差分操作s.symmetric_fifference(t)s^t對稱差分操作六、字典dict字典用于存放有映射關(guān)系的兩組數(shù)據(jù)。其一組是key，是關(guān)鍵數(shù)據(jù)，具有唯一性，對字典操作都是基于key；另一組是value，需通過key來訪問。字典的元素是一對鍵值，用冒號(hào):分開，字典同set都使用花括號(hào){}。字典是一種可變?nèi)萜髂Ｐ停纱鎯?chǔ)任意類型對象。但key需為不可變型。例如：dic={‘physics’:35,‘chemistry’:56,‘體育':80,1:’A’}查增刪改查Dict同Set無序，故沒有index，訪問元素需通過key。>>>dic={‘physics’:35,‘chemistry’:56,‘體育':80,1:’A’}>>>dic[‘chemistry’]#返回‘chemistry’所對應(yīng)的值56改增刪改查Dict無序，沒有index，但它的key就類似于index。所以訪問和修改方法同list，只是將list通過index訪問修改，而dict通過key。>>>dic={‘physics’:35,‘chemistry’:56,‘體育':80,1:’A’}>>>dic[‘chemistry’]=60#修改‘chemistry’所對應(yīng)的值56為60增增刪改查Dict增加元素方法有兩種：增加一個(gè)元素同修改元素一樣，當(dāng)被修改的key不存在時(shí)就會(huì)自動(dòng)添加這個(gè)元素。兩個(gè)字典合并使用dict1.update(dict2)，如此即將dict2中所有元素追加到了dict1中。>>>a={1:"a",2:"b","c":3}>>>a[3]=5#增加元素>>>a

{1:'a',2:'b','c':3,3:5}>>>b={1:"d",4:"b"}>>>a.update(b)>>>a{1:'d',2:'b','c':3,3:5,4:'b'}注意：當(dāng)合并的兩個(gè)字典中有相同的鍵名但對應(yīng)的值不同時(shí)，會(huì)將被合并的元素覆蓋掉原來的鍵值。刪增刪改查Dict刪除方法有四種：

In[1]:aOut[1]:{1:'d',2:'b','c':3,3:5,4:'b’}In[2]:a.pop("c")Out[2]:3In[3]:aOut[3]:{1:'d',2:'b',3:5,4:'b'}In[4]:aOut[4]:{1:'d',2:'b',3:5,4:'b'}In[5]:dela[2]In[6]:aOut[6]:{1:'d',3:5,4:'b'}In[7]:a.popitem()Out[7]:(4,'b')otherdict其他操作，如獲取字典的所有鍵名、鍵值、鍵值對等。#獲取字典的鍵值對、字典的值、字典的鍵

print(dic.items())print(dic.values())print(dic.keys())

#對字典排序

a={1:23,99:2,28:72,3:83,72:222}print(sorted(a))#對字典按照key排序，打印key的list

print(sorted(a.items()))#對字典按照key排序，打印鍵值對元組，list類型

print(sorted(a.items(),key=lambdax:x[1],reverse=True))

#對字典按照value排序，可以降序或升序，打印鍵值對元組

[1,3,28,72,99][(1,23),(3,83),(28,72),(72,222),(99,2)][(72,222),(3,83),(28,72),(1,23),(99,2)]七、常用函數(shù)針對數(shù)據(jù)類型，通用的常用函數(shù)有type、len、id、copy、help、dir等。type()：查看數(shù)據(jù)類型。len()：查看數(shù)據(jù)的長度（即含有元素的個(gè)數(shù)）。help():查看數(shù)據(jù)的用法。自定義函數(shù)的說明文檔就是通過help查看。id()：查看數(shù)據(jù)存儲(chǔ)內(nèi)存地址。copy():對數(shù)據(jù)進(jìn)行復(fù)制、拷貝。例：a_2=[1,0,2,”1”,”feel”]type(a_2)len(a_2)id(a_2)b=a_2.copy()id(b)help(a_2)In[3]:id(a_2)Out[3]:2986056682888In[4]:b=a_2.copy()In[5]:id(b)Out[5]:2986061029768In[1]:a_2=[1,0,2,"2","feel"]...:type(a_2)Out[1]:listIn[2]:len(a_2)Out[2]:5注意：如果我們直接賦值：c=a_2id(c)結(jié)果會(huì)怎么樣呢？In[3]:id(a_2)Out[3]:2986056682888In[4]:b=a_2.copy()In[5]:id(b)Out[5]:2986061029768In[7]:c=a_2

...:id(c)Out[7]:2986056682888

In[8]:結(jié)論：復(fù)制函數(shù)不能直接賦值（賦值僅僅是做了一個(gè)標(biāo)簽，他們存儲(chǔ)地址一致，所以修改任何一個(gè)，另一個(gè)都會(huì)被修改），而需要使用copy函數(shù)。help(a_2)......|append(self,object,/)|Appendobjecttotheendofthelist.|clear(self,/)|Removeallitemsfromlist.|copy(self,/)|Returnashallowcopyofthelist.|count(self,value,/)|Returnnumberofoccurrencesofvalue.|extend(self,iterable,/)|Extendlistbyappendingelementsfromtheiterable.|index(self,value,start=0,stop=9223372036854775807,/)|Returnfirstindexofvalue.|RaisesValueErrorifthevalueisnotpresent.|insert(self,index,object,/)|Insertobjectbeforeindex.|pop(self,index=-1,/)|Removeandreturnitematindex(defaultlast).|remove(self,value,/)|Removefirstoccurrenceofvalue.

dir()In[9]:dir(b)Out[9]:......'append','clear','copy','count','extend','index','insert','pop','remove','reverse','sort']……120487362ThankYou

ForYourAttention基于Python的數(shù)據(jù)分析余本國2020-12-192-流程控制關(guān)于代碼舉例演示說明所有code演示案例，請到JupyterNoteBook演示！因?yàn)閕pynb格式可以有markdown演示文本(913427877群內(nèi)已提供)，可實(shí)時(shí)演示代碼，下課時(shí)可導(dǎo)出為html格式發(fā)給學(xué)生或掛到網(wǎng)上供學(xué)生課后復(fù)習(xí)，便于課堂知識(shí)再現(xiàn)。所以本PPT不提供大量的舉例。即控制流程,具體指控制程序的執(zhí)行流程,而程序的執(zhí)行流程分為三種結(jié)構(gòu):順序結(jié)構(gòu)分支結(jié)構(gòu)(if)循環(huán)結(jié)構(gòu)(while與for)流程控制一、順序結(jié)構(gòu)在Python語言中，順序結(jié)構(gòu)就是按照代碼的前后順序按行執(zhí)行。height=1.80weight=75.5bmi=weight/height**2print("BMI指數(shù)",bmi)例如：計(jì)算BMI指數(shù)并判斷胖瘦程度。【身體質(zhì)量指數(shù)BMI】成人標(biāo)準(zhǔn)值是BMI18.5-23.9才算標(biāo)準(zhǔn)體重。

計(jì)算公式：體重(Kg)/身高(m)的平方分類BMI范圍

偏瘦

<=18.4

正常18.5~23.9

過重24.0~27.9

肥胖>=28.0二、選擇結(jié)構(gòu)if分支結(jié)構(gòu)就是根據(jù)滿足的條件去執(zhí)行相應(yīng)的動(dòng)作，即根據(jù)條件判斷的真假去執(zhí)行不同分支對應(yīng)的子代碼。if

僅一個(gè)單獨(dú)的if判斷語句if/else

兩種情況的分支結(jié)構(gòu)if/elif/else

多種情況的分支結(jié)構(gòu)if條件表達(dá)式：代碼塊if條件表達(dá)式:代碼塊else:代碼塊if條件表達(dá)式1:代碼塊1elif條件表達(dá)式2:代碼塊2elif...:.....else:代碼塊3注意：條件可以是任意表達(dá)式，但執(zhí)行結(jié)果必須為布爾類型None，0，空（空字符串，空列表，空字典等）三種的布爾值為False其余均為True三、循環(huán)結(jié)構(gòu)for循環(huán)結(jié)構(gòu)就是重復(fù)執(zhí)行某段代碼。for循環(huán)主要是將某個(gè)序列(string、list、tuple、set、dict等)內(nèi)的所有元素都執(zhí)行其下的相同的操作，故也稱為遍歷。for變量名in序列:代碼塊格式如下：j='a'for

i

in['a','b','c']:

h=j+i

print(h)

aaabac四、循環(huán)結(jié)構(gòu)while/2722127842qq-123/p/12447793.html

while循環(huán)則是符合條件就執(zhí)行其下的代碼操作，執(zhí)行完再回到while行進(jìn)行判斷是否還滿足，滿足則再次執(zhí)行其下代碼，如此循環(huán)往復(fù)，直至不滿足為止。while循環(huán)的基本使用break的使用continue的使用name=input('pleaseinputyourname:')whilename!=

'yubg':

print('You\'rewrong!Plsagain!')name=input('Inputyournameagain:')Print('Sonice!')四、pass、break、continuelis=[]whileTrue: