財(cái)務(wù)大數(shù)據(jù)-Python基礎(chǔ) 課件 3.5Pandas-數(shù)據(jù)特征分析

Pandas-數(shù)據(jù)特征分析課前回顧重復(fù)值處理：duplicated()、drop_duplicates()缺失值處理：isna()、dropna()、fillna()其他異常處理：刪除特殊字符replace()、更改數(shù)據(jù)類(lèi)型astype()索引設(shè)置：set_index()、reset_index()科云數(shù)據(jù)清洗函數(shù)：dataClean()目錄010203描述性統(tǒng)計(jì)分析累計(jì)統(tǒng)計(jì)數(shù)據(jù)排序01描述性統(tǒng)計(jì)分析描述性統(tǒng)計(jì)分析在財(cái)務(wù)工作中，我們常常需要計(jì)算各種財(cái)務(wù)指標(biāo)的合計(jì)數(shù)、平均值、最大最小值、標(biāo)準(zhǔn)差等，那么我們?nèi)绾尾拍芸焖僦肋@些統(tǒng)計(jì)值呢？Pandas提供了很多描述性統(tǒng)計(jì)函數(shù)，常用統(tǒng)計(jì)函數(shù)如下：函數(shù)描述函數(shù)描述函數(shù)描述count()非空值的個(gè)數(shù)median()中位數(shù)mad()平均絕對(duì)偏差sum()求和mode()眾數(shù)abs()絕對(duì)值mean()平均值prod()數(shù)組元素的乘積cov()協(xié)方差min()最小值quantile()分位數(shù)corr()相關(guān)系數(shù)max()最大值var()樣本方差pct_change()百分?jǐn)?shù)變化describe()統(tǒng)計(jì)信息摘要std()樣本標(biāo)準(zhǔn)差diff()一階差分讀取數(shù)據(jù)讀取data.xlsx中利潤(rùn)表項(xiàng)目數(shù)據(jù)：代碼#引入pandasimportpandasaspd#讀取data.xlsx利潤(rùn)表項(xiàng)目df=pd.read_excel('/webpython/course/d2633ec9ca5c4a288b73f97b4616d541/data.xlsx',sheet_name=1,converters={'年':str,'月':str})#顯示前5行show_table(df.head())描述性統(tǒng)計(jì)分析可以計(jì)算表格中各列的統(tǒng)計(jì)指標(biāo)，也可以結(jié)合索引，計(jì)算單列統(tǒng)計(jì)指標(biāo)。描述性統(tǒng)計(jì)分析可以計(jì)算表格中各列的統(tǒng)計(jì)指標(biāo)，也可以結(jié)合索引，計(jì)算單列統(tǒng)計(jì)指標(biāo)。describe()函數(shù)describe()函數(shù)：生成描述性統(tǒng)計(jì)信息，將所有數(shù)值列進(jìn)行統(tǒng)計(jì)，返回DataFrame中常見(jiàn)的統(tǒng)計(jì)指標(biāo)，包括值個(gè)數(shù)、均值、標(biāo)準(zhǔn)差、最大最小值、百分?jǐn)?shù)。describe()函數(shù)語(yǔ)法：DataFrame.describe(percentiles=None,include=None,exclude=None,datetime_is_numeric=False)常用參數(shù)說(shuō)明percentiles百分位數(shù)，介于0-1之間，默認(rèn)[25%,50%,75%]include包含在結(jié)果中的數(shù)據(jù)類(lèi)型，默認(rèn)所有數(shù)值列exclude排除在結(jié)果中的數(shù)據(jù)類(lèi)型，默認(rèn)不排除任何內(nèi)容datetime_is_numeric是否將datetimedtypes視為數(shù)字，默認(rèn)為Falsedescribe()函數(shù)describe()函數(shù)結(jié)合索引器可以單獨(dú)提取describe中想要的指標(biāo)數(shù)據(jù)。示例1代碼#使用索引器獲取單項(xiàng)指標(biāo)print(df.describe().loc['max','營(yíng)業(yè)收入'])輸出結(jié)果：424000.0代碼#查看df統(tǒng)計(jì)信息show_table(df.describe())pct_change()函數(shù)pct_change()函數(shù)：當(dāng)前元素與先前元素之間的百分比變化，默認(rèn)計(jì)算與前一行的百分比變化，適用于財(cái)務(wù)報(bào)表的環(huán)比分析。pct_change()函數(shù)語(yǔ)法：DataFrame.pct_change(periods=1,fill_method='pad',limit=None,freq=None,**kwargs)常用參數(shù)說(shuō)明periods計(jì)算周期，默認(rèn)為1fill_method填充空值的方法，默認(rèn)'pad'，表示用前一個(gè)非缺失值填充，bfill用后一個(gè)非缺失值填充，None不填充limit限制填充次數(shù)axis計(jì)算方向，{0或'index',1或'columns'}，默認(rèn)axis=0pct_change()函數(shù)要求：計(jì)算營(yíng)業(yè)收入、營(yíng)業(yè)成本、凈利潤(rùn)的環(huán)比增長(zhǎng)率。示例2代碼#計(jì)算環(huán)比增長(zhǎng)率，并使用show_table()展示結(jié)果前5行show_table(df.set_index(['年','月']).pct_change().head())例：（329800-274400）/274400=0.20189502累計(jì)統(tǒng)計(jì)累計(jì)統(tǒng)計(jì)在會(huì)計(jì)工作中，除了要計(jì)算各期發(fā)生額之外，往往還需要計(jì)算“本年累計(jì)值”。提示axis=0：默認(rèn)值，沿0軸計(jì)算，即計(jì)算每列的值axis=1：沿1軸計(jì)算，即計(jì)算每行的值函數(shù)描述cumsum()累計(jì)總和cumprod()累計(jì)乘積cummax()累計(jì)最大值cummin()累計(jì)最小值累計(jì)統(tǒng)計(jì)要求：計(jì)算2021年各期”營(yíng)業(yè)收入、營(yíng)業(yè)成本、凈利潤(rùn)”的本年累計(jì)金額。示例3代碼df1=df.loc[df['年']=='2021'].set_index(['年','月']).cumsum()show_table(df1.head())03數(shù)據(jù)排序

數(shù)據(jù)排序sort_values()函數(shù)：按照某行或某列的值進(jìn)行升序或降序排序。sort_values()函數(shù)語(yǔ)法：DataFrame.sort_values(by,axis=0,ascending=True,inplace=False,kind='quicksort',na_position='last',ignore_index=False,key=None)常用參數(shù)描述byaxis軸上的某個(gè)索引或索引列表，按什么排序axis要排序的軸，{0或'index'，1或'columns'}，默認(rèn)0，按照指定列數(shù)據(jù)排序ascending排序方式，默認(rèn)為T(mén)rue，代表升序排序，F(xiàn)alse代表降序排序inplace默認(rèn)為False，True表示直接在原數(shù)據(jù)上排序ignore_index是否重建索引，默認(rèn)為False數(shù)據(jù)排序要求：按照凈利潤(rùn)降序排序，顯示前5行。示例4代碼df2=df.sort_values('凈利潤(rùn)',ascending=False)show_table(df2.head())sort_index()函數(shù)sort_index()函數(shù)：在指定軸上根據(jù)索引值對(duì)數(shù)據(jù)進(jìn)行排序，默認(rèn)使用行索引升序排序。sort_index()函數(shù)語(yǔ)法：DataFrame.sort_index（axis=0，level=None，ascending=True，inplace=False，kind='quicksort'，na_position='last'，sort_remaining=True，ignore_index=False，key=None）代碼#按照行索引降序排序df3=df.sort_index(ascending=False)show