數(shù)據(jù)分析必備經(jīng)典模型詳解

數(shù)據(jù)分析必備經(jīng)典模型詳解目標(biāo)思維第一個(gè)要講的思維是目標(biāo)思維，很多人都覺(jué)得不屑一顧，但是很多人做數(shù)據(jù)分析之所以失敗，恰恰就是沒(méi)有這個(gè)目標(biāo)思維因?yàn)橹灰业搅?、找?zhǔn)了數(shù)據(jù)分析的目標(biāo)，基本上能夠解決數(shù)據(jù)分析場(chǎng)景里90%以上的問(wèn)題首先何為目標(biāo)？目就是眼睛，標(biāo)就是靶子，也就是用眼睛盯著靶子瞄準(zhǔn)，這就是目標(biāo)思維大家可能會(huì)說(shuō)這很簡(jiǎn)單嘛，那我們就舉一個(gè)實(shí)際的業(yè)務(wù)場(chǎng)景例子來(lái)看一下，你們究竟是不是真的理解目標(biāo)思維。某個(gè)租房APP最近新上線了一個(gè)二手房交易功能，業(yè)務(wù)找到你想讓你分析一下，這個(gè)功能的用戶使用人數(shù)有多少？首先我們看到這個(gè)業(yè)務(wù)問(wèn)題，業(yè)務(wù)方已經(jīng)提出了一個(gè)十分具體的問(wèn)題，那就是：功能的使用用戶有多少？于是一般沒(méi)有經(jīng)驗(yàn)的數(shù)據(jù)分析小白就會(huì)去數(shù)據(jù)庫(kù)取數(shù)，做個(gè)表格交給業(yè)務(wù)然而狗血的就是業(yè)務(wù)這時(shí)候就會(huì)說(shuō)，這個(gè)數(shù)據(jù)不是我想要的，你再拿別的數(shù)據(jù)來(lái)；沒(méi)辦法，你只能再?gòu)臄?shù)據(jù)庫(kù)里重新取數(shù)。這時(shí)候你也許就會(huì)無(wú)語(yǔ)，明明是業(yè)務(wù)自己想要的數(shù)據(jù)，為什么還會(huì)這么多的扯皮和無(wú)效溝通其實(shí)原因很簡(jiǎn)單，因?yàn)闃I(yè)務(wù)想要的數(shù)據(jù)并不一定就是他真正需要的數(shù)據(jù)而我們?cè)诮拥綐I(yè)務(wù)的需求之后，需要先想一下這個(gè)需求的真正核心目的是什么，如果知道了業(yè)務(wù)目標(biāo)，那么就可以把這樣一個(gè)取數(shù)需求變成一個(gè)分析類需求，最終的交付形式就成了一份PPT，這樣就能避免成為取數(shù)機(jī)器。假如我們已經(jīng)知道了業(yè)務(wù)的真實(shí)需求，是否就已經(jīng)結(jié)束了？當(dāng)時(shí)不是，我們需要通過(guò)這個(gè)目標(biāo)確定我們分析的指標(biāo)，如果你沒(méi)有清晰的業(yè)務(wù)目標(biāo)，那么也就不可能制定出準(zhǔn)確的數(shù)據(jù)指標(biāo)。還是這個(gè)例子，如果業(yè)務(wù)人員很專業(yè)，讓你分析一下這個(gè)二手房交易功能的留存率這時(shí)候如果你不去分析業(yè)務(wù)的分析目的，你還是會(huì)陷入誤區(qū)，所以我一般聽(tīng)到業(yè)務(wù)人員跟我提這種具體的需求，我都會(huì)先反問(wèn)一句“你分析這個(gè)指標(biāo)的目的是什么”？如果業(yè)務(wù)說(shuō)是為了驗(yàn)證功能的使用率，因?yàn)槿绻脩粲眠^(guò)之后還會(huì)用，說(shuō)明這個(gè)功能是有價(jià)值的。那么我們就要繼續(xù)想，為什么要驗(yàn)證這個(gè)功能的價(jià)值，因?yàn)橐_保這個(gè)功能能帶來(lái)利潤(rùn)，幫助用戶解決一些問(wèn)題，我們才會(huì)添加這個(gè)功能。也就是說(shuō)我們的分析目的要從產(chǎn)品角度出發(fā)，用戶為什么要用這個(gè)軟件？是為了租房子？那么我們就可以用成交率來(lái)衡量這個(gè)問(wèn)題，成交率與功能價(jià)值的關(guān)系顯然更加密切。這就是目標(biāo)思維，這個(gè)思維是數(shù)據(jù)分析的開(kāi)始，一般不懂業(yè)務(wù)邏輯或者不懂目標(biāo)思維的人是很難準(zhǔn)備找到自己的分析目的的，所以我們以后在遇到需求的時(shí)候，先別急著取數(shù)據(jù)，先去想想目的是什么？假設(shè)思維假設(shè)思維簡(jiǎn)單來(lái)說(shuō)，就是通過(guò)不斷假設(shè)、不斷論證、不斷推理、不斷推翻原假設(shè)的方式，直到去找到我們最終的真實(shí)原因或者結(jié)論比如說(shuō)某APP的轉(zhuǎn)化率下降了，我們不知道是什么原因，可能是業(yè)務(wù)運(yùn)營(yíng)差、可能是用戶質(zhì)量下降、可能是行業(yè)因素等等，我們不妨先假設(shè)一下：轉(zhuǎn)化率下降是因?yàn)闃I(yè)務(wù)運(yùn)營(yíng)差那么為了驗(yàn)證這個(gè)觀點(diǎn)，我們需要去找運(yùn)營(yíng)數(shù)據(jù)和轉(zhuǎn)化率數(shù)據(jù)之間的邏輯關(guān)系，這就需要用到演繹思維了如果發(fā)現(xiàn)業(yè)務(wù)運(yùn)營(yíng)效果跟以前是一樣的，同時(shí)其他APP的轉(zhuǎn)化率并沒(méi)有因?yàn)檫\(yùn)營(yíng)而變差，那么就可以推翻這個(gè)假設(shè)，我們繼而重新假設(shè)同樣的，我們還是要注意假設(shè)思維中的一個(gè)誤區(qū)：將假設(shè)當(dāng)做預(yù)設(shè)。我們?cè)谶M(jìn)行假設(shè)的時(shí)候，很多數(shù)據(jù)分析師特別喜歡堅(jiān)持自己的原有假設(shè)，那么最終的論證過(guò)程就變成了：比如還是剛才轉(zhuǎn)化率的例子，我們?yōu)榱俗C明“轉(zhuǎn)化率低與運(yùn)營(yíng)效果差有關(guān)系”，就會(huì)找各種數(shù)據(jù)去驗(yàn)證這個(gè)假設(shè)，如果不能驗(yàn)證，就以為是數(shù)據(jù)不充分、或者還沒(méi)找到合適的數(shù)據(jù)，直到我們?nèi)ヲ?yàn)證了這個(gè)假設(shè)。這就是把假設(shè)當(dāng)做了預(yù)設(shè)的立場(chǎng)，很多人不敢去拋棄原來(lái)的假設(shè)，以為這樣做是自己的能力不合格實(shí)際上，想要證明一個(gè)觀點(diǎn)，只要你肯去找，不管觀點(diǎn)多么荒謬，總能找到支持你的理由。比如為了讓你驗(yàn)證印度比中國(guó)更富有這個(gè)荒誕的假設(shè)，我們完全可以找出很多證據(jù)證明：印度每年30%-40%的GDP增長(zhǎng)來(lái)自于生產(chǎn)力而非勞動(dòng)力印度的耕地面積和人均耕地面積比中國(guó)多兩倍印度不良貸款率比中國(guó)低很多相反的，為了證明印度比中國(guó)窮我也能找出很多理由：印度GDP總值和人均GDP均低于中國(guó)世界最貧窮的人口中有25%聚集在印度、居世界第一世界500強(qiáng)企業(yè)中中國(guó)遠(yuǎn)超印度所以真正的數(shù)據(jù)分析，一定要站在客觀的角度，敢于去拋棄自己的假設(shè)溯源思維溯源思維簡(jiǎn)單來(lái)說(shuō)就是對(duì)問(wèn)題進(jìn)行細(xì)分后再細(xì)分，把問(wèn)題進(jìn)行分解到可以找到原因，列出解決辦法有時(shí)候我們不僅僅只使用對(duì)比思維和細(xì)分思維就可以得出來(lái)結(jié)果，這時(shí)候要想追溯數(shù)據(jù)源，然后基于此思考數(shù)據(jù)源背后可能隱藏的邏輯關(guān)系，或許會(huì)有其他的數(shù)據(jù)結(jié)果比如說(shuō)，某公司在全國(guó)有5個(gè)大區(qū)，其中華北大區(qū)今年未完成銷量任務(wù)我們能夠分析出是江蘇地區(qū)的銷量下降了，再細(xì)分是南京有問(wèn)題很多人可能細(xì)化到這一步就結(jié)束了，因?yàn)榈貐^(qū)維度已經(jīng)細(xì)分到底了，不能繼續(xù)細(xì)化到某個(gè)區(qū)某個(gè)街道等等但是根據(jù)溯源思維，我們需要找到事物本身發(fā)生的原因比如我們需要對(duì)北京地區(qū)的銷量進(jìn)行溯源分析，發(fā)現(xiàn)銷量降低是因?yàn)榭蛻魯?shù)減少我們還要繼續(xù)溯源客戶數(shù)減少的原因，發(fā)現(xiàn)是因?yàn)楦?jìng)爭(zhēng)對(duì)手搶走了我們的客戶繼續(xù)溯源為什么競(jìng)爭(zhēng)對(duì)手能搶走我們的客戶，分析發(fā)現(xiàn)是競(jìng)爭(zhēng)對(duì)手舉辦了優(yōu)惠活動(dòng)，吸引了大部分的客戶那么我們就要采取一定的措施，比如提高優(yōu)惠程度，將客戶重新拉回來(lái)這個(gè)就是溯源的思維，我們一定需要去追根到可以真正發(fā)現(xiàn)問(wèn)題的原因，我們用溯源思維分析數(shù)據(jù)久了，我們對(duì)數(shù)據(jù)的敏感和業(yè)務(wù)的理解也能逐步加深逆向思維有時(shí)候我們做數(shù)據(jù)分析，不能僅僅依靠正常的邏輯推理，有時(shí)候需要靈活乍現(xiàn)、劍走偏鋒，也就是逆向思維王老板花40元進(jìn)了一雙鞋，零售價(jià)50元。一個(gè)小伙子來(lái)買鞋，拿一張100元人民幣，王老板找不開(kāi)，只能去找鄰居換了兩張50，然后找給了小伙子50元。后來(lái)鄰居發(fā)現(xiàn)這個(gè)100是假幣，沒(méi)辦法王老板又還了鄰居100問(wèn)這場(chǎng)交易里，王大爺一共損失了多少錢？如果我們按照邏輯推理關(guān)系去慢慢推到王大爺虧了多少錢，恐怕非常困難，因?yàn)檫壿嬯P(guān)系比較復(fù)雜，我們不妨用逆向思維。題中問(wèn)王老板損失多少錢，其實(shí)就是問(wèn)小伙子賺了多少錢走，因?yàn)猷従記](méi)賠沒(méi)賺，所以不考慮他。小伙子賺了多少錢？太簡(jiǎn)單了，就是一雙鞋加50元零錢！在運(yùn)營(yíng)中，我們可以采用這種思維方式觀察數(shù)據(jù)，或者不自覺(jué)地采用這種思維方式觀察數(shù)據(jù)。我們將自己認(rèn)知的正常的數(shù)據(jù)表現(xiàn)（大部分情況下出現(xiàn)的）進(jìn)行詳細(xì)的羅列，然后列出它們所對(duì)應(yīng)的反常情況。在追蹤數(shù)據(jù)時(shí)，我們的注意力就著重放在這些反常情況上。結(jié)構(gòu)思維很多人在分析的時(shí)候沒(méi)有思路，不知道從何下手，這就是缺少結(jié)構(gòu)化思維的表現(xiàn)不如我們就直接看一下下面這個(gè)例子，看看大家是否具有結(jié)構(gòu)化思維：一家線下零售企業(yè)最近某個(gè)產(chǎn)品的銷售額下降了，讓你找一下造成銷售額下降的原因是什么。我們看一下甲乙兩個(gè)人的分析思路是什么？甲：先從時(shí)間維度上進(jìn)行分析，看看銷售額的下降是突然下降，還是持續(xù)性下降；然后再以門店為維度，看一下是不是因?yàn)榈乩砦恢玫脑蛟斐闪讼陆担怀酥?，還要對(duì)比一下橫向的競(jìng)爭(zhēng)對(duì)手，可以去問(wèn)一些銷售人員他們掌握的情況；對(duì)了，還有活動(dòng)，有可能是因?yàn)榛顒?dòng)造成的銷售額下降。非?；靵y對(duì)不對(duì)？這是因?yàn)槲覀冊(cè)谒伎紗?wèn)題的時(shí)候，習(xí)慣用點(diǎn)對(duì)點(diǎn)的方式，想到一點(diǎn)就是一點(diǎn)也就是說(shuō)是亂打槍，也許有可能你可以憑借著經(jīng)驗(yàn)找到原因但是大多數(shù)情況下，你很難找到完全窮盡的原因，也就是為什么你的數(shù)據(jù)分析總是沒(méi)思路乙：我們要分析的問(wèn)題是銷售額下降，一般來(lái)說(shuō)會(huì)有內(nèi)部和外部?jī)蓚€(gè)方面的原因內(nèi)部就是自身的一些原因造成了下降，外部原因是不受我們控制的不可抗力因素內(nèi)部原因我們可以參照5w2h里的幾個(gè)因素，when、why、who、how等外部因素包括市場(chǎng)競(jìng)爭(zhēng)、市場(chǎng)容量、政策等知道了這些關(guān)鍵因素，我們?cè)倮^續(xù)進(jìn)行拆解，就能找出所有的可能原因這樣分析是不是感覺(jué)清晰了許多？結(jié)構(gòu)化思維方法是怎么處理這個(gè)問(wèn)題呢？在面對(duì)這么一個(gè)問(wèn)題時(shí)，結(jié)構(gòu)化思維方法首先做的并不是立刻著手清洗數(shù)據(jù)。而是根據(jù)對(duì)業(yè)務(wù)的理解，先為數(shù)據(jù)分析畫一個(gè)思維導(dǎo)圖，它的作用相當(dāng)于你來(lái)到一個(gè)陌生的城市拿出百度地圖查詢乘坐交通工具到入住的酒店的路線圖。這個(gè)思維導(dǎo)圖就是一個(gè)知道你到達(dá)目的地的路線圖。事實(shí)上，結(jié)構(gòu)化思維就是由麥肯錫提出的著名的“金字塔思維”，如下圖就是典型的結(jié)構(gòu)化：無(wú)論是作為表達(dá)者、或者是信息接受者，都要先建立起符合金字塔結(jié)構(gòu)的框架，然后按照邏輯、順序等進(jìn)行重點(diǎn)內(nèi)容闡述而關(guān)于金字塔結(jié)構(gòu)，我理解的關(guān)鍵核心就是“主要-重要-次要”其中的“主要”就是明確中心思想，對(duì)此書中提出了4種要求：“結(jié)論先行、以上統(tǒng)下、歸類分組、邏輯遞進(jìn)”，這也是金字塔原理的四個(gè)原則其中的“重要”就是在建立金字塔結(jié)構(gòu)時(shí)，一定要遵守先重要后次要、先全局后細(xì)節(jié)、先結(jié)論后原因、先結(jié)果后過(guò)程的原則進(jìn)行內(nèi)容安排最后的“次要”就是要把無(wú)關(guān)的、邏輯性差的、相關(guān)性低的因素和內(nèi)容篩選出去更詳細(xì)來(lái)講就是：結(jié)論先行：中心思維要放在最前面以上統(tǒng)下：上一層一定要是對(duì)下一層內(nèi)容的總結(jié)歸類分組：每組的思想要屬于同一邏輯范圍邏輯推進(jìn)：每組的順序要按照一定的邏輯關(guān)系歸納與演繹首先什么是歸納和推理？我直接簡(jiǎn)單舉個(gè)例子就行了：歸納：樹(shù)能燃燒、紙能燃燒、筷子能燃燒，所以木制品能夠燃燒推理：木制品能夠燃燒，筷子屬于木制品，所以筷子能夠燃燒。很顯然，歸納是從個(gè)體屬性出發(fā)，尋找因子之間的共性，總結(jié)出一個(gè)一般的特性而演繹則相反，是從一般整體出發(fā)，尋找事物之間的邏輯，從而得到某個(gè)個(gè)體的特性在實(shí)際的業(yè)務(wù)分析場(chǎng)景中，我們會(huì)潛移默化的用到演繹和歸納思維，比如說(shuō)演繹法，我們最常見(jiàn)的就是三段論：大前提、小前提和結(jié)論。但是演繹法要注意避免一個(gè)大誤區(qū)：比如“最近公司利潤(rùn)率下降，是因?yàn)槌杀具^(guò)高，所以我們要降低大家的薪資?！笔紫冗@個(gè)論斷是基于演繹法的三段論，每一段論之間的邏輯關(guān)系都是正確的，利潤(rùn)率確實(shí)與成本過(guò)高有關(guān)，而成本自然也包括人力薪資的成本，看似好像邏輯緊密，但如果這個(gè)論斷是真的，可能每個(gè)公司都會(huì)用這個(gè)理由裁員降薪了問(wèn)題出在哪呢？明明每一段輪之間的關(guān)系都是有邏輯的，問(wèn)題就出在大前提和小前提之間的論證是否真的有說(shuō)服力比如說(shuō)公司的利潤(rùn)率是否僅僅是因?yàn)槌杀具^(guò)高？這是大前提的論證成本過(guò)高是否只能降低大家的薪資？這是小前提的論證很顯然，這兩個(gè)前提的論證過(guò)程是不嚴(yán)密的，因此會(huì)出現(xiàn)邏輯上的不通。那么歸納法就比較簡(jiǎn)單了，歸納法是從結(jié)果出發(fā)，尋找原因，通過(guò)觀察對(duì)比、分析，找到事物之間因果關(guān)系的一種方法同樣的，歸納法也要注意一個(gè)誤區(qū)：黑天鵝事件。農(nóng)場(chǎng)主每天早上7點(diǎn)準(zhǔn)時(shí)到雞場(chǎng)里喂雞，久而久之火雞們都得出了一個(gè)結(jié)論就是農(nóng)場(chǎng)主每天7點(diǎn)都會(huì)來(lái)喂雞，但是圣誕節(jié)這天等到火雞們的卻是一把刀。這就是歸納法的一個(gè)致命誤區(qū)，也就是以偏概全，我們無(wú)法阻止黑天鵝事件的發(fā)生相關(guān)思維在大數(shù)據(jù)時(shí)代，核心就是相關(guān)思維，這種思維是建立在相關(guān)分析的基礎(chǔ)上。啤酒與尿布的故事，是一個(gè)相關(guān)分析的經(jīng)典案例。這個(gè)故事產(chǎn)生于20世紀(jì)90年代的美國(guó)沃爾瑪超市中，當(dāng)時(shí)沃爾瑪擁有世界上最大的數(shù)據(jù)倉(cāng)庫(kù)系統(tǒng)為了能夠準(zhǔn)確了解顧客在其門店的購(gòu)買習(xí)慣，沃爾瑪對(duì)其顧客的購(gòu)物行為進(jìn)行購(gòu)物籃分析，想知道顧客經(jīng)常一起購(gòu)買的商品有哪些沃爾瑪利用數(shù)據(jù)挖掘方法對(duì)這些數(shù)據(jù)進(jìn)行分析和挖掘，一個(gè)意外的發(fā)現(xiàn)是：跟尿布一起購(gòu)買最多的商品竟是