談?wù){(diào)研問卷地可信度與有效度問地訓(xùn)練題目

1、信度與效度分析一、信度分析信度（Reliability ）即可靠性，是指采用同一方法對同一對象進(jìn)行調(diào)查時，問卷調(diào)查結(jié)果 的穩(wěn)定性和一致性，即測量工具（問卷或量表）能否穩(wěn)定地測量所測的事物或變量。信度指 標(biāo)多以相關(guān)系數(shù)表示，具體評價(jià)方法大致可分為三類：穩(wěn)定系數(shù)（跨時間的一致性），等值 系數(shù)（跨形式的一致性）和內(nèi)在一致性系數(shù)（跨項(xiàng)目的一致性）。信度分析的方法主要有以 下四種：1、重測信度法同樣的問卷，對同一組訪問對象在盡可能相同的情況下，在不同時間進(jìn)行兩次測量。兩 次測量相距一般在兩到四周之內(nèi)。用兩次測量結(jié)果間的相關(guān)分析或差異的顯著性檢驗(yàn)方法， 評價(jià)量表信度的高低。2、折半法。折半法是將上述兩份問

2、卷合成一份問卷（通常要求這兩份問卷的問題數(shù)目相等），每一份作為一部分，然后考察這兩個部分的測量結(jié)果之間的相關(guān)性。3、折半信度法折半信度法是將調(diào)查項(xiàng)目分為兩半，計(jì)算兩半得分的相關(guān)系數(shù)，進(jìn)而估計(jì)整個量表的信度。折半信度屬于內(nèi)在一致性系數(shù)，測量的是兩半題項(xiàng)得分間的一致性。這種方法一般不適用于事實(shí)式問卷（如年齡與性別無法相比），常用于態(tài)度、意見式問卷的信度分析。在問卷調(diào)查中，態(tài)度測量最常見的形式是 5級李克特（Likert ）量表。進(jìn)行折半信度分析時，如果 量表中含有反意題項(xiàng)，應(yīng)先將反意題項(xiàng)的得分作逆向處理， 以保證各題項(xiàng)得分方向的一致性， 然后將全部題項(xiàng)按奇偶或前后分為盡可能相等的兩半，計(jì)算二者的相

3、關(guān)系數(shù)( rhh ,即半個量表的信度系數(shù))，最后用斯皮爾曼-布朗(Spearman-Brown )公式：求出整個量表的信度系數(shù)。4、“信度系數(shù)法Cronbach ”信度系數(shù)是目前最常用的信度系數(shù)，其公式為：其中，K為量表中題項(xiàng)的總數(shù)，為第i題得分的題內(nèi)方差，為全部題項(xiàng)總得分的方差。從公式中可以看出，”系數(shù)評價(jià)的是量表中各題項(xiàng)得分間的一致性，屬于內(nèi)在一致性系數(shù)。這種方法適用于態(tài)度、意見式問卷(量表)的信度分析。二、效度分析效度(Validity )即有效性，它是指測量工具或手段能夠準(zhǔn)確測出所需測量的事物的程度。效度分為三種類型： 內(nèi)容效度、準(zhǔn)則效度和結(jié)構(gòu)效度。效度分析有多種方法，其測量結(jié)果反 映

4、效度的不同方面。常用于調(diào)查問卷效度分析的方法主要有以下幾種。1、單項(xiàng)與總和相關(guān)效度分析表面效度(Face Validity )。也稱為內(nèi)容效度或邏輯效度，指的是測量的內(nèi)容與測量目 標(biāo)之間是否適合，也可以說是指測量所選擇的項(xiàng)目是否“看起來”符合測量的目的和要求。主要依據(jù)調(diào)查設(shè)計(jì)人員的主觀判斷。這種方法用于測量量表的內(nèi)容效度。內(nèi)容效度又稱表面效度或邏輯效度，它是指所設(shè)計(jì)的題項(xiàng)能否代表所要測量的內(nèi)容或主題。對內(nèi)容效度常采用邏輯分析與統(tǒng)計(jì)分析相結(jié)合的方法進(jìn)行評價(jià)。邏輯分析一般由研究者或?qū)＜以u判所選題項(xiàng)是否“看上去”符合測量的目的和要求。統(tǒng)計(jì)分析主要采用單項(xiàng)與總和相關(guān)分析法獲得評價(jià)結(jié)果，即計(jì)算每個題項(xiàng)得

5、分與題項(xiàng)總分的相關(guān)系數(shù)，根據(jù)相關(guān)是否顯著判斷是否有效。若量表中有反意題項(xiàng)，應(yīng)將其逆向處理后再計(jì)算總分。2、準(zhǔn)則效度分析準(zhǔn)則效度（Criterion Validity ）。又稱為效標(biāo)效度或預(yù)測效度。準(zhǔn)則效度是指量表所得到的數(shù)據(jù)和其他被選擇的變量（準(zhǔn)則變量）的值相比是否有意義。根據(jù)時間跨度的不同，準(zhǔn)則效度可分為同時效度和預(yù)測效度。準(zhǔn)則效度分析是根據(jù)已經(jīng)得到確定的某種理論，選擇一種指標(biāo)或測量工具作為準(zhǔn)則（效標(biāo)），分析問卷題項(xiàng)與準(zhǔn)則的聯(lián)系，若二者相關(guān)顯著，或者問卷題項(xiàng)對準(zhǔn)則的不同取值、特性表現(xiàn)出顯著差異，則為有效的題項(xiàng)。評價(jià)準(zhǔn)則效度的方法 是相關(guān)分析或差異顯著性檢驗(yàn)。在調(diào)查問卷的效度分析中，選擇一個合

6、適的準(zhǔn)則往往十分困 難，使這種方法的應(yīng)用受到一定限制。3、結(jié)構(gòu)效度分析建構(gòu)效度（Construct Validity ）。是指測量結(jié)果體現(xiàn)出來的某種結(jié)構(gòu)與測值之間的對應(yīng)程度。結(jié)構(gòu)效度分析所采用的方法是因子分析。最關(guān)心的問題是：量表實(shí)際測量的是哪些特征？在評價(jià)建構(gòu)效度時，調(diào)研人員要試圖解釋“量表為什么有效”這一理論問題以及考慮從 這一理論問題中能得出什么推論。建構(gòu)效度包括同質(zhì)效度、異質(zhì)效度和語意邏輯效度。有的學(xué)者認(rèn)為，效度分析最理想的方法是利用因子分析測量量表或整個問卷的結(jié)構(gòu)效度。因子分析的主要功能是從量表全部變量（題項(xiàng)）中提取一些公因子，各公因子分別與某一群特定變量高度關(guān)聯(lián)，這些公因子即代表了

7、量表的基本結(jié)構(gòu)。通過因子分析可以考察問卷是否能夠測量出研究者設(shè)計(jì)問卷時假設(shè)的某種結(jié)構(gòu)。在因子分析的結(jié)果中，用于評價(jià)結(jié)構(gòu)效度的主要指標(biāo)有累積貢獻(xiàn)率、共同度和因子負(fù)荷。累積貢獻(xiàn)率反映公因子對量表或問卷的累積有效程度，共同度反映由公因子解釋原變量的有效程度，因子負(fù)荷反映原變量與某個公因子的相關(guān)程度。談?wù){(diào)查問卷的可信度與有效度問題內(nèi)容摘要：為了保證調(diào)查的準(zhǔn)確性與科學(xué)性，對搜集到的問卷資料進(jìn)行可信度和有效度分析已成為調(diào)查的一個必不可少的步驟，本文對調(diào)查問卷的可信度與有效度問題展開研究，并說明如何在SPSS軟件上實(shí)現(xiàn)可信度與有效度的度量。關(guān)鍵詞：可信度 有效度 SPSS軟件問題研究在各類調(diào)查研究中，經(jīng)常需

8、要測量一些比較抽象的量，例如“經(jīng)濟(jì)地位”、“傳統(tǒng)價(jià)值觀”、“現(xiàn)代化程度”等等。為此需要圍繞研究主題設(shè)計(jì)合理的問卷，才能保證調(diào)查的準(zhǔn) 確性、統(tǒng)計(jì)分析結(jié)論的科學(xué)性以及研究成果的質(zhì)量，這就涉及到問卷的設(shè)計(jì)及其可信度與有效度的分析問題。因此，在重要的調(diào)查研究中， 對搜集到的資料進(jìn)行可信度和有效度分析已 成為一個必不可少的步驟。本文重點(diǎn)介紹調(diào)查問卷的可信度和有效度的內(nèi)容、度量方法以及如何在SPSS （社會科學(xué)統(tǒng)計(jì)程序）軟件上實(shí)現(xiàn)可信度與有效度的度量等問題?？尚哦鹊膯栴}研究可信度指調(diào)查結(jié)果的一致性和穩(wěn)定性，即測量工具能否穩(wěn)定地測量到它要測量的事項(xiàng)。如一個測驗(yàn)對同一個人施測多次，多次測試的結(jié)果基本相同，則可

9、認(rèn)為這個測試是穩(wěn)定可靠的，即可信度較高?？尚哦戎笜?biāo)多以相關(guān)系數(shù)表示，大致可分為三類：穩(wěn)定系數(shù)（跨時 間的一致性），等值系數(shù)（跨形式的一致性）和內(nèi)在一致性系數(shù)（跨項(xiàng)目的一致性）。調(diào)查在各種領(lǐng)域的研究中都必須是可信的， 并且經(jīng)得起反復(fù)的檢驗(yàn)， 這樣的調(diào)查才有 價(jià)值?？尚哦戎笢y量工具的穩(wěn)定性，它代表反復(fù)測量結(jié)果的接近程度， 理想的完全相同測量 工具在實(shí)際工作中是不存在的。可信度的度量方法主要有以下幾種：（一）重測可信度采用同一個問卷在同一人群中先后測量兩次，計(jì)算兩次施測結(jié)果的相關(guān)系數(shù)，重測信度屬于穩(wěn)定系數(shù)。它考察的是經(jīng)過一段時間后問卷測量結(jié)果的穩(wěn)定程度，重測可信度越高，測量結(jié)果越一致，這也表明受測環(huán)

10、境中日常隨機(jī)因素的影響越小。如果某個問卷項(xiàng)目的可信度系數(shù)較低，就要考慮對該項(xiàng)目進(jìn)行修改或者刪除該項(xiàng)目。 由于重測信度法需要對同一樣本 試測兩次，被調(diào)查者容易受到各種事件、 活動和他人的影響， 而且間隔時間長短也有一定限 制，多數(shù)學(xué)者認(rèn)為以 2-4周較為合適，因此在實(shí)施中有一定困難。（二）復(fù)本可信度即讓同一組被調(diào)查者一次填答兩份問卷復(fù)本，計(jì)算兩個復(fù)本的相關(guān)系數(shù)，相關(guān)系數(shù)反映的是測量分?jǐn)?shù)的等值性程度，屬于等值系數(shù)。測定復(fù)本可信度也應(yīng)考慮復(fù)本實(shí)施的時間間隔，一般來說，復(fù)本應(yīng)當(dāng)幾乎在同一時間實(shí)施，以剔除時間的影響。復(fù)本可信度法要求兩個復(fù)本除表述方式不同外， 在內(nèi)容、格式、難度和問題項(xiàng)的提問方向等方面要

11、完全一致，而在實(shí)際調(diào)查中，很難使調(diào)查問卷達(dá)到這種要求，因此采用這種方法者較少。（三）折半可信度只用一個測量工具對同一組受試者實(shí)施一次測量，但將奇數(shù)題和偶數(shù)題分開計(jì)分，再計(jì)算奇數(shù)題和偶數(shù)題分?jǐn)?shù)之間的相關(guān)系數(shù)（roe）,即為折半可信度，實(shí)際可信度需要用斯皮爾曼-布朗公式校正后得出：I+F* 也屬于等值系數(shù)。（四）口可信度問卷對每個概念的測量往往都要用一系列的條目，因而根據(jù)這些條目之間的相關(guān)性n2k s評價(jià)可信度。目前對為常用的可信度系數(shù)為 Cronbach 's ”系數(shù)： 1上* （K k 1s2為量表中問題條目數(shù)，G2為第i題得分的方差，s2為總得分的方差），屬于內(nèi)在一致性系數(shù)。在可信度

12、分析中，此種方法運(yùn)用較為普遍。（五）評分者可信度有些問卷不是根據(jù)客觀的記分系統(tǒng)記分，而是由調(diào)查者給被測者打分或評定等級，則這種測量的可靠性主要取決于調(diào)查者評分的一致性和穩(wěn)定性。對于這種標(biāo)準(zhǔn)化程度較低的測量，就必須計(jì)算評分者可信度，它分為評分者間可信度和評分者內(nèi)可信度。前者是用于度量不同調(diào)查者間的一致性，后者是度量同一調(diào)查者在不同的場合下（如不同時間、地點(diǎn)等）的一致性?？尚哦榷攘吭赟PSS軟件中的實(shí)現(xiàn)在SPSS統(tǒng)計(jì)分析軟件中分析菜單下有專門的可信度分析模塊，通過對該模塊的部分選項(xiàng)的選擇可以實(shí)現(xiàn)大部分的問卷信度分析。從Analyze菜單進(jìn)入后，其余調(diào)用過程見表1。it L i?I"： &

13、#39;， ； , ： Lq的小也燈猛那一周口而果都把-fiHcfllc -Br' ifih- listiesA-riP X.1CC f；r溶i砧力度華菱n和工步電 h” a.;EtkiidI CTB 31 b1 L51 七1砒？1讓秀 "Kriiiiia i. it" ""4 ir"耳 3 tCol t*3i ttcn 'Ul”】，事"n W ri A H X i fI-Dk4a：l ' I ten -i 和 等gEU s院 f 隗 1lln IfHill 1 彳1 IfiMTrU.H 半 HRLr ill

14、* - i.£u L L KoJaL | 單仙If：r n rrBro qp. 7 ”. ！7占mH pE£-1 iSiiki11:rFicdBl JuLTtKi91：C IDDhl rti' Eft3 LAil i hrSt*1 L&1 Lef Ji-hTmIi dtl-iaauft Jl1工箱qLI匍心雜亂JI r ，.晨-；J. rwve&u i.fni r«!lH.Tlari -"hLvu lual v a Hi lt J. Jj _Jf i 1«.U "%- H'髭制L札；，e.1. I vi

15、l LL s« JU W 數(shù)1 方"E結(jié)修跖/曲#聃博力片hiw 有效度的問題研究有效度是一個測試能夠測試出測試對象的程度，即測試結(jié)果與測試目標(biāo)的符合程度。有效度是作為一個科學(xué)測試工具所必備的重要條件。 有效度越高表示測量結(jié)果越能顯示出所 要測試對象的真正特征。 任何測試工具，無論其它方面有多好，若有效度太低，測試的結(jié)果 不是它要測試的目的（如用英語試卷測試學(xué)生的數(shù)學(xué)能力 ），那么，對目前所要測試的東西，這個測試將是無價(jià)值的。（一） 有效度的度量方法有效度是個多層面的概念， 可從不同角度來看，從而提出了衡量有效度的幾種方法: 表面有效度，是指測量結(jié)果與人們頭腦中的印象或?qū)W術(shù)

16、界形成的共識的吻合程度，吻合度高，則表面有效度高。表面有效度屬專家評價(jià)的主觀指標(biāo)。內(nèi)容有效度，是指測量內(nèi)容的適合性和相符性，即測量所選題目是否符合測量目的和要求。內(nèi)容有效度也屬專家評價(jià)的主觀指標(biāo)。效標(biāo)有效度，又稱為“準(zhǔn)則有效度”，是指測量結(jié)果與一些能夠精確表示被測概念的標(biāo)準(zhǔn)之間的一致性程度。 效標(biāo)有效度是用測量分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)之間的相關(guān)系數(shù)來衡量的，減少了由于主觀判斷失誤而產(chǎn)生的偏差，是一種比較實(shí)用的有效度， 但不足之處在于效標(biāo)的選擇靠主觀判斷。結(jié)構(gòu)有效度，指問卷所能衡量到理論上期望的特征的程度，即問卷所要測量的概念能顯示出科學(xué)的意義并符合理論上的設(shè)想。評價(jià)某調(diào)查問卷的結(jié)構(gòu)有效度可分為兩步：首先

17、是提出結(jié)構(gòu)假設(shè)，然后對結(jié)構(gòu)假設(shè)進(jìn)行驗(yàn)證。 度量結(jié)構(gòu)有效度常用的統(tǒng)計(jì)方法是因子分析，其目的是想了解屬于相同概念的不同問卷項(xiàng)目是否如理論預(yù)測那樣集中在同一公共因子里。在進(jìn)行分析以前，必須先進(jìn)行因子分析適合性的評估，以確定所獲得的資料是否適合進(jìn)行因子分析。一般采用 KMO檢驗(yàn)來進(jìn)行適合性分析，KMO越大，則所有變量之間的簡單相關(guān)系數(shù)平方和遠(yuǎn)大于偏相關(guān)系數(shù)平方和，因此越適合于作因子分析。（二）有效度度量在SPSS軟件中的實(shí)現(xiàn)表面有效度和內(nèi)容有效度屬于主觀指標(biāo)，一般采取專家評價(jià)法。 在SPSS統(tǒng)計(jì)分析軟件中沒有專門的有效度分析模塊，效標(biāo)有效度和結(jié)構(gòu)有效度可以通過分析菜單進(jìn)行，從 Analyze菜單進(jìn)入后

18、，其余調(diào)用過程見表2。表2有效港席量調(diào)用近桿表課用過程分所推罌標(biāo)有我度Co?rpiatior -hivsuaip 根據(jù)需要可送凈PaarsiQr.KGfxiair s uiu -n 和Spearmnn這項(xiàng)Speargon相美系數(shù)（瘴變大連虢。j k KenoaH 荻Speairnar1等級相關(guān) 手鼓!禺，宜為勺 費(fèi)焚 ）相夫畀數(shù)仕& 4-0B比較理第總構(gòu)寺牧座Dat.iRediKlJon(毅春 Exiranrof Rotatjuri 選項(xiàng)下,理由incioai oorrisoneniJ 和varhnait進(jìn)行生成分械大方差旗公共因子的1!屈方差 貢獻(xiàn)干.公司千萬軍 tn 郁個條目公共固 子負(fù)荷他若KMCKQ 5時不選合作因子分新可信度與有效度相互關(guān)系的分析可信度度量的是問卷測量結(jié)果是否一致的可靠程度，而不涉及結(jié)果是否正確的問題；有效度則針對問卷測量的目的，重點(diǎn)考察測量結(jié)果的有效性?？尚哦鹊脑u價(jià)指標(biāo)是可信度系數(shù)，理論上可以表達(dá)為真實(shí)值方差和測量值方差的比值。若X為測量值，T表示真實(shí)值，E表示測量隨機(jī)誤差，真實(shí)值和測量值之間關(guān)系為X=T+E ,即測量值的方差等于真實(shí)值的方差