統(tǒng)計(jì)學(xué)問(wèn)卷效度、信度的檢驗(yàn)

1、調(diào)查問(wèn)卷的效度、信度調(diào)查問(wèn)卷的效度、信度 2013年 09月 02日 麗水學(xué)院商學(xué)院 何永達(dá) 副教授 效度？效度？ 信度？信度？ whats reliability? whats validity? 一、一、 Questionnaire Validity 二、二、 Example of Validity 三、三、 Questionnaire Reliability 四、四、 Example of Reliability 五、五、 The correlation between Reliability and Validity Main Content Preparative Knowledge

2、 1.誤差公理誤差公理 l誤差(error)是指對(duì)事物某一特征的度量值偏 離真實(shí)值的部分，即測(cè)定值與真實(shí)值之差， 樣本統(tǒng)計(jì)量與總體參數(shù)之差。 l沒(méi)有一項(xiàng)研究推論能夠達(dá)到百分之百的真實(shí)。 No study is free of errors, the inferences are never perfectly valid. l 誤差公理：實(shí)驗(yàn)結(jié)果都會(huì)有誤差，誤差自始 至終存在于一切科學(xué)實(shí)驗(yàn)的過(guò)程之中。 2.2.誤差的種類(lèi)誤差的種類(lèi)(types of error)(types of error) （1 1）隨機(jī)誤差（）隨機(jī)誤差（random errorrandom error） l隨機(jī)誤差是由不

3、確定原因引起的，不可避免隨機(jī)誤差是由不確定原因引起的，不可避免 和消除。和消除。 其偏離總體的方向不能確定。包括其偏離總體的方向不能確定。包括 隨機(jī)測(cè)量誤差和抽樣誤差。隨機(jī)測(cè)量誤差和抽樣誤差。 l l隨機(jī)測(cè)量誤差（random measurement error） ：沒(méi)有固定的傾向，可使多 次觀測(cè)結(jié)果有大有小。 l抽樣誤差（sample error） ：由于 抽樣造成的樣本指標(biāo)與總體指標(biāo)之 間的差別。 （2 2）系統(tǒng)誤差系統(tǒng)誤差（systematic errorsystematic error） l由于偏倚（使研究結(jié)果按照一個(gè)方向偏離 總體， bias）產(chǎn)生的錯(cuò)誤結(jié)果，可校正和，可校正和 消除

4、。消除。 l(3) 過(guò)失誤差（gross error)是由于科研 設(shè)計(jì)錯(cuò)誤，或?qū)嶒?yàn)者的主觀片面、粗心大意 引起的誤差。必須避免和剔除！必須避免和剔除！ 問(wèn)卷測(cè)驗(yàn)中測(cè)量誤差通常來(lái)源于兩個(gè)方面： l 一是產(chǎn)生于問(wèn)卷測(cè)驗(yàn)過(guò)程中的誤差，稱(chēng)為 測(cè)量誤差（measurement Error），也稱(chēng)為 隨機(jī)誤差（random error）； l 二是由問(wèn)卷的結(jié)構(gòu)質(zhì)量造成的誤差，稱(chēng)為 系統(tǒng)誤差（system Error）。 lmeasurement Error reliability（信度） lsystem Error validity（效度） 一、調(diào)查問(wèn)卷的效度一、調(diào)查問(wèn)卷的效度 lThe validity

5、 of a questionnaire l效度（validity）通常是指問(wèn)卷的有效 性和正確性，亦即問(wèn)卷能夠測(cè)量出其所 欲測(cè)量特性的程度。 l對(duì)于一個(gè)標(biāo)準(zhǔn)測(cè)驗(yàn)來(lái)說(shuō)，效度比信度更 為重要。 1.效度分析的意義 l效度是問(wèn)卷調(diào)查研究中最重要的特征，問(wèn) 卷調(diào)查的目的就是要獲得高效度的測(cè)量與 結(jié)論，效度越高表示該問(wèn)卷測(cè)驗(yàn)的結(jié)果所 能代表要測(cè)驗(yàn)的行為的真實(shí)度越高，越能 夠達(dá)到問(wèn)卷測(cè)驗(yàn)?zāi)康模搯?wèn)卷才正確而有 效。 l問(wèn)卷的準(zhǔn)確性或稱(chēng)為有效性是用問(wèn)卷的效 度加以刻劃的，它反映了對(duì)問(wèn)卷的系統(tǒng)誤 差的控制程度。 2 2、效度的定義、效度的定義 l效度是指問(wèn)卷測(cè)驗(yàn)的準(zhǔn)確性，即測(cè)驗(yàn)?zāi)軌?反映所要測(cè)量特性的程度.

6、l包括兩個(gè)方面的含義：一是問(wèn)卷測(cè)驗(yàn)的目 的；二是問(wèn)卷對(duì)測(cè)量目標(biāo)的測(cè)量精確度和 真實(shí)性。效度是一個(gè)具有相對(duì)性、連續(xù)性、 間接性的概念。 l 在測(cè)量理論中，效度被定義為在一系列測(cè) 量中，與測(cè)量目的有關(guān)的真變異數(shù) ( 即有效變 異 ) 與總變異數(shù)之比： 2 2 2 x v xy S S r r2xy 表示測(cè)量的效度系數(shù)，Sv2 代表有效 變異數(shù)，Sx2 代表總變異數(shù)。 3.常用的效度指標(biāo) l 確定一個(gè)問(wèn)卷效度的方法，通常是以 答卷者的問(wèn)卷得分和另一個(gè)效度標(biāo)準(zhǔn)求相 關(guān)，以其相關(guān)系數(shù)的大小來(lái)表示效度。如 果相關(guān)系數(shù)高，則該問(wèn)卷的效度就高。 l 一般常用的效度指標(biāo)有內(nèi)容效度、結(jié) 構(gòu)效度。 (1)內(nèi)容效度

7、(content validity) l內(nèi)容效度是指問(wèn)卷內(nèi)容的貼切性（relevance） 和代表性（representativeness）,即問(wèn)卷內(nèi)容能 否反應(yīng)所要測(cè)量的特質(zhì)，能否達(dá)到測(cè)驗(yàn)?zāi)康模?較好地代表所欲測(cè)量的內(nèi)容和引起預(yù)期反應(yīng) 的程度。內(nèi)容效度常以題目分布的合理性來(lái) 判斷，屬于命題的邏輯分析，所以，內(nèi)容效 度也稱(chēng)為“邏輯效度” (logical validity)、“內(nèi) 在效度（intrinsic Validity）”、“循環(huán)效度 （circular validity）” 內(nèi)容效度的評(píng)價(jià)主要通過(guò)經(jīng)驗(yàn)判斷進(jìn) 行，通常考慮3方面的問(wèn)題： l其一是項(xiàng)目所測(cè)量的是否真屬于應(yīng)測(cè) 量的領(lǐng)域； l

8、其二是測(cè)驗(yàn)所包含的項(xiàng)目是否覆蓋了 應(yīng)測(cè)領(lǐng)域的各個(gè)方面； l其三是測(cè)驗(yàn)題目的構(gòu)成比例是否恰當(dāng) l常用的內(nèi)容效度的評(píng)價(jià)方法有兩種： l一是專(zhuān)家法，即請(qǐng)有關(guān)專(zhuān)家對(duì)問(wèn)卷題目與 原來(lái)的內(nèi)容范圍是否符合進(jìn)行分析,作出判 斷，看問(wèn)卷題目是否較好地代表了原來(lái)的 內(nèi)容 l二是統(tǒng)計(jì)分析法，即從同一內(nèi)容總體中抽 取兩套問(wèn)卷，分別對(duì)同一組答卷者進(jìn)行測(cè) 驗(yàn), 兩種問(wèn)卷的相關(guān)系數(shù)就可用來(lái)估計(jì)問(wèn) 卷的內(nèi)容效度 l計(jì)算某個(gè)問(wèn)題與去掉此問(wèn)題后總得分的相 關(guān)性情況，分析是否需要被剔除（敏感性 分析） (2)結(jié)構(gòu)效度(Construct Validity) l 結(jié)構(gòu)效度又稱(chēng)構(gòu)想效度，是指問(wèn)卷對(duì)某結(jié)構(gòu)效度又稱(chēng)構(gòu)想效度，是指問(wèn)卷對(duì)某

9、一理論概念或特質(zhì)測(cè)量的程度，即某問(wèn)一理論概念或特質(zhì)測(cè)量的程度，即某問(wèn) 卷測(cè)驗(yàn)的實(shí)際得分能解釋某一特質(zhì)的程卷測(cè)驗(yàn)的實(shí)際得分能解釋某一特質(zhì)的程 度。如果我們根據(jù)理論的假設(shè)結(jié)構(gòu)，通度。如果我們根據(jù)理論的假設(shè)結(jié)構(gòu)，通 過(guò)問(wèn)卷測(cè)驗(yàn)得到答卷者實(shí)際分?jǐn)?shù)，經(jīng)統(tǒng)過(guò)問(wèn)卷測(cè)驗(yàn)得到答卷者實(shí)際分?jǐn)?shù)，經(jīng)統(tǒng) 計(jì)檢驗(yàn)，結(jié)果表明問(wèn)卷能有效解釋答卷計(jì)檢驗(yàn)，結(jié)果表明問(wèn)卷能有效解釋答卷 者該項(xiàng)特質(zhì)，則說(shuō)此問(wèn)卷具有良好的結(jié)者該項(xiàng)特質(zhì)，則說(shuō)此問(wèn)卷具有良好的結(jié) 構(gòu)效度。構(gòu)效度。 常用的確定結(jié)構(gòu)效度的方法有：常用的確定結(jié)構(gòu)效度的方法有： l(1)根據(jù)文獻(xiàn)、前人研究結(jié)果、實(shí)際經(jīng)驗(yàn)等建 l 立假設(shè)性理論建構(gòu)； l(2)對(duì)問(wèn)卷題目進(jìn)行分析。主要是

10、分析問(wèn)卷的 l 內(nèi)容，答卷者對(duì)題目所作的反應(yīng)，問(wèn)卷題 l 目的同質(zhì)性以及分項(xiàng)目之間的關(guān)系來(lái)判斷 l 問(wèn)卷的結(jié)構(gòu)效度； l(3)根據(jù)建構(gòu)的假設(shè)性理論編制適當(dāng)?shù)膯?wèn)卷； l(4)計(jì)算與同類(lèi)權(quán)威問(wèn)卷的相關(guān); l(5)以統(tǒng)計(jì)檢驗(yàn)的實(shí)證方法去考查問(wèn)卷是否能 l 有效解釋所欲建構(gòu)的特質(zhì)。 3效標(biāo)效度（Criterion Validity） l效標(biāo)效度也稱(chēng)為準(zhǔn)則關(guān)聯(lián)效度 （Criterion-Related Validity）、經(jīng)驗(yàn)效度 （Empirical Validity）、統(tǒng)計(jì)效度 （Statistical Validity）。效標(biāo)效度是說(shuō)明 問(wèn)卷得分與某種外部準(zhǔn)則（效標(biāo)）間的 關(guān)聯(lián)程度，用問(wèn)卷測(cè)量得分

11、與效度準(zhǔn)則 之間的相關(guān)系數(shù)表示 一般估計(jì)效標(biāo)效度的主要方法有：一般估計(jì)效標(biāo)效度的主要方法有： l（1）相關(guān)法，即求某問(wèn)卷分?jǐn)?shù)與效標(biāo)間 的相關(guān)，所得結(jié)果即效標(biāo)效度。 l（2）區(qū)分法，即看問(wèn)卷分?jǐn)?shù)是否可以區(qū) 分由效標(biāo)所劃分的團(tuán)體。 l可以運(yùn)用t檢驗(yàn)對(duì)先后兩次問(wèn)卷結(jié)果平均 分?jǐn)?shù)進(jìn)行差異性檢驗(yàn)。若差異有統(tǒng)計(jì)學(xué)意 義，說(shuō)明問(wèn)卷是有效的；若差異無(wú)統(tǒng)計(jì)學(xué) 意義，說(shuō)明問(wèn)卷是無(wú)效的。 (4)判別效度（Discriminant Validity） l 判別效標(biāo)也稱(chēng)為辨別效標(biāo)，是指運(yùn) 用相同的問(wèn)卷測(cè)定不同特質(zhì)和內(nèi)涵， 測(cè)量結(jié)果之間不應(yīng)有太大的相關(guān)性。 (5)聚合效度（Convergent Validity） l 聚

12、合效度也稱(chēng)為收斂效度，是指運(yùn) 用不同測(cè)量方法測(cè)定同一特質(zhì)所得 結(jié)果的相似程度，即對(duì)同一特質(zhì)的 兩種或多種測(cè)定方法間應(yīng)有較高的 相關(guān)性。 6.效度的評(píng)價(jià) l Spitzer認(rèn)為如果滿(mǎn)足以下5個(gè)條件就可以認(rèn) 為問(wèn)卷由效： l（1）問(wèn)卷有內(nèi)容效度和結(jié)構(gòu)效度； l（2）在問(wèn)卷制定階段應(yīng)當(dāng)請(qǐng)有關(guān)人員提出意 見(jiàn)，供修正和提高內(nèi)容效度； l（3）問(wèn)卷經(jīng)過(guò)反復(fù)使用證明了其可靠性； （4）如果有公認(rèn)標(biāo)準(zhǔn)存在，應(yīng)以公認(rèn)標(biāo)準(zhǔn)為 準(zhǔn)； l（5）公認(rèn)金標(biāo)準(zhǔn)時(shí)可由判別效度代替 7.7.提高問(wèn)卷效度的方法提高問(wèn)卷效度的方法 l（1）理論正確，解釋清楚。問(wèn)卷內(nèi)容要適 合問(wèn)卷測(cè)驗(yàn)的目的，題目要清楚明了，易于 理解，問(wèn)卷的排列要

13、由易到難，題目的難度 和區(qū)分度要合適； l（2）操作規(guī)范以減少誤差； l（3）控制系統(tǒng)誤差。它主要包括儀器不準(zhǔn)， 題目和指導(dǎo)語(yǔ)有暗示性，答案安排不當(dāng)(被 試可以猜測(cè))等, 控制這些因素可以降低系 統(tǒng)誤差, 提高效度； l（4）樣本適宜且要預(yù)防流失。重視問(wèn)卷 調(diào)查的回收率。樣本容量一般不應(yīng)低于 30； l（5）適當(dāng)增加問(wèn)卷的長(zhǎng)度。增加問(wèn)卷的 長(zhǎng)度既可提高問(wèn)卷的信度，也可以提高 問(wèn)卷的效度，但增加問(wèn)卷的長(zhǎng)度對(duì)信度 的影響大于對(duì)效度的影響； l（6）排除無(wú)關(guān)因素干擾。認(rèn)清并排除足 以混淆或威脅結(jié)論的無(wú)關(guān)干擾變量。 二、效度分析實(shí)例二、效度分析實(shí)例(example) (example) 1問(wèn)卷的敏感性

14、（可靠性）分析 l（1）操作過(guò)程 l從菜單選擇Analyze Scale Reliability Analysis Item（輸入問(wèn)卷 的各條目或各因子包含的條目） 單擊 “Statistics”按鈕，彈出信度分析統(tǒng)計(jì)量 對(duì)話框 Descriptives for: Scale if item deleted OK lScale if item deleted:去掉當(dāng)前題目整個(gè)問(wèn)卷的描述 統(tǒng)計(jì)量，即敏感性分析，包括以下內(nèi)容：Scale Mean if Item Deleted:去掉當(dāng)前題目問(wèn)卷合計(jì)分的均 數(shù)； lScale Variance if Item Deleted: 去掉當(dāng)前題目問(wèn)卷合

15、計(jì)分的方差； lCorrected Item-Total Correlation: 當(dāng)前題目得分與去 掉當(dāng)前題目問(wèn)卷合計(jì)分的Pearson相關(guān)系數(shù)； lSquared Multiple Correlation:以當(dāng)前題目為因變量， 其它所有題目為自變量求得的決定系數(shù)R2；Alpha if Item Deleted: 去掉當(dāng)前題目后問(wèn)卷的Cronbach 系數(shù)。 （2 2）輸出結(jié)果）輸出結(jié)果 lSCL90各條目的敏感性分析結(jié)果各條目的敏感性分析結(jié)果: lItem Scale Scale Corrected l Mean Variance Item- Alpha l if Item if Item

16、 Total if Item l Deleted Deleted Correlation Deleted lA1 31.7250 1272.7173 0.6397 0.9736 lE2 31.7500 1253.6282 0.8027 0.9732 lB3 31.8250 1261.0712 0.7408 0.9734 lA4 31.7500 1259.7821 0.7557 0.9733 lD5 31.7000 1278.2667 0.3872 0.9740 lC6 31.8250 1300.0455 0.0596 0.9745 lI7 31.9000 1279.0667 0.5320 0.

17、9737 lH8 31.5750 1255.1224 0.7590 0.9733 lB9 31.2750 1259.2301 0.6572 0.9735 l. lE86 31.1750 1272.8147 0.3764 0.9742 lI87 31.9250 1277.1481 0.6231 0.9736 lI88 32.0500 1282.9718 0.6057 0.9737 lJ89 32.2000 1304.1641 0.0000 0.9741 lI90 32.1750 1302.7122 0.1250 0.9741 l一般地，在做問(wèn)卷的敏感性分析時(shí)，可以將 “Alpha if Item

18、 Deleted”值，作為調(diào)整題目的 一個(gè)重要參考依據(jù) l 如果“Alpha if Item Deleted”值越大，其相 對(duì)應(yīng)的題目越應(yīng)是首先考慮調(diào)整的題目 l從本次問(wèn)卷結(jié)果敏感性分析可以看出，量表 的各個(gè)題目的“Alpha if Item Deleted”值均在 0.97左右變化，且變化的幅度很小 l所以，根據(jù) “Alpha if Item Deleted”這項(xiàng)檢 驗(yàn)指標(biāo)的檢驗(yàn)值分析，本量表的各題目設(shè)置 合理，均可以保留，無(wú)需調(diào)整 2問(wèn)卷的結(jié)構(gòu)效度的分析 l問(wèn)卷的結(jié)構(gòu)效度的評(píng)價(jià)較為復(fù)雜，可用各個(gè)題 目與量表各因子的相關(guān)分析和因子分析方法來(lái) 反映。該檢驗(yàn)將問(wèn)卷中的每一道題看著一個(gè)變 量，然后

19、通過(guò)調(diào)查的結(jié)果得分對(duì)所有問(wèn)題做因 子分析，提取一些較為顯著的因子，通過(guò)各個(gè) 問(wèn)題在每個(gè)因子上的載荷將問(wèn)題分類(lèi)。如果相 同概念的問(wèn)題都?xì)w為同一因子，則說(shuō)明問(wèn)卷具 有很好的結(jié)構(gòu)效度 1.從菜單選擇Analyze Scale Reliability AnalysisItem(輸入問(wèn)卷的各條目或各因子包 含的條目) Statistics彈出信度分析統(tǒng)計(jì)量對(duì)話框 Inter-Item Correlations OK 2.如果同一問(wèn)題下的幾個(gè)調(diào)查項(xiàng)目之間相關(guān)系數(shù) 較高，說(shuō)明問(wèn)卷結(jié)構(gòu)效度好！如果不同問(wèn)題下的 調(diào)查項(xiàng)目之間相關(guān)系數(shù)較低，說(shuō)明問(wèn)卷結(jié)構(gòu)效度 好！ （1）利用相關(guān)分析評(píng)價(jià)問(wèn)卷的結(jié)構(gòu)效度 （2）利用因

20、子分析評(píng)價(jià)問(wèn)卷的結(jié)構(gòu)效度 l因子分析不僅能夠評(píng)價(jià)量表結(jié)構(gòu)的 相合性，還可以用共性變異（共性 方差）與總變異之比作為結(jié)構(gòu)效度 的衡量指標(biāo)。結(jié)構(gòu)效度的分析最好 使用證實(shí)性因子分析，它較探索性 因子分析更能說(shuō)明問(wèn)題。 l執(zhí)行Analyze Data Reduction Factor ,彈出“Factor Analysis”對(duì)話 框: l 單擊Descriptives Statistics Initial Solution Correlation Matrix KMO and Bartletts test of sphericity Continue 結(jié)構(gòu)效度的評(píng)價(jià)標(biāo)準(zhǔn) lKMO and Bartle

21、t檢驗(yàn)考察量表是否適合作因子 分析;通常按以下標(biāo)準(zhǔn)解釋,KMO(采樣充足度) 值大小 l0.9以上表示非常適合; l0.8一0.9表示適合； l0.7一0.8表示一般; l0.6一0.7表示不太適合; l0.5一0.6表示很不適合; l0.5以下表示不適合 三、調(diào)查問(wèn)卷的信度 Questionnaire Reliability 1.信度分析的意義 l信度主要是指問(wèn)卷是否精準(zhǔn)(precision) l信度分析涉及了問(wèn)卷測(cè)驗(yàn)結(jié)果的一致性和 穩(wěn)定性，其目的是如何控制和減少隨機(jī)誤 差 調(diào)查問(wèn)卷的信度包含兩層含義：調(diào)查問(wèn)卷的信度包含兩層含義： l一是相同的個(gè)體在不同時(shí)間，以相同的問(wèn)卷測(cè) 驗(yàn)，或以復(fù)本測(cè)驗(yàn)

22、，或在不同的情景下測(cè)驗(yàn)， 是否能得到相同的結(jié)果，即問(wèn)卷測(cè)驗(yàn)結(jié)果是否 隨時(shí)間和地點(diǎn)等因素而變化； l二是能否減少隨機(jī)誤差對(duì)問(wèn)卷測(cè)驗(yàn)結(jié)果的影響， 從而能夠反映問(wèn)卷所要測(cè)量的真實(shí)情況，即問(wèn) 卷測(cè)驗(yàn)結(jié)果是否具有穩(wěn)定性、可靠性和可預(yù)測(cè) 性。一個(gè)好的問(wèn)卷必須是穩(wěn)定可靠的，且多次 問(wèn)卷測(cè)驗(yàn)結(jié)果應(yīng)前后一致 2.2.信度的定義信度的定義 l信度是用估計(jì)測(cè)量誤差大小的尺度，來(lái) 說(shuō)明問(wèn)卷測(cè)驗(yàn)結(jié)果中測(cè)量誤差所占的比 率 l信度可定義為真實(shí)分?jǐn)?shù)(true score)的 方差與測(cè)驗(yàn)實(shí)得分?jǐn)?shù)(observed score) 的方差之比，當(dāng)實(shí)得分?jǐn)?shù)變異可以全部 由真實(shí)分?jǐn)?shù)的變異解釋時(shí)，測(cè)驗(yàn)誤差就 是0，這時(shí)問(wèn)卷測(cè)驗(yàn)的信度為

23、1 l若用表示問(wèn)卷測(cè)驗(yàn)的信度，理論應(yīng)有 l 或 l 式中 表示真實(shí)分?jǐn)?shù)的方差； l 表示實(shí)得分?jǐn)?shù)的方差； l 表示誤差的方差。 2 2 X T XX S S r 2 2 1 X E XX S S r 2 T S 2 X S 2 E S 3.3.信度的分類(lèi)信度的分類(lèi) l 信度研究的是問(wèn)卷測(cè)驗(yàn)結(jié)果的可靠性與穩(wěn) 定性，可以從不同的角度來(lái)評(píng)價(jià)： l（1）在相同條件下所得問(wèn)卷測(cè)驗(yàn)結(jié)果的一 致程度； l（2）不同研究者用同一種問(wèn)卷同時(shí)測(cè)驗(yàn)所 得結(jié)果的一致程度； l（3）同一研究者用同一種問(wèn)卷在不同時(shí)間 內(nèi)測(cè)驗(yàn)所得結(jié)果的一致程度 4.4.常用的信度系數(shù)常用的信度系數(shù) l（1 1）重測(cè)信度）重測(cè)信度( (te

24、st-retest reliability) ) l假定短時(shí)間內(nèi)一批對(duì)象的狀況并沒(méi)有改變， 對(duì)每個(gè)對(duì)象用同一個(gè)問(wèn)卷先后測(cè)驗(yàn)兩次， 兩次測(cè)驗(yàn)得分的相關(guān)系數(shù)就稱(chēng)為重測(cè)信度。 重測(cè)信度是用皮爾遜積差相關(guān)系數(shù)r公式計(jì) 算的 ) )( )( )( ( )( 2 2 2 2 n Y Y n X X n YX XY r 重測(cè)信度也存在著局限性：重測(cè)信度也存在著局限性： l 間隔時(shí)間長(zhǎng)，環(huán)境影響； l 如果間隔時(shí)間短，記憶影響。 (2)(2)復(fù)本信度（復(fù)本信度（alternate form reliability） l復(fù)本通常是根據(jù)相同的設(shè)計(jì)說(shuō)明分別 獨(dú)立編制的兩個(gè)平行問(wèn)卷，即題目不 同但是內(nèi)容相似的兩份問(wèn)卷

25、。復(fù)本信 度也叫等值性系數(shù)（coefficient of equivalence）。兩個(gè)復(fù)本間隔一定時(shí) 間或同時(shí)施于同一答卷者所得分?jǐn)?shù)的 相關(guān)系數(shù)就是復(fù)本信度 l缺點(diǎn)： l如復(fù)本編制不容易，易出現(xiàn)順序效 應(yīng)，受練習(xí)的影響； l復(fù)本信度只能反應(yīng)問(wèn)卷內(nèi)容所造成 的誤差，無(wú)法反應(yīng)答卷者本身所造 成的誤差等 (3)(3)分半信度分半信度( (split-half reliability) ) l當(dāng)測(cè)驗(yàn)沒(méi)有復(fù)本且測(cè)驗(yàn)不可避免地受到時(shí) 間的影響，只適合用于一次測(cè)驗(yàn)時(shí)，可用 分半信度。 l分半的方法很多，一般是將奇數(shù)題和偶數(shù) 題各作為一半，而非前后分半，目的是避 免順序效應(yīng)。分半信度也叫折半信度，其 計(jì)算方

26、法是將問(wèn)卷的題目分成對(duì)等的兩半， 分別求出兩半題目的總分，再計(jì)算兩部分 總分的相關(guān)系數(shù)。 l使用分半信度時(shí)要注意兩個(gè)問(wèn)題： l一是問(wèn)卷題目所測(cè)的應(yīng)是同一種特質(zhì)； l二是兩半題目應(yīng)是等值的。對(duì)問(wèn)卷題目 進(jìn)行分半會(huì)造成了對(duì)整個(gè)問(wèn)卷信度的低 估，為此需要對(duì)分半信度進(jìn)行校正，其 校正公式為斯皮爾曼-布朗(Spearman Brown)公式： 21 21 ) 1(1 xx xx XX rn rn r XX r為分半信度 21X X r 表示兩半題目各自得分和之相關(guān)系 數(shù)，n為原問(wèn)卷相對(duì)于變化后問(wèn)卷長(zhǎng)度的 倍數(shù)，計(jì)算分半信度時(shí)n=2。 lSpearman Brown公式要求兩個(gè)分 半表的信度和方差均滿(mǎn)足齊

27、性； l Guttman: Guttman分半信度，可不滿(mǎn) 足上述要求 (4)(4)庫(kù)得庫(kù)得理查森信度理查森信度 ( (Kuder Richardson) l庫(kù)德-理查森信度適用于計(jì)算“對(duì)或錯(cuò)”的是 非題的同質(zhì)性信度，其是計(jì)算所有可能的分半 信度的平均數(shù)。 l最有代表性的計(jì)算公式是庫(kù)德-理查森公式: )1 ( 1 2 1 20 X n i ii KR S qp n n r 式中n為問(wèn)卷包含的題目數(shù). 2 X S 為問(wèn)卷測(cè)驗(yàn)總得分的方差，pi表示答對(duì)該 題的人數(shù)占總答卷人數(shù)的比例，pi可視為該題的 難度，qi=1-pi 。 (5)克隆巴赫信度系數(shù)克隆巴赫信度系數(shù) (cronbachs ) lCr

28、onbachs 系數(shù)是Cronbach于1951年創(chuàng)立 的，用于評(píng)價(jià)問(wèn)卷的內(nèi)部一致性。系數(shù)取 值在0到1之間，系數(shù)越高，信度越高，問(wèn) 卷的內(nèi)部一致性越好。Cronbachs 系數(shù)不 僅適用于兩級(jí)記分的問(wèn)卷，還適用于多級(jí) 計(jì)分的問(wèn)卷 l Cronbachs 系數(shù)是最常用的信度檢驗(yàn)系數(shù) 其計(jì)算公式為：其計(jì)算公式為： )1 ( 1 2 1 2 X n i i S S n n 式中n為問(wèn)卷包含的題目數(shù)， 2 i S為答卷者在第i題得分的方差， 2 X S為答卷者問(wèn)卷測(cè)驗(yàn)總得分的方差。 l系數(shù)有以下性質(zhì)： l（1）系數(shù)是所有可能的分半信度的 平均值； l（2）系數(shù)是估計(jì)信度的最低限度； l（3）當(dāng)問(wèn)卷計(jì)

29、分為二分名義變量時(shí)， 即答案為0或1，系數(shù)與KR20值相同， 即庫(kù)德-理查森信度公式是克隆巴赫的 系數(shù)的一個(gè)特例 l低信度：0.35 l中信度： 0.350.70 l高信度： 0.70 l一般地，問(wèn)卷的系數(shù)在0.8以上該問(wèn)卷才具有使 用價(jià) l0.50.7 問(wèn)卷可信 l0.7-0.9 問(wèn)卷很可信 信度的檢驗(yàn)標(biāo)準(zhǔn) (6)(6)評(píng)分者信度評(píng)分者信度（inter-scorer reliability）* l考察評(píng)分者信度的方法為，隨機(jī)抽取相當(dāng) 份數(shù)的問(wèn)卷，由兩位評(píng)分者按記分規(guī)則分 別給分；然后根據(jù)每份問(wèn)卷的分?jǐn)?shù)計(jì)算相 關(guān)系數(shù)，就得到評(píng)分者信度。評(píng)分者信度 也可以是一位評(píng)分者兩次評(píng)分的相關(guān)系數(shù)。 如果是

30、多個(gè)評(píng)分者或一位評(píng)分者兩次以上 的評(píng)分，可采用肯德?tīng)柡椭C系數(shù)和Kappa系 數(shù)。肯德?tīng)柡椭C系數(shù)用于等級(jí)資料，Kappa 系數(shù)用于定性資料。 5.5.提高信度的方法提高信度的方法 l 問(wèn)卷的信度越高，受到人、時(shí)、地、 物的干擾就越低，其所能反應(yīng)事實(shí) 或讓人相信的程度越高，因此在問(wèn) 卷實(shí)施前如何有效提高信度是問(wèn)卷 測(cè)驗(yàn)成敗的關(guān)鍵。通常提高問(wèn)卷信 度的方法為： （1）適當(dāng)延長(zhǎng)問(wèn)卷的長(zhǎng)度 l問(wèn)卷題目較多，其在一定程度上排除了偶 然因素的影響，從而提高了問(wèn)卷的信度。 l 但是問(wèn)卷長(zhǎng)度的增加與問(wèn)卷的信度的增 加并不總是成正比的，當(dāng)信度系數(shù)較小時(shí)， 延長(zhǎng)問(wèn)卷長(zhǎng)度，問(wèn)卷的信度系數(shù)增加較大； 而當(dāng)信度系數(shù)較大時(shí)

31、，延長(zhǎng)問(wèn)卷長(zhǎng)度對(duì)信 度系數(shù)的影響就較小。 （2）問(wèn)卷的難度適中 l當(dāng)問(wèn)卷題目難度太大時(shí)，問(wèn)卷得分普遍 過(guò)低；當(dāng)問(wèn)卷題目難度太小時(shí)，問(wèn)卷得 分普遍較高。問(wèn)卷題目太難或太易都會(huì) 使問(wèn)卷得分差異減小，使實(shí)得分?jǐn)?shù)方差 減小，從而降低了問(wèn)卷的信度。 （3）問(wèn)卷的內(nèi)容盡量同質(zhì) l內(nèi)容同質(zhì)的問(wèn)卷，要求答卷者具有相同 的能力、知識(shí)和技能。因而為了提高問(wèn) 卷的信度，問(wèn)卷的內(nèi)容應(yīng)盡量保持同質(zhì)。 （4）測(cè)驗(yàn)的時(shí)間要充分 l一份問(wèn)卷應(yīng)保證絕大多數(shù)答卷者在規(guī)定 的時(shí)間內(nèi)能完成測(cè)驗(yàn)。當(dāng)答卷者不能從 容地回答所有題目時(shí)，問(wèn)卷的得分就不 能反映答卷者的真實(shí)情況。 （5）測(cè)驗(yàn)的程序要統(tǒng)一 l問(wèn)卷題目要統(tǒng)一，指導(dǎo)語(yǔ)、回答問(wèn) 題的

32、方式、分收試卷的方法和問(wèn)卷 測(cè)驗(yàn)的時(shí)間等都要統(tǒng)一，這些是問(wèn) 卷有較高信度的基本保證。 四、信度分析實(shí)例四、信度分析實(shí)例 （example） l例1 某人在新入學(xué)的大學(xué)生中隨機(jī)抽取40 人，組織癥狀自評(píng)量表（SCL-90）測(cè)驗(yàn)，以 了解新生心理健康的水平，及有針對(duì)性地進(jìn) 行心理教育和疏導(dǎo)，避免意外事件的發(fā)生。 試就量表測(cè)驗(yàn)結(jié)果，對(duì)此次測(cè)驗(yàn)的可靠性進(jìn) 行分析 lSCL-90量表，包含90個(gè)題目，由受試者根 據(jù)自己在最近一周以?xún)?nèi)的實(shí)際感受，在： 沒(méi)有、很輕、中等、偏重、嚴(yán)重各選項(xiàng)中 選擇一個(gè)答案，每個(gè)選項(xiàng)分別計(jì)為0，1，2， 3，4分 lSCL-90分為9個(gè)因子，分別為軀體化、強(qiáng) 迫癥狀、人際關(guān)系敏

33、感、憂(yōu)郁、焦慮、敵 對(duì)性、恐怖、偏執(zhí)和精神病性。分析對(duì)象 為答卷者所選的五項(xiàng)答案得分，計(jì)算各因 子得分和問(wèn)卷總分。求各因子的各種信度 系數(shù)和問(wèn)卷總的信度系數(shù) 表11-2 各因子描述統(tǒng)計(jì)量 l在“Model:”選項(xiàng)中，SPSS提供5種信度分析 模型: lAlpha: Cronbach 系數(shù) lSplit-half: 分半信度，又稱(chēng) Spearman-Brown 系數(shù),其應(yīng)用的前提 條件是兩個(gè)分半表的信度 和方差均滿(mǎn)足齊性。 lGuttman: Guttman分半信度，可不滿(mǎn)足上述 要求 lParallel:平行模型 lStrict Parallel:嚴(yán)格平行模型 量表的cronbach 系數(shù) l

34、從菜單選擇Analyze Scale Reliability AnalysisItem:a1/b2/c3/a4 /j89/i90(共90個(gè)變量) Model: Alpha List item labels OK lReliability Coefficients lN of Cases = 40.0 N of Items = 90 lAlpha = 0.9740 l量表有90個(gè)題目，量表總的Cronbach 系數(shù)為0.9740，信度較高。 各因子的Cronbach 系數(shù) l操作過(guò)程 l從菜單選擇Analyze Scale Reliability AnalysisItem: 輸入各因子 的條目數(shù)

35、 a1/a4/a12/a27/a40/a42/a48/a49/a52/a53/a5 6/a58 (軀體化因子，共12個(gè)變量) Model: Alpha OK l量表的9個(gè)因子的Cronbach 系數(shù)分別為： l軀體化0.8740；強(qiáng)迫0.8600；人際關(guān)系敏感 0.7483；憂(yōu)郁0.9445；焦慮0.8517；敵對(duì)性 0.6009；恐怖0.9218；偏執(zhí)0.7210；精神病性 0.6461 l憂(yōu)郁、恐怖、軀體化、強(qiáng)迫、焦慮因子的信度 較高；人際關(guān)系敏感和偏執(zhí)因子的信度尚可； 但是敵對(duì)性和精神病性的信度偏低。從結(jié)果中 我們還可以看出各項(xiàng)因子的Cronbach 系數(shù)小 于問(wèn)卷總的Cronbach 系數(shù) 分半信度 l操作過(guò)程： l從菜單選擇Analyze Scale Reliability AnalysisModel： Split-halfok 總量表的分半信度總量表的分半信度 l總量表分半信度計(jì)算結(jié)果: lReliability Coefficients 90 items lCo