姚應(yīng)水信度和效度

1、1心理衛(wèi)生評(píng)定量表的信度與效度分析姚應(yīng)水姚應(yīng)水皖南醫(yī)學(xué)院皖南醫(yī)學(xué)院3 SCL-90 SCL-90癥狀自評(píng)量表LSRLSR生活滿意度量表BDIBDI Beck抑郁問(wèn)卷MMPIMMPI明尼蘇達(dá)多項(xiàng)人格測(cè)驗(yàn)請(qǐng)列舉一些你所使用過(guò)或接觸過(guò)的量表請(qǐng)列舉一些你所使用過(guò)或接觸過(guò)的量表量表的作用是什么？量表的作用是什么？4你如何解釋下述現(xiàn)象？你如何解釋下述現(xiàn)象？一個(gè)很聰明的孩子，一個(gè)很聰明的孩子，測(cè)得智商是測(cè)得智商是8080分分一個(gè)學(xué)習(xí)很好的學(xué)生，一個(gè)學(xué)習(xí)很好的學(xué)生，考試成績(jī)?yōu)榭荚嚦煽?jī)?yōu)?060分分一個(gè)人緣很好的人，一個(gè)人緣很好的人，人際關(guān)系測(cè)量低于常模值人際關(guān)系測(cè)量低于常模值5量表是我們用來(lái)量表是我們用來(lái)了解

2、心理特質(zhì)的了解心理特質(zhì)的工具工具，但這個(gè)工，但這個(gè)工具是有誤差的。具是有誤差的。誤差要控制在一誤差要控制在一個(gè)許可的范圍內(nèi)。個(gè)許可的范圍內(nèi)。量表幫助我們了解心理現(xiàn)量表幫助我們了解心理現(xiàn)象（心理特質(zhì)），就像尺象（心理特質(zhì)），就像尺子幫助我們測(cè)量身高。子幫助我們測(cè)量身高。誤差自始至終存在于誤差自始至終存在于一切科學(xué)實(shí)驗(yàn)的過(guò)程一切科學(xué)實(shí)驗(yàn)的過(guò)程之中。之中。抽樣誤差與測(cè)量的優(yōu)劣沒(méi)有必然的聯(lián)系。因此，進(jìn)行信度和效度評(píng)價(jià)時(shí)，可以忽略抽樣誤差。系統(tǒng)誤差它直接影響測(cè)量的準(zhǔn)確性，與效度有關(guān)。但它在測(cè)試中不引起測(cè)量結(jié)果的不一致性，故與信度無(wú)關(guān)。隨機(jī)測(cè)量誤差與信度和效度都有關(guān)系，信度則完全受隨機(jī)測(cè)量誤差的影響。78

3、信信 度度9什么是信度（reliability）？指測(cè)量結(jié)果的穩(wěn)定性和可靠指測(cè)量結(jié)果的穩(wěn)定性和可靠性程度。性程度。描述性定義一個(gè)被測(cè)團(tuán)體真分?jǐn)?shù)的變異一個(gè)被測(cè)團(tuán)體真分?jǐn)?shù)的變異數(shù)與實(shí)得分?jǐn)?shù)的變異數(shù)之比。數(shù)與實(shí)得分?jǐn)?shù)的變異數(shù)之比。測(cè)量學(xué)定義（操作性定義）信度的種類及估計(jì)方法信度的種類及估計(jì)方法重測(cè)信度重測(cè)信度復(fù)本信度復(fù)本信度內(nèi)部一致性信度內(nèi)部一致性信度評(píng)分者信度評(píng)分者信度11指用同樣的測(cè)量方法在不同時(shí)段對(duì)同一對(duì)象進(jìn)行重復(fù)測(cè)指用同樣的測(cè)量方法在不同時(shí)段對(duì)同一對(duì)象進(jìn)行重復(fù)測(cè)量，所得結(jié)果的一致程度。一致程度越高，則該測(cè)量方量，所得結(jié)果的一致程度。一致程度越高，則該測(cè)量方法穩(wěn)定性越好，重測(cè)信度也就越高。法穩(wěn)

4、定性越好，重測(cè)信度也就越高。重測(cè)信度重測(cè)信度大小等于同一組被試在兩次測(cè)驗(yàn)上所得分?jǐn)?shù)的皮爾大小等于同一組被試在兩次測(cè)驗(yàn)上所得分?jǐn)?shù)的皮爾遜積差相關(guān)系數(shù)。遜積差相關(guān)系數(shù)。)()()()(2222nYYnXXnYXXYr舉例舉例使用的前提條件：1 1）測(cè)驗(yàn)所測(cè)的特質(zhì)必須是穩(wěn)定的，即被測(cè)的）測(cè)驗(yàn)所測(cè)的特質(zhì)必須是穩(wěn)定的，即被測(cè)的特征和屬性在兩次測(cè)驗(yàn)之間沒(méi)有發(fā)生變化特征和屬性在兩次測(cè)驗(yàn)之間沒(méi)有發(fā)生變化2 2）把握適當(dāng)?shù)臅r(shí)間間隔，遺忘和練習(xí)的效果）把握適當(dāng)?shù)臅r(shí)間間隔，遺忘和練習(xí)的效果基本上相互抵消基本上相互抵消3 3）兩次施測(cè)期間被試的學(xué)習(xí)效果沒(méi)有差別）兩次施測(cè)期間被試的學(xué)習(xí)效果沒(méi)有差別計(jì)算重測(cè)信度應(yīng)注意的問(wèn)

5、題： 兩次測(cè)驗(yàn)時(shí)間間隔要適當(dāng) 總的原則是時(shí)間間隔要長(zhǎng)到第總的原則是時(shí)間間隔要長(zhǎng)到第一次的測(cè)試對(duì)第二次的測(cè)試結(jié)果不會(huì)產(chǎn)生影響，但也不能一次的測(cè)試對(duì)第二次的測(cè)試結(jié)果不會(huì)產(chǎn)生影響，但也不能太長(zhǎng)以至于客觀情況已發(fā)生了變化太長(zhǎng)以至于客觀情況已發(fā)生了變化 所測(cè)試變量的性質(zhì) 應(yīng)當(dāng)較為穩(wěn)定。如個(gè)性、價(jià)值觀、生應(yīng)當(dāng)較為穩(wěn)定。如個(gè)性、價(jià)值觀、生活質(zhì)量等活質(zhì)量等 測(cè)試環(huán)境應(yīng)當(dāng)一致 應(yīng)盡量保證第二次測(cè)試環(huán)境與第一次應(yīng)盡量保證第二次測(cè)試環(huán)境與第一次測(cè)試的環(huán)境相同，以減少外部變量對(duì)結(jié)果的干擾。測(cè)試的環(huán)境相同，以減少外部變量對(duì)結(jié)果的干擾。15（二）復(fù)本信度（ Alternate-form Reliability ）用兩個(gè)平

6、行測(cè)驗(yàn)（同一測(cè)驗(yàn)的兩個(gè)復(fù)本）在相距最短時(shí)用兩個(gè)平行測(cè)驗(yàn)（同一測(cè)驗(yàn)的兩個(gè)復(fù)本）在相距最短時(shí)間內(nèi)測(cè)量同一組被試所得結(jié)果的一致性程度間內(nèi)測(cè)量同一組被試所得結(jié)果的一致性程度復(fù)本信度復(fù)本信度大小等于大小等于同一組被試在兩個(gè)復(fù)本測(cè)驗(yàn)上所得分?jǐn)?shù)的同一組被試在兩個(gè)復(fù)本測(cè)驗(yàn)上所得分?jǐn)?shù)的積差相關(guān)系數(shù)積差相關(guān)系數(shù)。 計(jì)算公式同重測(cè)信度計(jì)算公式同重測(cè)信度)()()()(2222nYYnXXnYXXYr舉例舉例復(fù)本信度的注意事項(xiàng) 兩個(gè)測(cè)驗(yàn)必須在項(xiàng)目的內(nèi)容、形式、數(shù)量、難易、時(shí)限、兩個(gè)測(cè)驗(yàn)必須在項(xiàng)目的內(nèi)容、形式、數(shù)量、難易、時(shí)限、指導(dǎo)語(yǔ)等方面相同或相似。指導(dǎo)語(yǔ)等方面相同或相似。 兩次測(cè)驗(yàn)的時(shí)間間隔要適當(dāng)。兩次測(cè)驗(yàn)的時(shí)間間

7、隔要適當(dāng)。局限： 復(fù)本法只能減少而不能排除練習(xí)和記憶效應(yīng)。復(fù)本法只能減少而不能排除練習(xí)和記憶效應(yīng)。 對(duì)于許多測(cè)驗(yàn)來(lái)說(shuō)要建立復(fù)本是非常困難的。對(duì)于許多測(cè)驗(yàn)來(lái)說(shuō)要建立復(fù)本是非常困難的。18（三）內(nèi)部一致性(internal consistency)信度指組成研究工具的各項(xiàng)目之間的同質(zhì)性或內(nèi)在相關(guān)性，指組成研究工具的各項(xiàng)目之間的同質(zhì)性或內(nèi)在相關(guān)性，內(nèi)在相關(guān)性越大或同質(zhì)性越好，說(shuō)明組成研究工具的各內(nèi)在相關(guān)性越大或同質(zhì)性越好，說(shuō)明組成研究工具的各項(xiàng)目都在一致地測(cè)量同一個(gè)問(wèn)題或指標(biāo)，也就是說(shuō)明工項(xiàng)目都在一致地測(cè)量同一個(gè)問(wèn)題或指標(biāo)，也就是說(shuō)明工具的內(nèi)在一致性越好，信度越高。具的內(nèi)在一致性越好，信度越高。 估

8、計(jì)內(nèi)在一致性系數(shù)的方法有： 分半信度分半信度 克朗巴哈克朗巴哈信度系數(shù)、信度系數(shù)、 庫(kù)德庫(kù)德理查遜的理查遜的KR-20KR-20值值1.分半信度（split-half reliability） 概念：概念：在測(cè)驗(yàn)沒(méi)有復(fù)本且只能實(shí)施一次的情況下，在測(cè)驗(yàn)沒(méi)有復(fù)本且只能實(shí)施一次的情況下，按題目的奇偶順序或其他方法可將測(cè)驗(yàn)項(xiàng)目分成按題目的奇偶順序或其他方法可將測(cè)驗(yàn)項(xiàng)目分成對(duì)等的兩半，根據(jù)被試在這兩半測(cè)驗(yàn)中所得的分對(duì)等的兩半，根據(jù)被試在這兩半測(cè)驗(yàn)中所得的分?jǐn)?shù)計(jì)算相關(guān)系數(shù)，即得分半信度。數(shù)計(jì)算相關(guān)系數(shù)，即得分半信度。計(jì)算方法：計(jì)算方法：對(duì)這兩個(gè)部分的數(shù)值進(jìn)行相關(guān)分析，計(jì)對(duì)這兩個(gè)部分的數(shù)值進(jìn)行相關(guān)分析，計(jì)算

9、分半信度系數(shù)算分半信度系數(shù)r rhhhh，然后采用，然后采用Spearman-BrownSpearman-Brown公公式對(duì)式對(duì)r rhhhh進(jìn)行修正以計(jì)算分半信度進(jìn)行修正以計(jì)算分半信度r rtttt。 舉例舉例2.克朗巴哈信度系數(shù)（Chronbachs coefficient） Chronbachs 信度系數(shù)是信度系數(shù)是CronbachCronbach于于19511951年創(chuàng)立年創(chuàng)立的，用于評(píng)價(jià)問(wèn)卷的內(nèi)部一致性。的，用于評(píng)價(jià)問(wèn)卷的內(nèi)部一致性。系數(shù)取值在系數(shù)取值在0 0到到1 1之間，之間，系數(shù)越高，信度越高，問(wèn)卷的內(nèi)部一系數(shù)越高，信度越高，問(wèn)卷的內(nèi)部一致性越好。致性越好。舉例舉例可以認(rèn)為內(nèi)在

10、一致信度較好可以認(rèn)為內(nèi)在一致信度較好 3. 庫(kù)德理查遜的KR-20值（Kuder-Richardson formula 20, KR-20） KR-20KR-20值也是分析所有項(xiàng)目間的平均一致程度，但值也是分析所有項(xiàng)目間的平均一致程度，但是，是，KR-20KR-20值公式要求項(xiàng)目以值公式要求項(xiàng)目以0 0、1 1記分。記分。 KR-20值計(jì)算方法： 在一定意義上在一定意義上KR-20KR-20值是克朗巴哈值是克朗巴哈系數(shù)的一種特系數(shù)的一種特例。例。 211tiittSqpnnr24當(dāng)不同評(píng)分者使用相同工具，同時(shí)測(cè)量相同對(duì)象時(shí)，需當(dāng)不同評(píng)分者使用相同工具，同時(shí)測(cè)量相同對(duì)象時(shí)，需計(jì)算評(píng)分者間的一致程

11、度。計(jì)算評(píng)分者間的一致程度。幾個(gè)評(píng)分者的評(píng)分越一致幾個(gè)評(píng)分者的評(píng)分越一致，評(píng)分者信度越高評(píng)分者信度越高計(jì)算方法計(jì)算方法：當(dāng)只有兩個(gè)評(píng)分者時(shí)，若為連續(xù)變量評(píng)分，則計(jì)當(dāng)只有兩個(gè)評(píng)分者時(shí)，若為連續(xù)變量評(píng)分，則計(jì)算簡(jiǎn)單相關(guān)系數(shù)（算簡(jiǎn)單相關(guān)系數(shù)（r）；若為等級(jí)變量評(píng)分，則計(jì)算等級(jí)相）；若為等級(jí)變量評(píng)分，則計(jì)算等級(jí)相關(guān)系數(shù)（關(guān)系數(shù)（Spearman等級(jí)相關(guān)系數(shù)）。當(dāng)測(cè)試的評(píng)分者三個(gè)等級(jí)相關(guān)系數(shù)）。當(dāng)測(cè)試的評(píng)分者三個(gè)以上，且測(cè)試采取等級(jí)評(píng)分時(shí)，可以用肯德?tīng)柡椭C系數(shù)，計(jì)以上，且測(cè)試采取等級(jí)評(píng)分時(shí)，可以用肯德?tīng)柡椭C系數(shù)，計(jì)算公式為：算公式為：舉例舉例26以上介紹的各種信度估計(jì)方法都是對(duì)測(cè)試的一致性進(jìn)行估計(jì)，但由

12、于誤差來(lái)源不同，它們研究的側(cè) 面 各 不 相 同重測(cè)信度：估計(jì)測(cè)試中跨時(shí)估計(jì)測(cè)試中跨時(shí)間的一致性間的一致性。復(fù)本信度：估計(jì)測(cè)試跨形式的一致性估計(jì)測(cè)試跨形式的一致性評(píng)分者信度：估計(jì)測(cè)試跨評(píng)分估計(jì)測(cè)試跨評(píng)分者的一致性者的一致性內(nèi)在一致性系數(shù)：估計(jì)測(cè)試跨項(xiàng)目或兩個(gè)分半估計(jì)測(cè)試跨項(xiàng)目或兩個(gè)分半測(cè)試之間的一致性測(cè)試之間的一致性27測(cè)試工具本身的影響測(cè)試實(shí)施過(guò)程的影響 測(cè)試題目取樣不當(dāng)測(cè)試題目取樣不當(dāng) 測(cè)量的難度測(cè)量的難度 測(cè)題或指導(dǎo)語(yǔ)用詞不當(dāng)、時(shí)測(cè)題或指導(dǎo)語(yǔ)用詞不當(dāng)、時(shí)限過(guò)短限過(guò)短 測(cè)試環(huán)境測(cè)試環(huán)境 測(cè)試者穿著、言談舉止測(cè)試者穿著、言談舉止不符合施測(cè)要求不符合施測(cè)要求 評(píng)分不客觀、登記分出評(píng)分不客觀、登

13、記分出錯(cuò)錯(cuò)28被試者（被調(diào)查者）的影響測(cè)試得分的分布范圍及測(cè)試長(zhǎng)度的影響 被試者的動(dòng)機(jī)被試者的動(dòng)機(jī) 被試者的焦慮、生理因素被試者的焦慮、生理因素 測(cè)試經(jīng)驗(yàn)、學(xué)習(xí)和教育的影測(cè)試經(jīng)驗(yàn)、學(xué)習(xí)和教育的影響響 測(cè)試得分的分布范圍越寬、測(cè)試得分的分布范圍越寬、信度系數(shù)就越高。信度系數(shù)就越高。 信度系數(shù)也是一種相關(guān)系信度系數(shù)也是一種相關(guān)系數(shù)，受到樣本中各被試的數(shù)，受到樣本中各被試的能力或者特性的范圍影響。能力或者特性的范圍影響。 其他條件不變時(shí)，測(cè)試長(zhǎng)其他條件不變時(shí)，測(cè)試長(zhǎng)度越長(zhǎng)，即題目數(shù)越多，度越長(zhǎng)，即題目數(shù)越多，信度就越高信度就越高29效效 度度30什么是效度（validity）？概念：概念：又稱準(zhǔn)確度

14、，是用以反映測(cè)量結(jié)果與又稱準(zhǔn)確度，是用以反映測(cè)量結(jié)果與“真值真值”的接近程度。的接近程度。對(duì)于一個(gè)標(biāo)準(zhǔn)測(cè)驗(yàn)來(lái)說(shuō)，效度比信度對(duì)于一個(gè)標(biāo)準(zhǔn)測(cè)驗(yàn)來(lái)說(shuō)，效度比信度更為重要。更為重要。效度分析的意義：效度分析的意義：是是量表（問(wèn)卷）量表（問(wèn)卷）調(diào)查研究中最重要調(diào)查研究中最重要的特征的特征，效度越高表示該問(wèn)卷測(cè)驗(yàn)的結(jié)果所能代表要效度越高表示該問(wèn)卷測(cè)驗(yàn)的結(jié)果所能代表要測(cè)驗(yàn)的行為的真實(shí)度越高，越能夠達(dá)到問(wèn)卷測(cè)驗(yàn)?zāi)康臏y(cè)驗(yàn)的行為的真實(shí)度越高，越能夠達(dá)到問(wèn)卷測(cè)驗(yàn)?zāi)康摹Ｋ从沉藢?duì)問(wèn)卷的系統(tǒng)誤差的控制程度。它反映了對(duì)問(wèn)卷的系統(tǒng)誤差的控制程度。 效度的性質(zhì)效度的性質(zhì)效度是針對(duì)測(cè)驗(yàn)結(jié)果的效度是針對(duì)測(cè)驗(yàn)結(jié)果的效度是針對(duì)某種特

15、定的測(cè)驗(yàn)?zāi)康牡男Ф仁轻槍?duì)某種特定的測(cè)驗(yàn)?zāi)康牡男Ф戎挥谐潭壬系牟顒e（效度只有程度上的差別（只有程度上的差別，沒(méi)有全或無(wú)的差別）效度是測(cè)量的效度是測(cè)量的隨機(jī)誤差隨機(jī)誤差和和系統(tǒng)誤差系統(tǒng)誤差的綜合的綜合反映反映判斷一個(gè)測(cè)量是否有效要從多方面搜集證判斷一個(gè)測(cè)量是否有效要從多方面搜集證據(jù)據(jù)內(nèi)容效度 指量表測(cè)量的內(nèi)容與所要測(cè)量的指量表測(cè)量的內(nèi)容與所要測(cè)量的內(nèi)容之間的吻合程度。即測(cè)試對(duì)內(nèi)容之間的吻合程度。即測(cè)試對(duì)象對(duì)問(wèn)題的理解和回答是否擬于象對(duì)問(wèn)題的理解和回答是否擬于設(shè)計(jì)者希望詢問(wèn)的內(nèi)容一致。設(shè)計(jì)者希望詢問(wèn)的內(nèi)容一致。結(jié)構(gòu)效度又稱校標(biāo)效度。又稱校標(biāo)效度。3233內(nèi)容效度34結(jié)構(gòu)效度35標(biāo)準(zhǔn)關(guān)聯(lián)效度可分為：可

16、分為：(1)(1)同時(shí)效度，又稱平行效度（同時(shí)效度，又稱平行效度（convergent validityconvergent validity），是指測(cè)試工），是指測(cè)試工具與現(xiàn)有標(biāo)準(zhǔn)之間的相關(guān)。具與現(xiàn)有標(biāo)準(zhǔn)之間的相關(guān)。(2)(2)預(yù)測(cè)效度，是指測(cè)試工具作為未來(lái)情況預(yù)測(cè)指標(biāo)的有效程度。預(yù)測(cè)效度，是指測(cè)試工具作為未來(lái)情況預(yù)測(cè)指標(biāo)的有效程度。 結(jié)構(gòu)效度結(jié)構(gòu)效度能幫助我們運(yùn)用測(cè)驗(yàn)分?jǐn)?shù)解釋人能幫助我們運(yùn)用測(cè)驗(yàn)分?jǐn)?shù)解釋人的心理特質(zhì)的心理特質(zhì) 標(biāo)準(zhǔn)標(biāo)準(zhǔn)關(guān)聯(lián)效度關(guān)聯(lián)效度可用來(lái)了解測(cè)驗(yàn)分?jǐn)?shù)能否有可用來(lái)了解測(cè)驗(yàn)分?jǐn)?shù)能否有效地預(yù)測(cè)或估計(jì)某種行為表現(xiàn)效地預(yù)測(cè)或估計(jì)某種行為表現(xiàn) 內(nèi)容效度內(nèi)容效度研究的問(wèn)題是變量的內(nèi)容范

17、圍研究的問(wèn)題是變量的內(nèi)容范圍38信度與效度的關(guān)系信度與效度的關(guān)系 A 準(zhǔn)準(zhǔn)確確度度和和可可靠靠度度都都好好 C 準(zhǔn)準(zhǔn)確確度度差差、可可靠靠度度好好 B 準(zhǔn)準(zhǔn)確確度度較較好好、可可靠靠度度差差 D 準(zhǔn)準(zhǔn)確確度度和和可可靠靠度度都都差差 40同時(shí)具有信度和效度有信度，但沒(méi)有效度既沒(méi)有信度，也沒(méi)有效度兩者存在著必然的聯(lián)系兩者存在著必然的聯(lián)系：高信度是高效度的必要條高信度是高效度的必要條件，但非充分條件。即信度高不一定其效度就高，件，但非充分條件。即信度高不一定其效度就高，但沒(méi)有效度，信度就毫無(wú)意義；沒(méi)有信度就不可能但沒(méi)有效度，信度就毫無(wú)意義；沒(méi)有信度就不可能有效度，若想獲得較高的效度，其信度必定要高。有效度，若想獲得較高的效度，其信度必定要高