第六章++信度和效度(新)課件

第六章信度和效度

第一節(jié)信度和效度概述第二節(jié)信度的評(píng)估方法第三節(jié)效度的評(píng)估方法

1精選課件ppt第一節(jié)信度和效度概述

一、信度和效度的定義

1.信度的定義信度是指測(cè)驗(yàn)結(jié)果的可靠性、穩(wěn)定性和一致性。

★信度實(shí)際上是對(duì)隨機(jī)誤差的一種度量，它是從反面來(lái)考察隨機(jī)誤差的大小。隨機(jī)誤差越大，信度越低，反之，信度越高。

2精選課件ppt測(cè)得分?jǐn)?shù)真實(shí)分?jǐn)?shù)誤差系統(tǒng)誤差隨機(jī)誤差3精選課件ppt

為真實(shí)分?jǐn)?shù)的標(biāo)準(zhǔn)差；Sx為實(shí)得分?jǐn)?shù)的標(biāo)準(zhǔn)差。信度高低通常以相關(guān)系數(shù)表示，稱(chēng)為信度系數(shù)。在理論上表示為實(shí)得分?jǐn)?shù)與真實(shí)分?jǐn)?shù)相關(guān)的平方：4精選課件ppt

效度是指所測(cè)量到的結(jié)果反映所想要考察內(nèi)容的程度。

用公式可以表示為：rxy=Sv2/Sx2rxy為測(cè)驗(yàn)效度；Sv2為有效方差；Sx2為總方差。

2．效度的定義5精選課件ppt

信度和效度的差別在于所考慮的誤差不同。信度考慮的是隨機(jī)誤差的影響；效度考慮的誤差還包括系統(tǒng)誤差。

信度高，效度不一定高；效度高，信度必定高。信度是效度的必要條件，但不是充分條件。3.效度與信度的關(guān)系6精選課件ppt解釋真實(shí)分?jǐn)?shù)與實(shí)得分?jǐn)?shù)的相關(guān)。說(shuō)明可以接受的信度水平。

二、信度的作用7精選課件ppt三、效度的性質(zhì)

效度指的是測(cè)量結(jié)果的效度；效度是連續(xù)性的；效度同時(shí)也是針對(duì)測(cè)量目標(biāo)而言的；效度是從已有的證據(jù)推理而得到的。8精選課件ppt第二節(jié)信度的評(píng)估方法

一、重測(cè)信度二、復(fù)本信度三、內(nèi)部一致性信度四、評(píng)分者信度9精選課件ppt一、重測(cè)信度

1．重測(cè)信度的概念

重測(cè)信度又稱(chēng)為穩(wěn)定性系數(shù)，指同一測(cè)驗(yàn)在不同的時(shí)間上對(duì)同一群體先后施測(cè)兩次的測(cè)驗(yàn)結(jié)果的一致性。這兩次測(cè)驗(yàn)結(jié)果的相關(guān)系數(shù)即為重測(cè)信度系數(shù)。

10精選課件ppt

重測(cè)信度所考察的誤差來(lái)源主要是時(shí)間的變化所帶來(lái)的隨機(jī)影響，因此，必須注意間隔時(shí)間的長(zhǎng)短。間隔時(shí)間的長(zhǎng)短要根據(jù)測(cè)驗(yàn)的性質(zhì)和目的來(lái)確定。如果希望測(cè)驗(yàn)成績(jī)能夠預(yù)測(cè)較長(zhǎng)時(shí)間的變化，則間隔時(shí)間應(yīng)該較長(zhǎng)。例如，人格測(cè)驗(yàn)的重測(cè)間隔時(shí)間規(guī)定在兩周至6個(gè)月較為合適。2.重測(cè)的間隔時(shí)間11精選課件ppt

（1）重測(cè)信度一般只反映由隨機(jī)因素導(dǎo)致的變化，而不反映被試行為的長(zhǎng)久變化。（2）不同行為受隨機(jī)誤差的影響不同。3.進(jìn)行重測(cè)信度評(píng)估時(shí)注意的問(wèn)題12精選課件ppt

（3）重測(cè)信度的假設(shè)前提是：每一被試對(duì)前一次測(cè)驗(yàn)的遺忘程度相同；每一被試在重測(cè)的間隔期內(nèi)沒(méi)有學(xué)習(xí)與測(cè)驗(yàn)有關(guān)的其他材料。這個(gè)假設(shè)不容易完全滿足。（4）有些解決問(wèn)題型的測(cè)驗(yàn)不適合采用重測(cè)的方式來(lái)考察其信度；只有不容易受重復(fù)影響的測(cè)驗(yàn)，如感覺(jué)—運(yùn)動(dòng)型測(cè)驗(yàn)或人格測(cè)驗(yàn)較適合采用重測(cè)的方式來(lái)考察其信度。13精選課件ppt二、復(fù)本信度

1.復(fù)本信度的含義復(fù)本信度又稱(chēng)等值性系數(shù)，是以兩個(gè)功能等值而題目?jī)?nèi)容不同的測(cè)驗(yàn)復(fù)本來(lái)測(cè)量同一群體，然后求得被試在這兩個(gè)測(cè)驗(yàn)上得分的相關(guān)系數(shù)。

2.計(jì)算復(fù)本信度的目的考察兩個(gè)測(cè)驗(yàn)復(fù)本的題目取樣或內(nèi)容取樣是否等值。14精選課件ppt

優(yōu)點(diǎn):能夠避免重測(cè)信度關(guān)于記憶、練習(xí)等方面的問(wèn)題；適用于進(jìn)行長(zhǎng)期追蹤研究或調(diào)查某些干涉變量對(duì)測(cè)驗(yàn)成績(jī)的影響；減少了輔導(dǎo)或作弊的可能性。

缺點(diǎn):不能完全消除練習(xí)的影響；對(duì)于解決型的問(wèn)題，容易產(chǎn)生解題的“遷移”問(wèn)題。有些測(cè)驗(yàn)較難找到完全等值的復(fù)本。3.復(fù)本信度的優(yōu)缺點(diǎn)15精選課件ppt三、內(nèi)部一致性信度

內(nèi)部一致性信度主要反映的是測(cè)驗(yàn)內(nèi)部題目之間的相關(guān)關(guān)系，考察測(cè)驗(yàn)的各個(gè)題目是否測(cè)量了相同的內(nèi)容或特質(zhì)。它可分為分半信度和同質(zhì)性信度。

16精選課件ppt

（一）分半信度

將一份測(cè)驗(yàn)分為兩部分，計(jì)算這兩部分測(cè)驗(yàn)之間的相關(guān)系數(shù)。

注意：

1.要分為可比的兩半，常采用奇偶分半。2.由于分半后題目的數(shù)量減半，使測(cè)驗(yàn)題目變短，從而使信度人為地降低，因此應(yīng)該進(jìn)行修正。

17精選課件ppt（二）同質(zhì)性信度

同質(zhì)性信度指測(cè)驗(yàn)內(nèi)部的各題目在多大程度上考察了同一內(nèi)容。

18精選課件ppt四、評(píng)分者信度

1．評(píng)分者信度的概念評(píng)分者信度是指不同評(píng)分者對(duì)同樣對(duì)象進(jìn)行評(píng)定時(shí)的一致性。

2．評(píng)分者信度的計(jì)算公式其中，K為評(píng)分者人數(shù)，N為被評(píng)定的人數(shù)或答卷數(shù)，Ri為每一個(gè)對(duì)象評(píng)定等級(jí)。19精選課件ppt評(píng)分者答卷編號(hào)一二三四五六甲431256乙532146丙412356丁641235Ri1911681723例如，有四名評(píng)分者，對(duì)六份答卷進(jìn)行評(píng)分，所評(píng)等級(jí)如下：20精選課件ppt21精選課件ppt信度系數(shù)類(lèi)型誤差方差來(lái)源重測(cè)信度復(fù)本信度（連續(xù)施測(cè)）重測(cè)復(fù)本信度分半信度同質(zhì)性信度評(píng)分者信度時(shí)間取樣內(nèi)容取樣時(shí)間取樣和內(nèi)容取樣內(nèi)容取樣內(nèi)容的異質(zhì)性評(píng)分者間的差異各種信度系統(tǒng)相應(yīng)的誤差來(lái)源22精選課件ppt五、影響信度的因素

（一）樣本團(tuán)體的性質(zhì)

1．樣本團(tuán)體的分?jǐn)?shù)分布樣本團(tuán)體的分?jǐn)?shù)分布越廣，信度系數(shù)越高；

2.樣本團(tuán)體的異質(zhì)性取樣團(tuán)體的異質(zhì)性越大，信度系數(shù)越高；

3.不同團(tuán)體間能力水平的差異能力低，受猜測(cè)的影響就越大，信度就越低。23精選課件ppt（二）測(cè)驗(yàn)的長(zhǎng)度測(cè)驗(yàn)越長(zhǎng)，信度值越高。（三）測(cè)驗(yàn)的難度測(cè)驗(yàn)的難度適中，信度就較高；而測(cè)驗(yàn)過(guò)難或過(guò)易，都會(huì)使信度降低。24精選課件ppt第三節(jié)效度的評(píng)估方法一、內(nèi)容效度二、效標(biāo)關(guān)聯(lián)效度三、構(gòu)想效度

25精選課件ppt一、內(nèi)容效度

1．內(nèi)容效度的概念內(nèi)容效度是檢查測(cè)驗(yàn)內(nèi)容是否是所欲測(cè)量的行為領(lǐng)域的代表性取樣的指標(biāo)。

2．內(nèi)容效度分析時(shí)要注意兩方面的問(wèn)題：

（1）應(yīng)避免將測(cè)驗(yàn)取樣的行為領(lǐng)域過(guò)于泛化。（2）要注意測(cè)驗(yàn)分?jǐn)?shù)中無(wú)關(guān)因素的影響。26精選課件ppt

3.內(nèi)容效度的應(yīng)用內(nèi)容效度最適合于評(píng)估教育和職業(yè)成就測(cè)驗(yàn)，也適合于某些用于選拔和分類(lèi)的人事測(cè)驗(yàn)，一般不適用于能力傾向測(cè)驗(yàn)和人格測(cè)驗(yàn)。27精選課件ppt二、效標(biāo)關(guān)聯(lián)效度

1．效標(biāo)關(guān)聯(lián)效度的概念：也稱(chēng)效標(biāo)效度，它反映的是測(cè)驗(yàn)分?jǐn)?shù)與外在標(biāo)準(zhǔn)(效標(biāo))的相關(guān)程度。

預(yù)測(cè)效度是指測(cè)驗(yàn)分?jǐn)?shù)對(duì)任一段時(shí)間間隔后被試行為表現(xiàn)的預(yù)測(cè)程度。

同時(shí)效度是指測(cè)驗(yàn)分?jǐn)?shù)和同一時(shí)間采集的效標(biāo)材料之間的相關(guān)程度。2.預(yù)測(cè)效度和同時(shí)效度28精選課件ppt★預(yù)測(cè)效度適用于人員選拔、分類(lèi)和安置等的測(cè)驗(yàn)。★同時(shí)效度適用于培訓(xùn)、績(jī)效考核等方面的測(cè)驗(yàn)?！锿瑫r(shí)效度和預(yù)測(cè)效度的差異的根源不是收集效標(biāo)的時(shí)間，而是在于測(cè)驗(yàn)?zāi)康牡牟煌Ｇ罢叨嘤糜谠\斷現(xiàn)在的狀態(tài)，后者多預(yù)測(cè)未來(lái)的結(jié)果。說(shuō)明：29精選課件ppt三、構(gòu)想效度構(gòu)想效度是指測(cè)驗(yàn)?zāi)軌驕y(cè)量到理論上的構(gòu)想或特質(zhì)的程度。

30精選課件ppt四、影響效度的因素

（一）測(cè)驗(yàn)的因素1.測(cè)驗(yàn)題目的質(zhì)量；2.測(cè)驗(yàn)實(shí)施時(shí)的干擾因素；3.被試的影響因素；4.測(cè)驗(yàn)的長(zhǎng)度。31精選課件ppt

1.同一測(cè)驗(yàn)對(duì)不同團(tuán)體所測(cè)量的功能可能不同；2.同一測(cè)驗(yàn)，樣本團(tuán)體的性質(zhì)不同，效度就可能不同；3.樣本團(tuán)體的異質(zhì)性對(duì)效度也會(huì)有影響。（二）樣本團(tuán)體的性質(zhì)32精選課件ppt（三）效標(biāo)的性質(zhì)

其他條件相同時(shí)，所測(cè)量的行為或心理特質(zhì)與效標(biāo)行為或特質(zhì)越相似，效度系數(shù)