測驗(yàn)信度效度

1、心理測驗(yàn)客觀性的常用指標(biāo) 11、信度： reliability 2、 效度；validity3、 項(xiàng)目分析（難度和鑒別力）21、信度 指測驗(yàn)結(jié)果的可靠程度。只有測驗(yàn)結(jié)果接近或等于實(shí)際真值，或多次測驗(yàn)結(jié)果十分接近，就可以認(rèn)為測驗(yàn)結(jié)果是可靠的。 科學(xué)的東西必須能夠重復(fù)，兩次測驗(yàn)的結(jié)果必須具有一定的一致性，差異比較小，信度問題實(shí)質(zhì)是一組被試兩次測驗(yàn)結(jié)果的一致性問題。測驗(yàn)的可靠性，是指對(duì)某一群體而言，不是針對(duì)某一個(gè)被試而言。 信度高低可以用相關(guān)系數(shù)來表示。3 信度的作用和意義作用：1）解釋預(yù)測個(gè)人分?jǐn)?shù)的意義 2）解釋真實(shí)分?jǐn)?shù)與實(shí)得分?jǐn)?shù)間的關(guān)系 3）確定測驗(yàn)好壞的一個(gè)指標(biāo)；最理想 r=1.00意義：1）

2、信度系統(tǒng)為樣本測驗(yàn)分?jǐn)?shù)的總方差中有多少比例是真分?jǐn)?shù)方差，也就是測驗(yàn)的總變異中真分?jǐn)?shù)造成的變異占百分之幾2）測量的標(biāo)準(zhǔn)誤是有多大可能性真實(shí)分?jǐn)?shù)在某一分?jǐn)?shù)范圍內(nèi)。并且可以預(yù)測實(shí)得分?jǐn)?shù)再測時(shí)可能的變化情況。4 信度估計(jì)方法 （1）重測信度 考慮誤差來源是時(shí)間取樣，主要針對(duì)時(shí)間變量，采集數(shù)據(jù)方法是對(duì)同一組被試間隔一定的時(shí)間相同的測驗(yàn)重復(fù)測試一次，計(jì)算方法是積差相關(guān)法,求得首測與再測這兩次測驗(yàn)的相關(guān) 。時(shí)間間隔選擇依測驗(yàn)性質(zhì)和目的而定。 不是所有測驗(yàn)都可以計(jì)算重測信度，如：智力測驗(yàn)，成就測驗(yàn)；重測信度只反映了隨機(jī)誤差的影響，而不是反映被試心理特點(diǎn)的長期變化。5（2）復(fù)本信度 又叫等值性系統(tǒng)，考慮誤差來源

3、是內(nèi)容取樣，采集數(shù)據(jù)方法：給被試施測兩個(gè)內(nèi)容等值但題目不同的測驗(yàn)，即：一個(gè)測驗(yàn)有平行的兩個(gè)版本測驗(yàn)A、B，先作A式測驗(yàn)，在最短時(shí)間內(nèi)再作測驗(yàn)B式，求兩組數(shù)值的相關(guān)，計(jì)算積差相關(guān)法。 復(fù)本信度的高低反映兩個(gè)互為復(fù)本的測驗(yàn)等價(jià)的程度，而不是反映一個(gè)測驗(yàn)本身受隨機(jī)誤差影響的大小，關(guān)鍵取決于復(fù)本測驗(yàn)的選擇。6（3）分半信度（內(nèi)在一致性信度） 劈半信度或折半信度，如智力測驗(yàn)，成就測驗(yàn)，是一種將測驗(yàn)分成等值的兩半來求相關(guān)系統(tǒng)的信度?？疾煲粋€(gè)測驗(yàn)內(nèi)容兩伴題目測量的是否同一個(gè)心理特點(diǎn)或行為。采集數(shù)據(jù)方法：一次測驗(yàn)結(jié)束后，將測驗(yàn)按一定標(biāo)準(zhǔn)分為等值的兩半，分別計(jì)算每位被試在兩半測驗(yàn)上的分?jǐn)?shù)，求出相關(guān)系數(shù)，計(jì)算用積

4、差相關(guān)法。 常用的方法是將一個(gè)測驗(yàn)分裂為兩個(gè)假定相等而獨(dú)立的部分，然后計(jì)算這兩部分的得分相關(guān)系數(shù)（如奇偶項(xiàng)），之后再用斯皮爾曼布朗公式（2r/1+r）估計(jì)整個(gè)測驗(yàn)的信度。7（4）同質(zhì)性信度 同質(zhì)性信度：考慮測驗(yàn)內(nèi)容是否異質(zhì)，同質(zhì)性是測同一種心理行質(zhì)或行為，測驗(yàn)所有題目間性質(zhì)的一致性，同質(zhì)性是測驗(yàn)單一特質(zhì)的必要條件。判別標(biāo)準(zhǔn)：題目間呈高正相關(guān)。數(shù)據(jù)采集方法：施測一次測驗(yàn)，算出所有題的得分，求出各題目的相關(guān)， 同質(zhì)性信度也是一種構(gòu)思效度，或叫結(jié)構(gòu)效度。8（5）評(píng)分者信度 評(píng)分信度：考慮測驗(yàn)隨機(jī)誤差來源是評(píng)分者間的差別，由評(píng)分者造成，用積差相關(guān)法求得不同評(píng)分者所評(píng) 分值間的相關(guān)。 2個(gè)評(píng)分者用斯皮爾

5、曼等級(jí)相關(guān)法，3人以上用肯德爾和諧系統(tǒng)。9影響信度的因素 1） 樣本特征：樣本團(tuán)體得分分布的影響，樣本越分散信度越高；樣本團(tuán)體異質(zhì)性的影響，異質(zhì)性越高信度越高；樣本團(tuán)體平均能力水平的影響，平均能力越低信度越高2） 測驗(yàn)的長度：測驗(yàn)越長題目越多，測驗(yàn)的內(nèi)容取樣就越有代表性；測驗(yàn)越長被試的猜測因素影響越小，信度就高。3） 測驗(yàn)的難度：測驗(yàn)難度對(duì)信度有間接影響。對(duì)于人格測驗(yàn)、興趣、態(tài)度、價(jià)值觀等測驗(yàn)，不存在難度問題。從理論上說，只有難度水平為50%時(shí)，才能使測驗(yàn)分?jǐn)?shù)分布范圍最大，求得的信度也最高。4） 測量的時(shí)間間隔：時(shí)間間隔只對(duì)重測信度和不同時(shí)測量的復(fù)本有影響，時(shí)間越短信度值越高。102、 效度

6、它表示一個(gè)測驗(yàn)實(shí)際測量出所測特性或功能的真實(shí)性程度，或它指一個(gè)測驗(yàn)真正確實(shí)地測量到它所欲測量的東西的程度。含義：1）測驗(yàn)測量什么？ 2）測驗(yàn)對(duì)測量目標(biāo)的測量精確度和真實(shí)性是多少？ 同一測驗(yàn)中其它條件相同時(shí)，效度必然低于信度。往往效度比信度更重要。11 鑒別一個(gè)測驗(yàn)的好壞，首要的指標(biāo)就是效度。 效度是針對(duì)測驗(yàn)?zāi)康亩缘摹２煌瑴y驗(yàn)有不同的目的。比如智力測驗(yàn)，如果用來測驗(yàn)智力就可能是高效的，用來測驗(yàn)性格則肯定是無效的。所以在使用心理測驗(yàn)時(shí)必須明白測驗(yàn)的目的。12效度估計(jì)方法 （1）內(nèi)容效度 表示測驗(yàn)所選的題目（測題）符合所欲測驗(yàn)內(nèi)容的程度。是測驗(yàn)題目對(duì)有關(guān)內(nèi)容或行為總體取樣的適當(dāng)性程度。能力傾向和人

7、格測驗(yàn)不適合作內(nèi)容效度確定內(nèi)容效度的方法： 邏輯法：專家判斷，專家對(duì)測驗(yàn)題目進(jìn)行考核，看測驗(yàn)是否能夠測出所要測的內(nèi)容； 經(jīng)驗(yàn)法：經(jīng)驗(yàn)判斷，通過實(shí)踐檢查測驗(yàn)?zāi)芊駵y出欲測的內(nèi)容。 統(tǒng)計(jì)法：統(tǒng)計(jì)分析，通過統(tǒng)計(jì)學(xué)對(duì)項(xiàng)目進(jìn)行分析。13（2）結(jié)構(gòu)效度 也叫構(gòu)想效度，表示測驗(yàn)實(shí)際測量出所欲測量的心理結(jié)構(gòu)或特征的程度。用一個(gè)結(jié)構(gòu)框架去衡量效度。構(gòu)思效度無單一指標(biāo)，由各方面證據(jù)累積直接來作出評(píng)價(jià)。 確定方法：測驗(yàn)內(nèi)部方法，測驗(yàn)間方法，效標(biāo)效度研究，實(shí)驗(yàn)和觀察法驗(yàn)證 14（3）效標(biāo)關(guān)聯(lián)效度 又稱效標(biāo)效度，實(shí)證效度或準(zhǔn)則關(guān)聯(lián)效度。它是測驗(yàn)分?jǐn)?shù)與作為效標(biāo)的另一獨(dú)立測驗(yàn)結(jié)果之間的一致性程度；或測驗(yàn)總分?jǐn)?shù)與外在標(biāo)準(zhǔn)之間的

8、相關(guān)程度，反映的是用測驗(yàn)預(yù)測個(gè)體在某種情境下行為表現(xiàn)如何的有效性程度。 同時(shí)效度：效標(biāo)資料與測驗(yàn)分?jǐn)?shù)同時(shí)獲得。主要用來查明新編測驗(yàn)的效度。 預(yù)測效度：效標(biāo)分?jǐn)?shù)在測驗(yàn)之后相當(dāng)長時(shí)間獲得。主要用來評(píng)價(jià)測驗(yàn)的預(yù)測能力。反映從測驗(yàn)分?jǐn)?shù)預(yù)測任何效標(biāo)情境或一段時(shí)間后被試的行為表現(xiàn)程度 常用效標(biāo)：學(xué)業(yè)成就，臨床診斷，實(shí)際工作表現(xiàn)，特殊訓(xùn)練成績，效標(biāo)團(tuán)體比較，先前有效測驗(yàn)，等級(jí)評(píng)定。15（4）表面效度 它是一個(gè)測驗(yàn)看起來好像是測量所要測的東西的程度，不是效度，不反映測驗(yàn)正測量的東西，只是外行人的一種評(píng)價(jià)。16影響效度的因素 1） 測驗(yàn)本身因素，包括：測驗(yàn)題目質(zhì)量，測驗(yàn)長度，測驗(yàn)實(shí)施中的干擾，被試因素，增加測驗(yàn)

9、誤差，降低測驗(yàn)效應(yīng)。 2） 測驗(yàn)施測的樣本性質(zhì)，樣本同質(zhì)性越高，效度越低。不同團(tuán)體對(duì)同一測驗(yàn)反應(yīng)可能不同；同一測驗(yàn)，效度團(tuán)體性質(zhì)不同；樣本團(tuán)體的異質(zhì)性 3） 效標(biāo)的性質(zhì)：若其它條件一樣，所測量的行為或心理特質(zhì)與效標(biāo)行為或特質(zhì)越相似，效度系統(tǒng)就越高17信度和效度的關(guān)系 St2=Sco2+Ssp2+Se2 St2 :總分變差。 Sco2 :由所測量的心理特性引起的主要變差。 Ssp2 :由與所測量的特性無關(guān)的其它個(gè)別性質(zhì)所造成的變差（系統(tǒng)誤差引起的變差）。 Se2 :誤差變異。 rtt=(Sco2+Ssp2) / St2 ； Val= Sco2 / St218信度和效度的關(guān)系說明：相同：信度和效度

10、是以相關(guān)系統(tǒng)來表示的不同：涉及的誤差不同，信度僅考慮偶然的隨機(jī)誤差占測驗(yàn)總變異的比例；效度則還包括與測驗(yàn)無關(guān)但穩(wěn)定的測量誤差聯(lián)系：1）信度是效度的必要而非充分條件，信度越高，效度不一定越高2）效度是受信度制約的，在同一個(gè)測驗(yàn)里其信度必然高于效度，至少相等。193、項(xiàng)目分析（難度和鑒別力） 測驗(yàn)的好壞與項(xiàng)目（測題）的選擇有很大的關(guān)系，好的測題是鑒別力高并且難度適宜的項(xiàng)目。項(xiàng)目分析三內(nèi)容1） 誘答分析：每個(gè)項(xiàng)目只有一個(gè)正確答案其余均為誘答。2） 難度分析：通過率：回答某個(gè)項(xiàng)目的樣本中，正確回答該項(xiàng)目的人數(shù)P=R/N*100。3） 鑒別力分析：鑒別力是對(duì)于所測量的心理特性的區(qū)分能力。20（1）項(xiàng)目難度 項(xiàng)目難度是衡量測題難易水平的數(shù)量指標(biāo)。估計(jì)項(xiàng)目難度的方法通常是以被試通過每個(gè)項(xiàng)目的百分比來決定的，如果一個(gè)項(xiàng)目通過百分比太高或太低，說明該項(xiàng)目太易或太難，一般情況下這兩個(gè)項(xiàng)目應(yīng)該刪除。 通過率：回答某個(gè)項(xiàng)目的樣本中，正確回答該項(xiàng)目的人數(shù)P=R/N*100， 項(xiàng)目的平均難度接近0.50，各項(xiàng)目難度在0.50