心理測量學(xué)測驗的效度PPT資料

心理(xīnlǐ)測量學(xué)測驗的效度第一頁，共58頁。一、效度的概念(gàiniàn)效度的定義(dìngyì)效度的特點第二頁，共58頁。一、效度的概念(gàiniàn)

（一）效度的定義信度S2X=S2T+S2E效度S2X=S2V+S2I+S2E隨機誤差有效(yǒuxiào)方差S2V系統(tǒng)誤差S2I第三頁，共58頁。與測驗?zāi)康挠嘘P(guān)的有效(yǒuxiào)SV2和實得SX2的比值效度效度定義(dìngyì)第四頁，共58頁。信度高，給S2V增加提供可能能否提高效度，再看S2I大小(dàxiǎo)信度高不一定效度高效度要高，S2V須占較大比重，S2T↑效度高，信度必高ST2（二）信度與效度的關(guān)系(guānxì)第五頁，共58頁。（二）信度與效度的關(guān)系(guānxì)信度是效度的必要條件(bìyàotiáojiàn)非充分條件第六頁，共58頁。效度是一個相對的概念。效度是兩種誤差的綜合反映。效度的確定(quèdìng)要從多方面搜集證據(jù)。（三）效度的特點(tèdiǎn)第七頁，共58頁。二、效度評估(pínɡɡū)的方法根據(jù)人們對測驗?zāi)康慕忉?jiěshì)的不同:內(nèi)容效度結(jié)構(gòu)效度效標效度考研題第八頁，共58頁。（一）內(nèi)容效度概念評估(pínɡɡū)方法特性(contentvalidity)第九頁，共58頁。（一）內(nèi)容效度

1、概念(gàiniàn)定義：測驗(cèyàn)對于應(yīng)測內(nèi)容的代表性程度。內(nèi)容高的條件:內(nèi)容范圍明確取樣有代表性應(yīng)用：成就測驗(cèyàn)職業(yè)選擇測驗(cèyàn)第十頁，共58頁。2、特性(tèxìng)特定性：測驗編制者與使用者的關(guān)系避免與表面效度（facevalidity）混淆一個測驗看上去適合欲測目的的程度，而非實際適合欲測目的的程度。測驗在使用者或被試主觀上感覺(gǎnjué)有效的程度。編制測驗應(yīng)適當考慮表面效度。最高作為測驗表面效度可高些其他測驗則希望表面效度低些第十一頁，共58頁。含義專家按測題和假設(shè)(jiǎshè)內(nèi)容范圍作出的符合度判斷。作法與程序確定總體范圍；編制雙向細目表；選擇測驗項目；制定評定量表。3、評估(pínɡɡū)方法1）專家(zhuānjiā)判斷法（邏輯分析法）第十二頁，共58頁。局限不同專家對內(nèi)容范圍會有不同的理解。不同專家對同一測驗內(nèi)容效度的判斷可能(kěnéng)不一致；無良好的數(shù)量指標描述這種符合性的程度；第十三頁，共58頁。2）經(jīng)驗(jīngyàn)推測法檢查(jiǎnchá)不同年級被試總分與每題分數(shù)變化情況若隨年級增高總分和每題通過率也升高，可推論該測驗基本測量了教學(xué)內(nèi)容和目標。檢查不同(bùtónɡ)年齡兒童測驗分數(shù)的變化情況是否隨年齡增長而增加。第十四頁，共58頁。信度指標復(fù)本信度r高：內(nèi)容效度高（也可能兩個都低）r低：至少一個缺乏(quēfá)內(nèi)容效度再測信度首測---訓(xùn)練---再測---成績提高3）統(tǒng)計(tǒngjì)分析法第十五頁，共58頁。（二）構(gòu)想效度定義確定步驟(bùzhòu)估計方法(constructvalidity)第十六頁，共58頁。（二）構(gòu)想效度

1、定義(dìngyì)構(gòu)想(ɡòuxiǎnɡ)（結(jié)構(gòu)）解釋行為的理論框架或心理特質(zhì)的抽象概念。結(jié)構(gòu)效度測驗在多大程度上測量了所要測的理論構(gòu)想(ɡòuxiǎnɡ)。應(yīng)用智力測驗和人格測驗第十七頁，共58頁。2、確定(quèdìng)步驟提出(tíchū)理論提出(tíchū)假設(shè)檢驗假設(shè)解釋被試的測驗表現(xiàn)測驗成績的假設(shè)邏輯和實證檢驗方法第十八頁，共58頁。關(guān)于(guānyú)情緒穩(wěn)定性的假設(shè)測驗分數(shù)和心理學(xué)家的評價有某種程度的相關(guān)(xiāngguān)；精神病人和正常人的測驗分數(shù)是有區(qū)別的；測驗分數(shù)和同伴的評價有一定的關(guān)系；測驗分數(shù)與IQ沒有什么關(guān)系；測驗分數(shù)和性別沒有關(guān)系。第十九頁，共58頁。關(guān)于智力(zhìlì)的假設(shè)智力隨年齡而增長；智力與學(xué)業(yè)成績有密切關(guān)系；智商是相對穩(wěn)定(wěndìng)的；智力受遺傳的影響。第二十頁，共58頁。3、估計(gūjì)方法測驗內(nèi)方法(fāngfǎ)測驗間方法(fāngfǎ)效標效度實驗法或觀察法的證實第二十一頁，共58頁。提出(tíchū)假設(shè)（一）測驗(cèyàn)組成相同條件下：測量行為與效標行為相似，效度越高。研究(yánjiū)測驗內(nèi)部構(gòu)造分析測驗的結(jié)構(gòu)效度。心理(xīnlǐ)測量學(xué)測驗的效度樣本團體的性質(zhì)(xìngzhì)2）經(jīng)驗(jīngyàn)推測法（三）效度的特點(tèdiǎn)測驗所要測的或要預(yù)測(yùcè)的行為特質(zhì)。第二十八頁，共58頁。正命中率=成功(chénggōng)人數(shù)/選擇人數(shù)研究(yánjiū)測驗內(nèi)部構(gòu)造分析測驗的結(jié)構(gòu)效度。妥善組織測驗，控制隨機誤差；480480.信度是效度的必要條件(bìyàotiáojiàn)反映(fǎnyìng)測驗的目標；3、估計方法(fāngfǎ)

1）對測驗本身的分析——測驗內(nèi)方法(fāngfǎ)研究(yánjiū)測驗內(nèi)部構(gòu)造分析測驗的結(jié)構(gòu)效度。具體方法內(nèi)容效度法內(nèi)部一致性法分析解題的心理過程

第二十二頁，共58頁。①內(nèi)容效度法確定取樣內(nèi)容范圍后，利用這些資料定義測驗欲測的結(jié)構(gòu)性質(zhì)韋氏智力測驗言語：常識、理解、算術(shù)、相似性、詞匯、記憶(jìyì)廣度操作：譯碼、填圖、積木圖案、圖片排列、圖形拼湊第二十三頁，共58頁。內(nèi)容范圍的描述見到老師、小朋友是否主動打招呼？愿意自己(zìjǐ)獨自玩，還是與其他孩子一起玩？語言較多還是較少，見生人時是否害羞？是否大方？做游戲時，與人交往時，能與人合得來嗎？獨生子女(dúshēnɡzǐnǚ)合群性測驗第二十四頁，共58頁?？ㄌ貭?6PF16個特質(zhì)，187個題目樂群性，聰慧性，穩(wěn)定性，持續(xù)性，興奮性，有恒性，敢為性，敏感性，懷疑性，幻想性，世故性，憂慮性，實驗性，獨立(dúlì)性，自律性，緊張性分測驗間關(guān)系的分析：特質(zhì)間相互獨立(dúlì)分測驗內(nèi)項目關(guān)系的分析：項目相互聯(lián)系第二十五頁，共58頁。②內(nèi)部(nèibù)一致性法目的推斷測驗是否測量單一特質(zhì)方法(fāngfǎ)極端組比較法（extreme-groupmethod）二列相關(guān)法：求題目與總分的相關(guān)分測驗與總分的相關(guān)第二十六頁，共58頁。2）測驗(cèyàn)間的相互比較——測驗(cèyàn)間方法含義同時考慮幾個測驗間的關(guān)聯(lián)，考察是否測同一結(jié)構(gòu)。常用(chánɡyònɡ)方法相容效度區(qū)分效度因素效度

第二十七頁，共58頁。①相容(xiānɡrónɡ)效度concurrentvalidity含義測相同結(jié)構(gòu)的各種測驗間應(yīng)有較高的相關(guān)。求一個(yīɡè)新編測驗與另一已知結(jié)構(gòu)測驗間的相關(guān)。第二十八頁，共58頁。②區(qū)分效度含義某一特定測驗的分數(shù)(fēnshù)與已知測量不同結(jié)構(gòu)的測驗分數(shù)(fēnshù)無關(guān)。相關(guān)高說明新測驗的效度有問題。第二十九頁，共58頁。③因素(yīnsù)效度含義通過對一組測驗進行因素分析，找到影響測驗分數(shù)的共同因素，每個測驗在共同因素上的負荷量即每個測驗與共同因素的相關(guān)(xiāngguān)，稱作測驗的因素效度?；驹砜傋儺?共同因素+特殊因素+誤差第三十頁，共58頁。（美）霍爾津格（Holzinger）和斯溫福德（Swineford）的因素分析取樣：芝加哥校區(qū)被試：145名7～8年級(niánjí)學(xué)生內(nèi)容：實施24個心理測驗結(jié)果：4個基本因素圖--詞測驗和數(shù)--圖測驗的功能不明顯。第三十一頁，共58頁。24個心理測驗(cèyàn)的因素歸類詞語速度推理記憶1.一般知識段落理解2.句子填空3.詞匯分類4.詞義解釋5.加法6.編碼7.計數(shù)8.點子9.直-曲10.算術(shù)問題11.視知覺15.數(shù)字游戲12.體積16.問題推理13.面積17.系列填空14.打旗18.演繹推理19.詞匯識別20.數(shù)字識別21.圖形識別22.實物-數(shù)23.圖－詞24.數(shù)－圖第三十二頁，共58頁。3）效標效度的研究(yánjiū)證明測驗(cèyàn)效標效標效度資料：提供與結(jié)構(gòu)效度有關(guān)的信息。第三十三頁，共58頁。4）實驗法和觀察法的證實(zhèngshí)考察實驗變量對X的影響比較實驗處理：前后分數(shù)(fēnshù)的差異搜集(sōují)某些變異上的證據(jù)。第三十四頁，共58頁。（三）效標效度定義(dìngyì)效標估計方法criterion-relatedvalidity第三十五頁，共58頁。1、定義(dìngyì)效標效度是指一個測驗對處于特定情境中的個體行為進行估計的有效(yǒuxiào)性。一個測驗是否有效(yǒuxiào)，應(yīng)以實踐的效果來作為檢驗標準。符號：rxy又稱統(tǒng)計效度或?qū)嵶C效度。第三十六頁，共58頁。2、效標及其標準(biāozhǔn)

1）定義衡量測驗效度的外在標準。它是獨立于測驗并可以從實踐中直接獲得我們所感興趣的行為。做預(yù)測(yùcè)所依據(jù)的標準。檢驗效度的參照標準。測驗所要測的或要預(yù)測(yùcè)的行為特質(zhì)。第三十七頁，共58頁。思考(sīkǎo)？能夠考上大學(xué)的學(xué)生是否是能力(nénglì)強、素質(zhì)好、有發(fā)展前途的人？我們可以通過他們的哪些方面來衡量？可見，一個測驗的效標是不唯一的。具有多樣性、復(fù)雜性、特殊性和時間性。第三十八頁，共58頁。2）良好(liánghǎo)效標的選擇依據(jù)反映(fǎnyìng)測驗的目標；較高的信度；可客觀地測量；測量方法簡單，省時省力，經(jīng)濟實用。第三十九頁，共58頁。各類測驗(cèyàn)的可用效標測驗類型常見效標成就學(xué)年平均分，教師評定結(jié)果，學(xué)習(xí)量，知識應(yīng)用力，評判知識的批判力，自學(xué)能力…智力學(xué)科成績，教師評定結(jié)果，學(xué)生總成績能力傾向特殊課程或訓(xùn)練成績，工作或?qū)W習(xí)成績職業(yè)興趣從業(yè)者的實際成績或工作表現(xiàn)人格主試主觀標準，被試以后行為，臨床資料第四十頁，共58頁。3）效標效度的類型(lèixíng)

①同時效度含義根據(jù)測驗(cèyàn)分區(qū)分已有的狀態(tài)或預(yù)測已知的效標表現(xiàn)來評估測驗(cèyàn)效度的方法。對同組對象求新編測驗(cèyàn)得分與現(xiàn)有測驗(cèyàn)得分（效標值）之間的相關(guān)。應(yīng)用：效標分和新編測驗(cèyàn)分能同時得到。度量指標：測驗(cèyàn)分與效標分的相關(guān)系數(shù)第四十一頁，共58頁。②預(yù)測(yùcè)效度定義根據(jù)測驗分數(shù)預(yù)測其在效標上將來成績來考察測驗效度的方法。一個測驗對被試心理特質(zhì)或未來績效所作預(yù)測的準確程度。應(yīng)用：測驗分與效標分不能同時(tóngshí)得到。度量指標：測驗分與效標分的相關(guān)系數(shù)。第四十二頁，共58頁。3、估計(gūjì)方法相關(guān)(xiāngguān)法區(qū)分法命中率功利率第四十三頁，共58頁。

１）相關(guān)(xiāngguān)法效度系數(shù)(xìshù)測驗分（新編）與效標分的相關(guān)系數(shù)(xìshù)計算方法積差相關(guān)法二列相關(guān)、點二列相關(guān)，多系列相關(guān)等第四十四頁，共58頁。2）區(qū)分法該方法的思路是：被試接受測驗后，讓他們工作一段時間，再根據(jù)工作成績（效標測量）的好壞分成兩組。這時再回過頭來分析這兩組被試原先接受測驗的分數(shù)差異，若這兩種人的測驗分數(shù)差異顯著，則說明該測驗有較高的效度。缺點(quēdiǎn)：組間均數(shù)差異顯著性取決于團體大小。第四十五頁，共58頁。3）命中率含義(hányì)：正確決策的比例。用途人才選拔方法正確決策的結(jié)果正命中率總命中率第四十六頁，共58頁。表：命中(mìngzhòng)表

效標成績測驗成績失?。?）成功（+）成功（+）失?。?）總命中率=命中/（命中+失誤）=（B+C）/（A+B+C+D）正命中率=成功(chénggōng)人數(shù)/選擇人數(shù)=B/（A+B）當測驗(cèyàn)用于提高工作效率時考察正命中率；如果強調(diào)公平，考察總命中率。A（失誤）B（命中）C（命中）D（失誤）第四十七頁，共58頁。4）功利率(lìlǜ)使用測驗所帶來的好處應(yīng)大大高于使用測驗所耗費的時間、精力和經(jīng)費，還要比較用測驗與不用測驗的效益之差，若差別不大，則沒有使用測驗的必要。總之，一個好的測驗，根據(jù)其測驗的目的和性質(zhì)，往往需要多個效度指標達到相當(xiāngdāng)高的水平。第四十八頁，共58頁。三、影響(yǐngxiǎng)效度的因素測驗組成測驗實施樣本團體的性質(zhì)(xìngzhì)效標的性質(zhì)(xìngzhì)第四十九頁，共58頁。（一）測驗(cèyàn)組成試題的質(zhì)量。測驗長度、試題難度和鑒別力及編排(biānpái)方式。增加新試題對信度的影響大于效度。第五十頁，共58頁。測驗長度(chángdù)與信度和效度的關(guān)系題數(shù)與原測驗題數(shù)之比信度效度1010.3000.4002020.4620.4963030.5620.5486060.7200.619120120.8370.688240240.9110.697480480.9540.713第五十一頁，共58頁。測驗長度(chángdù)與效度關(guān)系的計算公式：=例：已知RXX為0.31,RXY為0.42,若把效度系數(shù)提高(tígāo)到0.65和0.70,則測驗的長度要增加幾