chapter5-validity

1、2022-5-18THY, CCNU3 / 95o 沒有人會用天平來測量時間，用直尺來測量重量。o 因?yàn)樘炱绞怯脕頊y量重量的，而直尺是用來測量長度的。o 如果將這些工具用于一些無關(guān)的目的，就這些目的而言用它們是的。2022-5-18THY, CCNU4 / 95o 有時我們編制心理測驗(yàn)，并且認(rèn)為達(dá)到了自己期望的目的，但結(jié)果卻發(fā)現(xiàn)測驗(yàn)實(shí)際上只測量到了一些與目的完全不相干的特質(zhì)。2022-5-18THY, CCNU5 / 95o 掌握效度的概念及其與信度的關(guān)系。o 掌握效度的種類，掌握各種效度的估計方法。o 了解影響效度的因素及提高效度的方法。o 了解效度的具體應(yīng)用。2022-5-18THY, C

2、CNU6 / 95o 效度概述o 效度的種類及估計方法n 內(nèi)容效度n 結(jié)構(gòu)效度n 效標(biāo)關(guān)聯(lián)效度o 影響效度的因素/怎樣提高測驗(yàn)的效度o 效度的應(yīng)用2022-5-18THY, CCNU7 / 95o 測量結(jié)果的程度，也就是一個測驗(yàn)對其所要測量的特質(zhì)測量到了什么程度。o 描述某種測量結(jié)果有效性程度的數(shù)量指標(biāo)。2022-5-18THY, CCNU8 / 95o 效度是一個相對的概念，這種相對性表現(xiàn)在以下兩個方面：n 效度是相對于一定的測量目的而言的。 n 效度只有程度上的差異，而不是“全”或“無”的差異。 2022-5-18THY, CCNU9 / 95o 依據(jù)經(jīng)典測量理論的觀點(diǎn)，效度被定義為：在測

3、量中。n 即 2022-5-18THY, CCNU10 / 95o 高信度是高效度的條件。o 高效度是高信度的條件。2022-5-18THY, CCNU11 / 95o 測驗(yàn)的效度受它的信度制約，效度系數(shù)的最高限度是。2022-5-18THY, CCNU12 / 95o 內(nèi)容效度o 效標(biāo)關(guān)聯(lián)效度o 結(jié)構(gòu)效度n 含義及基本保證條件n 評估方法n 應(yīng)用2022-5-18THY, CCNU13 / 95o content validityo 指測驗(yàn)項目所涉及的內(nèi)容對欲測內(nèi)容范圍的代表性程度。o 或者說所測內(nèi)容對要測內(nèi)容范圍取樣的代表性。2022-5-18THY, CCNU14 / 95o 要獲得較高

4、的內(nèi)容效度，必須具備兩個基本條件： 2022-5-18THY, CCNU15 / 95o 專家判斷法o 經(jīng)驗(yàn)法o 再測法o 復(fù)本法2022-5-18THY, CCNU16 / 95o 由專家對測驗(yàn)項目與所欲測驗(yàn)的內(nèi)容范圍的吻合程度進(jìn)行系統(tǒng)的比較判斷。o 具體方法步驟如下 :n 依據(jù)，明確所要測量的內(nèi)容范圍。n 確定每題所測的內(nèi)容，并與雙向細(xì)目表對照。n 制定評定量表以評定測驗(yàn)的整個效度及其他特點(diǎn)。2022-5-18THY, CCNU17 / 952022-5-18THY, CCNU19 / 95o 如果測驗(yàn)總分和題目的通過率隨著年級的增加而增加，則說明該測驗(yàn)對于教學(xué)效果的測量具有較好的內(nèi)容效度

5、。2022-5-18THY, CCNU20 / 95o 如果后測成績顯著優(yōu)于前測成績，則說明此測驗(yàn)對于這部分知識學(xué)習(xí)而言具有高的內(nèi)容效度。2022-5-18THY, CCNU21 / 95o 獲得被試在兩個獨(dú)立取自同一內(nèi)容范圍的測驗(yàn)上的分?jǐn)?shù)，計算出他們的相關(guān)，把這一相關(guān)作為對內(nèi)容效度的數(shù)量估計。o 相關(guān)高？o 相關(guān)低？ 2022-5-18THY, CCNU22 / 95o 內(nèi)容效度的評估最適合于成就測驗(yàn)n 知識和技能的掌握程度o 也適合于某些選拔和分類的人事測驗(yàn)2022-5-18THY, CCNU23 / 95(surface validity)n 指被試或其他未受過專門訓(xùn)練的人員對測量有效性

6、程度的估計。n 嚴(yán)格意義上，但可取得被試的合作。n 何時重視表面效度？2022-5-18THY, CCNU25 / 95o 效標(biāo)關(guān)聯(lián)效度o criterion-related validityn 又稱實(shí)證效度、經(jīng)驗(yàn)效度、準(zhǔn)則關(guān)聯(lián)效度，等。2022-5-18THY, CCNU26 / 95(concurrent validity)n 效標(biāo)資料與測驗(yàn)資料同時獲得。如，機(jī)械能力傾向測驗(yàn)(predictive validity)n 效標(biāo)資料后于測驗(yàn)資料獲得。如，招聘選拔類考試2022-5-18THY, CCNU27 / 95o 同時效度：診斷現(xiàn)狀 o 預(yù)測效度：預(yù)測未來表現(xiàn) o 例如，某人患病了嗎？某

7、人會成功嗎？2022-5-18THY, CCNU28 / 95o 衡量測驗(yàn)有效性的參照標(biāo)準(zhǔn)，它是獨(dú)立于測驗(yàn)之外、體現(xiàn)測驗(yàn)?zāi)康牡男袨樽兞俊?2022-5-18THY, CCNU29 / 95n 效標(biāo)的實(shí)質(zhì)內(nèi)容。如，學(xué)習(xí)或工作成功、技術(shù)水平，等n 效標(biāo)的具體化，可操作的測量指標(biāo)。2022-5-18THY, CCNU30 / 95學(xué)業(yè)成績、學(xué)歷、獎勵，等實(shí)際工作表現(xiàn)以效標(biāo)行為的主觀評定作為效標(biāo)測量選擇效標(biāo)行為表現(xiàn)有差異的團(tuán)體2022-5-18THY, CCNU31 / 95(關(guān)聯(lián)性)(或抗偏性)n 產(chǎn)生效標(biāo)測量中偏差的主要原因在于。 (可得性)2022-5-18THY, CCNU32 / 95o C

8、riterion contaminationn 常發(fā)生于效標(biāo)測量是評定等級的時候。n 如，入學(xué)考試分?jǐn)?shù)與教師主觀評定2022-5-18THY, CCNU33 / 95n 明確觀念效標(biāo)n 確定效標(biāo)測量n 考查測驗(yàn)分?jǐn)?shù)與效標(biāo)測量之間的關(guān)系n 相關(guān)法；組的分類法；命中率法；預(yù)期表法2022-5-18THY, CCNU34 / 95o 計算測驗(yàn)分?jǐn)?shù)和效標(biāo)分?jǐn)?shù)之間的相關(guān)系數(shù)。o 根據(jù)分?jǐn)?shù)的性質(zhì)不同采用不同的相關(guān)計算方法2022-5-18THY, CCNU35 / 95o 使用條件o 計算公式2022-5-18THY, CCNU36 / 95o 假設(shè)有經(jīng)職業(yè)興趣測驗(yàn)而被選定作為推銷員，其測驗(yàn)分?jǐn)?shù)見下表第一

9、行，而第二行是經(jīng)過若干年后他們某段時間內(nèi)銷售金額總量（以萬元為單位）?，F(xiàn)問該測驗(yàn)的預(yù)測效度如何？2022-5-18THY, CCNU39 / 95o 適用條件o 計算公式2022-5-18THY, CCNU40 / 95o 進(jìn)行一項智力測驗(yàn)，被試中66名來自實(shí)驗(yàn)班，286名來自普通班，最后測出實(shí)驗(yàn)班的被試IQ均數(shù)為114，普通班被試的IQ均數(shù)為96，所有被試IQ分的標(biāo)準(zhǔn)差為14.53。o 請計算該測驗(yàn)的二列相關(guān)系數(shù)。2022-5-18THY, CCNU42 / 95o 適用條件2022-5-18THY, CCNU44 / 95o 適用條件如工作狀態(tài)、婚姻狀態(tài)等n a、b、c、d表示由兩個二分變

10、量所分成的四種類別的實(shí)際頻數(shù)。2022-5-18THY, CCNU45 / 95o 研究調(diào)查了358名不同性別的大學(xué)生對某項教育措施的評價態(tài)度，結(jié)果如下表。o 根據(jù)這些結(jié)果，能否說明性別對評價態(tài)度預(yù)測效度怎樣？ 2022-5-18THY, CCNU47 / 95o 適用條件o C表示列聯(lián)相關(guān)系數(shù)，表示RC列聯(lián)表計算出的值, N表示樣本容量 2022-5-18THY, CCNU48 / 952022-5-18THY, CCNU50 / 95o 工作成功組： o 工作失敗組：o 代入上面公式可得：o df=98時，t=5.40 2022-5-18THY, CCNU51 / 952022-5-18T

11、HY, CCNU52 / 95(取舍正確率)：公平(錄取正確率)：提高效率（錯誤拒絕和錯誤接受的人數(shù)比例與臨界分?jǐn)?shù)位置）2022-5-18THY, CCNU53 / 952022-5-18THY, CCNU54 / 952022-5-18THY, CCNU55 / 95o construct validity“是否測到要測的東西”o 構(gòu)想或結(jié)構(gòu)是指心理學(xué)理論所涉及的抽象而屬假設(shè)性的概念或特質(zhì)。o 應(yīng)用領(lǐng)域：智力、人格測驗(yàn)等2022-5-18THY, CCNU56 / 95n 建立關(guān)于某一構(gòu)想的理論框架2022-5-18THY, CCNU57 / 95o 智力是一個人去理解和應(yīng)付他的周圍世界的總

12、的才能。o 提出智力的十余個方面，編制多項分測驗(yàn)。o 利用因素分析法驗(yàn)證此測驗(yàn)測量了言語理解、知覺組織和記憶、注意集中三類因素。2022-5-18THY, CCNU58 / 95o 測驗(yàn)內(nèi)法o 測驗(yàn)間法o 效標(biāo)關(guān)聯(lián)法o 實(shí)驗(yàn)操作法o 因素分析法2022-5-18THY, CCNU59 / 95 o 內(nèi)容效度：如，語文能力測驗(yàn) o 被試在答題時的反應(yīng)過程：如，數(shù)學(xué)推理測驗(yàn) o 測驗(yàn)的同質(zhì)性 2022-5-18THY, CCNU60 / 952022-5-18THY, CCNU61 / 95o congruent validity2022-5-18THY, CCNU62 / 95o converg

13、ent validityo 如果兩個測驗(yàn)是測量同一特質(zhì)的，即使使用不同的方法進(jìn)行測量，它們之間的相關(guān)也應(yīng)該是高的。o 又稱求同效度，收斂效度。2022-5-18THY, CCNU63 / 95o discriminant validityo 如果兩個測驗(yàn)測量的是不同的特質(zhì)，即使使用相同的方法進(jìn)行測量，它們之間的相關(guān)也應(yīng)該是低的。o 又稱求異效度，判別效度2022-5-18THY, CCNU68 / 95o 測驗(yàn)分?jǐn)?shù)能否把不同團(tuán)體的人區(qū)分開來。o 根據(jù)效標(biāo)把被試分為兩類,考察其測驗(yàn)得分的差異。o 根據(jù)測驗(yàn)得分把人分成高分組和低分組，考察這兩組人在所測特質(zhì)方面是否確實(shí)存在差異。2022-5-18T

14、HY, CCNU69 / 95如，焦慮o 比較實(shí)驗(yàn)處理前后測驗(yàn)得分的差異2022-5-18THY, CCNU70 / 95o 從一組變量或測驗(yàn)的數(shù)據(jù)中，找出其中潛含著的起決定作用的共同因素。2022-5-18THY, CCNU71 / 952022-5-18THY, CCNU74 / 95o 發(fā)散性思維的外部表現(xiàn)，是人對一定刺激產(chǎn)生的大量的、變化的、獨(dú)創(chuàng)性的反應(yīng)能力(吉爾福特)o 反映群體在追求其工具性目標(biāo)過程中和為了滿足成員的情感需要，團(tuán)結(jié)在一起、保持一致傾向的動態(tài)過程(Carron, 1998)2022-5-18THY, CCNU77 / 95o 測驗(yàn)分?jǐn)?shù)是否代表小李在心理測量課程領(lǐng)域內(nèi)的

15、表現(xiàn)？o 測驗(yàn)分?jǐn)?shù)是否可揭示小王在下學(xué)期的心理方法課中表現(xiàn)？o 該測驗(yàn)?zāi)軠y到小羅的智力嗎，有用嗎？2022-5-18THY, CCNU78 / 95o 三方面的效度都是圍繞效度的基本問題展開的。2022-5-18THY, CCNU79 / 95o 一個測驗(yàn)需要哪種效度證據(jù)，取決于一定的測驗(yàn)?zāi)康模煌臏y驗(yàn)偏重于不同的效度證據(jù)。o 效度的驗(yàn)證雖是測驗(yàn)編制后進(jìn)行的工作，但其指導(dǎo)思想在編制過程中始終起著主導(dǎo)作用。2022-5-18THY, CCNU80 / 95o 測驗(yàn)的構(gòu)成（如長度）o 測驗(yàn)的實(shí)施過程o 接受測驗(yàn)的被試o 測量的信度o 效標(biāo)的選擇2022-5-18THY, CCNU81 / 95o

16、 其中 r(nx)y是測驗(yàn)增長為原來的n倍的效度值，n為測驗(yàn)增長倍數(shù)，rxy為原測驗(yàn)效度， rxx為原測驗(yàn)信度。2022-5-18THY, CCNU82 / 95o 樣本代表性o 樣本的異質(zhì)性 n 不同性別、文化程度、職業(yè)等團(tuán)體的預(yù)測效度不同2022-5-18THY, CCNU83 / 95o 效度系數(shù)有下面的一個矯正公式nrc是矯正后得真實(shí)的效度系數(shù)nrxy是實(shí)際測得的效度系數(shù)，nrxx是預(yù)測源（測驗(yàn)）的信度系數(shù)nryy是效標(biāo)測量的信度系數(shù)2022-5-18THY, CCNU84 / 95o 效標(biāo)的適當(dāng)性o 效標(biāo)測量與預(yù)測源測量的時間間隔2022-5-18THY, CCNU85 / 95o

17、精心編制測驗(yàn)，避免出現(xiàn)比較大的系統(tǒng)誤差。o 妥善組織測驗(yàn)，控制隨機(jī)誤差。o 創(chuàng)設(shè)標(biāo)準(zhǔn)的應(yīng)試情境，讓每個被試都能發(fā)揮正常水平。o 選好正確的效標(biāo)，正確地使用有關(guān)公式。2022-5-18THY, CCNU86 / 95o 評價測驗(yàn)的優(yōu)劣n 效度的高低要看測驗(yàn)的性質(zhì)和所采用的效度類型而定，沒有絕對的評價標(biāo)準(zhǔn)。n 能力測驗(yàn)的效度多半比人格測驗(yàn)的效度要高。n 大致采用實(shí)證效度時，其效度應(yīng)在0.30以上。o 預(yù)測和決策2022-5-18THY, CCNU87 / 95o 例題：英語標(biāo)準(zhǔn)化測驗(yàn)平均數(shù)和標(biāo)準(zhǔn)差分別為70和7；大學(xué)一年級英語課成績85和8，兩項相關(guān)系數(shù)為0.60，如某高三學(xué)生英語標(biāo)準(zhǔn)化測驗(yàn)得80分，估計其大一英語成績?2022-5-18THY, CCNU88 / 95(估計的標(biāo)準(zhǔn)誤)o error of estimateo 根據(jù)測驗(yàn)分?jǐn)?shù)對效標(biāo)分?jǐn)?shù)進(jìn)行預(yù)測總會存在一定誤差，這個誤差分布的標(biāo)準(zhǔn)差即為2022-5-18THY, CCNU89 / 95(心理學(xué)報 2000.3)n 此量表編制的目的是通過測量四種人格維度來了解人格類型的偏好情況。n 四種維度分別是：內(nèi)外傾(EI)、感覺直覺(SN)、對事對人(TF)、判斷認(rèn)知(JP)2022-5-18THY, CCNU90 / 9