第四章 測量信度

第一節(jié)信度概述一、信度的定義（reliability）信度是指測量結果的穩(wěn)定性程度。（測量結果的可靠性程度?？尚哦?。）信度就是測驗在測量它所測東西的一致性?；蛘哒f，就是同一測驗先后測同一對象時所得分數(shù)的一致性。信度系數(shù)是表示測量結果的穩(wěn)定性程度的指標。記為：信度系數(shù)的值域：[0,1]二、信度的統(tǒng)計定義信度是被試團體真分數(shù)方差與實得分數(shù)方差之比：信度是被試團體真分數(shù)與實得分數(shù)相關系數(shù)的平方：理論定義操作定義信度是一個測驗X（A卷）與它的任意一個平行測驗（B卷）的相關系數(shù)。兩組測驗分數(shù)之間的相關二、信度的作用信度是測量過程中所存在的隨機誤差大小的反映（評價測驗好壞）標準化學績或能力測驗0.9以上人格測驗0.8以上教師自編學績測驗0.6以上信度可以用來解釋個人測驗分數(shù)的意義——測量標準誤（用區(qū)間估計來表示真分數(shù)的范圍）理論上：用一個測驗對一個人測無數(shù)次，實測值的標準差即為標準誤造作上：用一組被試兩次施測的結果之間的差異來表示，差異的分布為標準誤例題某智力測驗的信度為0.95，標準差為15，某兒童得分為120分，試估計真分數(shù)的范圍。SE=3.35120-1.96*3.35120+1.96*3.35信度可以幫助進行不同測驗分數(shù)的比較（一個人在不同測驗上的得分是否有顯著差異）不同測驗的原始分不能直接比較轉換成相同尺度的標準分數(shù)（Z分數(shù)或T分數(shù)）求標準誤求Z值？測驗分數(shù)的比較與平均數(shù)差異顯著性檢驗是一回事嗎？第二節(jié)信度的估計方法信度的估計方法①重測信度：用同一個量表對同一組被試施測兩次結果的一致性程度。②復本信度：兩個平行測驗測量同一批被試所得結果的一致性程度。③分半信度：將一個測驗分成對等兩半后，所有被試在這兩半上所得分數(shù)的一致性程度。④同質性信度：指測驗內部所有題目間的一致性程度，也叫內部一致性系數(shù)。⑤評分者信度一、重測信度含義同一測驗同組對象前后測2次相關系數(shù)穩(wěn)定性程序誤差時間太短練習效應記憶效應A卷一定時距A卷太長身心變化優(yōu)點省力、省時測量屬性相同提供隨時間變化的資料不足適用范圍所測心理特質穩(wěn)定運動技能速度時間間隔長短被試的積極性評價二、復本信度兩個平行測驗測量同一批被試所得結果的一致性程度。(積差相關)等值性系數(shù)測驗A1測驗B1等值穩(wěn)定性系數(shù)測驗A1測驗B1

最短時距

合適時距等值性系數(shù)含義兩等值測驗最短時間內對同組對象施測結果r等值性程序誤差內容取樣A卷最短時距B卷優(yōu)點代表性增強，信度更準避免練習、記憶效應不足編制復本難影響積極性觸類旁通順序效應評價等值穩(wěn)定性系數(shù)含義兩等值測驗一定時間內對同組對象施測結果r等值性穩(wěn)定性程序誤差內容取樣時間A卷一定時距B卷等值穩(wěn)定性系數(shù)反映題目間的差別、兩次實測時的情境、被試特質水平方面的差異。兩個測驗要具有更高的等值性測驗的時距要根據問題性質和測量目的來定經費的問題報告結果時，應報告間隔的時間等值穩(wěn)定性系數(shù)與重測、等值性系數(shù)誰得估計更嚴格，為何？三、內部一致性信度含義測驗各題間一致性題目一致性是否測量同一特性分半信度類型內容取樣同質性信度（一）分半信度將一個測驗分成對等兩半后，所有被試在這兩半上所得分數(shù)的一致性程度。只能測一次或沒有副本的情況下使用要把題目分成對等的兩半（分半的方法不同，結果不同）公式斯皮爾曼-布朗公式方差相等時弗拉南根公式盧尤公式方差不等時（二）同質信度同質性題目間的內部一致性類型庫-理信度克龍巴赫系數(shù)0、1題型K-R20難度不同k-R21難度相近各類題型四、評分者信度含義評分者評分的一致性方法2評分者2個以上者rXYrρ肯德爾和諧系數(shù)直接解釋真分數(shù)與實得分數(shù)相關的解釋rXX間接解釋信度系數(shù)決定系數(shù)∵r2XT=ST2/SX2=rXX∴rXX為各方差的百分比S2X分為各S2E和S2T∵誤差源不同信度估計法不同rXX=0.90信度系數(shù)和指數(shù)例2-13：設有兩平等的創(chuàng)造力測驗（A和B）。現(xiàn)：1）間隔兩月施測100人，其信度為0.70；2）兩卷分半信度校正值為0.80；3）第2個評分者隨機抽50份，信度0.92；試問：1）真分數(shù)的方差是多少？2）各種信度的誤差是多少？間接解釋范例信度類型rXX重測復本0.70分半信度0.80評分者信度0.92總誤差方差真分數(shù)方差分析結果誤差源時間、內容內容取樣評分者差異

兩者之差誤差的方差時間取樣1-0.70=0.31-0.80=0.20.3-0.2=0.10.2+0.1+0.08=0.381-0.38=0.621-0.92=0.08典型測驗的信度高低水平測驗類型低中高成套成就測驗學術能力測驗成套傾向性測驗客觀人格測驗興趣問卷態(tài)度量表.66.92.98.56.90.97.26.88.96.46.85.97.42.84.93.47.79.98各種信度反映的誤差來源比較信度類型誤差來源重測信度等值性系數(shù)等值穩(wěn)定性系數(shù)分半信度同質性信度評分者信度時間內容時間和內容內容內容評分者之間的差異注意問題以上方法僅適用于常模參照測驗目標參照測驗要以概化理論為基礎進行處理以上方法僅適用于難度測驗速度測驗的信度問題目標參照測驗的信度前期目標預測測驗和后期目標檢測測驗的比較（第二次達標的人在第一次測試中達標的比例）一致性百分比法（兩次測驗合格人數(shù)+兩次測驗不合格人數(shù)）/測驗總人數(shù)

第三節(jié)提高測驗信度的方法一、影響測量信度的因素影響測量信度的因素施測間隔的時間被試主試施測環(huán)境測量工具被試方面身心狀況、應試動機、作答態(tài)度等樣本團體異質性的影響樣本團體平均能力水平的影響特點樣本越異質，分數(shù)分布越廣，S↑，r↑，測驗越可靠樣本團體異質性的影響分析散點圖計算散點圖整段范圍低高樣本團體平均能力水平的影響團體平均水平太高或太低，使測驗分數(shù)的分布變窄，低估測量的信度選擇測驗時應注意取樣團體的變異性和能力水平建立信度的團體與欲測團體是否一致測量工具試題取樣（題目太少，考察的不全面）試題之間的同質性程度試題難度智力的時間變化間隔期信度系數(shù)同日或次日0.90～0.951年0.852～2.5年0.805年