測驗的項目分析課件

1、第五章 測驗的項目分析 項目分析包括定性分析和定量分析。定性分析包括考慮內(nèi)容效度、題目編寫的恰當性和有效性等；定量分析主要是指題目難度和區(qū)分度的測量。 對項目進行篩選和修訂，可以提高測驗的信度和效度。第一節(jié) 測驗的難度一、難度（difficulty）的意義難度，指項目的難易程度。 在最高作為測驗中，稱為“難度”，而在典型作為測驗中，則指“通俗性”。兩者都是指在總體中，能夠正確或確切回答某項目的人數(shù)。二、難度的計算（一）二分法記分項目的難度1通過率 P=R/N2極端分組法（上下27%） P=（PH+PL）/2（二）非二分法記分項目的難度 P=X / XmaxX為所有被試在該項目上的平均得分， X

2、max為該項目的滿分。三、測驗難度水平的確定 效標參照測驗、掌握測驗：不考慮難度； 選拔測驗：難度=錄取率； 對于選擇題來說，難度一般應大于猜測概率； 無論是速度測驗，還是難度測驗，一般都應防止被試得滿分，因為滿分的意義是不明確的。 大體而言，難度為0.50時最理想，此時項目具有最大的鑒別力。但在實際操作中，讓所有項目難度都到達0.50困難很大，而且也不必要，一般只需使項目的平均難度接近0.50，而各個項目的難度在0.50 0.20之間變化。 四、難度的等距變換根據(jù)正態(tài)分布表，將難度P作為正態(tài)曲線下的面積，轉換成相應的Z分數(shù)，這就是等距量表。 P Y 0 ZZYP.00.39894.00000

3、.50.35207.191461.00.24197.341341.50.12952.433191.96.05844.475002.00.05399.477252.50.01753.493792.58.01431.495063.00.00443.498653.50.00087.499773.99.00014.49997美國教育服務中心以 作為難度指標：=13+4ZP = .0013 Z = +3 = 25P = .16 Z = +1 = 17P = .50 Z = 0 = 13P = .84 Z = -1 = 9P = .9987 Z = -3 = 1五、難度對測驗的影響（一）測驗難度影響測驗分

4、數(shù)的分布形態(tài) 難度大，正偏態(tài) 難度低，負偏態(tài)（二）測驗難度影響測驗分數(shù)的離散程度測驗過難或過易，分數(shù)全距縮小，信度降低。P=0.50時最佳第二節(jié) 測驗的區(qū)分度一、區(qū)分度的意義區(qū)分度（discrimination）是指測驗項目對被試心理品質水平差異的區(qū)分能力或鑒別能力。項目的區(qū)分度是測驗是否有效的“指示器”。二、區(qū)分度的計算（一）項目鑒別指數(shù)法1鑒別指數(shù)（index of discrimination，D）的計算D = PH - PL取值范圍：-1 +1鑒別指數(shù)題目評價0.40以上很好0.300.39良好，修改會更好0.200.29尚可，仍需修改0.19以下差，必須淘汰2極端組的劃分27%規(guī)則一

5、般情況下，取上下25%33%均可。樣本少時，可以取50%注意：由于計算機的方便使用，可以上下50%作為劃分高低組的標準，或者多分幾組，對區(qū)分度和難度作詳細分析。因為只取上下兩端，只利用了一部分資料，浪費了很多信息，有可能得出錯誤結論。（二）相關法（項目-總分相關）1點二列相關 Xp-Xq rpb= pq St2二列相關 Xp - Xq pq Xp - Xt p rb= 或 rb= St y St y3 相關 ad-bcr= (a+b)(c+d)(a+c)(b+d)4積差相關（三）項目特征曲線（item characteristic curve, ICC）項目特征曲線描述了效標分數(shù)不同的被試在該

6、項目上的通過率。曲線坡度越陡，鑒別力越好，預測的誤差越小。率概的目項答回確正1.000.000.50低 中 高能力鑒別力較好低 中 高能力率概的目項答回確正1.000.000.50低 中 高能力率概的目項答回確正1.000.000.50鑒別力為負鑒別力較低率概的目項答回確正1.000.000.50低 中 高能力ABC難度不同的3個項目的ICC多項選擇中每個選項的ICC率概的目項答回確正1.000.000.50低 中 高能力ABCD三、區(qū)分度與難度的關系難度（）區(qū)分度（）1.0000.900.200.800.400.700.600.600.800.5010.400.800.300.600.200

7、.400.100.200.000難度和區(qū)分度都是針對一定團體而言的。一般來說，較難的項目對高水平被試區(qū)分度高，較易的項目對低水平被試的區(qū)分度高。四、區(qū)分度的相對性（一）不同的計算方法，所得區(qū)分值不同 區(qū)分度有幾種計算方法？（二）樣本容量大小影響相關法區(qū)分度值的大小 樣本越大，區(qū)分度越（三）分組標準影響鑒別指數(shù) 分組越極端，區(qū)分度越（四）被試樣本的同質性程度影響區(qū)分度值的大小 樣本越同質，區(qū)分度越第三節(jié) 項目分析的特殊問題一、多重選擇題的項目分析（誘答分析） 對于多重選擇題，除了分析難度和區(qū)分度外，還要對每個選項進行分析。下列哪一個最有可能是偏執(zhí)型精神分裂癥患者的次級癥狀：A 幻聽B 癱瘓C 記

8、憶喪失D 厭食 如果所有被試都選擇某一正確的選項，說明該選項 如果沒有一個被試選擇某個錯誤選項，說明該選項 如果所有被試都選擇某個錯誤選項，說明該選項 如果高分組被試的選擇集中在兩個選項上，說明該選項 如果高分組和低分組對正確選項的選擇沒有區(qū)別，說明該選項 如果所有被試都未回答某個題目，說明該題 如果選擇各個選項的人數(shù)幾乎相等，說明該題二、速度測驗的項目分析 對前面部分的測驗項目，難度和區(qū)分度都 對后面部分的測驗項目，難度和區(qū)分度都三、標準參照測驗的項目分析在標準參照測驗中，無須考慮項目的難度和區(qū)分度，只要項目的內(nèi)容很重要就行。也可以通過比較教學或訓練的前測和后測結果來進行項目分析，用來說明教學或訓練的效果以及項目編制是否適當。四、項目-團體的相互作用 具有不同性質（性別、種族、職業(yè)等）的團體，在測驗得分上也存在差異，即同樣的項目可能有不同的難度。 如果測驗要求對所有個體都相對“公平”，那么，就應該排除那些有利于或不利于不同性質的亞團體的項目； 如果測驗的目的就是為了考察不同亞團體的差異，那么，就應選擇使團體差異盡可能大的題目。五、有效性與可靠性的矛盾 同質性信度要求項目之間有高相關，各項目的難度均等； 對于預測效度來說，因為效標的變異范圍較大，如果