測(cè)驗(yàn)的項(xiàng)目分析課件

1、第五章 測(cè)驗(yàn)的項(xiàng)目分析 項(xiàng)目分析包括定性分析和定量分析。定性分析包括考慮內(nèi)容效度、題目編寫(xiě)的恰當(dāng)性和有效性等；定量分析主要是指題目難度和區(qū)分度的測(cè)量。 對(duì)項(xiàng)目進(jìn)行篩選和修訂，可以提高測(cè)驗(yàn)的信度和效度。第一節(jié) 測(cè)驗(yàn)的難度一、難度（difficulty）的意義難度，指項(xiàng)目的難易程度。 在最高作為測(cè)驗(yàn)中，稱(chēng)為“難度”，而在典型作為測(cè)驗(yàn)中，則指“通俗性”。兩者都是指在總體中，能夠正確或確切回答某項(xiàng)目的人數(shù)。二、難度的計(jì)算（一）二分法記分項(xiàng)目的難度1通過(guò)率 P=R/N2極端分組法（上下27%） P=（PH+PL）/2（二）非二分法記分項(xiàng)目的難度 P=X / XmaxX為所有被試在該項(xiàng)目上的平均得分， X

2、max為該項(xiàng)目的滿(mǎn)分。三、測(cè)驗(yàn)難度水平的確定 效標(biāo)參照測(cè)驗(yàn)、掌握測(cè)驗(yàn)：不考慮難度； 選拔測(cè)驗(yàn)：難度=錄取率； 對(duì)于選擇題來(lái)說(shuō)，難度一般應(yīng)大于猜測(cè)概率； 無(wú)論是速度測(cè)驗(yàn)，還是難度測(cè)驗(yàn)，一般都應(yīng)防止被試得滿(mǎn)分，因?yàn)闈M(mǎn)分的意義是不明確的。 大體而言，難度為0.50時(shí)最理想，此時(shí)項(xiàng)目具有最大的鑒別力。但在實(shí)際操作中，讓所有項(xiàng)目難度都到達(dá)0.50困難很大，而且也不必要，一般只需使項(xiàng)目的平均難度接近0.50，而各個(gè)項(xiàng)目的難度在0.50 0.20之間變化。 四、難度的等距變換根據(jù)正態(tài)分布表，將難度P作為正態(tài)曲線下的面積，轉(zhuǎn)換成相應(yīng)的Z分?jǐn)?shù)，這就是等距量表。 P Y 0 ZZYP.00.39894.00000

3、.50.35207.191461.00.24197.341341.50.12952.433191.96.05844.475002.00.05399.477252.50.01753.493792.58.01431.495063.00.00443.498653.50.00087.499773.99.00014.49997美國(guó)教育服務(wù)中心以 作為難度指標(biāo)：=13+4ZP = .0013 Z = +3 = 25P = .16 Z = +1 = 17P = .50 Z = 0 = 13P = .84 Z = -1 = 9P = .9987 Z = -3 = 1五、難度對(duì)測(cè)驗(yàn)的影響（一）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分

4、數(shù)的分布形態(tài) 難度大，正偏態(tài) 難度低，負(fù)偏態(tài)（二）測(cè)驗(yàn)難度影響測(cè)驗(yàn)分?jǐn)?shù)的離散程度測(cè)驗(yàn)過(guò)難或過(guò)易，分?jǐn)?shù)全距縮小，信度降低。P=0.50時(shí)最佳第二節(jié) 測(cè)驗(yàn)的區(qū)分度一、區(qū)分度的意義區(qū)分度（discrimination）是指測(cè)驗(yàn)項(xiàng)目對(duì)被試心理品質(zhì)水平差異的區(qū)分能力或鑒別能力。項(xiàng)目的區(qū)分度是測(cè)驗(yàn)是否有效的“指示器”。二、區(qū)分度的計(jì)算（一）項(xiàng)目鑒別指數(shù)法1鑒別指數(shù)（index of discrimination，D）的計(jì)算D = PH - PL取值范圍：-1 +1鑒別指數(shù)題目評(píng)價(jià)0.40以上很好0.300.39良好，修改會(huì)更好0.200.29尚可，仍需修改0.19以下差，必須淘汰2極端組的劃分27%規(guī)則一

5、般情況下，取上下25%33%均可。樣本少時(shí)，可以取50%注意：由于計(jì)算機(jī)的方便使用，可以上下50%作為劃分高低組的標(biāo)準(zhǔn)，或者多分幾組，對(duì)區(qū)分度和難度作詳細(xì)分析。因?yàn)橹蝗∩舷聝啥?，只利用了一部分資料，浪費(fèi)了很多信息，有可能得出錯(cuò)誤結(jié)論。（二）相關(guān)法（項(xiàng)目-總分相關(guān)）1點(diǎn)二列相關(guān) Xp-Xq rpb= pq St2二列相關(guān) Xp - Xq pq Xp - Xt p rb= 或 rb= St y St y3 相關(guān) ad-bcr= (a+b)(c+d)(a+c)(b+d)4積差相關(guān)（三）項(xiàng)目特征曲線（item characteristic curve, ICC）項(xiàng)目特征曲線描述了效標(biāo)分?jǐn)?shù)不同的被試在該

6、項(xiàng)目上的通過(guò)率。曲線坡度越陡，鑒別力越好，預(yù)測(cè)的誤差越小。率概的目項(xiàng)答回確正1.000.000.50低 中 高能力鑒別力較好低 中 高能力率概的目項(xiàng)答回確正1.000.000.50低 中 高能力率概的目項(xiàng)答回確正1.000.000.50鑒別力為負(fù)鑒別力較低率概的目項(xiàng)答回確正1.000.000.50低 中 高能力ABC難度不同的3個(gè)項(xiàng)目的ICC多項(xiàng)選擇中每個(gè)選項(xiàng)的ICC率概的目項(xiàng)答回確正1.000.000.50低 中 高能力ABCD三、區(qū)分度與難度的關(guān)系難度（）區(qū)分度（）1.0000.900.200.800.400.700.600.600.800.5010.400.800.300.600.200

7、.400.100.200.000難度和區(qū)分度都是針對(duì)一定團(tuán)體而言的。一般來(lái)說(shuō)，較難的項(xiàng)目對(duì)高水平被試區(qū)分度高，較易的項(xiàng)目對(duì)低水平被試的區(qū)分度高。四、區(qū)分度的相對(duì)性（一）不同的計(jì)算方法，所得區(qū)分值不同 區(qū)分度有幾種計(jì)算方法？（二）樣本容量大小影響相關(guān)法區(qū)分度值的大小 樣本越大，區(qū)分度越（三）分組標(biāo)準(zhǔn)影響鑒別指數(shù) 分組越極端，區(qū)分度越（四）被試樣本的同質(zhì)性程度影響區(qū)分度值的大小 樣本越同質(zhì)，區(qū)分度越第三節(jié) 項(xiàng)目分析的特殊問(wèn)題一、多重選擇題的項(xiàng)目分析（誘答分析） 對(duì)于多重選擇題，除了分析難度和區(qū)分度外，還要對(duì)每個(gè)選項(xiàng)進(jìn)行分析。下列哪一個(gè)最有可能是偏執(zhí)型精神分裂癥患者的次級(jí)癥狀：A 幻聽(tīng)B 癱瘓C 記

8、憶喪失D 厭食 如果所有被試都選擇某一正確的選項(xiàng)，說(shuō)明該選項(xiàng) 如果沒(méi)有一個(gè)被試選擇某個(gè)錯(cuò)誤選項(xiàng)，說(shuō)明該選項(xiàng) 如果所有被試都選擇某個(gè)錯(cuò)誤選項(xiàng)，說(shuō)明該選項(xiàng) 如果高分組被試的選擇集中在兩個(gè)選項(xiàng)上，說(shuō)明該選項(xiàng) 如果高分組和低分組對(duì)正確選項(xiàng)的選擇沒(méi)有區(qū)別，說(shuō)明該選項(xiàng) 如果所有被試都未回答某個(gè)題目，說(shuō)明該題 如果選擇各個(gè)選項(xiàng)的人數(shù)幾乎相等，說(shuō)明該題二、速度測(cè)驗(yàn)的項(xiàng)目分析 對(duì)前面部分的測(cè)驗(yàn)項(xiàng)目，難度和區(qū)分度都 對(duì)后面部分的測(cè)驗(yàn)項(xiàng)目，難度和區(qū)分度都三、標(biāo)準(zhǔn)參照測(cè)驗(yàn)的項(xiàng)目分析在標(biāo)準(zhǔn)參照測(cè)驗(yàn)中，無(wú)須考慮項(xiàng)目的難度和區(qū)分度，只要項(xiàng)目的內(nèi)容很重要就行。也可以通過(guò)比較教學(xué)或訓(xùn)練的前測(cè)和后測(cè)結(jié)果來(lái)進(jìn)行項(xiàng)目分析，用來(lái)說(shuō)明教學(xué)或訓(xùn)練的效果以及項(xiàng)目編制是否適當(dāng)。四、項(xiàng)目-團(tuán)體的相互作用 具有不同性質(zhì)（性別、種族、職業(yè)等）的團(tuán)體，在測(cè)驗(yàn)得分上也存在差異，即同樣的項(xiàng)目可能有不同的難度。 如果測(cè)驗(yàn)要求對(duì)所有個(gè)體都相對(duì)“公平”，那么，就應(yīng)該排除那些有利于或不利于不同性質(zhì)的亞團(tuán)體的項(xiàng)目； 如果測(cè)驗(yàn)的目的就是為了考察不同亞團(tuán)體的差異，那么，就應(yīng)選擇使團(tuán)體差異盡可能大的題目。五、有效性與可靠性的矛盾 同質(zhì)性信度要求項(xiàng)目之間有高相關(guān)，各項(xiàng)目的難度均等； 對(duì)于預(yù)測(cè)效度來(lái)說(shuō)，因?yàn)樾?biāo)的變異范圍較大，如果