第章項目分析課件

第07章項目分析Outline第一節(jié)項目難度第二節(jié)項目的鑒別力第三節(jié)項目分析的實例第四節(jié)項目反應(yīng)理論項目分析的意義項目分析能使測題的質(zhì)量得到提升,從而使整個測驗的信度和效度得到提高.第一節(jié)項目的難度一、項目難度：測題的難易程度(能力測驗)；測題的“通俗性”或“流行性”的程度(人格測驗)二、項目的平均數(shù)與變差三、難度與測驗分?jǐn)?shù)的分布四、項目難度的范圍對信度系數(shù)的影響

2.估計難度的方法（1）以答對百分比或比率來估計難度-通過率（2）項目難度受機(jī)遇影響的矯正（3）項目難度的等距量表以答對百分比或比率來估計難度-通過率①用于二值記分的測題②用于非二值記分的測題③分組法

項目難度受機(jī)遇影響的矯正CP：矯正后的難度P：未矯正的難度K：選項的數(shù)目校正檢驗實際難度

難度的作用例:某題通過率為75%,是一個五選一的題目.比較兩個不同選項數(shù)題目的難度例:有二道題,一題的難度為0.50,有五個選項,另一題的難度為0.53,有四個選項.（3）項目難度的等距量表理由：百分等級量表是等級量表，不是等距量表，不能比較事物之間的差異難度量表是反序而行的，P值越大，項目越容易方法：A.如果樣本很大,分?jǐn)?shù)接近常態(tài)分布,可以根據(jù)常態(tài)曲線表將測題的難度轉(zhuǎn)換成Z分?jǐn)?shù)。B.另一種單位的等距量表公式為：

=13+4Z二、項目的平均數(shù)與變差1.項目的平均數(shù)2.項目的變差和標(biāo)準(zhǔn)差3.總分變差4.項目的變差與難度的關(guān)系：中等難度的項目產(chǎn)生最大的變差三、難度與測驗分?jǐn)?shù)分布越是接近中等難度的題目越具有區(qū)分的作用,也就是越是靠近0.50的題目越好,其區(qū)分程度越高。四、項目難度的范圍對信度系數(shù)的影響第二節(jié)項目的鑒別力一、定義：又稱區(qū)分度，測題對不同水平被試反應(yīng)的區(qū)分程度和鑒別能力二、估計方法1.項目鑒別指數(shù)2.方差法3.項目與總分相關(guān)4.項目的組間相關(guān)5.項目與外部準(zhǔn)則的相關(guān)-項目效度分析1.項目鑒別指數(shù)這是計算鑒別力時最常用、最簡單的方法。高分組通過率減去低分組通過率。即：D=PH-PL2.方差法方差大說明離散程度越高，那就具有鑒別力。公式：3.項目與總分的相關(guān)（1）點二列相關(guān)系數(shù)（2）二列相關(guān)系數(shù)點二列相關(guān)公式:=答對該題的被試在總分上的平均分=答錯該題的被試在總分上的平均分

p=該題的難度q=1-pSt=全體被試的總分標(biāo)準(zhǔn)差對所得到的相關(guān)系數(shù)再作顯著性檢驗.常用的是t檢驗,即檢驗通過該項目與未通過該項目的兩組被試在測驗總分平均分上是否存在顯著差異.例題：15個學(xué)生某測題的得分與總分情況學(xué)生123456789101112131415總分908180787770696555504942353110某題101111100010100鑒別指數(shù)與測題的評價

_____________________________

D測題評價--------------------------------------------0.40以上非常優(yōu)良0.30-0.39良好,如能修改更好0.20-0.29尚可,但必須修改0.20以下劣,淘汰----------------------------------------------難度與鑒別力的關(guān)系

------------------------------------------PD------------------------------------------1.000.000.900.200.700.600.600.800.501.000.400.800.300.600.100.200.000.00-----------------------------------------------第三節(jié)項目分析的實例一、項目分析步驟二、實例一、項目分析步驟1.選取有代表性的樣組實施測驗.2.計算每個人的總分,然后按總分分組.3.計算高分組和低分組通過每一題的比率.4.分別求出每一測題的難度和鑒別指數(shù).5.選項分析.6.修改測題或選項.測題難度的確定一個測題難度的確定要取決于測驗的目的,如果測驗是為了篩選少數(shù)人,那難度要比較高或比較低,如要篩選出天才兒童,那難度就要高,如要篩選出學(xué)習(xí)困難的兒童,那難度就要低.如果測驗用于選拔和錄用人員,那難度最好與錄取率比較接近.如果要想通過測驗對被試作最大程度的區(qū)分,題目的難度以中等程度為最佳.這也是大多數(shù)標(biāo)準(zhǔn)化心理測驗的目的.選擇題難度的確定選擇題的難度確定還與其選項數(shù)有關(guān).選擇題有猜測答對的可能性,選項數(shù)多則猜對的可能性就小,而選項數(shù)少則猜對的可能性就大,所以選擇題的難度確定也要根據(jù)選項數(shù)來確定.選項數(shù)與最佳難度值

_____________________________

選項數(shù)(K)最佳難度值(P)20.8530.7740.7450.69--------------------------------------------第四節(jié)項目反應(yīng)理論一、經(jīng)典測驗理論的局限性二、項目反應(yīng)理論的產(chǎn)生三、項目反應(yīng)理論的特點四、項目反應(yīng)理論的假設(shè)五、項目反應(yīng)理論模型六、項目反應(yīng)理論的優(yōu)點與運用一、經(jīng)典測驗理論的局限性一、抽樣變動大二、能力難比較三、復(fù)本難實施四、缺乏預(yù)測力五、等測量標(biāo)準(zhǔn)誤差二、項目反應(yīng)理論的誕生標(biāo)志：1952，美國，洛德項目反應(yīng)理論（itemresponsetheory;IRT）主要是用來描述試題特性（難度、鑒別度、猜測度）與受測者的能力（潛在特質(zhì)）如何影響其答題反應(yīng)的一種數(shù)學(xué)模式。又稱題目反應(yīng)理論，潛在特質(zhì)理論。三、項目反應(yīng)理論的特點1.基本思想：潛在特質(zhì)理論：心理特質(zhì)的物理、生理屬性不明，只能借助可觀察的間接變量來鑒別、定義、探查。潛在特質(zhì)空間：對于某一特殊行為的發(fā)展起作用的所有潛在特質(zhì)的集合。2.基本思路：心理測量學(xué)者首先關(guān)心的是查明潛在特質(zhì)空間的維度，查明各維特質(zhì)在決定人的行為時所作的貢獻(xiàn)的大小。-確定被試的潛在特質(zhì)值和他們對于項目的反應(yīng)之間的關(guān)系。-項目反應(yīng)模型四、IRT的基本理論假設(shè)1）單維性假設(shè)：測驗中各試題都是在測量同一能力或潛在特質(zhì)，其他的能力可以忽略不計。2）局部獨立性：被試對測驗中任何一個項目的反應(yīng)只受其能力水平的影響而獨立于其他項目的反應(yīng)。3）適合的數(shù)學(xué)模型——項目特征曲線（ICC）項目特征曲線其實就是被試在測驗項目上的反應(yīng)行為與測驗所測的被試潛在特質(zhì)之間關(guān)系的形象描寫，即被試在試題上正確作答概率對潛在特質(zhì)的回歸曲線。項目特征曲線的解析式，即這種關(guān)系的函數(shù)表達(dá)式，稱為項目反應(yīng)理論各種模型的項目反應(yīng)函數(shù)（IRF）。五、項目反應(yīng)模型一、二級評分IRT模型-最優(yōu)量表模型、潛在距離模型、潛在線型模型、正態(tài)曲線模型、邏輯斯蒂模型二、多級評分IRT模型-稱名模型、等級模型三、連續(xù)型IRT模型一、項目信息函數(shù)項目反應(yīng)理論提出了信息函數(shù)用以綜合說明每道題目所提供的信息量。項目信息函數(shù)反映了不同特性的項目在評價不同被試特質(zhì)水平時的信息量，即某種難度的題目對某種能力的受試者的測量誤差平方根的倒數(shù)。邏輯斯