第八章化學測量工具的評價 劉妍

第八章化學測量工具的評價劉妍第一節(jié)試題質量的初步評價1、測驗分數(shù)的分布狀態(tài)1）正態(tài)分布分數(shù)頻數(shù)2）正偏態(tài)分布分數(shù)頻數(shù)試題難度偏高，難度較大的項目比例偏大3）負偏態(tài)分布分數(shù)頻數(shù)試題難度偏低，難度較低的項目比例偏大4）雙峰形分布分數(shù)頻數(shù)難度偏高和難度偏低的項目較多，中等難度項目偏少5）平坡型分布分數(shù)頻數(shù)試題中各種難度的項目比例接近，梯度較大6）陡峭型分布分數(shù)頻數(shù)中等難度項目較多，梯度偏小2、平均分根據(jù)平均分的數(shù)值，可直接判斷試題的平均難度，看是否與預期試題難度一致。平均分過高或過低，說民試題過易或過難，不適應被測學生實際水平；只有當平均分值與預期吻合或相當接近時，測量目的才有可能實現(xiàn)，試題質量才可能符合測試目的的要求。3、標準差利用標準差數(shù)據(jù)帝試題質量做初步分析時，主要看學生測驗分數(shù)離散情況是否與學生學習成績的實際分布一致。只有當標準差表明的測驗分數(shù)離散情況與被測學生集體實際情況一致，試題質量才有可能合格。第二節(jié)試題的信度1、相關系數(shù)：表示兩列變量之間相關程度的一種統(tǒng)計量數(shù)。不僅表示兩列變量之間相關的方向，還表示相關程度的大小，用r表示。（-1.00＜r＜﹢1.00）r＞0，正相關r＜0，負相關r＝0，零相關當兩列變量均為等距變量且都來自于正態(tài)總體時，相關系數(shù)可以用皮爾遜積差相關公式計算：如果直接從兩列變量的原始數(shù)據(jù)計算相關系數(shù)可用以下公式：例題8-2某班28個學生的教師技能與課程教學論兩門課學習成績?nèi)鐖D所示，試描述該班學生這兩門課學習成績的關系將原始數(shù)據(jù)各統(tǒng)計量代入：計算得=0.779＞0，表示該班學生教師技能與課程教學論兩門課存在正相關2、信度反映測量工具可靠性的指標。常見試題信度多用相關系數(shù)表示，即用同一組被測學生樣本對兩組項目的反應之間的相關，作為反應兩組項目測量一致性的指標，成為信度系數(shù)，簡稱信度。

X＝XV＋XSE＋XRE對一個被測群體，測量分數(shù)的離散程度可用變異數(shù)或方差表示。利用變異數(shù)具有可加性這一性質，可將測驗分數(shù)（實際分數(shù)）的總變異數(shù)（S2X）分解為有效變異數(shù)（S2V）、系統(tǒng)變異數(shù)（S2SE）和隨機變異數(shù)（S2RE）

信度實際上只是理論構想概念，測量理論認為，學生在測試中得到的實際分數(shù)（X）由有效分數(shù)（XV）、無效分數(shù)（XSE）和隨機誤差（XRE）構成：rXX＝S2V＋S2E

S2XS2X＝S2V＋S2SE＋S2RE信度系數(shù)（rXX）定義為真實分數(shù)的變異數(shù)在實際分數(shù)的總變異數(shù)中所占的比例3、常用信度的意義及計算方法1）再測信度：用同一份試卷對同一組學生前后實施兩次測驗，計算兩次測驗分數(shù)之間的相關系數(shù)即為再測信度。表示兩次測驗結果有無變化，反應測驗分數(shù)穩(wěn)定程度，又稱穩(wěn)定性系數(shù)。當測驗分數(shù)具有等距變量的性質時，再測信度一般用皮爾遜積差相關公式計算2）復本信度如果用兩份等值平行的試題測量同一組學生，再求兩次測驗分數(shù)的相關，結果就是復本信度。局限性：由于復本之間的相似性，記憶或練習效應的影響不能完全消除，同時編制兩份完全等值的復本比較困難。3）分半信度在測驗沒有復本且只能實施一次的情況下，可將測驗分成對等的兩半，根據(jù)學生兩半測驗中所得分數(shù)計算相關系數(shù)即為分半信度（內(nèi)部一致性系數(shù)）對長度不同的測驗要用斯皮爾曼——布朗公式對信度值加以校正：解析：先計算出兩個半測驗的分的積差相關系數(shù)（0.86），帶入斯皮爾曼——布朗公式rxx=2rhh/(1+rhh）=（2×0.86）/（1+0.86）=0.924）同質性信度當項目采用二分法計分時，可用庫德—理查遜公式計算K：整個測驗的項目總數(shù)Pi：項目i的通過率Qi=1－PiS2x：測驗總分的變異數(shù)4）同質性信度當項目屬于論文式類型，采用連續(xù)分數(shù)計分時，可用克隆巴赫的α系數(shù)公式計算：α：信度系數(shù)K：項目總數(shù)S2i：項目i得分的方差S2T：試題總分的方差信度估計的幾種方法信度類型誤差來源測量次數(shù)需試題數(shù)計算方法再測信度復本信度再測復本信度分半信度同質性信度時間取樣內(nèi)容取樣內(nèi)容，時間取樣內(nèi)容取樣內(nèi)容取樣2121112211求兩次測驗分數(shù)的相關系數(shù)求兩個復本分數(shù)的相關系數(shù)同上求兩半試題分數(shù)的相關系數(shù)1)庫德—理查遜公式2）科隆巴赫α公式第三節(jié)試題的效度效度指測驗的有效性，即一個測驗能夠測出其所要測量的特性或功能的程度。在測量理論中，效度的定義：在一次測量中，與測驗目的有關的有效變異數(shù)與測驗總分變異數(shù)的比率：

常用效度及估計方法1、內(nèi)容效度：根據(jù)測驗目的確定的測驗內(nèi)容所引起的預期反應達到測驗目的的程度。如何判斷一份化學試題內(nèi)容效度：1）考察測量的目的、測量目標的分類體系，了解試題取樣的依據(jù)和材料來源。2）考查試題的雙向細目表，看是否符合化學教學大綱和考試目的的要求。3）逐個考察每個項目，包括項目內(nèi)容、參考答案、評分標準等，并與雙向細目表對照，看項目能否代表其測量目標。4）綜合上述考察結果，對試題內(nèi)容效度作出判斷。2、構想效度指測驗對預先設立的某一理論上的概念、構想或研究特性的實際測量程度。如何判斷一個測驗的構想效度：1）確定能夠解釋學生在測驗上表現(xiàn)得理論構想2）根據(jù)理論構想推演出各種關于學生測驗成績的假設3）用邏輯分析、統(tǒng)計分析等方法搜集證據(jù)、驗證假設3、效標效度指測驗分數(shù)與效標的相關程，效標是檢驗測驗有效性的一種參照標準。效標效度的估計方法：相關法顯著性檢驗法預期表法命中率法類型意義估計方法內(nèi)容效度測驗內(nèi)容反映測驗目的、要求的程度邏輯分析構想效度測驗分數(shù)能用理論構想加以解釋的程度提出假設和驗證假設效標效度測驗分數(shù)與校標分數(shù)之間的相關程度計算兩種測驗分數(shù)之間的相關系數(shù)三種效度的意義及估計方法：第四節(jié)項目質量評價一、項目的難度分析1、難度的意義及其計算1）通過率:P＝R/N（項目以二分法計分）2）用項目得分的平均值計算:項目以連續(xù)分數(shù)計分）二、項目難度對測驗結果的影響1、對分數(shù)分布形態(tài)的影響2、對測驗鑒別能力的影響三、項目難度的評價評價項目難度是