教育測(cè)驗(yàn)的標(biāo)準(zhǔn)及其建立方法

教育測(cè)驗(yàn)的標(biāo)準(zhǔn)及其建立方法第1頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月第一節(jié)教育測(cè)驗(yàn)標(biāo)準(zhǔn)的含義第2頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月一、對(duì)標(biāo)準(zhǔn)參照測(cè)驗(yàn)及其標(biāo)準(zhǔn)的再認(rèn)識(shí)心理學(xué)家波帕姆認(rèn)為標(biāo)準(zhǔn)參照測(cè)驗(yàn)是依據(jù)實(shí)現(xiàn)明確規(guī)定的知識(shí)能力標(biāo)準(zhǔn)而制訂，并據(jù)此標(biāo)準(zhǔn)可以對(duì)被試的測(cè)驗(yàn)成績(jī)做出解釋的一類(lèi)測(cè)驗(yàn)。標(biāo)準(zhǔn)測(cè)驗(yàn)主要關(guān)心的問(wèn)題是要獲得嚴(yán)格而精確的領(lǐng)域規(guī)范（specificationsfordomains)或行為領(lǐng)域規(guī)范。上述定義的缺陷：“切斷點(diǎn)”（cut-offpoint)第3頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月標(biāo)準(zhǔn)的內(nèi)涵從定性方面講，標(biāo)準(zhǔn)一詞指的是測(cè)驗(yàn)的內(nèi)容或行為的范圍，而這個(gè)范圍是測(cè)驗(yàn)分?jǐn)?shù)所參照的，它將通過(guò)內(nèi)容領(lǐng)域規(guī)范得到明確；從定量方面講，每當(dāng)人們利用標(biāo)準(zhǔn)參照測(cè)驗(yàn)成績(jī)進(jìn)行有關(guān)評(píng)價(jià)決策時(shí)，客觀上需要一個(gè)切斷點(diǎn)作為分類(lèi)決策的依據(jù)。切斷點(diǎn)在一定程度上體現(xiàn)了標(biāo)準(zhǔn)一詞在測(cè)量評(píng)價(jià)功能上的定量標(biāo)準(zhǔn)。第4頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月常模參照測(cè)驗(yàn)與標(biāo)準(zhǔn)測(cè)驗(yàn)的對(duì)比第5頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月二、幾個(gè)與標(biāo)準(zhǔn)參照測(cè)驗(yàn)相關(guān)的概念領(lǐng)域參照測(cè)驗(yàn)（或內(nèi)容參照測(cè)驗(yàn)，domain-referencedtest）是建立在一套完善的題目匯編或內(nèi)容領(lǐng)域規(guī)范匯編基礎(chǔ)上用以檢查被試的素質(zhì)及發(fā)展水平的測(cè)驗(yàn)?zāi)繕?biāo)參照測(cè)驗(yàn)是由和目標(biāo)相適應(yīng)的一組題目所構(gòu)成的測(cè)驗(yàn)掌握測(cè)驗(yàn)是建立一組教學(xué)和行為目標(biāo)上的測(cè)驗(yàn)，主要用于判斷學(xué)生是否掌握某組給定的教育目標(biāo)第6頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月思考：領(lǐng)域參照測(cè)驗(yàn)、目標(biāo)參照測(cè)驗(yàn)和掌握測(cè)驗(yàn)有何異同？若將“標(biāo)準(zhǔn)參照測(cè)驗(yàn)”視作“依據(jù)某種特定操作標(biāo)準(zhǔn)可以直接解釋測(cè)量結(jié)果的及測(cè)驗(yàn)”，上述三種測(cè)驗(yàn)在本質(zhì)上無(wú)多大差別。領(lǐng)域參照測(cè)驗(yàn)可以看成標(biāo)準(zhǔn)參照測(cè)驗(yàn)的同義詞，目標(biāo)參照測(cè)驗(yàn)和掌握參照測(cè)驗(yàn)是標(biāo)準(zhǔn)參照測(cè)驗(yàn)的變式。第7頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月第二節(jié)標(biāo)準(zhǔn)參照測(cè)驗(yàn)分?jǐn)?shù)的解釋第8頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月一、正確百分?jǐn)?shù)正確百分?jǐn)?shù)是以學(xué)生在標(biāo)準(zhǔn)參照測(cè)驗(yàn)中答對(duì)題目的比例來(lái)解釋測(cè)驗(yàn)分?jǐn)?shù)或描述學(xué)生取得成就的方法。第9頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月使用百分?jǐn)?shù)，應(yīng)注意：測(cè)驗(yàn)所要測(cè)定的內(nèi)容（成就）范圍必須明確，而且測(cè)驗(yàn)題目能夠組成成為這個(gè)內(nèi)容（成就）范圍的代表性良好的樣本在標(biāo)準(zhǔn)參照測(cè)驗(yàn)中，可以針對(duì)整個(gè)測(cè)驗(yàn)為每一個(gè)學(xué)生確定其答案的正確百分?jǐn)?shù)，對(duì)學(xué)生的內(nèi)容掌握作出判斷。在課堂教學(xué)評(píng)價(jià)及其他有關(guān)資格證書(shū)的測(cè)驗(yàn)中，為了對(duì)多層次的測(cè)驗(yàn)結(jié)果分別作出解釋和描述，就需要分別針對(duì)每一教育目標(biāo)或內(nèi)容板塊去選擇題目組，構(gòu)成總測(cè)驗(yàn)。第10頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月為求客觀，可利用學(xué)生測(cè)驗(yàn)的原始分?jǐn)?shù)和測(cè)驗(yàn)總分?jǐn)?shù)之間的關(guān)系，計(jì)算學(xué)生個(gè)人的得分百分?jǐn)?shù)第11頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月二、掌握分?jǐn)?shù)掌握分?jǐn)?shù)用于判斷學(xué)生是否掌握所學(xué)的內(nèi)容，分?jǐn)?shù)的標(biāo)準(zhǔn)是人為確定的，可以是百分之評(píng)分量尺上的某一個(gè)點(diǎn)，也可以是80%-90%的正確反應(yīng)所對(duì)應(yīng)的分?jǐn)?shù)，作為最低通過(guò)標(biāo)準(zhǔn)。以掌握分?jǐn)?shù)為判斷標(biāo)準(zhǔn)，可將學(xué)生區(qū)分為掌握和為掌握兩類(lèi)第12頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月“掌握”與“未掌握”是人為確定的；從知識(shí)的掌握狀態(tài)來(lái)講，事實(shí)上更應(yīng)該是一種連續(xù)模型；“掌握”、“及格”或“合格”的概念類(lèi)似，但有區(qū)別。當(dāng)利用測(cè)驗(yàn)的掌握分?jǐn)?shù)給學(xué)生進(jìn)行二分類(lèi)時(shí)，對(duì)于不同的年級(jí)、不同的課程內(nèi)容、不同的測(cè)驗(yàn)?zāi)酥镣粶y(cè)驗(yàn)中不同的分測(cè)驗(yàn)，人為規(guī)定的掌握分?jǐn)?shù)也未必相同。第13頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月三、內(nèi)容等級(jí)分?jǐn)?shù)為了更好地解釋教育測(cè)驗(yàn)的分?jǐn)?shù)，人們把內(nèi)容參照和常模參照結(jié)合起來(lái)。在編制測(cè)驗(yàn)的過(guò)程中，不僅要明確內(nèi)容范圍、具體任務(wù)，而且要把成就分成若干差別明顯的等級(jí)水平，標(biāo)明不同等級(jí)水平的成就特征與問(wèn)題類(lèi)型，建立起內(nèi)容等級(jí)分?jǐn)?shù)及其評(píng)定量表。內(nèi)容等級(jí)分?jǐn)?shù)體現(xiàn)了相對(duì)評(píng)價(jià)與絕對(duì)評(píng)價(jià)的相結(jié)合第14頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月第三節(jié)標(biāo)準(zhǔn)參照測(cè)驗(yàn)的定性標(biāo)準(zhǔn)——測(cè)驗(yàn)內(nèi)容領(lǐng)域規(guī)范第15頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月內(nèi)容領(lǐng)域規(guī)范是標(biāo)準(zhǔn)參照測(cè)驗(yàn)最重要的一環(huán)：為試題編寫(xiě)人員準(zhǔn)備試題時(shí)提供內(nèi)容和技術(shù)上的指導(dǎo)；向內(nèi)容方面或測(cè)量方面的專(zhuān)家提供每種能力所包括的內(nèi)容和行為的清晰描述；幫助解釋被試個(gè)體的能力水平；向用戶(hù)提供能力廣度和范圍的明確規(guī)定第16頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月一、漢布萊頓模式內(nèi)容領(lǐng)域規(guī)范的四個(gè)組成部分：說(shuō)明實(shí)例指導(dǎo)與題目樣本內(nèi)容范圍答案范圍第17頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月第18頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月二、美國(guó)IOE模式IOE（InstructionalObjectivesExchange）:教學(xué)目標(biāo)交流所。其所運(yùn)用的標(biāo)準(zhǔn)參照測(cè)驗(yàn)格式由以下五部分組成：一般描述樣本題目刺激的界定反應(yīng)的界定其他補(bǔ)充說(shuō)明第19頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月三、英國(guó)GCSE模式英國(guó)中等教育普通證書(shū)（簡(jiǎn)稱(chēng)GCSE考試）是面向校內(nèi)外舉辦的英國(guó)國(guó)家證書(shū)制度，其顯著特點(diǎn)之一是有全國(guó)統(tǒng)一考試標(biāo)準(zhǔn)。包含“總標(biāo)準(zhǔn)”和“學(xué)科具體標(biāo)準(zhǔn)”不同科目的測(cè)驗(yàn)編寫(xiě)結(jié)構(gòu)大同小異。一般包含：簡(jiǎn)介或引言、目標(biāo)、評(píng)價(jià)目標(biāo)、內(nèi)容或核心內(nèi)容、評(píng)價(jià)目標(biāo)和內(nèi)容的關(guān)系、評(píng)價(jià)技術(shù)、等級(jí)描述第20頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月來(lái)自GCSE考試的啟發(fā)考試大綱應(yīng)強(qiáng)調(diào)與鼓勵(lì)學(xué)生理解本學(xué)科與其他學(xué)科、生活、政治、經(jīng)濟(jì)、社會(huì)、環(huán)境等方面的聯(lián)系考試大綱必須包括對(duì)課程學(xué)習(xí)所期望達(dá)到的教育目標(biāo)的描述考試大綱必須包括足夠的知識(shí)覆蓋面，使考試能充分表現(xiàn)出學(xué)生對(duì)某一知識(shí)和技能的掌握程度考試大綱都應(yīng)有一定的學(xué)科知識(shí)考查深度，而不應(yīng)以犧牲技能和理解力的考查為代價(jià)去追求學(xué)科知識(shí)內(nèi)容的考查廣度考試大綱不僅應(yīng)包括某一學(xué)科所要測(cè)試的內(nèi)容范圍，也要介紹測(cè)試方法，提供樣卷（題）以及一些必要的指導(dǎo)性材料第21頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月四、我國(guó)高中考試畢業(yè)會(huì)考標(biāo)準(zhǔn)的建立模式：浙江的模式定性描述學(xué)科標(biāo)準(zhǔn)，形成學(xué)科考試大綱規(guī)范性文件編制有良好內(nèi)容效度的參照試卷，取樣抽測(cè)，建立高中畢業(yè)會(huì)考的標(biāo)準(zhǔn)份數(shù)量將高中畢業(yè)會(huì)考的成績(jī)確定為五個(gè)等級(jí)，與T分?jǐn)?shù)的關(guān)系如下表：第22頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月編制一份與參照試卷大體平行的學(xué)科會(huì)考試卷，準(zhǔn)備用于實(shí)際的高中畢業(yè)會(huì)考在保密狀態(tài)下，在省內(nèi)或省外抽取一批高中生（其水平應(yīng)與浙江省高中生的總體水平相當(dāng)），隨機(jī)分成兩組后，分別用會(huì)考試卷和參照試卷進(jìn)行測(cè)驗(yàn)，取得數(shù)據(jù)利用百分等級(jí)的等值技術(shù)或線性標(biāo)準(zhǔn)分?jǐn)?shù)的等值技術(shù)，在會(huì)考試卷原始分?jǐn)?shù)Y和參照試卷原始分?jǐn)?shù)X之間建立等值對(duì)應(yīng)關(guān)系，從而在X-Y-T之間建立對(duì)應(yīng)關(guān)系的轉(zhuǎn)換表把會(huì)考試卷正式用于高中會(huì)考，每個(gè)學(xué)生都得到自己的會(huì)考原始分?jǐn)?shù)Xi,通過(guò)X-Y-T分?jǐn)?shù)轉(zhuǎn)換表，得到每位高中生的畢業(yè)會(huì)考學(xué)科量分表。根據(jù)表7-2，得到高中畢業(yè)會(huì)考的等級(jí)分?jǐn)?shù)。第23頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月五、我國(guó)高等教育自學(xué)考試標(biāo)準(zhǔn)的建立模式自學(xué)考試課程大綱包括四部分概括敘述課程性質(zhì)與設(shè)置目的具體敘述各章節(jié)的課程內(nèi)容與考試目標(biāo)要求有關(guān)考試說(shuō)明與實(shí)施的要求提供樣題或樣卷第24頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月第四節(jié)標(biāo)準(zhǔn)參照測(cè)驗(yàn)的定量標(biāo)準(zhǔn)——合格分?jǐn)?shù)線第25頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月一、基于題目分類(lèi)下的經(jīng)驗(yàn)判斷方法利用課任教師或?qū)Τ删蜏y(cè)驗(yàn)標(biāo)準(zhǔn)的“格式塔”心理現(xiàn)象和教師具備的考評(píng)經(jīng)驗(yàn)來(lái)分析測(cè)驗(yàn)題目，并作出分類(lèi)與判斷的思想方法具體方法編制測(cè)驗(yàn)把測(cè)驗(yàn)中所有的題目分為三類(lèi)：“基本要求的”、“中等要求的”、“高要求的”假想一組“最低能力的且恰是可接受”的被試，對(duì)他們?cè)谧鞔鹨陨先?lèi)題目時(shí)提出具體標(biāo)準(zhǔn)第26頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月

如：題型要求每人至少答對(duì)的比率基本要求的90%中等要求的60%高要求的30%現(xiàn)設(shè)三類(lèi)題目在測(cè)驗(yàn)中所占分?jǐn)?shù)即為W1、W2和W3,再設(shè)課任教師經(jīng)過(guò)協(xié)商認(rèn)為，最低能力且又是可接受的任一位學(xué)生，其至少應(yīng)答對(duì)第一類(lèi)題目的P1%、第二類(lèi)題目的P2%、第三類(lèi)題目的P3%，那么，該特定測(cè)驗(yàn)的最低合格分?jǐn)?shù)線E確定為：第27頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月例：某次數(shù)學(xué)測(cè)驗(yàn)，課任教師認(rèn)為屬于第一類(lèi)的有22個(gè)題目，占40分；屬于第二類(lèi)的有8個(gè)題目，占32分；屬于第三類(lèi)的只有兩個(gè)題目，占28分。如果課任老師認(rèn)為最低能力限度下可接受的學(xué)生，至少應(yīng)答對(duì)第一類(lèi)題目的80%，第二類(lèi)題目的50%，第三類(lèi)題目的20%，求該次數(shù)學(xué)測(cè)驗(yàn)最低合格線。

解：第28頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月二、基于題目雙基度指標(biāo)下的經(jīng)驗(yàn)評(píng)判法“雙基度”指的是題目的考查內(nèi)容和測(cè)量目標(biāo)對(duì)體現(xiàn)特定學(xué)科“基礎(chǔ)知識(shí)、基本技能”雙基教學(xué)要求的適切性程度。雙基度的取值在0-1之間。題目的雙基度越大，說(shuō)明該題目的教學(xué)雙基性要求越強(qiáng)，題目越能體現(xiàn)教學(xué)過(guò)程和知識(shí)結(jié)構(gòu)中的基本要求，題目?jī)?nèi)容對(duì)學(xué)生越是重要。題目的雙基度與經(jīng)典測(cè)驗(yàn)理論中的難度沒(méi)有必然的聯(lián)系。第29頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月題目的雙基度指標(biāo)賦值，可以由任課教師根據(jù)教學(xué)與考評(píng)經(jīng)驗(yàn)，在較徹底的理解教學(xué)大綱課程標(biāo)準(zhǔn)和熟悉教材內(nèi)容結(jié)構(gòu)的前提下進(jìn)行，可參照表7-3第30頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月同一考查內(nèi)容中題目所設(shè)計(jì)的測(cè)量目標(biāo)不同，雙基度也不同。

假設(shè)一份測(cè)驗(yàn)卷中有N個(gè)題目，它們的雙基度及其分?jǐn)?shù)值可用（b1,x1）,（b2,x2），…，（bN,XN）來(lái)表示，該測(cè)驗(yàn)的合格線分?jǐn)?shù)為：第31頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月

例：某次語(yǔ)文測(cè)驗(yàn)共有50道試題，每題2分，今已知題目的雙基度指標(biāo)如表7-4所示：解：第32頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月三、基于題目“目標(biāo)—難度”層次評(píng)估法主要思路：根據(jù)對(duì)題目考查目標(biāo)層次的認(rèn)識(shí)以及對(duì)題目難易程度作出的經(jīng)驗(yàn)判斷，把整個(gè)測(cè)驗(yàn)卷中所有題目按照兩個(gè)特征進(jìn)行雙向分類(lèi)；由課任教師給每一類(lèi)題目指派一個(gè)臨界概率。

臨界概率是，設(shè)想一個(gè)尚可接受的最低能力的學(xué)生能夠正確回答該類(lèi)題目的可能性大小，或者說(shuō)這一臨界概率是對(duì)每一位合格的學(xué)生至少應(yīng)答對(duì)該類(lèi)題目的比例大小。第33頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月方法課任教師把一份測(cè)驗(yàn)卷中的所有題目按K個(gè)考查目標(biāo)能力層次進(jìn)行分類(lèi)，設(shè)這K類(lèi)所占分?jǐn)?shù)分別為M1,M2,…，Mk把上述每一題目按照難、中、易分成三組，計(jì)算各組題目的分?jǐn)?shù)，可得到測(cè)驗(yàn)題目雙向分類(lèi)下的數(shù)據(jù)塊，以矩陣的形式記為：第34頁(yè)，課件共36頁(yè)，創(chuàng)作于2023年2月設(shè)想一個(gè)可接受的最低能力的被試，答對(duì)上述“第i個(gè)難度層次第j個(gè)能力目標(biāo)層次”所有題目的可