教學(xué)測量與評價.ppt

1、教學(xué)測量與評價,第一講教學(xué)測量與評價的含義與作用,一、什么是教學(xué)測量 二、什么是教學(xué)評價 三、教學(xué)測量與評價與關(guān)系 四、教學(xué)測量與評價的作用,一、教學(xué)測量,1.含義 教學(xué)測量（instructional measurement）是考核教學(xué)成效的一種方法。這是借助于一定的手段與方式，對學(xué)生的學(xué)習(xí)成績（簡稱學(xué)績）進行探察，并以一定的數(shù)量來表示的考核辦法。,2. 在教學(xué)測量中應(yīng)注意什么 （1）教學(xué)測量的目的在于考核教學(xué)成效，也就是考察教學(xué)目標(biāo)的完成情況。因此，教學(xué)測量的目標(biāo)應(yīng)以教學(xué)目標(biāo)為依據(jù)，測量目標(biāo)應(yīng)與教學(xué)目標(biāo)一致，而不能偏離教學(xué)目標(biāo)。,教學(xué)目標(biāo)的例子： 掌握水勢概念、根系吸水的動力和葉片散失水分

2、的原理；了解水分在生命活動中的作用（植物生理學(xué)，水分生理）。 本章要求學(xué)生掌握食用菌菌絲體和子實體的形態(tài)結(jié)構(gòu)；掌握食用菌的生活史（食用菌栽培，食用菌的形態(tài)與生活史）。,三維目標(biāo),1. 知識與技能：即每門學(xué)科的基本知識和基本技能。2. 過程與方法：即讓學(xué)生了解學(xué)科知識形成的過程、“親歷”探究知識的過程；學(xué)會發(fā)現(xiàn)問題、思考問題、解決問題的方法，學(xué)會學(xué)習(xí)，形成創(chuàng)新精神和實踐能力等。3. 情感、態(tài)度和價值觀：即讓學(xué)生形成積極的學(xué)習(xí)態(tài)度、健康向上的人生態(tài)度，具有科學(xué)精神和正確的世界觀、人生觀、價值觀，成為有社會責(zé)任感和使命感的社會公民等。（人體生命活動的調(diào)節(jié)，第四節(jié) 激素調(diào)節(jié) ）,1識記：這是最低等級的

3、認知目標(biāo)，它指對具體事物和普遍原理的回憶，對方法和過程的回憶，或者對一種模式、結(jié)構(gòu)或框架的回憶。比如對專業(yè)術(shù)語，對日期、事件、人物、地點，對處理具體事物的方式方法，對各種理論等等的記憶。 2理解：這是低層次的理解，以一種語言或一種交流形式被譯述或轉(zhuǎn)化成另一種語言或另一種交流形式時的嚴謹性和準(zhǔn)確性為依據(jù)，對材料進行初步的重新整理與排列，指出材料包含的意義和趨勢。因此理解包括三個心理過程：轉(zhuǎn)譯、解釋和推斷。,3運用：指在某些特定的和具體的情景里使用抽象概念只是對所學(xué)知識的初步運用，而非綜合的、創(chuàng)造性的運用。這些抽象概念可能是以一般的觀念、程序的規(guī)則或概括化的方法等形式表現(xiàn)出來的，也可能是那些必須記

4、住的和能夠運用的專門性的原理、觀念和理論。 4分析：指將材料分解成各種組成要素或組成成分，弄清各種觀念的有關(guān)層次，或者明確所表達的各種觀念之間的關(guān)系，闡明材料各要素的組織原理即對材料內(nèi)容組合起來的組織、系統(tǒng)和結(jié)構(gòu)的分析。,5綜合：指對各種要素或組成成分加工，形成新的結(jié)構(gòu)整體或新的模式；制定出合理的工作計劃或操作步驟；確定一套抽象關(guān)系，用以對特定的資料或現(xiàn)象進行分類或解釋；或者從一套基本命題或符號表達式中演繹出各種命題關(guān)系。 6評價：這是認知領(lǐng)域教育目標(biāo)的最高層次，是指為了特定目的對材料和方法的價值及符合準(zhǔn)則的程度作出定量的和定性的判斷。準(zhǔn)則既可以是內(nèi)在證據(jù)，如邏輯上準(zhǔn)確性、一致性等，也可以是外

5、部準(zhǔn)則，如相應(yīng)領(lǐng)域的最高標(biāo)準(zhǔn)等。評價是認知能力的最高水平，是認知行為和情感行為的主要結(jié)合點和過渡橋梁。,識 記,理 解,運 用,分 析,綜 合,評 價,二、教學(xué)評價,1.含義 教學(xué)評價（instructional evaluation）就是依據(jù)教學(xué)目標(biāo)，對學(xué)績測驗所得測量結(jié)果進行分析及解釋。它主要包含以下兩個方面的工作。 （1）教學(xué)評價必須對學(xué)績測驗數(shù)據(jù)所表明的教學(xué)成效作出確切的診斷。 （2）教學(xué)評價必須對教學(xué)的成敗原因進行分析，并對今后教學(xué)工作的改進方面作出明確的規(guī)定。,評價（估）的功能 為家長提供信息 為選拔提供信息 為學(xué)生提供信息 為教師提供信息 為學(xué)校（間）提供信息,評價必須要注意的：

6、 公平，公正，標(biāo)準(zhǔn)一致，標(biāo)準(zhǔn)清晰 如何評價（估） 形成性評估和終極性評估 常模參照評估與標(biāo)準(zhǔn)參照評估,三、教學(xué)測量與評價的關(guān)系,區(qū)別： 教學(xué)測量是對學(xué)績測驗所得結(jié)果的客觀描述（將結(jié)果予以數(shù)量化），并不考慮結(jié)果的實際意義，而教學(xué)評價則是對學(xué)績測驗所得結(jié)果的主觀判斷（對結(jié)果進行分析解釋），以了解結(jié)果的實際意義。 聯(lián)系： （1）教學(xué)評價是一種主觀判斷，但是這種主觀判斷必須以教學(xué)測量所得的客觀描述為依據(jù) （2）教學(xué)測量也不能脫離教學(xué)評價 。教學(xué)測量只是對學(xué)績測驗結(jié)果的客觀描述，只有通過教學(xué)評價，才能判斷這種客觀描述的實際意義,四、教學(xué)測量與評價的功能,1. 反饋調(diào)節(jié)功能 對教師 對學(xué)生 2.激勵動機功

7、能 對學(xué)生 對教師,第二節(jié) 中學(xué)生物學(xué)測量的命題,一、設(shè)計雙向細目表,教師可以根據(jù)測驗?zāi)康募敖虒W(xué)目標(biāo)的需求，以教學(xué)目標(biāo)為橫軸，而以教材內(nèi)容為縱軸，畫出一個二維度的分類表，且平均分配好試題比重或題數(shù)于表中的每個細目里，并盡量使試題的取材能夠充分涵蓋所要評價的教學(xué)目標(biāo)和教材內(nèi)容的范圍，以作為編擬成就測驗試題的設(shè)計藍圖，這樣的一個二維度分類表便叫做雙向細目表（two-way specification table）。典型的雙向細目表，如所示。,高中生物上學(xué)期成就測驗的雙向細目表,教師在設(shè)計雙向細目表時必須注意： 第一，命題的范圍在教學(xué)過的教材內(nèi)容范圍之內(nèi) 第二，雙向細目表邊緣小格中的數(shù)字，不可以為零

8、，也就是說，雙向細目表中列出的教材內(nèi)容或教學(xué)目標(biāo)不能沒有適當(dāng)?shù)脑囶}。 第三，教師可以針對自己的命題及評分的習(xí)慣，選定雙向細目表中所陳述的測驗題型，變化或增減所預(yù)擬的試題題數(shù)或分值。,二、選定測驗的題型,試題的類型可以分成兩大類： 選擇型試題（客觀題）可分為： 選擇題；是非題；配合題；填空題；解釋性習(xí)題等。 填充型試題（主觀題）可分為： 簡答題；限制反應(yīng)題；論述題等。,1在下列情況下，以使用主觀型試題來評價為宜,（1）擬評價學(xué)生的創(chuàng)意、組織和綜合科學(xué)知識或語文表達等比較復(fù)雜的成就； （2）擬評測學(xué)生對某些科學(xué)知識的意見或態(tài)度； （3）擬評測學(xué)生分析、應(yīng)用或評價整體科學(xué)概念的能力； （4）受試人數(shù)

9、不多而且試題擬只使用一次或有充足時間閱卷而無足夠時間命題： （5）教師個人在評閱答案時，能明確制訂統(tǒng)一的評分標(biāo)準(zhǔn)。,2在下列情況下，以使用客觀型試題來評價為宜,（1）試題擬重復(fù)使用而且受試者人數(shù)眾多； （2）要求測驗結(jié)果具有較高信度； （3）評價結(jié)果必須盡可能公平、公正； （4）有充足時間命題，而缺乏足夠時間閱卷； （5）教師個人在評閱答案時，無法把握明確而統(tǒng)一的標(biāo)準(zhǔn)。,3下列情況則兩類試題均可達到預(yù)期目標(biāo),（1）評價學(xué)生的各方面學(xué)習(xí)成就； （2）考驗學(xué)生是否了解并能運用科學(xué)原理、學(xué)說、定律； （3）考驗學(xué)生應(yīng)用科學(xué)知識以解決問題的能力； （4）考驗學(xué)生的批判性思維能力： （5）考驗學(xué)生記憶和

10、運用科學(xué)知識的能力； （6）考驗學(xué)生分析和綜合科學(xué)知識的能力。,二、編擬測驗試題,（一）編擬試題的一般原則 1試題取材均勻，并具有教材內(nèi)容的代表性。 2試題的敘述應(yīng)力求簡明扼要，題意明確。 3各個試題宜彼此獨立，互不牽涉，并避免含有暗示答案的線索。 4試題宜有公認的正確答案或相對較佳的答案。 5試題中某些錯誤，雖不影響答案的選擇，也應(yīng)當(dāng)避免。 6凡具有爭議性的試題，應(yīng)該注明命題參考資料的來源。,7若要測量學(xué)生的高層次認知能力，則試題不一定要有固定答案。 8試題的敘述應(yīng)重新組織，避免直接抄課文或原來教材。 9試題應(yīng)重視重要概念或原理原則的了解與應(yīng)用，要避免偏難瑣碎及零碎知識的記憶。 10避免使用

11、與測驗無關(guān)的敘述，增加作答困難。 11命題不要超過單元教學(xué)的評價目標(biāo)。 12提早命題，以預(yù)留時間進行試題審查或修正。 13命題數(shù)量盡量多一些，作為備用試題。,第三節(jié)試卷分析指標(biāo)及其解讀,一、 考試與試卷分析 二、 試卷分析方法 三、 定量分析的主要指標(biāo) 四、 定量分析結(jié)果的解讀 五、 綜合分析規(guī)范,一 考試與試卷分析,（1）常模參照性考試： 考試的目的主要是在于考查被試者的個體差異，一般用于衡量被試者的相對水平。只有將被試者的得分放到考試所在的團體中，從而直接或間接地以被試者在該團體中的相對等級或相對位置來評估被試者的能力水平。,1.1考試的分類,（2）目標(biāo)參照性考試：也叫標(biāo)準(zhǔn)參照考試，強調(diào)的

12、是被試者對考試目標(biāo)和內(nèi)容的掌握程度。因而能反映出被試者的絕對水平及在知識掌握上的強點和弱點，并能對被試者在參照標(biāo)準(zhǔn)上的表現(xiàn)做出解釋。,1.2 課程考試,課程考試是評估學(xué)生學(xué)習(xí)成績，檢驗教師教學(xué)和學(xué)生學(xué)習(xí)效果的主要形式，是教學(xué)過程中不可或缺的環(huán)節(jié)。 課程考試目的：對學(xué)生學(xué)習(xí)狀況和相關(guān)知識掌握程度，教師教學(xué)計劃的完成程度及效果進行檢查 ；對學(xué)生的學(xué)業(yè)水平、能力做出判斷、區(qū)分和解釋。,1.3 試卷分析,試卷分析：是指對學(xué)生考試成績、試卷信度、效度，試題的難度、區(qū)分度，考試命題、試卷編制、閱卷評分等內(nèi)容進行定量和定性分析，以評價考試質(zhì)量、反思教與學(xué)效果的活動。 試卷分析是教師教學(xué)活動的重要環(huán)節(jié)，也是教

13、研室的基本工作之一。,1.4 試卷分析的目的,評價考試質(zhì)量，檢驗考試的可靠性、有效性。通過對考試的信度、效度、試題的難度、區(qū)分度等方面作分析，可以判斷此次考試的質(zhì)量。只有有效的、可靠的考試，才能作為評價教學(xué)質(zhì)量或衡量學(xué)生學(xué)習(xí)情況的依據(jù)。,改進考試工作，提高試題和試卷編制質(zhì)量。通過對試卷一系列指數(shù)的分析，能為我們進一步修改試題、編制試卷提供依據(jù)，提高編制試卷的技能、技巧，使測驗更趨科學(xué)； 獲取教與學(xué)效果的反饋信息。對試卷的深入分析，能反饋大量的信息，及時發(fā)現(xiàn)教與學(xué)中存在的問題，便于采取有針對性的措施或建議，改進教學(xué)。,二 試卷分析方法,2.1 定量分析方法,是指通過對試卷和考試成績的數(shù)理統(tǒng)計分析

14、，得出有關(guān)試卷的成績分布、平均分、標(biāo)準(zhǔn)差、試題難度、試題區(qū)分度、考試信度、考試效度等數(shù)據(jù)特征，用以說明試卷命題質(zhì)量、教師教學(xué)和學(xué)生學(xué)習(xí)效果的分析方法。,綜合分析是指在定量分析數(shù)據(jù)結(jié)果的基礎(chǔ)上，結(jié)合考試的具體情況，進行歸納、分析、綜合、概括，從而得出具有普遍意義的結(jié)論的分析方法。 如結(jié)合定量分析數(shù)據(jù)結(jié)果對不同專業(yè)考生具體差異，考生在學(xué)習(xí)中普遍存在的問題，教學(xué)中的薄弱環(huán)節(jié)等進行分析。 另外，對試卷命題質(zhì)量中比如題目表述是否科學(xué)、文字表述是否正確以及閱卷情況等直接進行定性分析。,2.2 定性分析（綜合分析）,2.3 完整的試卷分析應(yīng)是定量分析和綜合分析相結(jié)合 從教育測量學(xué)理論角度看，定量分析的數(shù)據(jù)是

15、不完全客觀的數(shù)據(jù)，由此產(chǎn)生的定量分析的結(jié)果需要通過綜合分析來加以判斷和解釋。 綜合分析是試卷分析的主體，定量分析只能為綜合分析提供輔助的參考依據(jù)。脫離定量分析過程的綜合分析是片面的，沒有綜合分析的定量分析是教條的。,三 定量分析的主要指標(biāo),（1）成績頻數(shù)分布統(tǒng)計表 ：以5或10分為一個分數(shù)段，統(tǒng)計每個分數(shù)段包含的學(xué)生數(shù)，組成成績的頻數(shù)分布統(tǒng)計表。,3.1 成績分布統(tǒng)計,（2）成績頻數(shù)分布圖：將該統(tǒng)計表各分數(shù)段的中值和該組學(xué)生數(shù)對應(yīng)點依次制成條形圖，形成中間高兩邊低的成績頻數(shù)分布圖。,（3）成績分布曲線圖：,（1）正態(tài)分布：以平均值為中心，左右兩側(cè)頻數(shù)分布基本對稱，靠近均數(shù)兩側(cè)的頻數(shù)較多，而距均

16、數(shù)兩側(cè)較遠時，頻數(shù)逐漸減少。,3.2 成績分布曲線圖分類,高分或低分考生數(shù)量較少，中間部分數(shù)量較多 ,且其分檔情況在成績解釋上比較合理。說明測試結(jié)果與學(xué)生的實際情況一致，各種難度的題目比例合理。,（2）正偏態(tài)分布 ： 說明試題難度偏高，難度較大的題目比例偏大，或是教與學(xué)效果較差。 呈這種分布的試題有利于將成績優(yōu)秀的學(xué)生和中等程度的學(xué)生區(qū)別開，但不利于將中等程度的學(xué)生和成績較差的學(xué)生區(qū)別開。,（3）負偏態(tài)分布： 說明試題難度偏低，難度較低的題目比例偏大，或者教與學(xué)的效果較好。 呈這種分布的試題有利于將成績較差的學(xué)生和中等程度的學(xué)生區(qū)別開，但不利于將中等程度的學(xué)生和成績優(yōu)秀的學(xué)生區(qū)別開。,一套質(zhì)量

17、較高的試題，理想的考試成績分布曲線圖應(yīng)該是呈正態(tài)分布。 課程考試作為一種目標(biāo)參照性考試，學(xué)生成績呈正態(tài)或近似正態(tài)分布，都是正常、合理的。,3.3 標(biāo)準(zhǔn)差和極值,標(biāo)準(zhǔn)差： 描述一組分數(shù)離散情況的最常用、最可靠的統(tǒng)計量?？荚嚦煽兊臉?biāo)準(zhǔn)差用來判斷考試分數(shù)的集中程度。標(biāo)準(zhǔn)差理想控制范圍在7-10；,極值： 指考試出現(xiàn)的最高分數(shù)和最低分數(shù), 極值既是數(shù)據(jù)完整性的體現(xiàn),又是數(shù)據(jù)的關(guān)鍵觀察點；課程考試不應(yīng)出現(xiàn)0或滿分的成績, 0分屬于異常數(shù)據(jù), 出現(xiàn)多個滿分則提示較難考題數(shù)量嚴重不足。,3.4 試題難度（P）,試題難度（P）是指能夠正確回答試題的人數(shù)和參加考試的總?cè)藬?shù)之比，即指某題的通過率和正答率。試題難度

18、系數(shù)與試題實際難易程度正好相反。 計算公式：P=平均分滿分值 一般認為，難度指數(shù)P在0.30.7之間為合適，低于0.3太難，高于0.7太易，0.5左右最好。,關(guān)于難度的幾個問題： 難度水平的確定是為了篩選題目。平時測驗難度要利于學(xué)生的學(xué)習(xí)，但一定的難度能增加區(qū)分度，這對全面了解、掌握學(xué)生學(xué)習(xí)情況有十分重要的作用。 難度水平的確定要考慮及格率，防止損傷學(xué)困生的自尊心。 難度水平的確定要考慮對分數(shù)分布的影響，一般以偏正態(tài)分布為前提，有時偏正態(tài)分布更能激發(fā)學(xué)生的學(xué)習(xí)積極性。,3.5 試題區(qū)分度（D）,區(qū)分度（D）是指試題區(qū)分考生能力的程度，它基于一個假設(shè)：即高能考生比低能考生更有可能正確回答試題。

19、區(qū)分度的取值在-1.01.0之間，D值越大，試題的區(qū)分能力越強。 D0時，為積極區(qū)分； D0時，為消極區(qū)分； D=0時，無區(qū)分能力。,先將分數(shù)排序，P1=27高分組的難度，P2=27低分組的難度，區(qū)分度D=（27高分組的平均分27低分組的平均分）滿分值。,效度是指試卷的有效性和準(zhǔn)確性程度，它反映的是考試測量到的與所要測量的二者之間的符合程度。 課程考試主要考慮內(nèi)容效度。即指選取的具有代表性的樣本組成的考試內(nèi)容是否能夠恰當(dāng)?shù)卮斫虒W(xué)內(nèi)容(教學(xué)目標(biāo))總體。,3.6 試卷的效度,對課程考試而言，試卷效度是決定考試質(zhì)量的重要因素。但目前還沒有一種切實可行的統(tǒng)計方法可以用來合理地計算試題取樣的恰當(dāng)程度。

20、 目前對效度的評價，大多是由專家或經(jīng)驗豐富的教師依據(jù)考試大綱與考試命題的雙向細目表對每道試題進行比較分析來作出估計。,3.7 試卷的信度,信度是指試卷的穩(wěn)定性和可靠性程度。將同一份試卷，對同一組參加考試者進行反復(fù)測驗，所得結(jié)果一致，那么這份試卷就具有很高的信度。 信度系數(shù)的計算方法有多種，如穩(wěn)定性信度系數(shù)、等值性信度系數(shù)、內(nèi)部一致性信度系數(shù)。學(xué)校試卷分析軟件采用的是克倫巴赫（Cronbach）系數(shù)法 。 教育測量學(xué)理論認為，對于測驗專業(yè)理論與能力的試卷，其信度應(yīng)在0.90以上，信度在0.70以下的試卷不宜采用。,四 定量分析結(jié)果的解讀,4.1 成績分布,偏離正態(tài)分布有兩種情況，一是試題難度普遍

21、較大，考生得分普遍較低，使得低分端出現(xiàn)高峰，呈正偏態(tài)分布；二是試題難度普遍較小，考生得分普遍較高，使高分端出現(xiàn)高峰，呈負偏態(tài)分布。 當(dāng)考試分數(shù)分布呈明顯偏態(tài)時，可通過改變試題難度的比例加以調(diào)整，使之大體上呈正態(tài)分布。,4.2 試題難度,非正常影響因素 試題質(zhì)量：超綱，偏題，怪題，有錯誤，選項迷惑性太差或太強； 教學(xué)有遺漏，或者對重點強調(diào)不夠； 學(xué)生不努力，或者對知識點掌握不夠； 學(xué)生作弊,4.3 試題區(qū)分度,研究證明，難度系數(shù)P越接近0.5，區(qū)分度越好；當(dāng)難度系數(shù)P介于0.40.6或0.30.7之問時，區(qū)分度較為理想；而當(dāng)難度系數(shù)p0.7時，區(qū)分度較差。 要把學(xué)生的能力、水平進行最大程度的區(qū)分，試題難度值的分布也應(yīng)以正態(tài)為好。試卷中試題難（P0.3）: 中等(0.3P0.7): 易(0.7P)的比例為10：70：20較合適；,4.4 試題區(qū)分度低的幾種原因