寧波市第二輪新課程培訓(xùn)

1、寧波市第二輪新課程培訓(xùn)英語測(cè)試、命題英語測(cè)試、命題和試卷評(píng)析和試卷評(píng)析慈溪市楊賢江中學(xué) 孫建業(yè)2009年7月24日 奉化一、英語測(cè)試概述一、英語測(cè)試概述一、教學(xué)和測(cè)試的關(guān)系一、教學(xué)和測(cè)試的關(guān)系思考：思考：1、教學(xué)和測(cè)試是怎樣的關(guān)系？教學(xué)和測(cè)試是怎樣的關(guān)系？ 2、為什么有的測(cè)試不能準(zhǔn)確測(cè)為什么有的測(cè)試不能準(zhǔn)確測(cè) 出學(xué)習(xí)者的語言能力？出學(xué)習(xí)者的語言能力？ 3、測(cè)試倒底有沒有必要？、測(cè)試倒底有沒有必要？ 4、教師應(yīng)該如何對(duì)待測(cè)試？、教師應(yīng)該如何對(duì)待測(cè)試？教學(xué)和測(cè)試之間的關(guān)系教學(xué)和測(cè)試之間的關(guān)系n反撥作用反撥作用（backwash）n可能有害可能有害：以考試為目標(biāo)，為考試而考試以考試為目標(biāo)，為考試而考

2、試n可能有益：可能有益：推動(dòng)教學(xué)的作用，如寫作、聽力、推動(dòng)教學(xué)的作用，如寫作、聽力、 單詞拼寫單詞拼寫n測(cè)試對(duì)教學(xué)的反撥作用體現(xiàn)：測(cè)試對(duì)教學(xué)的反撥作用體現(xiàn)： 證明和預(yù)測(cè)、證明和預(yù)測(cè)、 診斷和調(diào)節(jié)、診斷和調(diào)節(jié)、 激勵(lì)和促進(jìn)激勵(lì)和促進(jìn) 英語測(cè)試的效度和信度英語測(cè)試的效度和信度n效度效度（validity）n什么叫效度？測(cè)試考查了需要考查的內(nèi)容，測(cè)什么叫效度？測(cè)試考查了需要考查的內(nèi)容，測(cè)試結(jié)果能用來評(píng)判要測(cè)試的語言能力。簡(jiǎn)單講，試結(jié)果能用來評(píng)判要測(cè)試的語言能力。簡(jiǎn)單講，就是能正確測(cè)出想要測(cè)的結(jié)果就是能正確測(cè)出想要測(cè)的結(jié)果n效度的概念包括效度的概念包括：n內(nèi)容效度、表面效度、構(gòu)卷效度、內(nèi)容效度、表面效

3、度、構(gòu)卷效度、 標(biāo)準(zhǔn)相關(guān)效度標(biāo)準(zhǔn)相關(guān)效度測(cè)試的效度測(cè)試的效度n1、內(nèi)容效度內(nèi)容效度（content validity）:n測(cè)試內(nèi)容包括了所要測(cè)的語言技能、語測(cè)試內(nèi)容包括了所要測(cè)的語言技能、語言結(jié)構(gòu)等方面有代表性的元素（內(nèi)容言結(jié)構(gòu)等方面有代表性的元素（內(nèi)容結(jié)構(gòu)）結(jié)構(gòu)）n舉例舉例n2、表面效度表面效度（face validity）:n測(cè)試看上去是否能夠測(cè)出所要測(cè)的能力測(cè)試看上去是否能夠測(cè)出所要測(cè)的能力n舉例舉例測(cè)試的效度測(cè)試的效度n構(gòu)卷效度構(gòu)卷效度（construct validity）n測(cè)試能明確體現(xiàn)出要測(cè)的能力。這是確測(cè)試能明確體現(xiàn)出要測(cè)的能力。這是確保試卷有質(zhì)量的關(guān)鍵。保試卷有質(zhì)量的關(guān)鍵。n

4、一般來講，直接測(cè)試某種能力，構(gòu)卷效一般來講，直接測(cè)試某種能力，構(gòu)卷效度都不成問題。但若間接測(cè)試，如用選度都不成問題。但若間接測(cè)試，如用選擇形式來測(cè)量寫作能力，就會(huì)產(chǎn)生構(gòu)卷擇形式來測(cè)量寫作能力，就會(huì)產(chǎn)生構(gòu)卷效度問題。效度問題。測(cè)試的效度測(cè)試的效度n標(biāo)準(zhǔn)相關(guān)效度標(biāo)準(zhǔn)相關(guān)效度（criterion-related validity）n同期效度同期效度（concurrent validity）:測(cè)測(cè)試效度與較長(zhǎng)時(shí)間的實(shí)驗(yàn)結(jié)果相對(duì)比，試效度與較長(zhǎng)時(shí)間的實(shí)驗(yàn)結(jié)果相對(duì)比，看有無一致性看有無一致性n預(yù)測(cè)效度預(yù)測(cè)效度（predictive validity）:測(cè)測(cè)試可以較好地預(yù)測(cè)被試未來的語言水平試可以較好地預(yù)測(cè)

5、被試未來的語言水平測(cè)試的信度測(cè)試的信度n信度信度（reliability）n測(cè)試結(jié)果比較穩(wěn)定測(cè)試結(jié)果比較穩(wěn)定n舉例舉例舉例數(shù)據(jù)信度舉例.xlsn信度系數(shù)的獲得信度系數(shù)的獲得n重試法（重試法（test-retest method）n二分法（二分法（split half method）如何提高測(cè)試的信度如何提高測(cè)試的信度1、不要給學(xué)生太多的答題自由度和游離度不要給學(xué)生太多的答題自由度和游離度2、提供明確的題干、提供明確的題干3、提供明確具體的指令、提供明確具體的指令4、確保試卷的印制質(zhì)量和適當(dāng)?shù)淖煮w大小、確保試卷的印制質(zhì)量和適當(dāng)?shù)淖煮w大小5、確保學(xué)生熟悉題型和考綱、確保學(xué)生熟悉題型和考綱6、正規(guī)又

6、不容易分心的考試環(huán)境、正規(guī)又不容易分心的考試環(huán)境考試信度層面考試信度層面如何提高測(cè)試的信度如何提高測(cè)試的信度n7、盡可能直接地進(jìn)行比較、盡可能直接地進(jìn)行比較n8、提供盡可能詳細(xì)而又客觀的評(píng)分標(biāo)準(zhǔn)、提供盡可能詳細(xì)而又客觀的評(píng)分標(biāo)準(zhǔn)和答案和答案n9、評(píng)分者培訓(xùn)、評(píng)分者培訓(xùn)n10、密封評(píng)卷，用編號(hào)代替姓名、密封評(píng)卷，用編號(hào)代替姓名評(píng)分信度層面評(píng)分信度層面效度和信度的關(guān)系效度和信度的關(guān)系n之間的關(guān)系是單方面的之間的關(guān)系是單方面的n要有效度，必須要有信度。信度差，效度一定要有效度，必須要有信度。信度差，效度一定差差n但效度差，信度不一定差。但效度差，信度不一定差。n影響信度的因素是多方面的影響信度的因素

7、是多方面的n測(cè)試時(shí)間、環(huán)境設(shè)備、評(píng)分者的個(gè)人差異、題測(cè)試時(shí)間、環(huán)境設(shè)備、評(píng)分者的個(gè)人差異、題目的覆蓋面等。因此測(cè)試設(shè)計(jì)者要考慮到這些目的覆蓋面等。因此測(cè)試設(shè)計(jì)者要考慮到這些因素，力求減少影響。因素，力求減少影響。 測(cè)試的類型測(cè)試的類型nA、按考試目的：按考試目的：n1、水平測(cè)試水平測(cè)試（proficiency test）:目的在于目的在于衡量被試是否達(dá)到某種語言水平衡量被試是否達(dá)到某種語言水平n2、學(xué)業(yè)成就測(cè)試學(xué)業(yè)成就測(cè)試（achievement test）:目目的在于衡量學(xué)生是否取得了進(jìn)步或取得了多大的的在于衡量學(xué)生是否取得了進(jìn)步或取得了多大的進(jìn)步進(jìn)步n3、診斷測(cè)試診斷測(cè)試（diagnost

8、ic test）:目的在于證目的在于證實(shí)學(xué)習(xí)中的不足，為下一步教學(xué)做好準(zhǔn)備實(shí)學(xué)習(xí)中的不足，為下一步教學(xué)做好準(zhǔn)備n4、編班測(cè)試編班測(cè)試（placement test）:目的在于按目的在于按不同水平把學(xué)生編入不同班級(jí)。不同水平把學(xué)生編入不同班級(jí)。測(cè)試的類型測(cè)試的類型nB、按測(cè)試方法和方式按測(cè)試方法和方式n1、直接測(cè)試直接測(cè)試（direct testing）:測(cè)試能測(cè)試能夠直接反映考生某方面的語言能力夠直接反映考生某方面的語言能力n特征特征：效度：效度 ，信度，信度n適用類型適用類型： 測(cè)試的類型測(cè)試的類型n2、間接測(cè)試間接測(cè)試（indirect testing）:n不能直接反映所要考查的語言能力，

9、但不能直接反映所要考查的語言能力，但可以給測(cè)試實(shí)施者提供判斷考生語言能可以給測(cè)試實(shí)施者提供判斷考生語言能力的信息力的信息n舉例：A. play B. may C. says D. payn特征特征：效度：效度 ，信度，信度n適用類型適用類型： 測(cè)試的類型測(cè)試的類型nC、按測(cè)試的語言點(diǎn)按測(cè)試的語言點(diǎn)n1、分散點(diǎn)測(cè)試分散點(diǎn)測(cè)試（discrete-point testing）每個(gè)題目只測(cè)試一個(gè)語言點(diǎn)知識(shí)每個(gè)題目只測(cè)試一個(gè)語言點(diǎn)知識(shí)n適用題型：適用題型：n2、綜合測(cè)試綜合測(cè)試（integrative testing）:是是目前最受重視的測(cè)試形式。目前最受重視的測(cè)試形式。n適用題型：適用題型：測(cè)試的類型

10、nD、按成績(jī)判別標(biāo)準(zhǔn)按成績(jī)判別標(biāo)準(zhǔn)n1、常模參照性測(cè)試常模參照性測(cè)試（norm-referenced testing）n某考生成績(jī)與參加同一考試的其他考生比較，進(jìn)行某考生成績(jī)與參加同一考試的其他考生比較，進(jìn)行語言能力的測(cè)試。語言能力的測(cè)試。n適用于選拔考試，如適用于選拔考試，如n常模參照常模參照：根據(jù)招生計(jì)劃人數(shù)和考試成績(jī)，劃定根據(jù)招生計(jì)劃人數(shù)和考試成績(jī)，劃定一個(gè)分?jǐn)?shù)線一個(gè)分?jǐn)?shù)線測(cè)試的類型測(cè)試的類型n2、標(biāo)準(zhǔn)參照測(cè)試標(biāo)準(zhǔn)參照測(cè)試（criterion-referenced testing）n以某種特定的語言能力作為判別標(biāo)準(zhǔn)的測(cè)試，以某種特定的語言能力作為判別標(biāo)準(zhǔn)的測(cè)試，旨在了解實(shí)際運(yùn)用語言能力，

11、但并不與其他考旨在了解實(shí)際運(yùn)用語言能力，但并不與其他考生進(jìn)行比較。測(cè)試時(shí)，依據(jù)標(biāo)準(zhǔn)看考生是否達(dá)生進(jìn)行比較。測(cè)試時(shí)，依據(jù)標(biāo)準(zhǔn)看考生是否達(dá)到某一標(biāo)準(zhǔn)，判定是否合格到某一標(biāo)準(zhǔn)，判定是否合格n適用于水平性考試，如適用于水平性考試，如測(cè)試的類型nE、按判卷標(biāo)準(zhǔn)按判卷標(biāo)準(zhǔn)n1、主觀性測(cè)試主觀性測(cè)試（subjective testing）n特征特征：效度效度 ，信度，信度 ，因此常采用，因此常采用 接測(cè)試形式。接測(cè)試形式。n適用題型適用題型：n2、客觀性測(cè)試客觀性測(cè)試（objective testing）n適用題型適用題型：選擇、判斷、配伍、拼寫、填空、選擇、判斷、配伍、拼寫、填空、 簡(jiǎn)短問答簡(jiǎn)短問答。 教

12、師應(yīng)該如何對(duì)待測(cè)試n認(rèn)識(shí)考試的弊端認(rèn)識(shí)考試的弊端n分?jǐn)?shù)不能十分正確、全面說明學(xué)生的學(xué)業(yè)情況分?jǐn)?shù)不能十分正確、全面說明學(xué)生的學(xué)業(yè)情況n分?jǐn)?shù)會(huì)導(dǎo)致學(xué)生死記硬背、死讀書，壓抑個(gè)性、分?jǐn)?shù)會(huì)導(dǎo)致學(xué)生死記硬背、死讀書，壓抑個(gè)性、能力的發(fā)展能力的發(fā)展n分?jǐn)?shù)能調(diào)動(dòng)學(xué)生學(xué)習(xí)積極性，也會(huì)挫傷積極性分?jǐn)?shù)能調(diào)動(dòng)學(xué)生學(xué)習(xí)積極性，也會(huì)挫傷積極性n分?jǐn)?shù)在一定程度上扭曲了基礎(chǔ)教育的性質(zhì)和目分?jǐn)?shù)在一定程度上扭曲了基礎(chǔ)教育的性質(zhì)和目標(biāo)標(biāo)正確對(duì)待考試n正確對(duì)待考試，促進(jìn)教與學(xué)的良性正確對(duì)待考試，促進(jìn)教與學(xué)的良性循環(huán)循環(huán)n不做分?jǐn)?shù)的奴隸不做分?jǐn)?shù)的奴隸n把考試作為提高的新起點(diǎn)把考試作為提高的新起點(diǎn)n加強(qiáng)對(duì)自己能力的培養(yǎng)加強(qiáng)對(duì)自己能力的

13、培養(yǎng)n以科學(xué)的態(tài)度參加考試以科學(xué)的態(tài)度參加考試二、試題命制二、試題命制n命題的原則命題的原則n科學(xué)性原則科學(xué)性原則n明確性原則明確性原則n全面性原則全面性原則n整體性原則整體性原則n獨(dú)立性原則獨(dú)立性原則n合理性原則合理性原則n開放性原則開放性原則n公正性原則公正性原則命題的過程和一般步驟命題的過程和一般步驟n（一）制定考試大綱（一）制定考試大綱n考試大綱包括：目的、性質(zhì)、采用何種類型的考試形式、方法、考試對(duì)象、題型種類、考試時(shí)間、評(píng)分制、考試內(nèi)容、范圍及其水平（難易度）和樣題。n大綱是命題的根本依據(jù)，也是考生復(fù)習(xí)準(zhǔn)備的依據(jù)，必須預(yù)先公布。命題的過程和一般步驟命題的過程和一般步驟n（二）制定編題

14、計(jì)劃（二）制定編題計(jì)劃n主要任務(wù)：確定各種內(nèi)容試題的比例、所需時(shí)間n編制前，需要掌握的情況：編制前，需要掌握的情況：n了解學(xué)生學(xué)習(xí)的基礎(chǔ)狀況，為難易度作準(zhǔn)備n分析學(xué)生對(duì)當(dāng)前知識(shí)的掌握和能力的發(fā)展情況，以便及時(shí)補(bǔ)救n在一個(gè)教學(xué)階段結(jié)束時(shí)能為總結(jié)性評(píng)價(jià)提供信息n確定合理的題量、設(shè)計(jì)好難易度和區(qū)分度要求。命題的過程和一般步驟命題的過程和一般步驟n確定雙向細(xì)目表確定雙向細(xì)目表考查內(nèi)容考查內(nèi)容學(xué)期/單元 記憶_%理解_%應(yīng)用_%知識(shí)點(diǎn)1知識(shí)點(diǎn)2命題的過程和一般步驟命題的過程和一般步驟n布魯姆認(rèn)知目標(biāo)分類布魯姆認(rèn)知目標(biāo)分類水平層級(jí)內(nèi)容記憶識(shí)別回憶理解解釋、舉例、分類、總結(jié)、推斷、比較、說明應(yīng)用執(zhí)行、實(shí)施分

15、析區(qū)分、組織、歸屬評(píng)價(jià)核查、判斷創(chuàng)造生成、貫徹、計(jì)劃命題的過程和一般步驟n修改后的雙向細(xì)目表命題目的與試卷的總體難度內(nèi)容考查目標(biāo)其他考量學(xué)期記憶_%理解_%應(yīng)用_%分析_%評(píng)價(jià)_%創(chuàng)造_%難度題型題量時(shí)間評(píng)分知識(shí)點(diǎn)1知識(shí)點(diǎn)2測(cè)試時(shí)間：_分鐘命題的過程和一般步驟命題的過程和一般步驟n（四）草擬試題n（五）篩選修訂n（六）組卷n（七）參考答案和評(píng)分細(xì)則n（八）預(yù)測(cè)預(yù)測(cè)預(yù)測(cè)n檢查試題是否符合考試大綱和雙向細(xì)目表要求n檢查試題題面是否蘊(yùn)含著提示，或試題內(nèi)部存在暗示、內(nèi)容交迭等n題干和題肢分析。n計(jì)算每一題的難度、區(qū)分度。n信度分析n分析試卷對(duì)知識(shí)和能力的考查以及所占比例n檢查評(píng)分標(biāo)準(zhǔn)是否客觀可靠測(cè)試技

16、巧選擇題測(cè)試技巧選擇題n可能的弊端可能的弊端n只測(cè)試可見知識(shí)n做題時(shí)猜測(cè)n好的題干和題肢的設(shè)置n作弊傾向測(cè)試技巧綜合測(cè)試n設(shè)置的形式設(shè)置的形式n完形填空nC-測(cè)試n聽寫n寫作測(cè)試中最重要的問題寫作測(cè)試中最重要的問題n寫作任務(wù)的可行性n自由度限度寫作評(píng)分寫作評(píng)分n1、整體評(píng)分法n2、分析評(píng)分法n建議的評(píng)分原則建議的評(píng)分原則n用整體評(píng)分法n作文要有滿分n作文要有高分n作文要有差距n作文要有讀者三、試卷的質(zhì)量分析和講評(píng)三、試卷的質(zhì)量分析和講評(píng)n科學(xué)性分析科學(xué)性分析：對(duì)內(nèi)容、語言表述正確性、插圖的規(guī)范性、問題要求對(duì)學(xué)生的合理性和公平性的分析n一致性分析一致性分析：對(duì)考試要求與內(nèi)容、考試成績(jī)與平時(shí)學(xué)業(yè)水

17、平、教師對(duì)學(xué)生評(píng)價(jià)的分析n有效性分析：有效性分析：對(duì)不同層次學(xué)生的學(xué)業(yè)水平、對(duì)促進(jìn)教學(xué)是否有效的分析n技術(shù)性分析技術(shù)性分析：難度、區(qū)分度分析試卷的技術(shù)性分析n1、難度分析：難度分析：n客觀題難度：PR/n nR為選對(duì)的人數(shù)，n為總?cè)藬?shù)n主觀題難度：P某題平均分/滿分n難度指數(shù)在質(zhì)量分析中意義明顯。一般認(rèn)為難度指數(shù)在0.5-0.7之間是比較適宜的。試卷的技術(shù)性分析n區(qū)分度分析區(qū)分度分析nD（優(yōu)組答對(duì)某題人數(shù)差組答對(duì)人數(shù)）/優(yōu)組（差組）總?cè)藬?shù)n方法：1、被試按總分高低排隊(duì)n 2、從最高分和最低分各取27的人組成優(yōu)組和差組n 3、分別計(jì)算優(yōu)組和差組答對(duì)某題的人數(shù)n 4、按公式計(jì)算區(qū)分度標(biāo)準(zhǔn)nD=0.19區(qū)分度很低或毫無區(qū)分度n0.20=D=0.29 該題目尚可，但應(yīng)修改n0.30=D=0.40 該題目區(qū)分度最好n難度和區(qū)分度關(guān)系：難度和區(qū)分度關(guān)系：n試題太難或太易，區(qū)分度低，中等難度的試題區(qū)分度最強(qiáng)試卷講評(píng)n診斷性講評(píng)：針對(duì)共性的典型錯(cuò)誤進(jìn)行講評(píng)n發(fā)散性講評(píng)：針對(duì)靈活性較大的典型試題作進(jìn)一步的“借題發(fā)揮”講評(píng)n探索性講評(píng)：針對(duì)常規(guī)題目的變題n延伸性講評(píng)：針對(duì)題目進(jìn)行