大數據支持下的課堂評價課件

大數據支持下的課堂教學評價大數據支持下的課堂教學評價11、教師為什么需要了解評價1、教師為什么需要了解評價2評價與測驗評價與測驗3為什么需要了解評價診斷學生的優(yōu)勢和不足監(jiān)測學生的發(fā)展評定等級判斷教師的教學效果影響公眾對教育的看法有助于評價教師明確教師的教學目標為什么需要了解評價診斷學生的優(yōu)勢和不足影響公眾對教育的看法4如何評價編制課堂教學評價工具解釋測試結果對教學具有啟發(fā)意義的評價如何評價編制課堂教學評價工具5評價三要素信度效度偏見的克服評價三要素信度62、評價的信度信度=一致性2、評價的信度信度=一致性7信度三要素穩(wěn)定性信度復本信度內在一致性信度信度三要素穩(wěn)定性信度復本信度內在一致性信度8三種信度間的關系穩(wěn)定信度≠復本信度≠內在一致性信度三種信度間的關系穩(wěn)定信度≠復本信度≠內在一致性信度9測量的標準誤

測量的標準誤

103、評價效度依據評價結果所作推論的可靠程序3、評價效度依據評價結果所作推論的可靠程序11效度三要素內容相關效度效標關聯(lián)效度結構相關效度效度三要素內容相關效度效標關聯(lián)效度結構相關效度12信度與效度的關系信度與效度的關系134、偏差的克服評價偏差是反映評價工具質量的重要標準，指的是某些學生由于性別、民族、種族、社會地位、宗教信仰或其它群體特性，致使在評價結果受到影響。4、偏差的克服評價偏差是反映評價工具質量的重要標準，指的是某14評價偏差的形式冒犯不公平的懲罰評價偏差的形式冒犯不公平的懲罰15差異影響與評價偏差差異影響與評價偏差16偏差判斷的方法偏差審查小組單個項目的偏差判斷總體偏差判斷偏差判斷的方法偏差審查小組單個項目的偏差判斷總體偏差判斷17課堂中的偏差檢測課堂中的偏差檢測185、決定評價什么和如何評價5、決定評價什么和如何評價19評價什么決策驅動型評價教學目標的作用認知，情感和運動能力的評價基于標準的課堂評價評價什么決策驅動型評價教學目標的作用認知，情感和運動能力的評20選擇評價內容的建議1、明確與評價程序相關聯(lián)的評價決策2、利用課程目標搭建一個框架3、了解評價所針對的領域4、收集相關文件5、聽取專家、同事關于評估內容的建議6、通過相近似的考核制度選擇評價內容的建議1、明確與評價程序相關聯(lián)的評價決策21如何開展評價運用常模參照測驗還是采用標準參照測驗選擇性反應和建構性反應多種題目類型反應測驗題——判斷題、多重判斷題、多項選擇題、匹配題建構性反應測驗題——簡答題、主觀題表現(xiàn)性評價——觀查方法、表現(xiàn)性測驗檔案袋評價情感測評如何開展評價運用常模參照測驗還是采用標準參照測驗226、反應測驗題反應測驗題包含了判斷題、多重判斷題、多項選擇題、匹配題6、反應測驗題反應測驗題包含了判斷題、多重判斷題、多項選擇題23編制的戒律晦澀的指導語模棱兩可的陳述無意的線索復雜的句型深奧的詞匯編制的戒律晦澀的指導語24判斷題措辭嚴密，引發(fā)學生的慎重思考盡量不用否定句避免考查兩個概念平衡答案的種類保持測驗題的長度相近判斷題措辭嚴密，引發(fā)學生的慎重思考25多重判斷題區(qū)分測驗題目組題目與題干相符合多重判斷題區(qū)分測驗題目組26選擇題題干內容描述清晰避免使用否定句作題干關注選項的長度合理布局正確答案的位置妥善處理“以上說法都……”的選項選擇題題干內容描述清晰27匹配題（連線題）使用同質性條目力求相對簡潔確保反應多于前提排列反應為學生描述任務合理安排測驗題目，避免跨頁匹配題（連線題）使用同質性條目287、建構性反應測驗建構性反應測驗包括簡答題和主觀題7、建構性反應測驗建構性反應測驗包括簡答題和主觀題29簡答題（填空題）盡量采用問句式，減少使用不完整陳述式簡答題保證答案的簡潔性合理設置空格限制空格的數量空格的長度要相等簡答題（填空題）盡量采用問句式，減少使用不完整陳述式簡答題30主觀題向學生指明答案的展開程序明確描述學生的任務提供答題的參考時間并給出題目的分值避免出現(xiàn)選做題預測學生的回答主觀題向學生指明答案的展開程序31主觀題評分分項的或者整體的評份方式設計一個試行的評分要點事先確定寫作基本技能的重要性一次完成對一個題目的評分盡量保證匿名評分主觀題評分分項的或者整體的評份方式328、表現(xiàn)性評價讓學生完成有關小組合作解決問題的判斷讓學生完成一系列的選擇，用于解決問題的某一步學生簡短地回答一系列關于小組合作解決問題的方式呈現(xiàn)給學生一個新的問題，讓學生寫一篇短文說明解決以前沒有遇到過的某個問題學生學會通過小組合作解決問題測量學生合作技能的方法8、表現(xiàn)性評價讓學生完成有關小組合作解決問題的判斷讓學生完成33表現(xiàn)性評價任務的選擇推論和任務類推性的困境評估表現(xiàn)性測驗任務時需要考慮的因素類推性真實性多重性可傳授性公正性可行性可測性表現(xiàn)性評價任務的選擇推論和任務34確定評分標準評分標準確定評分標準評分35評價規(guī)則任務明確規(guī)則超一般規(guī)則評價規(guī)則任務明確規(guī)則36表現(xiàn)評分的誤差來源評分工具的缺陷程序方面的缺陷教師個人偏見表現(xiàn)評分的誤差來源評分工具的缺陷379、檔案袋評價對個人作品的系統(tǒng)收集9、檔案袋評價對個人作品的系統(tǒng)收集38檔案袋評價與標準化測驗的區(qū)別檔案袋評價較全面反映學生參與的多種活動讓學生參與評價自己的進步成就，從而確定出一下步的學習目標在尊重學生個體差異的基礎上評價每一個學生的成就標準化測驗依據有限的任務來評價學生的能力由教師根據學生答題情況評分用相同的標準評價所有學生檔案袋評價與標準化測驗的區(qū)別檔案袋評價較全面反映學生參與的多39檔案袋評價是一種合作性評價方式學生的自我評價是一個重要的目標關注學生的進步、努力與成就將評價與教、學結合起來標準化測驗評價過程是非合作性的缺少學生的自我評價只關注學生的成就教、學與評價是分離的檔案袋評價是一種合作性評價方式學生的自我評價是一個重要的目標40課堂檔案袋評價與大規(guī)模評價中的檔案袋評分在課堂中運用誰在評價誰在大規(guī)模評價項目中的應用課堂檔案袋評價與大規(guī)模評價中的檔案袋評分在課堂中運用41課堂檔案袋評價的關鍵成分1、確保學生“自己擁有”檔案袋2、決定收集何種用品樣本3、收集和存放作品樣本4、選擇評價標準5、要求學生評價自己的作品6、安排和舉行檔案袋會談7、調動家長參與檔案袋評價過程課堂檔案袋評價的關鍵成分1、確保學生“自己擁有”檔案袋42樣本的選取家庭作業(yè)中一個開放式問題的解決方案學生繪制的圖形，制作的網頁、微博等用軟件解決問題的方案樣本的選取家庭作業(yè)中一個開放式問題的解決方案4310、情感評價學生的學習態(tài)度、學生的價值觀、學生的自尊等10、情感評價學生的學習態(tài)度、學生的價值觀、學生的自尊等44為什么要評價情感情感的重要性讓教學關注學生情感監(jiān)控學生的狀態(tài)為什么要評價情感情感的重要性45評價哪些情感變量態(tài)度目標興趣目標價值觀目標情感變量評價哪些情感變量態(tài)度目標情感46怎樣評價情感利克特量表多焦情感量表怎樣評價情感利克特量表多焦情感量表47利克特量表由一系列陳述組成，每個陳述都需要你表明你的態(tài)度。利克特量表由一系列陳述組成，每個陳述都需要你表明你的態(tài)度。48編制利克特量表1、選擇你想要評價的情感變量2、對每一情感變量都編制一系統(tǒng)相關的積極陳述和消極陳述3、找?guī)讉€人來確定每一項陳述究竟是積極的還是消極的4、確定每一個陳述的備選答案的數量和使用的措辭5、準備好自陳量表，并指導學生如何回答6、讓學生回答量表7、對量表進行評分編制利克特量表1、選擇你想要評價的情感變量49例：是否喜歡學校在我每一天的生活中，學校是我生命中最快樂的部分（非常同意、同意、不確定、不同意、非常不同意）盡管偶爾我會覺得學校令人感到不愉快，不過絕大多數時候我還是喜歡他的（非常同意、同意、不確定、不同意、非常不同意）例：是否喜歡學校在我每一天的生活中，學校是我生命中最快樂的部50多焦點情感量表收集學生情感傾向信息的評價工具多焦點情感量表收集學生情感傾向信息的評價工具51編制多點情感量表1、選擇要測量的情感變量2、確定每個情感變量安排多少個測量項目3、每每個變量編一一系列積極和消極的陳述4、確定答案用措辭5、為量表設計指導語編制多點情感量表1、選擇要測量的情感變量52例：指導語：請表明量表中的每一條陳述而言是否真實。這當中有些陳述是積極的，而有些是消極的，請決定是否每一條陳述對你而言都是真實的。答案沒有對與錯之分，所以請你誠實回答。請不要在量表上寫你的名字。陳述是不是不確定1、總體而言，我是喜歡學校的□□□2、和喜歡學習科學□□□3、我能寫出好的報告和故事□□□4、我不喜歡閱讀□□□5、我不喜歡在課堂上回答問題□□□……例：指導語：請表明量表中的每一條陳述而言是否真實。這當中有些5311、促進教師發(fā)展的評價基于評判的完善方法基于經驗的完善方法11、促進教師發(fā)展的評價基于評判的完善方法54基于評判的完善方法評判自己的評價工具同事的評判學生評判五條檢查標準：1、遵循編寫指南或要求2、對分數推論有所貢獻3、內容要準確4、內容沒有遺漏5、公正基于評判的完善方法評判自己的評價工具五條檢查標準：55基于經驗的完善方法難度指數區(qū)分度指數難度指數：p=R/TR：回答正確的學生數量T：回答學生總數量

題目區(qū)分度指數題目評價>=0.40很好0.30-0.39較好0.20-0.29不重要的題<0.19低劣基于經驗的完善方法難度指數難度指數：

題目區(qū)分度指數題目評價5612、教學導向評價評價的目的是為了作出更好的教育決策，給予學生更好的教育12、教學導向評價評價的目的是為了作出更好的教育決策，給予學57評價結果促進了什么樣的教學決策？決策種類評價策略決策選項教什么在教學前進行前測是否對特定教學目標提供指導教多久對學生的學習進度進行階段性過程評價對于某個學生或是整個班級，是否繼續(xù)或停止對某個目標的指導教學效果比較學生教學前后的表現(xiàn)下次使用時，是否保持、拋棄或者修正原有的教學安排評價結果促進了什么樣的教學決策？決策種類評價策略決策選項教什58大數據大數據59完完601、每一個成功者都有一個開始。勇于開始，才能找到成功的路。12月-2212月-22Sunday,December11,20222、成功源于不懈的努力，人生最大的敵人是自己怯懦。14:20:5214:20:5214:2012/11/20222:20:52PM3、每天只看目標，別老想障礙。12月-2214:20:5214:20Dec-2211-Dec-224、寧愿辛苦一陣子，不要辛苦一輩子。14:20:5214:20:5214:20Sunday,December11,20225、積極向上的心態(tài)，是成功者的最基本要素。12月-2212月-2214:20:5214:20:52December11,20226、生活總會給你另一個機會，這個機會叫明天。11十二月20222:20:52下午14:20:5212月-227、人生就像騎單車，想保持平衡就得往前走。十二月222:20下午12月-2214:20December11,20228、業(yè)余生活要有意義，不要越軌。2022/12/1114:20:5214:20:5211December20229、我們必須在失敗中尋找勝利，在絕望中尋求希望。2:20:52下午2:20下午14:20:5212月-2210、一個人的夢想也許不值錢，但一個人的努力很值錢。12/11/20222:20:52PM14:20:5211-12月-2211、在真實的生命里，每樁偉業(yè)都由信心開始，并由信心跨出第一步。12/11/20222:20PM12/11/20222:20PM12月-2212月-22謝謝大家1、每一個成功者都有一個開始。勇于開始，才能找到成功的路。161大數據支持下的課堂教學評價大數據支持下的課堂教學評價621、教師為什么需要了解評價1、教師為什么需要了解評價63評價與測驗評價與測驗64為什么需要了解評價診斷學生的優(yōu)勢和不足監(jiān)測學生的發(fā)展評定等級判斷教師的教學效果影響公眾對教育的看法有助于評價教師明確教師的教學目標為什么需要了解評價診斷學生的優(yōu)勢和不足影響公眾對教育的看法65如何評價編制課堂教學評價工具解釋測試結果對教學具有啟發(fā)意義的評價如何評價編制課堂教學評價工具66評價三要素信度效度偏見的克服評價三要素信度672、評價的信度信度=一致性2、評價的信度信度=一致性68信度三要素穩(wěn)定性信度復本信度內在一致性信度信度三要素穩(wěn)定性信度復本信度內在一致性信度69三種信度間的關系穩(wěn)定信度≠復本信度≠內在一致性信度三種信度間的關系穩(wěn)定信度≠復本信度≠內在一致性信度70測量的標準誤

測量的標準誤

713、評價效度依據評價結果所作推論的可靠程序3、評價效度依據評價結果所作推論的可靠程序72效度三要素內容相關效度效標關聯(lián)效度結構相關效度效度三要素內容相關效度效標關聯(lián)效度結構相關效度73信度與效度的關系信度與效度的關系744、偏差的克服評價偏差是反映評價工具質量的重要標準，指的是某些學生由于性別、民族、種族、社會地位、宗教信仰或其它群體特性，致使在評價結果受到影響。4、偏差的克服評價偏差是反映評價工具質量的重要標準，指的是某75評價偏差的形式冒犯不公平的懲罰評價偏差的形式冒犯不公平的懲罰76差異影響與評價偏差差異影響與評價偏差77偏差判斷的方法偏差審查小組單個項目的偏差判斷總體偏差判斷偏差判斷的方法偏差審查小組單個項目的偏差判斷總體偏差判斷78課堂中的偏差檢測課堂中的偏差檢測795、決定評價什么和如何評價5、決定評價什么和如何評價80評價什么決策驅動型評價教學目標的作用認知，情感和運動能力的評價基于標準的課堂評價評價什么決策驅動型評價教學目標的作用認知，情感和運動能力的評81選擇評價內容的建議1、明確與評價程序相關聯(lián)的評價決策2、利用課程目標搭建一個框架3、了解評價所針對的領域4、收集相關文件5、聽取專家、同事關于評估內容的建議6、通過相近似的考核制度選擇評價內容的建議1、明確與評價程序相關聯(lián)的評價決策82如何開展評價運用常模參照測驗還是采用標準參照測驗選擇性反應和建構性反應多種題目類型反應測驗題——判斷題、多重判斷題、多項選擇題、匹配題建構性反應測驗題——簡答題、主觀題表現(xiàn)性評價——觀查方法、表現(xiàn)性測驗檔案袋評價情感測評如何開展評價運用常模參照測驗還是采用標準參照測驗836、反應測驗題反應測驗題包含了判斷題、多重判斷題、多項選擇題、匹配題6、反應測驗題反應測驗題包含了判斷題、多重判斷題、多項選擇題84編制的戒律晦澀的指導語模棱兩可的陳述無意的線索復雜的句型深奧的詞匯編制的戒律晦澀的指導語85判斷題措辭嚴密，引發(fā)學生的慎重思考盡量不用否定句避免考查兩個概念平衡答案的種類保持測驗題的長度相近判斷題措辭嚴密，引發(fā)學生的慎重思考86多重判斷題區(qū)分測驗題目組題目與題干相符合多重判斷題區(qū)分測驗題目組87選擇題題干內容描述清晰避免使用否定句作題干關注選項的長度合理布局正確答案的位置妥善處理“以上說法都……”的選項選擇題題干內容描述清晰88匹配題（連線題）使用同質性條目力求相對簡潔確保反應多于前提排列反應為學生描述任務合理安排測驗題目，避免跨頁匹配題（連線題）使用同質性條目897、建構性反應測驗建構性反應測驗包括簡答題和主觀題7、建構性反應測驗建構性反應測驗包括簡答題和主觀題90簡答題（填空題）盡量采用問句式，減少使用不完整陳述式簡答題保證答案的簡潔性合理設置空格限制空格的數量空格的長度要相等簡答題（填空題）盡量采用問句式，減少使用不完整陳述式簡答題91主觀題向學生指明答案的展開程序明確描述學生的任務提供答題的參考時間并給出題目的分值避免出現(xiàn)選做題預測學生的回答主觀題向學生指明答案的展開程序92主觀題評分分項的或者整體的評份方式設計一個試行的評分要點事先確定寫作基本技能的重要性一次完成對一個題目的評分盡量保證匿名評分主觀題評分分項的或者整體的評份方式938、表現(xiàn)性評價讓學生完成有關小組合作解決問題的判斷讓學生完成一系列的選擇，用于解決問題的某一步學生簡短地回答一系列關于小組合作解決問題的方式呈現(xiàn)給學生一個新的問題，讓學生寫一篇短文說明解決以前沒有遇到過的某個問題學生學會通過小組合作解決問題測量學生合作技能的方法8、表現(xiàn)性評價讓學生完成有關小組合作解決問題的判斷讓學生完成94表現(xiàn)性評價任務的選擇推論和任務類推性的困境評估表現(xiàn)性測驗任務時需要考慮的因素類推性真實性多重性可傳授性公正性可行性可測性表現(xiàn)性評價任務的選擇推論和任務95確定評分標準評分標準確定評分標準評分96評價規(guī)則任務明確規(guī)則超一般規(guī)則評價規(guī)則任務明確規(guī)則97表現(xiàn)評分的誤差來源評分工具的缺陷程序方面的缺陷教師個人偏見表現(xiàn)評分的誤差來源評分工具的缺陷989、檔案袋評價對個人作品的系統(tǒng)收集9、檔案袋評價對個人作品的系統(tǒng)收集99檔案袋評價與標準化測驗的區(qū)別檔案袋評價較全面反映學生參與的多種活動讓學生參與評價自己的進步成就，從而確定出一下步的學習目標在尊重學生個體差異的基礎上評價每一個學生的成就標準化測驗依據有限的任務來評價學生的能力由教師根據學生答題情況評分用相同的標準評價所有學生檔案袋評價與標準化測驗的區(qū)別檔案袋評價較全面反映學生參與的多100檔案袋評價是一種合作性評價方式學生的自我評價是一個重要的目標關注學生的進步、努力與成就將評價與教、學結合起來標準化測驗評價過程是非合作性的缺少學生的自我評價只關注學生的成就教、學與評價是分離的檔案袋評價是一種合作性評價方式學生的自我評價是一個重要的目標101課堂檔案袋評價與大規(guī)模評價中的檔案袋評分在課堂中運用誰在評價誰在大規(guī)模評價項目中的應用課堂檔案袋評價與大規(guī)模評價中的檔案袋評分在課堂中運用102課堂檔案袋評價的關鍵成分1、確保學生“自己擁有”檔案袋2、決定收集何種用品樣本3、收集和存放作品樣本4、選擇評價標準5、要求學生評價自己的作品6、安排和舉行檔案袋會談7、調動家長參與檔案袋評價過程課堂檔案袋評價的關鍵成分1、確保學生“自己擁有”檔案袋103樣本的選取家庭作業(yè)中一個開放式問題的解決方案學生繪制的圖形，制作的網頁、微博等用軟件解決問題的方案樣本的選取家庭作業(yè)中一個開放式問題的解決方案10410、情感評價學生的學習態(tài)度、學生的價值觀、學生的自尊等10、情感評價學生的學習態(tài)度、學生的價值觀、學生的自尊等105為什么要評價情感情感的重要性讓教學關注學生情感監(jiān)控學生的狀態(tài)為什么要評價情感情感的重要性106評價哪些情感變量態(tài)度目標興趣目標價值觀目標情感變量評價哪些情感變量態(tài)度目標情感107怎樣評價情感利克特量表多焦情感量表怎樣評價情感利克特量表多焦情感量表108利克特量表由一系列陳述組成，每個陳述都需要你表明你的態(tài)度。利克特量表由一系列陳述組成，每個陳述都需要你表明你的態(tài)度。109編制利克特量表1、選擇你想要評價的情感變量2、對每一情感變量都編制一系統(tǒng)相關的積極陳述和消極陳述3、找?guī)讉€人來確定每一項陳述究竟是積極的還是消極的4、確定每一個陳述的備選答案的數量和使用的措辭5、準備好自陳量表，并指導學生如何回答6、讓學生回答量表7、對量表進行評分編制利克特量表1、選擇你想要評價的情感變量110例：是否喜歡學校在我每一天的生活中，學校是我生命中最快樂的部分（非常同意、同意、不確定、不同意、非常不同意）盡管偶爾我會覺得學校令人感到不愉快，不過絕大多數時候我還是喜歡他的（非常同意、同意、不確定、不同意、非常不同意）例：是否喜歡學校在我每一天的生活中，學校是我生命中最快樂的部111多焦點情感量表收集學生情感傾向信息的評價工具多焦點情感量表收集學生情感傾向信息的評價工具112編制多點情感量表1、選擇要測量的情感變量2、確定每個情感變量安排多少個測量項目3、每每個變量編一一系列積極和消極的陳述4、確定答案用措辭5、為量表設計指導語編制多點情感量表1、選擇要測量的情感變量113例：指導語：請表明量表中的每一條陳述而言是否真實。這當中有些陳述是積極的，而有些是消極的，請決定是否每一條陳述對你而言都是真實的。答案沒有對與錯之分，所以請你誠實回答。請不要在量表上寫你的名字。陳述是不是不確定1、總體而言，我是喜歡學校的□□□2、和喜歡學習科學□□□3、我能寫出好的報告和故事□□□4、我不喜歡閱讀□□□5、我不喜歡在課堂上回答問題□□□……例：指導語：請表明量表中的每一條陳述而言是否真實。這當中有些11411、促進教師發(fā)展的評價基于評判的完善方法基于經驗的完善方法11、促進教師發(fā)展的評價基于評判的完善方法115基于評判的完善方法評判自己的評價工具同事的評判學生評判五條檢查標準：1、遵循編寫指南或要求2、對分數推論有所貢獻3、內容要準確4、內容沒有遺漏5、公正基于評判的完善方法評判自己的評價工具五條檢查標準：116基于經驗的完善方法難度指數區(qū)分度指數難度指數：p=R/TR：回答正確的學生數量T：回答學生總數量

題目區(qū)分度指數題目評價>=0.40很好0.30-0.39較好0.20-0.29不重要的題<0.19低劣基于經驗的完善方法難度指數難度指數：

題目區(qū)分度指數題目評價11712、教學導向評價