姓名張京彬?qū)I(yè)教育技術(shù)學(xué)研究方向計算機(jī)教育應(yīng)用

1、姓名：姓名： 張京彬張京彬?qū)I(yè)：專業(yè)： 教育技術(shù)學(xué)教育技術(shù)學(xué)研究方向：計算機(jī)教育應(yīng)用研究方向：計算機(jī)教育應(yīng)用指導(dǎo)教師：何克抗指導(dǎo)教師：何克抗 教授教授網(wǎng)絡(luò)教學(xué)質(zhì)量保障體系的理論技術(shù)與實踐2001.3.261、問題的提出2、國內(nèi)外的研究現(xiàn)狀3、課題研究的主要內(nèi)容4、網(wǎng)絡(luò)測評理論的建設(shè) 5、網(wǎng)絡(luò)測評系統(tǒng)的設(shè)計開發(fā) 6、研究思路和技術(shù)路線 1、問題的提出v問題提出的背景互聯(lián)網(wǎng)絡(luò)的出現(xiàn)并廣泛普及和互聯(lián)網(wǎng)絡(luò)在技術(shù)上的先進(jìn)性和包容性信息社會的“終身學(xué)習(xí)”理念已經(jīng)深入人心目前，我們國家批準(zhǔn)了50余所網(wǎng)絡(luò)學(xué)院招生，需要確保學(xué)員質(zhì)量需要切實提高教學(xué)測評的效率和反饋的高效性v進(jìn)行課題研究的重要意義可開發(fā)出具有自主

2、知識產(chǎn)權(quán)的、適應(yīng)于各種形式網(wǎng)絡(luò)教育需要的軟件系統(tǒng)；有助于減輕教師的負(fù)擔(dān)，幫助學(xué)員詳細(xì)了解知識點掌握情況，鞏固所學(xué)，提高認(rèn)知和解決問題的能力，科學(xué)的衡量教師的勞動量 對深化教育信息化的進(jìn)程，進(jìn)行教育改革，減輕學(xué)生負(fù)擔(dān)有著深遠(yuǎn)的意義課題所取得的成果可直接為開展網(wǎng)絡(luò)教育的學(xué)校提供相應(yīng)的工具支持服務(wù)，并可推廣到其它教育培訓(xùn)服務(wù)部門，可取得明顯的經(jīng)濟(jì)效益和社會效益2、國內(nèi)外的研究現(xiàn)狀（1/4）v理論方面理論方面，近幾年來有較大發(fā)展，尤其在網(wǎng)絡(luò)題庫的建設(shè)理論、對學(xué)生成績的評價分析等方面有較大進(jìn)展，但是總體說來還沒有形成完整的網(wǎng)絡(luò)測評的理論體系，基本上是傳統(tǒng)教學(xué)中的評測理論向網(wǎng)絡(luò)方向的遷移，存在的問題主要是

3、:測評理論沒有充分體現(xiàn)量化和非量化、主觀和客觀、過程性和總結(jié)性的緊密結(jié)合，對過程性評價重視不夠沒有全面定義網(wǎng)絡(luò)教學(xué)測評需要檢測的測評要素及其合理區(qū)間，不能科學(xué)的反映教師的工作量和學(xué)生的學(xué)習(xí)量2、國內(nèi)外的研究現(xiàn)狀（2/4）v系統(tǒng)構(gòu)建方面整體情況目前，各地出現(xiàn)了一批網(wǎng)絡(luò)測評系統(tǒng)和或?qū)崿F(xiàn)類似功能的系統(tǒng)，如上海電視大學(xué)的網(wǎng)上教學(xué)支持工具、上海交通大學(xué)遠(yuǎn)程教育中心開發(fā)的遠(yuǎn)程考試系統(tǒng)、北京師范大學(xué)的VClass網(wǎng)絡(luò)教學(xué)系統(tǒng)、清華云舟網(wǎng)絡(luò)評價系統(tǒng)、寶冠多媒體網(wǎng)絡(luò)教室等，另外一些有條件的中學(xué)也開發(fā)設(shè)計了一批功能類似的系統(tǒng)。但是從整體上看，存在著課程、試題、試卷、作業(yè)等教學(xué)資源不易管理，系統(tǒng)功能整合不夠，測評反

4、饋信息不充分等方面的問題，部分系統(tǒng)采用了聯(lián)機(jī)測評的形式，但是專用的系統(tǒng)，需要針對不同的測評內(nèi)容，做不同的程序開發(fā)，系統(tǒng)通用性較差，一般的非計算機(jī)專業(yè)的人員難以掌握?？偟恼f來，目前現(xiàn)有測評系統(tǒng)的功能還不能令人滿意，還沒有形成統(tǒng)一的標(biāo)準(zhǔn)和規(guī)范。2、國內(nèi)外的研究現(xiàn)狀（3/4）v系統(tǒng)構(gòu)建方面具體情況現(xiàn)有系統(tǒng)的主要問題在于：大部分系統(tǒng)的試題、試卷和作業(yè)僅僅支持文本類材料，不支持公式符號、圖片、視音頻、動畫等材料，不支持多媒體試題和多媒體試卷/作業(yè)，遠(yuǎn)遠(yuǎn)沒有發(fā)揮計算機(jī)網(wǎng)絡(luò)的強(qiáng)大的計算優(yōu)勢大部分系統(tǒng)不具有充分的開放性，沒有定義試題、試卷、作業(yè)等資源的導(dǎo)入導(dǎo)出格式標(biāo)準(zhǔn)，沒有提供批量導(dǎo)入和導(dǎo)出工具，不能在廣大范

5、圍內(nèi)收集資源大部分系統(tǒng)功能較簡單，系統(tǒng)工具少，或者只是試題和試卷/作業(yè)的簡單匯編，缺少對試題庫、試卷庫、作業(yè)庫、學(xué)生成績庫的深層次的統(tǒng)計分析、教學(xué)診斷和教學(xué)形成性評價的支持，不能從海量的原始數(shù)據(jù)中挖掘出有價值的教育過程信息2、國內(nèi)外的研究現(xiàn)狀（4/4）v系統(tǒng)構(gòu)建方面現(xiàn)有系統(tǒng)的主要問題在于：有些系統(tǒng)性能低下，同時支持的在線試卷/作業(yè)數(shù)量較少，遠(yuǎn)遠(yuǎn)達(dá)不到系統(tǒng)運行的規(guī)?；?yīng)有些系統(tǒng)的統(tǒng)計分析功能簡單，僅向用戶提供總分、各題得分，班級平均分、標(biāo)準(zhǔn)差等經(jīng)過簡單計算的統(tǒng)計數(shù)據(jù)，而沒有對得到的統(tǒng)計數(shù)據(jù)進(jìn)行解釋和說明，對用戶的反饋信息千篇一律，沒有更好體現(xiàn)個別化教學(xué)的思想，缺少深層次的教學(xué)診斷性信息和教學(xué)形

6、成性評價信息 總的說來，目前我國的網(wǎng)絡(luò)教學(xué)質(zhì)量測評方面的建設(shè)，無論在理論上還是在系統(tǒng)建構(gòu)上都還處于起步階段，還沒有統(tǒng)一的標(biāo)準(zhǔn)和規(guī)范。 3、本課題研究的主要內(nèi)容（1/3）v針對國內(nèi)外的研究現(xiàn)狀，本課題的研究重心分為三個部分，如下：真正從網(wǎng)絡(luò)教學(xué)的特點出發(fā)，建立較為完整的網(wǎng)絡(luò)教學(xué)測評系統(tǒng)體系結(jié)構(gòu)，明確網(wǎng)絡(luò)教學(xué)測評的理論基礎(chǔ)，科學(xué)定義網(wǎng)絡(luò)教學(xué)測評需要檢測的測評要素及其合理區(qū)間等；充分考慮目前網(wǎng)絡(luò)測評現(xiàn)狀，針對目前測評系統(tǒng)的缺陷，構(gòu)建具有充分開放性的、基于WEB的網(wǎng)絡(luò)教學(xué)測評體系框架。3、本課題研究的主要內(nèi)容（2/3）v課題的研究重心之二：設(shè)計并開發(fā)網(wǎng)絡(luò)教學(xué)質(zhì)量測評系統(tǒng)。針對目前國內(nèi)類似系統(tǒng)的不足，依

7、托CERNET等高速網(wǎng)絡(luò)環(huán)境，對網(wǎng)絡(luò)教學(xué)所需的網(wǎng)絡(luò)測評系統(tǒng)及其規(guī)范的關(guān)鍵技術(shù)開展攻關(guān)研究，開發(fā)具有自主知識產(chǎn)權(quán)的，可適應(yīng)各種形式網(wǎng)絡(luò)教育活動需要的軟件系統(tǒng)，主要實現(xiàn)課程和知識點大綱管理，標(biāo)準(zhǔn)化試題庫系統(tǒng)的建立和管理，各類公式符號的編輯、存儲和多媒體類型試題標(biāo)準(zhǔn)的建立和實現(xiàn)，各種組卷策略和組卷算法的優(yōu)化整理，規(guī)范試卷/作業(yè)的生成、打包、發(fā)布和導(dǎo)入導(dǎo)出，在線測試、答案回收和監(jiān)考管理，以及學(xué)生樣本的智能選取、試卷的自動化批改、點評和個性化分析等，并結(jié)合量化和非量化的因素給出測評報告。3、本課題研究的主要內(nèi)容（3/3）v課題的研究重心之三：在實踐上，針對課題在理論探討和所設(shè)計開發(fā)的網(wǎng)絡(luò)教學(xué)質(zhì)量測評系統(tǒng)

8、的基礎(chǔ)上，選取目前正在營運的一到兩所網(wǎng)絡(luò)學(xué)院作為試驗基地，對課題研究成果進(jìn)行驗證并推向?qū)嶋H應(yīng)用，實地安裝并運行該軟件系統(tǒng)，對所收集的數(shù)據(jù)和系統(tǒng)運行結(jié)果進(jìn)行分析比較，根據(jù)所得結(jié)果對課題的理論和測評系統(tǒng)的建構(gòu)進(jìn)行進(jìn)一步的修訂和完善。4、網(wǎng)絡(luò)測評理論的建設(shè)v網(wǎng)絡(luò)測評理論的建設(shè)：基本理論基礎(chǔ)基本理論基礎(chǔ)特點特點類別類別對象對象要素要素過程過程網(wǎng)絡(luò)教學(xué)測評網(wǎng)絡(luò)教學(xué)測評5、網(wǎng)絡(luò)測評系統(tǒng)的設(shè)計開發(fā)（1/3）v系統(tǒng)主要指標(biāo)和功能指標(biāo)： 支持對課程、知識點大綱體系的管理支持公式等特殊符號的錄入，圖片、視音頻、動畫等材料的錄入提供現(xiàn)代教育技術(shù)領(lǐng)域中比較前沿的多種組卷策略和組卷算法，實現(xiàn)規(guī)范試卷/作業(yè)的自動生成和手

9、動生成、策略生成等多種成卷方式；支持規(guī)范試卷/作業(yè)的打包、發(fā)布和導(dǎo)入、導(dǎo)出功能系統(tǒng)支持實施網(wǎng)上測試的各個環(huán)節(jié)，支持用戶在線測試、答案回收和智能監(jiān)考管理；支持學(xué)生樣本的智能選取、試卷的自動化批改、點評和個性化分析等功能提供基于數(shù)據(jù)倉庫的試題庫、試卷庫、作業(yè)庫的數(shù)據(jù)分析合數(shù)據(jù)挖掘功能提供模板化的解決方案，系統(tǒng)采用模塊化開發(fā)技術(shù)5、網(wǎng)絡(luò)測評系統(tǒng)的設(shè)計開發(fā)（2/3）v系統(tǒng)體系結(jié)構(gòu)圖：標(biāo)準(zhǔn)多媒體試題庫模塊標(biāo)準(zhǔn)多媒體試題庫模塊規(guī)范試卷庫和測試模塊規(guī)范試卷庫和測試模塊評價分析、數(shù)據(jù)挖掘評價分析、數(shù)據(jù)挖掘系統(tǒng)層多媒體試題庫個人級多媒體試題庫評價指標(biāo)體系庫個人級多媒體試題庫學(xué)生成績庫系統(tǒng)參數(shù)庫系統(tǒng)多媒體試題庫評

10、價分析庫多媒體作業(yè)庫組卷策略庫系統(tǒng)工具模塊系統(tǒng)工具模塊試卷和測試支持工具多媒體試題庫支持工具作業(yè)和在線自測支持工具評價分析、數(shù)據(jù)挖掘支持工具系統(tǒng)管理、系統(tǒng)設(shè)置支持工具開放審核下傳使用組卷策略庫模塊組卷策略庫模塊組卷策略向?qū)Ш湍０逄砑觿h除修改屬性在線批閱點評展示教學(xué)輔導(dǎo)在線瀏覽在線測試屏幕鎖定時間限制考場規(guī)則答案回收試卷組卷策略向?qū)Э傮w參數(shù)測試對象分?jǐn)?shù)分配規(guī)范作業(yè)庫和自測模塊規(guī)范作業(yè)庫和自測模塊教學(xué)輔導(dǎo)自我校對小組協(xié)作在線測試在線自測作業(yè)生成策略向?qū)Э傮w參數(shù)測試對象分?jǐn)?shù)分配知識點選擇題目選擇題型題量生成答案個人評價課程知識點分析用戶分析試卷庫分析和數(shù)據(jù)挖掘作業(yè)庫分析和數(shù)據(jù)挖掘試題庫分析組卷策略管

11、理工具系統(tǒng)工具標(biāo)準(zhǔn)多媒體試題庫組卷策略庫規(guī)范試卷庫和測試規(guī)范作業(yè)庫和自測評價分析和數(shù)據(jù)挖掘5、網(wǎng)絡(luò)測評系統(tǒng)的設(shè)計開發(fā)（3/3）v系統(tǒng)關(guān)鍵技術(shù)和主要模塊描述系統(tǒng)工具模塊多媒體試題庫模塊多媒體試卷庫和測試模塊評價分析和數(shù)據(jù)挖掘試題、試卷和作業(yè)資源的導(dǎo)入與導(dǎo)出試卷、作業(yè)的展示與共享6、研究思路和技術(shù)路線（3/3）v系統(tǒng)關(guān)鍵技術(shù)和主要模塊描述4、網(wǎng)絡(luò)測評理論的建設(shè)v網(wǎng)絡(luò)測評理論的建設(shè)：（1）網(wǎng)絡(luò)測評基本理論基礎(chǔ)返返 回回1、建構(gòu)主義理論2、教育測量與教育統(tǒng)計學(xué)3、教育評價學(xué)提供目標(biāo)與決策方面的指導(dǎo)提供方法上的指導(dǎo)v網(wǎng)絡(luò)測評理論的建設(shè)：（2）網(wǎng)絡(luò)測評的特點測評對象廣泛量化和非量化、主觀和客觀、過程性和總

12、結(jié)性測評的緊密結(jié)合縮短評價周期，對評價結(jié)果可以給以及時的反饋可以對運用現(xiàn)代教育技術(shù)實施的智能教學(xué)，如對探索、發(fā)現(xiàn)、競爭、協(xié)作、角色扮演等一系列教學(xué)策略的教學(xué)效果進(jìn)行有效評價降低了測評的技術(shù)要求和費用返返 回回4、網(wǎng)絡(luò)測評理論的建設(shè)v網(wǎng)絡(luò)測評理論的建設(shè)：（3）網(wǎng)絡(luò)測評的類別配置性評價測量現(xiàn)有知識和能力，了解知識背景、學(xué)習(xí)條件、學(xué)習(xí)要求、學(xué)習(xí)態(tài)度等，據(jù)此進(jìn)行教學(xué)設(shè)計、選擇教學(xué)進(jìn)度、策略和方法形成性評價測量知識掌握和試卷作業(yè)情況、階段教學(xué)效果和學(xué)習(xí)進(jìn)展、存在問題，了解學(xué)習(xí)者主動性、態(tài)度，并給出描述、提醒和建議總結(jié)性評價評定教學(xué)目標(biāo)的達(dá)到程度，給出教學(xué)與學(xué)習(xí)效果的最終評價結(jié)論，并給出量化和非量化結(jié)合的

13、評測報告。 返返 回回4、網(wǎng)絡(luò)測評理論的建設(shè)v網(wǎng)絡(luò)測評理論的建設(shè)：（4）網(wǎng)絡(luò)測評的對象返返 回回4、網(wǎng)絡(luò)測評理論的建設(shè)v網(wǎng)絡(luò)測評理論的建設(shè)：（5）網(wǎng)絡(luò)測評的要素針對不同測評對象和目標(biāo)，網(wǎng)絡(luò)教學(xué)從對多個評價要素的檢測和記錄而獲得評價的信息和數(shù)據(jù)。對于非量化要素，主要通過調(diào)查問卷、主觀評價、和軼事記錄方式；對于量化要素，主要通過測試和對系統(tǒng)資源的訪問記錄進(jìn)行。量化評價要素主要包括（1）用戶登錄與注銷時間（2）提出/解答問題數(shù)量,瀏覽問題的次數(shù)和提供解決方案次數(shù)（3）發(fā)表的文章及數(shù)據(jù)總量（4）聊天室發(fā)言次數(shù)及發(fā)言數(shù)據(jù)量（5）頁面瀏覽范圍和次數(shù)（6）課程當(dāng)前學(xué)習(xí)位置（7）試卷和作業(yè)完成情況與得分（8）

14、上載數(shù)據(jù)量（9）課件運行時間和間隔（10）課件和教學(xué)材料應(yīng)用次數(shù)（11）系統(tǒng)工具利用頻率等 非量化評價要素主要包括（1）各類測評量表（2）評語、軼事記錄、進(jìn)度、態(tài)度、習(xí)慣、想法等（3）活動記錄日志（4）用戶之間的相互反饋信件及記錄等返返 回回4、網(wǎng)絡(luò)測評理論的建設(shè)v網(wǎng)絡(luò)測評理論的建設(shè)：（2）網(wǎng)絡(luò)測評的過程返返 回回4、網(wǎng)絡(luò)測評理論的建設(shè)確定評價對象和目標(biāo)依據(jù)權(quán)重進(jìn)行處理統(tǒng)計搜集信息有效性誤差檢查生成試卷問卷量表診斷表分析信息并進(jìn)行綜合判斷反饋前評價反饋反饋后評價前次評價活動后次評價活動準(zhǔn)備階段實施階段 結(jié)果處理階段 結(jié)果反饋階段選擇信息來源和處理方法測試或者發(fā)放評價量表給出評價報告和解釋5、網(wǎng)絡(luò)測評系統(tǒng)的設(shè)計開發(fā)（3/3）v系統(tǒng)工具模塊 系統(tǒng)工具模塊提供對課程知識點庫、用戶管理、系統(tǒng)整體設(shè)置、多媒體試題設(shè)置、多媒體試卷/作業(yè)庫、測評過程等方面的全面支持，主要包括： 課程知識點管理工具課程知識點管理工具 班級管理工具班級管理工具 系統(tǒng)設(shè)置工具系統(tǒng)設(shè)置工具 多媒體試題庫管理工具多媒體試題庫管理工具 多媒體試卷多媒體試卷/ /作業(yè)管理工具和測試工具作業(yè)管理工具和測試工具 智能樣本選取工具智能樣本選取工具 評價分析數(shù)據(jù)挖掘工具評價分析數(shù)據(jù)挖掘工具返返 回回5、網(wǎng)絡(luò)測評系統(tǒng)的設(shè)計開發(fā)（