姓名張京彬專業(yè)教育技術學研究方向計算機教育應用

1、姓名：姓名： 張京彬張京彬專業(yè)：專業(yè)： 教育技術學教育技術學研究方向：計算機教育應用研究方向：計算機教育應用指導教師：何克抗指導教師：何克抗 教授教授網絡教學質量保障體系的理論技術與實踐2001.3.261、問題的提出2、國內外的研究現(xiàn)狀3、課題研究的主要內容4、網絡測評理論的建設 5、網絡測評系統(tǒng)的設計開發(fā) 6、研究思路和技術路線 1、問題的提出v問題提出的背景互聯(lián)網絡的出現(xiàn)并廣泛普及和互聯(lián)網絡在技術上的先進性和包容性信息社會的“終身學習”理念已經深入人心目前，我們國家批準了50余所網絡學院招生，需要確保學員質量需要切實提高教學測評的效率和反饋的高效性v進行課題研究的重要意義可開發(fā)出具有自主

2、知識產權的、適應于各種形式網絡教育需要的軟件系統(tǒng)；有助于減輕教師的負擔，幫助學員詳細了解知識點掌握情況，鞏固所學，提高認知和解決問題的能力，科學的衡量教師的勞動量 對深化教育信息化的進程，進行教育改革，減輕學生負擔有著深遠的意義課題所取得的成果可直接為開展網絡教育的學校提供相應的工具支持服務，并可推廣到其它教育培訓服務部門，可取得明顯的經濟效益和社會效益2、國內外的研究現(xiàn)狀（1/4）v理論方面理論方面，近幾年來有較大發(fā)展，尤其在網絡題庫的建設理論、對學生成績的評價分析等方面有較大進展，但是總體說來還沒有形成完整的網絡測評的理論體系，基本上是傳統(tǒng)教學中的評測理論向網絡方向的遷移，存在的問題主要是

3、:測評理論沒有充分體現(xiàn)量化和非量化、主觀和客觀、過程性和總結性的緊密結合，對過程性評價重視不夠沒有全面定義網絡教學測評需要檢測的測評要素及其合理區(qū)間，不能科學的反映教師的工作量和學生的學習量2、國內外的研究現(xiàn)狀（2/4）v系統(tǒng)構建方面整體情況目前，各地出現(xiàn)了一批網絡測評系統(tǒng)和或實現(xiàn)類似功能的系統(tǒng)，如上海電視大學的網上教學支持工具、上海交通大學遠程教育中心開發(fā)的遠程考試系統(tǒng)、北京師范大學的VClass網絡教學系統(tǒng)、清華云舟網絡評價系統(tǒng)、寶冠多媒體網絡教室等，另外一些有條件的中學也開發(fā)設計了一批功能類似的系統(tǒng)。但是從整體上看，存在著課程、試題、試卷、作業(yè)等教學資源不易管理，系統(tǒng)功能整合不夠，測評反

4、饋信息不充分等方面的問題，部分系統(tǒng)采用了聯(lián)機測評的形式，但是專用的系統(tǒng)，需要針對不同的測評內容，做不同的程序開發(fā)，系統(tǒng)通用性較差，一般的非計算機專業(yè)的人員難以掌握?？偟恼f來，目前現(xiàn)有測評系統(tǒng)的功能還不能令人滿意，還沒有形成統(tǒng)一的標準和規(guī)范。2、國內外的研究現(xiàn)狀（3/4）v系統(tǒng)構建方面具體情況現(xiàn)有系統(tǒng)的主要問題在于：大部分系統(tǒng)的試題、試卷和作業(yè)僅僅支持文本類材料，不支持公式符號、圖片、視音頻、動畫等材料，不支持多媒體試題和多媒體試卷/作業(yè)，遠遠沒有發(fā)揮計算機網絡的強大的計算優(yōu)勢大部分系統(tǒng)不具有充分的開放性，沒有定義試題、試卷、作業(yè)等資源的導入導出格式標準，沒有提供批量導入和導出工具，不能在廣大范

5、圍內收集資源大部分系統(tǒng)功能較簡單，系統(tǒng)工具少，或者只是試題和試卷/作業(yè)的簡單匯編，缺少對試題庫、試卷庫、作業(yè)庫、學生成績庫的深層次的統(tǒng)計分析、教學診斷和教學形成性評價的支持，不能從海量的原始數(shù)據(jù)中挖掘出有價值的教育過程信息2、國內外的研究現(xiàn)狀（4/4）v系統(tǒng)構建方面現(xiàn)有系統(tǒng)的主要問題在于：有些系統(tǒng)性能低下，同時支持的在線試卷/作業(yè)數(shù)量較少，遠遠達不到系統(tǒng)運行的規(guī)?；行┫到y(tǒng)的統(tǒng)計分析功能簡單，僅向用戶提供總分、各題得分，班級平均分、標準差等經過簡單計算的統(tǒng)計數(shù)據(jù)，而沒有對得到的統(tǒng)計數(shù)據(jù)進行解釋和說明，對用戶的反饋信息千篇一律，沒有更好體現(xiàn)個別化教學的思想，缺少深層次的教學診斷性信息和教學形

6、成性評價信息 總的說來，目前我國的網絡教學質量測評方面的建設，無論在理論上還是在系統(tǒng)建構上都還處于起步階段，還沒有統(tǒng)一的標準和規(guī)范。 3、本課題研究的主要內容（1/3）v針對國內外的研究現(xiàn)狀，本課題的研究重心分為三個部分，如下：真正從網絡教學的特點出發(fā)，建立較為完整的網絡教學測評系統(tǒng)體系結構，明確網絡教學測評的理論基礎，科學定義網絡教學測評需要檢測的測評要素及其合理區(qū)間等；充分考慮目前網絡測評現(xiàn)狀，針對目前測評系統(tǒng)的缺陷，構建具有充分開放性的、基于WEB的網絡教學測評體系框架。3、本課題研究的主要內容（2/3）v課題的研究重心之二：設計并開發(fā)網絡教學質量測評系統(tǒng)。針對目前國內類似系統(tǒng)的不足，依

7、托CERNET等高速網絡環(huán)境，對網絡教學所需的網絡測評系統(tǒng)及其規(guī)范的關鍵技術開展攻關研究，開發(fā)具有自主知識產權的，可適應各種形式網絡教育活動需要的軟件系統(tǒng)，主要實現(xiàn)課程和知識點大綱管理，標準化試題庫系統(tǒng)的建立和管理，各類公式符號的編輯、存儲和多媒體類型試題標準的建立和實現(xiàn)，各種組卷策略和組卷算法的優(yōu)化整理，規(guī)范試卷/作業(yè)的生成、打包、發(fā)布和導入導出，在線測試、答案回收和監(jiān)考管理，以及學生樣本的智能選取、試卷的自動化批改、點評和個性化分析等，并結合量化和非量化的因素給出測評報告。3、本課題研究的主要內容（3/3）v課題的研究重心之三：在實踐上，針對課題在理論探討和所設計開發(fā)的網絡教學質量測評系統(tǒng)

8、的基礎上，選取目前正在營運的一到兩所網絡學院作為試驗基地，對課題研究成果進行驗證并推向實際應用，實地安裝并運行該軟件系統(tǒng)，對所收集的數(shù)據(jù)和系統(tǒng)運行結果進行分析比較，根據(jù)所得結果對課題的理論和測評系統(tǒng)的建構進行進一步的修訂和完善。4、網絡測評理論的建設v網絡測評理論的建設：基本理論基礎基本理論基礎特點特點類別類別對象對象要素要素過程過程網絡教學測評網絡教學測評5、網絡測評系統(tǒng)的設計開發(fā)（1/3）v系統(tǒng)主要指標和功能指標： 支持對課程、知識點大綱體系的管理支持公式等特殊符號的錄入，圖片、視音頻、動畫等材料的錄入提供現(xiàn)代教育技術領域中比較前沿的多種組卷策略和組卷算法，實現(xiàn)規(guī)范試卷/作業(yè)的自動生成和手

9、動生成、策略生成等多種成卷方式；支持規(guī)范試卷/作業(yè)的打包、發(fā)布和導入、導出功能系統(tǒng)支持實施網上測試的各個環(huán)節(jié)，支持用戶在線測試、答案回收和智能監(jiān)考管理；支持學生樣本的智能選取、試卷的自動化批改、點評和個性化分析等功能提供基于數(shù)據(jù)倉庫的試題庫、試卷庫、作業(yè)庫的數(shù)據(jù)分析合數(shù)據(jù)挖掘功能提供模板化的解決方案，系統(tǒng)采用模塊化開發(fā)技術5、網絡測評系統(tǒng)的設計開發(fā)（2/3）v系統(tǒng)體系結構圖：標準多媒體試題庫模塊標準多媒體試題庫模塊規(guī)范試卷庫和測試模塊規(guī)范試卷庫和測試模塊評價分析、數(shù)據(jù)挖掘評價分析、數(shù)據(jù)挖掘系統(tǒng)層多媒體試題庫個人級多媒體試題庫評價指標體系庫個人級多媒體試題庫學生成績庫系統(tǒng)參數(shù)庫系統(tǒng)多媒體試題庫評

10、價分析庫多媒體作業(yè)庫組卷策略庫系統(tǒng)工具模塊系統(tǒng)工具模塊試卷和測試支持工具多媒體試題庫支持工具作業(yè)和在線自測支持工具評價分析、數(shù)據(jù)挖掘支持工具系統(tǒng)管理、系統(tǒng)設置支持工具開放審核下傳使用組卷策略庫模塊組卷策略庫模塊組卷策略向導和模板添加刪除修改屬性在線批閱點評展示教學輔導在線瀏覽在線測試屏幕鎖定時間限制考場規(guī)則答案回收試卷組卷策略向導總體參數(shù)測試對象分數(shù)分配規(guī)范作業(yè)庫和自測模塊規(guī)范作業(yè)庫和自測模塊教學輔導自我校對小組協(xié)作在線測試在線自測作業(yè)生成策略向導總體參數(shù)測試對象分數(shù)分配知識點選擇題目選擇題型題量生成答案個人評價課程知識點分析用戶分析試卷庫分析和數(shù)據(jù)挖掘作業(yè)庫分析和數(shù)據(jù)挖掘試題庫分析組卷策略管

11、理工具系統(tǒng)工具標準多媒體試題庫組卷策略庫規(guī)范試卷庫和測試規(guī)范作業(yè)庫和自測評價分析和數(shù)據(jù)挖掘5、網絡測評系統(tǒng)的設計開發(fā)（3/3）v系統(tǒng)關鍵技術和主要模塊描述系統(tǒng)工具模塊多媒體試題庫模塊多媒體試卷庫和測試模塊評價分析和數(shù)據(jù)挖掘試題、試卷和作業(yè)資源的導入與導出試卷、作業(yè)的展示與共享6、研究思路和技術路線（3/3）v系統(tǒng)關鍵技術和主要模塊描述4、網絡測評理論的建設v網絡測評理論的建設：（1）網絡測評基本理論基礎返返 回回1、建構主義理論2、教育測量與教育統(tǒng)計學3、教育評價學提供目標與決策方面的指導提供方法上的指導v網絡測評理論的建設：（2）網絡測評的特點測評對象廣泛量化和非量化、主觀和客觀、過程性和總

12、結性測評的緊密結合縮短評價周期，對評價結果可以給以及時的反饋可以對運用現(xiàn)代教育技術實施的智能教學，如對探索、發(fā)現(xiàn)、競爭、協(xié)作、角色扮演等一系列教學策略的教學效果進行有效評價降低了測評的技術要求和費用返返 回回4、網絡測評理論的建設v網絡測評理論的建設：（3）網絡測評的類別配置性評價測量現(xiàn)有知識和能力，了解知識背景、學習條件、學習要求、學習態(tài)度等，據(jù)此進行教學設計、選擇教學進度、策略和方法形成性評價測量知識掌握和試卷作業(yè)情況、階段教學效果和學習進展、存在問題，了解學習者主動性、態(tài)度，并給出描述、提醒和建議總結性評價評定教學目標的達到程度，給出教學與學習效果的最終評價結論，并給出量化和非量化結合的

13、評測報告。 返返 回回4、網絡測評理論的建設v網絡測評理論的建設：（4）網絡測評的對象返返 回回4、網絡測評理論的建設v網絡測評理論的建設：（5）網絡測評的要素針對不同測評對象和目標，網絡教學從對多個評價要素的檢測和記錄而獲得評價的信息和數(shù)據(jù)。對于非量化要素，主要通過調查問卷、主觀評價、和軼事記錄方式；對于量化要素，主要通過測試和對系統(tǒng)資源的訪問記錄進行。量化評價要素主要包括（1）用戶登錄與注銷時間（2）提出/解答問題數(shù)量,瀏覽問題的次數(shù)和提供解決方案次數(shù)（3）發(fā)表的文章及數(shù)據(jù)總量（4）聊天室發(fā)言次數(shù)及發(fā)言數(shù)據(jù)量（5）頁面瀏覽范圍和次數(shù)（6）課程當前學習位置（7）試卷和作業(yè)完成情況與得分（8）

14、上載數(shù)據(jù)量（9）課件運行時間和間隔（10）課件和教學材料應用次數(shù)（11）系統(tǒng)工具利用頻率等 非量化評價要素主要包括（1）各類測評量表（2）評語、軼事記錄、進度、態(tài)度、習慣、想法等（3）活動記錄日志（4）用戶之間的相互反饋信件及記錄等返返 回回4、網絡測評理論的建設v網絡測評理論的建設：（2）網絡測評的過程返返 回回4、網絡測評理論的建設確定評價對象和目標依據(jù)權重進行處理統(tǒng)計搜集信息有效性誤差檢查生成試卷問卷量表診斷表分析信息并進行綜合判斷反饋前評價反饋反饋后評價前次評價活動后次評價活動準備階段實施階段 結果處理階段 結果反饋階段選擇信息來源和處理方法測試或者發(fā)放評價量表給出評價報告和解釋5、網絡測評系統(tǒng)的設計開發(fā)（3/3）v系統(tǒng)工具模塊 系統(tǒng)工具模塊提供對課程知識點庫、用戶管理、系統(tǒng)整體設置、多媒體試題設置、多媒體試卷/作業(yè)庫、測評過程等方面的全面支持，主要包括： 課程知識點管理工具課程知識點管理工具 班級管理工具班級管理工具 系統(tǒng)設置工具系統(tǒng)設置工具 多媒體試題庫管理工具多媒體試題庫管理工具 多媒體試卷多媒體試卷/ /作業(yè)管理工具和測試工具作業(yè)管理工具和測試工具 智能樣本選取工具智能樣本選取工具 評價分析數(shù)據(jù)挖掘工具評價分析數(shù)據(jù)挖掘工具返返 回回5、網絡測評系統(tǒng)的設計開發(fā)（