




版權(quán)說明:本文檔由用戶提供并上傳,收益歸屬內(nèi)容提供方,若內(nèi)容存在侵權(quán),請進(jìn)行舉報或認(rèn)領(lǐng)
文檔簡介
1、.閱卷管理與監(jiān)測系統(tǒng)大規(guī)??荚囎魑脑u分研究系列之六上文說過,大規(guī)??荚囍凶魑脑u分的誤差控制包括三個不可缺少的根本環(huán)節(jié),這就是評分標(biāo)準(zhǔn)、評分方法和閱卷管理。監(jiān)測系統(tǒng)是閱卷管理系統(tǒng)中一個有特殊意義的組成部分。一次大規(guī)模作文考試,假如沒有一套完善的管理制度,沒有一個有效的監(jiān)測系統(tǒng),那么任何評分標(biāo)準(zhǔn)的厘定、評分方法的改進(jìn)都只是一句空話。在測試研究中,考務(wù)管理是一個專門的領(lǐng)域;在測試機(jī)構(gòu)中,考務(wù)管理是一個有特定職能的分支機(jī)構(gòu)??紤]到本刊的讀者對象,以下只作約略的概述。大規(guī)模作文考試的閱卷管理系統(tǒng)大規(guī)模作文考試的閱卷管理系統(tǒng)應(yīng)承擔(dān)以下三個方面的職責(zé):閱卷的業(yè)務(wù)指導(dǎo),閱卷人員的行政管理,閱卷質(zhì)量的監(jiān)測。在現(xiàn)
2、階段,我國比較完善的閱卷管理程度可以示意如下:作文閱卷管理示意圖附圖圖現(xiàn)代科技的開展,為作文閱卷的管理提供了重要的輔助手段。借助這種手段,閱卷管理的主要工作有:試卷的隨機(jī)編排試卷的隨機(jī)編排就是把不同學(xué)校的考生打亂混合排列。有了電腦,這項(xiàng)工作在技術(shù)上是不難解決的。重點(diǎn)學(xué)校與非重點(diǎn)學(xué)校之間,程度可以相差很大,假如不解決隨機(jī)編排問題,那么監(jiān)測系統(tǒng)的數(shù)據(jù)將失去代表性,既使得這些數(shù)據(jù)缺乏應(yīng)有的說服力,也容易出現(xiàn)盲目的調(diào)控。有了隨機(jī)編排,不但閱卷員的評分狀況可以得到比較客觀的反映,而且就閱卷員本人來說,由于一本試卷即同一考場中兼有各類學(xué)校的考生作文,可以大大減弱評分心理的位置效應(yīng)參閱?系列之一?。此舉可以
3、消除評分的系統(tǒng)誤差,即各校的平均成績與其實(shí)際程度大體接近,但還不能遏制評分的隨機(jī)誤差參閱?系列之一?文末注釋。閱卷員的選擇與培訓(xùn)?系列之三?所披露的數(shù)字說明,閱卷人員決不是“年齡大、職稱高才好。閱卷隊(duì)伍的形成應(yīng)該是一個選擇的過程,由于大規(guī)模考試作文評分的特點(diǎn)與困難,閱卷者應(yīng)該是一支半專業(yè)化的隊(duì)伍,為此,需要逐步建立閱卷人員檔案?!案呖甲魑脑u分誤差控制課題組的試驗(yàn)省分有的正考慮實(shí)行“閱卷員證書制度國外已有,這是條很有價值的措施。在選擇閱卷人員的根底上還要進(jìn)展培訓(xùn)。以下兩項(xiàng)調(diào)查反映了短期培訓(xùn)的效果。調(diào)查取各類作文篇,名閱卷員在培訓(xùn)前后兩次重評。結(jié)果如下:培訓(xùn)前培訓(xùn)后篇平均標(biāo)準(zhǔn)差總體標(biāo)準(zhǔn)差可見經(jīng)過培
4、訓(xùn),閱卷員評分的一致性有所進(jìn)步,在拉開分?jǐn)?shù)間隔 方面情況有所改善。調(diào)查取各類作文篇,分成對等兩組,名閱卷員先評第一組作為培訓(xùn)材料,相隔日再評第二組,結(jié)果如下:第一次第二次篇平均標(biāo)準(zhǔn)差觀測結(jié)果與調(diào)查相近。培訓(xùn)可以有兩種方式:短期集中培訓(xùn),結(jié)合閱卷過程進(jìn)展。后者一般都與樣本卷討論和典型卷討論合并進(jìn)展,將在下面專門介紹。樣本卷的選定及其策略即使有了比較完備的評分參照量表參閱上期,每次大規(guī)??荚嚨臉颖揪砣允遣豢缮俚摹_@是因?yàn)槊磕甑脑囶}都有其個性,有其需要特殊處理的矛盾,需要根據(jù)當(dāng)年試題情況編制樣本卷系列予以解決。樣本卷的功能,一是使評分標(biāo)準(zhǔn)明確化、詳細(xì)化,二是針對影響閱卷穩(wěn)定的心理因素予以盡可能的控制
5、。因此編制樣本卷系列,在著眼點(diǎn)方面,在策略方面,和參照量表的編制可以有所不同。參照量表的編制要遵循“等距性原那么,即各典型例卷之間,假如按百分制計(jì)算,其分距大體上是相等的;樣本卷系列的制訂,那么可以進(jìn)一步著眼于“分界限和“分歧點(diǎn)。例如:“趨中傾向參閱?系列之一?是大規(guī)??荚囋u分中一個比較突出的問題,針對這種情況,年江西省在高考作文評分選定樣本卷時采取了以下對策:一、二類樣本卷取下限,三類卷取上、下限。采取上述措施的結(jié)果,各類試卷的分布狀況有所改善:類別一二三四五百分比高考作文每年分值不同,為了便于比較,重新劃分分?jǐn)?shù)段使之能與年相對應(yīng),結(jié)果如下:9129-359120-289112-19911-
6、119033-409023-329014-22901-13199110%46%36%8%90綜6%58%27%9%90綜11%62%22%5%從表中的數(shù)據(jù)可以看出,高分?jǐn)?shù)段的情況沒有顯著變化,而第二檔次的人數(shù)有大幅度下降,第三檔的數(shù)字有明顯上升。從整體上看,打保險分,送“及格分的傾向有所抑制。再取同是采用分項(xiàng)評分法的年文科考生分與年全省考生抽樣統(tǒng)計(jì)的平均數(shù)、標(biāo)準(zhǔn)差、變差系數(shù)標(biāo)準(zhǔn)差平均分相比,結(jié)果如下:平均分標(biāo)準(zhǔn)差變差系數(shù)年總分值分總分值分統(tǒng)計(jì)說明,變差系數(shù)有所增加,即分?jǐn)?shù)離散狀況好于前一年。“分歧點(diǎn)就是容易引起分歧的問題。每年閱卷,都可以發(fā)現(xiàn)“有的作文好評,有的作文難評現(xiàn)象。對于某些作文,評分
7、比較容易趨于一致,對于另一些作文,看法往往分歧。歸納、分析、研究這些評分差異較大的試卷,及時提出來討論,統(tǒng)一認(rèn)識,納入樣本系列,是極其重要的。閱卷流程管理根據(jù)我國慣例,大規(guī)模作文考試通常在暑期或接近暑期進(jìn)展。在高溫、大兵團(tuán)突擊作戰(zhàn)的閱卷?xiàng)l件下,應(yīng)該特別注意閱卷人員的生活安排和保健措施。就閱卷流程管理而言,要特別注意以下兩項(xiàng)工作:平衡投卷,控制速度閱卷速度必須均勻,前松后緊之類都必然擴(kuò)大誤差??紤]到閱卷員純熟程度不斷進(jìn)步,可以先略慢后稍快,但各組之間必須同步前進(jìn)。要嚴(yán)禁各組攀比速度,指導(dǎo)小組要掌握進(jìn)度,但決不應(yīng)公布進(jìn)度,一公布必然對較慢的組產(chǎn)生壓力而滋生誤差。此外,假如閱卷人員之間存在著利害關(guān)系
8、互相競爭的學(xué)校、區(qū)縣等,試卷的投放還要注意流向,以免人為因素干擾。閱卷的速度與質(zhì)量有直接關(guān)系,速度過快必然評估粗糙。由于目前實(shí)行的承包制以及閱卷數(shù)量與報酬掛鉤的原因,閱卷速度不斷加快。據(jù)理解,高考作文有的地區(qū)個別閱卷員的速度竟到達(dá)日份以上,在這種情況下,閱卷質(zhì)量是無法得到保證的。承包制不適用于作文閱卷,必須予以解決。制訂行為準(zhǔn)那么“多元評定法是減小各評閱者評分誤差的重要措施。根據(jù)賽蒙茲Symonds的研究,一組作文假設(shè)由兩人評定,其相關(guān)系數(shù)為,經(jīng)四人評定后再由另四人評定,那么相關(guān)系數(shù)可達(dá),假設(shè)經(jīng)八人評定后再評定,相關(guān)系數(shù)可以增加到。目前,美國威斯曼的“快速印象法和英國倫敦教育研究所的實(shí)驗(yàn)都要求
9、一份試卷經(jīng)四人評定。在我國,一般原那么上規(guī)定一份試卷應(yīng)由兩人共評,要求已經(jīng)很低,但實(shí)際上仍無法做到。在這種情況下,應(yīng)該就“對子行為作出一些規(guī)定,例如至少要求兩人先共評假設(shè)干份,分評后每天必須相互抽查各等級的作文假設(shè)干篇,發(fā)現(xiàn)問題及時磋商,并有相應(yīng)的檢查措施,等等。這已經(jīng)是最低限度的要求。紀(jì)律松散、工作態(tài)度不嚴(yán)肅,是無法保證閱卷質(zhì)量的。因此,還應(yīng)當(dāng)制訂?閱卷員守那么?,并且有相應(yīng)的獎懲制度。對于不合格的閱卷人員必須堅(jiān)決汰除。課題組各試驗(yàn)省份都有被判“紅牌者,對維護(hù)閱卷的嚴(yán)肅性有良好的作用。監(jiān)測及復(fù)查由于這個問題的重要性,將在下文專門介紹。建立、健全監(jiān)測系統(tǒng)大規(guī)模作文考試假如沒有一個有效的監(jiān)測系統(tǒng)
10、,那么任何研究、條例和改進(jìn)措施將毫無意義。我國長期慣用的“復(fù)查就是一種監(jiān)測方法,不過隨著科技手段的進(jìn)步,監(jiān)測手段日益豐富,怎樣借助科技手段來開展監(jiān)測系統(tǒng)就成為人們研究的一個課題??萍际侄螒?yīng)用于評分監(jiān)測,有“隱形筆等注,不過目前主要是電腦。國外有利用電腦直接進(jìn)展調(diào)控的,即以試卷中某些客觀性較強(qiáng)試題的得分為參照系,假如發(fā)現(xiàn)某地區(qū)或某閱卷員的主觀題給分與其它地區(qū)或其他閱卷員的評分平均值相比明顯偏低或偏高,可以通過數(shù)學(xué)方法加以調(diào)整。我國英語高考也曾采用過這種方法。但語文是一門綜合性很強(qiáng)的學(xué)科,其測試也屬于異質(zhì)性測試,經(jīng)過屢次測算,各試題包括作文的得分之間沒有必然聯(lián)絡(luò)。即以寫作才能而論,母語和外語不同,
11、母語作文的才能層次要求大大高于外語,高層次能力如立意與低層次才能如書寫之間,得分也沒有必然聯(lián)絡(luò)。因此用其它試題作參照系的方法就作文評分而論是不科學(xué)的,也是不可取的。再就各閱卷員之間的評分來說,由于評分對象的差異例如一市集中閱卷,各區(qū)之間的程度就會有所不同,很難據(jù)此就作出“偏嚴(yán)、“偏松的判斷,假如驟然利用電腦直接調(diào)整,很難防止盲目調(diào)控。因此,至少就作文評分而言,機(jī)器只能及時發(fā)現(xiàn)問題,最后的裁斷還必須由人工專家來做出。當(dāng)前,利用電腦監(jiān)測主要有以下幾種方法:指標(biāo)監(jiān)測用以監(jiān)測的指標(biāo)主要有“平均分和“標(biāo)準(zhǔn)差。平均分可以顯示出閱卷者給分有沒有偏高或偏低的問題;標(biāo)準(zhǔn)差顯示給分的離散程度,顯示出有沒有“打保險
12、分的趨向。將閱卷員每日每份試卷的給分及時輸入電腦,如有問題,就可以及時發(fā)現(xiàn)。參照系監(jiān)測由核心組先隨機(jī)抽閱一批試卷,將數(shù)據(jù)輸入電腦,以所形成的曲線作為參照系。參照系有允許浮動的一定幅度。閱卷員每日評分結(jié)果在圖形顯示上假如超越了幅度,電腦就能及時檢出以備復(fù)查?!鞍迭c(diǎn)監(jiān)測即由核心組隨機(jī)抽閱一批試卷,機(jī)密輸入電腦,閱卷員評此卷時,假如給分差距過大,就能及時發(fā)現(xiàn)檢出,顯示該閱卷員所評其它試卷也可能存在問題。本方法原理雖然簡單,但頗為有效。內(nèi)部相關(guān)監(jiān)測這是我國試驗(yàn)分項(xiàng)評分時所創(chuàng)造的一種方法。其原理是各分項(xiàng)得分之間往往具有一定的相關(guān)性,由此設(shè)計(jì)了數(shù)學(xué)模型,把測算結(jié)果稱為U值。U值過大或過小,都可以提供信息供復(fù)查組審核、裁奪。此方法年在河北省試驗(yàn)與指標(biāo)監(jiān)測法同時采用,當(dāng)年結(jié)果如下X撥為平均分為標(biāo)準(zhǔn)差:試卷增加分減少分增加分減少分平均每袋數(shù)數(shù)篇數(shù)數(shù)篇數(shù)數(shù)總和數(shù)總和袋改動X撥出線出線U值小U值大說明:平均分低于控制線的袋,經(jīng)復(fù)查,分?jǐn)?shù)變
溫馨提示
- 1. 本站所有資源如無特殊說明,都需要本地電腦安裝OFFICE2007和PDF閱讀器。圖紙軟件為CAD,CAXA,PROE,UG,SolidWorks等.壓縮文件請下載最新的WinRAR軟件解壓。
- 2. 本站的文檔不包含任何第三方提供的附件圖紙等,如果需要附件,請聯(lián)系上傳者。文件的所有權(quán)益歸上傳用戶所有。
- 3. 本站RAR壓縮包中若帶圖紙,網(wǎng)頁內(nèi)容里面會有圖紙預(yù)覽,若沒有圖紙預(yù)覽就沒有圖紙。
- 4. 未經(jīng)權(quán)益所有人同意不得將文件中的內(nèi)容挪作商業(yè)或盈利用途。
- 5. 人人文庫網(wǎng)僅提供信息存儲空間,僅對用戶上傳內(nèi)容的表現(xiàn)方式做保護(hù)處理,對用戶上傳分享的文檔內(nèi)容本身不做任何修改或編輯,并不能對任何下載內(nèi)容負(fù)責(zé)。
- 6. 下載文件中如有侵權(quán)或不適當(dāng)內(nèi)容,請與我們聯(lián)系,我們立即糾正。
- 7. 本站不保證下載資源的準(zhǔn)確性、安全性和完整性, 同時也不承擔(dān)用戶因使用這些下載資源對自己和他人造成任何形式的傷害或損失。
最新文檔
- 河北省滄州市孝子墓中學(xué)2025年高一化學(xué)第二學(xué)期期末預(yù)測試題含解析
- 云南省元江民中2025屆高一下化學(xué)期末達(dá)標(biāo)檢測模擬試題含解析
- 2025屆廣西梧州市岑溪市高一下化學(xué)期末統(tǒng)考試題含解析
- 公園流動漁具管理辦法
- 春節(jié)車票報銷管理辦法
- 北京裝修押金管理辦法
- 公司舊房分配管理辦法
- 公開掛牌收款管理辦法
- “萬名教師訪萬戶”活動成效評估報告
- AIGC賦能制造業(yè)生產(chǎn)力的技術(shù)路徑與實(shí)踐研究
- 水泥場地改造方案(3篇)
- 資材部安全生產(chǎn)責(zé)任制
- 既有建筑節(jié)能綜合改造項(xiàng)目可行性研究報告
- 貴州省銅仁市萬山區(qū)2024-2025學(xué)年部編版七年級下學(xué)期6月期末歷史試題(含答案)
- 2025年工程管理基礎(chǔ)知識考試試卷及答案
- 礦山生態(tài)修復(fù)方案
- 2024年江西省公安廳招聘警務(wù)輔助人員考試真題
- 聯(lián)想銷售人員管理制度
- 貴州2023年高中學(xué)業(yè)水平合格性考試地理試卷真題(含答案詳解)
- 乙烯 - 辛烯溶液共聚反應(yīng)機(jī)理及聚合物鏈結(jié)構(gòu)調(diào)控策略探究
- 開曼群島公司法2024版中文譯本(含2024年修訂主要內(nèi)容)
評論
0/150
提交評論