大規(guī)模教育考試命題——理論和實(shí)踐問題

1、大規(guī)模教育考試命題理論和實(shí)踐問題 大規(guī)模教育考試?yán)碚摵蛯?shí)踐問題雷 新 勇上海市教育考試院大規(guī)模教育考試命題理論和實(shí)踐問題考試考學(xué)生什么？考試考學(xué)生什么？考試分?jǐn)?shù)準(zhǔn)確、可靠嗎？考試分?jǐn)?shù)準(zhǔn)確、可靠嗎？考試對(duì)所有的考生公平、公正嗎？考試對(duì)所有的考生公平、公正嗎？考試的價(jià)值觀與社會(huì)的公認(rèn)價(jià)值觀一致嗎？考試的價(jià)值觀與社會(huì)的公認(rèn)價(jià)值觀一致嗎？考試對(duì)學(xué)校的教育、教學(xué)有正面的作用嗎？考試對(duì)學(xué)校的教育、教學(xué)有正面的作用嗎？大規(guī)模教育考試關(guān)注的基本問題大規(guī)模教育考試命題理論和實(shí)踐問題抽象出的考試?yán)碚摵蛯?shí)踐問題考試的信度考試的信度可靠性或分?jǐn)?shù)的誤差可靠性或分?jǐn)?shù)的誤差考試的效度考試的效度考試的有效性或?qū)荚嚱Y(jié)果的解考

2、試的有效性或?qū)荚嚱Y(jié)果的解 釋和適用是否適當(dāng)、有釋和適用是否適當(dāng)、有效。效?？荚嚨墓?、公正性考試的公平、公正性考試平等對(duì)待所有考生考試平等對(duì)待所有考生考試的后效影響考試的后效影響考試對(duì)社會(huì)價(jià)值觀、對(duì)學(xué)?？荚噷?duì)社會(huì)價(jià)值觀、對(duì)學(xué)校 教育教學(xué)有何影教育教學(xué)有何影響響大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè)假設(shè)假設(shè)1 1：人的心理特質(zhì)是存在的：人的心理特質(zhì)是存在的 心理特質(zhì)：一個(gè)個(gè)體與其他個(gè)體不同的、可以識(shí)別的、心理特質(zhì)：一個(gè)個(gè)體與其他個(gè)體不同的、可以識(shí)別的、相對(duì)穩(wěn)定的特征（相對(duì)穩(wěn)定的特征（Any distinguished, relatively Any distinguish

3、ed, relatively enduring way in which one individual varies from enduring way in which one individual varies from anotheranother） 。例如，人的智力、認(rèn)知方式、適應(yīng)性、興。例如，人的智力、認(rèn)知方式、適應(yīng)性、興趣、態(tài)度、價(jià)值觀、一般個(gè)性、特殊個(gè)性等趣、態(tài)度、價(jià)值觀、一般個(gè)性、特殊個(gè)性等根據(jù)對(duì)人的行為樣本的觀察可以確定心理特質(zhì)及其強(qiáng)度。根據(jù)對(duì)人的行為樣本的觀察可以確定心理特質(zhì)及其強(qiáng)度。 觀察方式：觀察方式：direction observationdirection obs

4、ervation analysis of self-report statements analysis of self-report statements testing testing大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè)假設(shè)假設(shè)1 1：人的心理特質(zhì)是存在的：人的心理特質(zhì)是存在的 心理結(jié)構(gòu)（心理結(jié)構(gòu)（constructconstruct）：）：an informed, scientifican informed, scientific concept to explain behavior. concept to explain behavior. 知識(shí)與技能、過程與

5、方法、情感、態(tài)度和價(jià)值觀知識(shí)與技能、過程與方法、情感、態(tài)度和價(jià)值觀 相對(duì)穩(wěn)定相對(duì)穩(wěn)定(relatively enduring):(relatively enduring):個(gè)體在某種程度上表現(xiàn)出個(gè)體在某種程度上表現(xiàn)出某一特質(zhì)是具有環(huán)境依賴性的某一特質(zhì)是具有環(huán)境依賴性的. 一個(gè)個(gè)體與其他個(gè)體不同的特征（一個(gè)個(gè)體與其他個(gè)體不同的特征（one individual varies one individual varies from anotherfrom another）：心理特質(zhì)的這個(gè)屬性說明心理特征是一個(gè)）：心理特質(zhì)的這個(gè)屬性說明心理特征是一個(gè)相對(duì)現(xiàn)象，在教育和心理測試與評(píng)價(jià)中，評(píng)價(jià)者也要將對(duì)象

6、相對(duì)現(xiàn)象，在教育和心理測試與評(píng)價(jià)中，評(píng)價(jià)者也要將對(duì)象的評(píng)價(jià)情況與假設(shè)的一般人，做出比較，或者直接將同一評(píng)的評(píng)價(jià)情況與假設(shè)的一般人，做出比較，或者直接將同一評(píng)價(jià)群體中的不同個(gè)體作比較。價(jià)群體中的不同個(gè)體作比較。大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè)假設(shè)假設(shè)2 2：心理特質(zhì)或心理結(jié)構(gòu)是可以量化并且測量的：心理特質(zhì)或心理結(jié)構(gòu)是可以量化并且測量的 定義心理結(jié)構(gòu)定義心理結(jié)構(gòu) 行為目標(biāo)：根據(jù)什么樣的行為來判斷對(duì)象具備的心理結(jié)構(gòu)的行為目標(biāo)：根據(jù)什么樣的行為來判斷對(duì)象具備的心理結(jié)構(gòu)的強(qiáng)度。強(qiáng)度。 如何使考生表現(xiàn)出要觀察的行為：用何內(nèi)容的試題如何使考生表現(xiàn)出要觀察的行為：用何內(nèi)容的試題 如

7、何對(duì)行為進(jìn)行量化：賦分如何對(duì)行為進(jìn)行量化：賦分 如何用數(shù)學(xué)模型進(jìn)行處理如何用數(shù)學(xué)模型進(jìn)行處理大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè) 假設(shè)3：與考試相關(guān)的行為可以預(yù)測非考試相關(guān)的行為 預(yù)測什么非考試環(huán)境下的行為？ 高考：高等教育條件下的行為 考試中，創(chuàng)造哪種測試環(huán)境 英語：真實(shí)的交際語言環(huán)境 數(shù)學(xué)：抽象的、academic circumstances 物理：真實(shí)的、抽象的、academic、experimental 化學(xué)：真實(shí)的、抽象的、academic、experimental 地理：真實(shí)的、earth-related大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基

8、本假設(shè) 假設(shè)4：每種測試方法或技術(shù)都有其優(yōu)勢(shì)和弱勢(shì) Paper and pencil Testing Oral Test Interview Class Observation School Observation 常模參照和標(biāo)準(zhǔn)參照考試大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè) 假設(shè)5：測量過程中必然會(huì)產(chǎn)生誤差。 誤差是指測量心理結(jié)構(gòu)以外的因素所產(chǎn)生的效應(yīng)。 教育考試中考生的行為表現(xiàn)除受到測量的心理結(jié)構(gòu)影響外，還會(huì)受到其他因素的影響，這些因素所產(chǎn)生的效應(yīng)就是誤差。 誤差是所有測量過程一定存在的。 誤差是測量過程必須要考慮的一個(gè)變量，由該變量產(chǎn)生的分?jǐn)?shù)變化稱為誤差方差。 經(jīng)典

9、的真分?jǐn)?shù)理論、概化理論、項(xiàng)目反應(yīng)理論大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè) 假設(shè)6：測試和評(píng)價(jià)可以是公平的、無偏的 這是心理測量領(lǐng)域爭議最大的一個(gè)假設(shè) 公平、無偏就是要平等地對(duì)待每一個(gè)考生，無論其性別、民族、居住地如何；考生的與測量的心理結(jié)構(gòu)無關(guān)的個(gè)性特征對(duì)考試結(jié)果以及結(jié)果的解釋沒有明顯的影響。 公平、無偏的關(guān)鍵是所有考生對(duì)測試、評(píng)價(jià)有足夠的了解大規(guī)模教育考試命題理論和實(shí)踐問題教育考試的心理學(xué)基礎(chǔ)基本假設(shè) 假設(shè)7：測試和評(píng)價(jià)可以造福社會(huì) 沒有測試和評(píng)價(jià)就沒有甑別，就會(huì)出現(xiàn)社會(huì)混亂。 學(xué)校教師無法診斷、無法因材施教 社會(huì)無法選擇適合各行各業(yè)的人才 測試和評(píng)價(jià)可以對(duì)社會(huì)的價(jià)值

10、觀產(chǎn)生影響 測試和評(píng)價(jià)可以對(duì)學(xué)校的教育、教學(xué)產(chǎn)生積極影響。大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度有效性效度是指各種證據(jù)和理論對(duì)考試結(jié)果的解釋和使用的支效度是指各種證據(jù)和理論對(duì)考試結(jié)果的解釋和使用的支持程度。持程度。 有效性是一種價(jià)值判斷有效性是一種價(jià)值判斷 建立價(jià)值判斷的標(biāo)準(zhǔn)建立價(jià)值判斷的標(biāo)準(zhǔn) 收集支持價(jià)值判斷的證據(jù)收集支持價(jià)值判斷的證據(jù)標(biāo)準(zhǔn)標(biāo)準(zhǔn)測量目標(biāo)測量目標(biāo)證據(jù)來源證據(jù)來源考試大綱、試題、試卷、考試考試大綱、試題、試卷、考試 結(jié)果數(shù)據(jù)等。結(jié)果數(shù)據(jù)等。證據(jù)類型證據(jù)類型內(nèi)容、應(yīng)答過程、內(nèi)部結(jié)構(gòu)、與其它變量的關(guān)系、內(nèi)容、應(yīng)答過程、內(nèi)部結(jié)構(gòu)、與其它變量的關(guān)系、考試的后果?？荚嚨暮蠊４笠?guī)模教育

11、考試命題理論和實(shí)踐問題課程標(biāo)準(zhǔn)課程標(biāo)準(zhǔn)課程標(biāo)準(zhǔn)中學(xué)習(xí)目標(biāo)的基本要求課程標(biāo)準(zhǔn)中學(xué)習(xí)目標(biāo)的基本要求 可評(píng)估性可評(píng)估性 可理解性可理解性 可執(zhí)行性可執(zhí)行性 可完成性可完成性教育考試的測量目標(biāo)來源大規(guī)模教育考試命題理論和實(shí)踐問題中外課程標(biāo)準(zhǔn)學(xué)習(xí)目標(biāo)的對(duì)比美國課標(biāo)中國課標(biāo)注重目標(biāo)好內(nèi)容規(guī)定較籠統(tǒng)教學(xué)建議較籠統(tǒng)無教材編寫建議目標(biāo)規(guī)定較籠統(tǒng)內(nèi)容規(guī)定很細(xì)有教學(xué)建議有教材編寫建議教材編寫目標(biāo)明確教學(xué)目標(biāo)明確需要選擇教材或內(nèi)容課難上好評(píng)價(jià)教材與目標(biāo)不完全一致不太關(guān)注總的教學(xué)目標(biāo)不需要選擇教材或內(nèi)容課好上不太好評(píng)價(jià)三個(gè)層次的目標(biāo)體系目標(biāo)層次混亂大規(guī)模教育考試命題理論和實(shí)踐問題考試的測量目標(biāo)構(gòu)成測量目標(biāo)測量目標(biāo)Goa

12、lsGoals are broad statements which specify what the students are supposed to be able to know and to do.具體目標(biāo)具體目標(biāo)ObjectivesObjectives are specific statements which specify what behaviors the students are supposed to show to demonstrate their knowledge and abilities.表現(xiàn)水平標(biāo)準(zhǔn)表現(xiàn)水平標(biāo)準(zhǔn)Performance StandardsPer

13、formance Standards specify how good of the students behaviors is good.大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度證據(jù)類型考試或試卷的內(nèi)容考試或試卷的內(nèi)容應(yīng)答過程應(yīng)答過程內(nèi)部結(jié)構(gòu)內(nèi)部結(jié)構(gòu)與其它變量的關(guān)系與其它變量的關(guān)系考試的后果考試的后果大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度內(nèi)容方面的證據(jù) 試卷覆蓋的學(xué)科知識(shí)、學(xué)科的思維方法（過程）、學(xué)科的（實(shí)驗(yàn)）技能的主要行為；這些行為是否進(jìn)行了適當(dāng)?shù)拿枋觯?這些需要由學(xué)科專家和測量專家共同做出的判斷。 試題樣本是否適當(dāng)?shù)卮硪欢ǖ膬?nèi)容領(lǐng)域。 這一證據(jù)主要關(guān)注的是試題內(nèi)容的代表性，即試題

14、覆蓋的學(xué)科知識(shí)、學(xué)科的思維方法（過程）、學(xué)科的（實(shí)驗(yàn)）技能等，是否足以反映學(xué)科知識(shí)、思維方法和（實(shí)驗(yàn)）技能。大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度應(yīng)答過程方面的證據(jù) 考生的應(yīng)答或在考試中的表現(xiàn)與考試欲測量的心理結(jié)構(gòu)的一致程度 這一證據(jù)主要通過觀察、交流以及應(yīng)答結(jié)果分析獲得。 考生應(yīng)答過程的理論和經(jīng)驗(yàn)分析 這個(gè)證據(jù)需要既有學(xué)科背景，又有測量學(xué)背景的專家來分析 考生應(yīng)答過程的觀察記錄 大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度應(yīng)答過程方面的證據(jù) 試題及試題包測量的行為與考試欲測量的心理結(jié)構(gòu)的一致程度 試題要有明確的測量具體目標(biāo) 命題要按照確定的具體目標(biāo)命題 要對(duì)命題教師命制的試題，尤其是設(shè)問進(jìn)

15、行檢查 要對(duì)試題的具體目標(biāo)與總的測量目標(biāo)的一致性進(jìn)行評(píng)價(jià) 內(nèi)部結(jié)構(gòu)統(tǒng)計(jì)結(jié)果 試題包之間的相關(guān)關(guān)系 因子分析結(jié)果。 大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度與外部變量關(guān)系的證據(jù) 考試分?jǐn)?shù)與外部變量之間的關(guān)系所揭示出的與考試欲測量的心理結(jié)構(gòu)之間的關(guān)系，對(duì)大規(guī)模教育考試而言，外部變量主要是指與考試測量的心理結(jié)構(gòu)相關(guān)或不同的變量。 一致性關(guān)系（convergent evidence） 不一致性（discriminant evidence） 心理結(jié)構(gòu)A成績心理結(jié)構(gòu)A成績心理結(jié)構(gòu)B成績心理結(jié)構(gòu)A成績大規(guī)模教育考試命題理論和實(shí)踐問題考試的效度與外部變量關(guān)系的證據(jù) 考試與標(biāo)準(zhǔn)測試之間的關(guān)系，關(guān)注考試結(jié)果可以

16、多大程度上準(zhǔn)確地預(yù)測考生在標(biāo)準(zhǔn)測試中的行為。預(yù)測有效性同期有效性 現(xiàn)在的考試成績未來考試成績現(xiàn)在的考試成績同期考試成績大規(guī)模教育考試命題理論和實(shí)踐問題考試的信度傳統(tǒng)的認(rèn)識(shí) 信度信度不同測量的一致性不同測量的一致性 Temporal stability 相關(guān)系數(shù)相關(guān)系數(shù)r Form equivalence 相關(guān)系數(shù)相關(guān)系數(shù)r Internal consistencyalpha信度系數(shù)信度系數(shù) 內(nèi)部一致性信度內(nèi)部一致性信度 內(nèi)部一致性系數(shù)一般是指內(nèi)部一致性系數(shù)一般是指Cronbach系數(shù)、系數(shù)、KR-20系數(shù)或系數(shù)或分半系數(shù)，最廣泛使用的是分半系數(shù)，最廣泛使用的是Cronbach系數(shù)系數(shù) Cron

17、bach系數(shù)系數(shù) 信度是效度的前提條件信度是效度的前提條件 沒有高的信度就沒有高的效度沒有高的信度就沒有高的效度j2Yjj/1)1m/(m大規(guī)模教育考試命題理論和實(shí)踐問題考試分?jǐn)?shù)的信度 經(jīng)典的真分?jǐn)?shù)理論 基本方程觀察分?jǐn)?shù)方差真分?jǐn)?shù)方差信度 誤差分?jǐn)?shù)方差真分?jǐn)?shù)方差真分?jǐn)?shù)方差信度ETx 觀察分?jǐn)?shù) 真分?jǐn)?shù) 誤差分?jǐn)?shù)xTE大規(guī)模教育考試命題理論和實(shí)踐問題考試分?jǐn)?shù)的信度 經(jīng)典的真分?jǐn)?shù)理論 信度系數(shù)的解釋（Nunaally 1967） 信度系數(shù)信度系數(shù)解解 釋釋0.900.90或以上或以上信度很好，達(dá)到了最好的標(biāo)準(zhǔn)化測試的水平。信度很好，達(dá)到了最好的標(biāo)準(zhǔn)化測試的水平。0.800.80到到0.900.90對(duì)

18、學(xué)校測試而言，已經(jīng)是非常好了。對(duì)學(xué)校測試而言，已經(jīng)是非常好了。0.700.70到到0.800.80對(duì)學(xué)校測試而言，大部分試題都很好；可能有對(duì)學(xué)校測試而言，大部分試題都很好；可能有少數(shù)試題需要改進(jìn)。少數(shù)試題需要改進(jìn)。0.600.60到到0.700.70信度偏低，需要補(bǔ)充其他測試以確定分?jǐn)?shù)或等信度偏低，需要補(bǔ)充其他測試以確定分?jǐn)?shù)或等第。部分試題可能需要改進(jìn)。第。部分試題可能需要改進(jìn)。0.500.50到到0.600.60信度低。建議對(duì)試卷進(jìn)行修改，除非試卷的試信度低。建議對(duì)試卷進(jìn)行修改，除非試卷的試題量很少（題量很少（1010題或少于題或少于1010題）。需要補(bǔ)充其他題）。需要補(bǔ)充其他考試來可靠地確

19、定分?jǐn)?shù)或等第考試來可靠地確定分?jǐn)?shù)或等第小于小于0.500.50信度有問題?？荚嚮緹o效，需要修改。信度有問題?？荚嚮緹o效，需要修改。大規(guī)模教育考試命題理論和實(shí)踐問題考試的信度新的認(rèn)識(shí) 不能再將不能再將CronbachCronbach系數(shù)公式看作是檢查大部分考試數(shù)據(jù)系數(shù)公式看作是檢查大部分考試數(shù)據(jù)可靠性的最適宜方法可靠性的最適宜方法 。 標(biāo)準(zhǔn)測量誤差標(biāo)準(zhǔn)測量誤差 是衡量考試結(jié)果可靠性的唯一指標(biāo)。是衡量考試結(jié)果可靠性的唯一指標(biāo)。 根據(jù)考試結(jié)果使用的目的設(shè)置可以接受的最低測量誤差根據(jù)考試結(jié)果使用的目的設(shè)置可以接受的最低測量誤差最低測量誤差決定了試卷的結(jié)構(gòu)，如試題的數(shù)量、試題的最低測量誤差決定了試卷

20、的結(jié)構(gòu)，如試題的數(shù)量、試題的題型及其比例等等。題型及其比例等等。 試題樣本采集的獨(dú)立性試題樣本采集的獨(dú)立性 局部獨(dú)立局部獨(dú)立 測試內(nèi)容的不均勻性測試內(nèi)容的不均勻性 單維單維/ /多維多維評(píng)價(jià)結(jié)果可靠性的方法不一樣評(píng)價(jià)結(jié)果可靠性的方法不一樣 如何使用測試結(jié)果如何使用測試結(jié)果 絕對(duì)決策絕對(duì)決策/ /相對(duì)決策相對(duì)決策大規(guī)模教育考試命題理論和實(shí)踐問題考試的信度新的實(shí)踐 首先根據(jù)考試結(jié)果使用的目的確定可以接受的測量誤差 正式考試推出前，要試測，抽出代表性樣本，檢查試測卷的測量誤差，以便對(duì)試卷結(jié)構(gòu)進(jìn)行修改。 命題之前要根據(jù)分?jǐn)?shù)合成的要求，確定試卷的維度。 單一合成分?jǐn)?shù)單維試卷 多維試卷根據(jù)測量的能力目標(biāo)、

21、內(nèi)容領(lǐng)域分別報(bào)道分?jǐn)?shù)。試題難度、區(qū)分度、測量誤差的評(píng)價(jià)方法不一樣。 命題中要避免局部依賴性 相當(dāng)部分試卷都存在這種情況 常模參照考試與標(biāo)準(zhǔn)參照考試測量誤差評(píng)價(jià)方法不一樣。1SSE大規(guī)模教育考試命題理論和實(shí)踐問題經(jīng)典的真分?jǐn)?shù)理論中 測量的標(biāo)準(zhǔn)誤差與信度的關(guān)系CTT中考試的標(biāo)準(zhǔn)差與信度、測量的標(biāo)準(zhǔn)誤差關(guān)系012345678123456789考試的標(biāo)準(zhǔn)差測量的標(biāo)準(zhǔn)誤差r=0.85r=0.90r=0.95大規(guī)模教育考試命題理論和實(shí)踐問題考試的信度概化理論 誤差方差是多來源的誤差分?jǐn)?shù)方差真分?jǐn)?shù)方差真分?jǐn)?shù)方差信度評(píng)分者試題其它概化理論的重要貢獻(xiàn)之一 就是研究不同來源的誤差大規(guī)模教育考試命題理論和實(shí)踐問題典

22、型的考生分?jǐn)?shù)變化可以歸結(jié)為以下因素：概化理論通過估計(jì)出這些來源的方差，就可以對(duì)這些方差作出比較，確定不同來源的方差對(duì)考生分?jǐn)?shù)方差的貢獻(xiàn)。對(duì)一個(gè)信度較高的考試，其全域分?jǐn)?shù)方差要大，其他來源的方差（潛在的誤差方差）要小。2（Xpir）=2（p）+2(i)+2(r)+2(pi) +2(pr)+2(ir)+2(pir)考生方差試題方差評(píng)分者方差交互作用方差考試的信度概化理論 大規(guī)模教育考試命題理論和實(shí)踐問題相對(duì)誤差方差考試的信度概化理論 2222relppERel概化系數(shù)222abspp可靠性指數(shù)絕對(duì)誤差方差大規(guī)模教育考試命題理論和實(shí)踐問題這些系數(shù)和誤差方差是我們研究考試分?jǐn)?shù)可靠性、控制測量誤差、對(duì)考

23、試作出改進(jìn)的主要依據(jù)。相對(duì)誤差方差irelnpi/)(22)/()(/ )(/ )(2222ririrelnnpirnprnpi考試的信度概化理論 絕對(duì)誤差方差rirelnipi/)()(222)/()()(/)()(22222riirelnnpirirnipi大規(guī)模教育考試命題理論和實(shí)踐問題考試的信度項(xiàng)目反應(yīng)理論 可以估計(jì)每個(gè)考生的能力水平能力分?jǐn)?shù) 真分?jǐn)?shù)理論和概化理論均不能估計(jì)被試個(gè)體的能力水平。兩種方法都是圍繞觀察分?jǐn)?shù)，確定一個(gè)置信區(qū)間內(nèi)，合理的推測被試個(gè)體的能力水平真分?jǐn)?shù)或全域分?jǐn)?shù)位于該區(qū)間之內(nèi)，區(qū)間的大小是由置信度和測量誤差共同確定的。 確定置信區(qū)間時(shí)，是以被試群體的表現(xiàn)為基礎(chǔ)的，因

24、此無論被試個(gè)體的能力是高，還是低，或是中等，置信區(qū)間對(duì)每個(gè)被試是相同的。 如果測量同一特質(zhì)的試題數(shù)達(dá)到一定的數(shù)量，則被試的能力估計(jì)就與考試采用的試題無關(guān)。 如果用來進(jìn)行參數(shù)估計(jì)的樣本達(dá)到一定的數(shù)量，則估計(jì)出的試題參數(shù)就與估計(jì)采用的樣本無關(guān)。 試題和考試提供的信息量或試題和考試的測量精度與考生群體無關(guān)。 大規(guī)模教育考試命題理論和實(shí)踐問題考試的信度項(xiàng)目反應(yīng)理論考試信息函數(shù)：niiII1)()(2)(7 . 1)(7 . 12)1 (*)()189. 2)(iiiibabaiiiieeccaI（試題信息函數(shù)： 2)(7.1)(7.12)1(*)(89.2)(iiiibabaiieeaI)(1)()(

25、)(2iiiiPPPI兩參數(shù)模型： 三參數(shù)模型： 大規(guī)模教育考試命題理論和實(shí)踐問題考生能力估計(jì)值的標(biāo)準(zhǔn)誤差)(1)(ISE確定能力分?jǐn)?shù)的測量誤差)(/96. 1)(/96. 1II考試的信度項(xiàng)目反應(yīng)理論大規(guī)模教育考試命題理論和實(shí)踐問題大規(guī)模教育考試命題理論和實(shí)踐問題考試的公平性考生的與測量的心理結(jié)構(gòu)無關(guān)的個(gè)性特征對(duì)考試結(jié)考生的與測量的心理結(jié)構(gòu)無關(guān)的個(gè)性特征對(duì)考試結(jié)果以及結(jié)果的解釋沒有明顯的影響果以及結(jié)果的解釋沒有明顯的影響不同的考生群體，如男、女考生，城市與農(nóng)村或郊不同的考生群體，如男、女考生，城市與農(nóng)村或郊區(qū)的考生，不同省市的考生之間考試結(jié)果的統(tǒng)計(jì)差區(qū)的考生，不同省市的考生之間考試結(jié)果的統(tǒng)計(jì)

26、差異只能是由考試要測量的心理結(jié)構(gòu)的差異引起的，異只能是由考試要測量的心理結(jié)構(gòu)的差異引起的，其他因素對(duì)其沒有明顯的可以探測出的影響。其他因素對(duì)其沒有明顯的可以探測出的影響。試題的情景材料，包括有聲、圖像材料，對(duì)所有的試題的情景材料，包括有聲、圖像材料，對(duì)所有的考生群體都是公平的?？忌后w都是公平的。 所有考生都能同等地獲取考試的信息，考生不會(huì)因所有考生都能同等地獲取考試的信息，考生不會(huì)因?yàn)槠渌妥x的地區(qū)、學(xué)校的差異，生活的家庭的差為其所就讀的地區(qū)、學(xué)校的差異，生活的家庭的差異，不能同等地獲得考試的相關(guān)信息。異，不能同等地獲得考試的相關(guān)信息。 大規(guī)模教育考試命題理論和實(shí)踐問題試題功能偏差（DIF

27、& DTF）不同子群體分?jǐn)?shù)有明顯差異，或者分?jǐn)?shù)相近但能不同子群體分?jǐn)?shù)有明顯差異，或者分?jǐn)?shù)相近但能力測度有明顯差異力測度有明顯差異差異來源差異來源能力上的差異能力上的差異兩個(gè)群體的確有差異兩個(gè)群體的確有差異試題功能偏差試題功能偏差試題或試卷對(duì)不同子群體不公平試題或試卷對(duì)不同子群體不公平試題或試卷功能偏差試題或試卷功能偏差試題或試卷的多維性試題或試卷的多維性對(duì)試題或試卷進(jìn)行多維性分析對(duì)試題或試卷進(jìn)行多維性分析影響維度影響維度與測量的心理結(jié)構(gòu)相關(guān)的維度與測量的心理結(jié)構(gòu)相關(guān)的維度干擾維度干擾維度與測量的心理結(jié)構(gòu)無關(guān)的維度與測量的心理結(jié)構(gòu)無關(guān)的維度大規(guī)模教育考試命題理論和實(shí)踐問題Item Dif

28、ficulty Difference, Grade 7-1.5-1-0.500.511.501020304050ItemsDifficulty DifferencePudong-DalianFemale-male考試的公平性試題功能差異大規(guī)模教育考試命題理論和實(shí)踐問題考試的公平性試題功能差異PDDL大規(guī)模教育考試命題理論和實(shí)踐問題考試對(duì)社會(huì)、學(xué)校教育教學(xué)的影響 大規(guī)模教育考試結(jié)果的使用會(huì)對(duì)社會(huì)、對(duì)學(xué)校的教育、教大規(guī)模教育考試結(jié)果的使用會(huì)對(duì)社會(huì)、對(duì)學(xué)校的教育、教學(xué)產(chǎn)生深刻的影響。學(xué)產(chǎn)生深刻的影響。 大規(guī)模教育考試本身的情景材料、內(nèi)容、題型、難度以及大規(guī)模教育考試本身的情景材料、內(nèi)容、題型、難度以

29、及蘊(yùn)含在其內(nèi)容、材料以及考查目標(biāo)中的價(jià)值觀，對(duì)社會(huì)、蘊(yùn)含在其內(nèi)容、材料以及考查目標(biāo)中的價(jià)值觀，對(duì)社會(huì)、對(duì)學(xué)校教育、教學(xué)也會(huì)產(chǎn)生巨大影響。對(duì)學(xué)校教育、教學(xué)也會(huì)產(chǎn)生巨大影響。 考試目標(biāo)的設(shè)計(jì)、試題情景材料的選擇、試題的設(shè)問等不考試目標(biāo)的設(shè)計(jì)、試題情景材料的選擇、試題的設(shè)問等不但要考慮其測量學(xué)要求，也要考慮其蘊(yùn)含的價(jià)值觀是否與但要考慮其測量學(xué)要求，也要考慮其蘊(yùn)含的價(jià)值觀是否與社會(huì)的主流價(jià)值觀相一致，從教育的角度看是否有積極意社會(huì)的主流價(jià)值觀相一致，從教育的角度看是否有積極意義。義。 考試的學(xué)科內(nèi)容、題型、難度既要符合測量學(xué)要求，又要考試的學(xué)科內(nèi)容、題型、難度既要符合測量學(xué)要求，又要考慮有利于學(xué)校按照

30、課程標(biāo)準(zhǔn)要求組織教育和教學(xué)，有利考慮有利于學(xué)校按照課程標(biāo)準(zhǔn)要求組織教育和教學(xué)，有利教師改進(jìn)教學(xué)策略和教學(xué)方式，提高教育和教學(xué)質(zhì)量；有教師改進(jìn)教學(xué)策略和教學(xué)方式，提高教育和教學(xué)質(zhì)量；有利于學(xué)生改進(jìn)學(xué)習(xí)方式，提高學(xué)習(xí)效果。利于學(xué)生改進(jìn)學(xué)習(xí)方式，提高學(xué)習(xí)效果。大規(guī)模教育考試命題理論和實(shí)踐問題理論問題引發(fā)的實(shí)踐思考 命題的問題效度題 型題 量 內(nèi) 容（知識(shí)技能，過程方法）目標(biāo)和行為標(biāo)準(zhǔn) 難度和區(qū)分度及格和等第標(biāo)準(zhǔn)情 景 材 料 選 擇公平公正信度后效影響試卷結(jié)構(gòu)評(píng)分標(biāo)準(zhǔn)和評(píng)分操作大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu) 測量目標(biāo)和內(nèi)容領(lǐng)域問題 試卷層面的問題試卷層面的問題試卷要測量哪些目標(biāo)、覆蓋哪些行

31、為標(biāo)準(zhǔn)？試卷要測量哪些目標(biāo)、覆蓋哪些行為標(biāo)準(zhǔn)？在哪些知識(shí)內(nèi)容領(lǐng)域測量該目標(biāo)？在哪些知識(shí)內(nèi)容領(lǐng)域測量該目標(biāo)？每一測量目標(biāo)、行為標(biāo)準(zhǔn)和內(nèi)容領(lǐng)域的題量？每一測量目標(biāo)、行為標(biāo)準(zhǔn)和內(nèi)容領(lǐng)域的題量？ 試題層面試題層面試題要測量何具體目標(biāo)？試題要測量何具體目標(biāo)？在哪個(gè)知識(shí)內(nèi)容領(lǐng)域測量該目標(biāo)？在哪個(gè)知識(shí)內(nèi)容領(lǐng)域測量該目標(biāo)？如何設(shè)問才能引導(dǎo)學(xué)生表現(xiàn)出期望表現(xiàn)的行為？如何設(shè)問才能引導(dǎo)學(xué)生表現(xiàn)出期望表現(xiàn)的行為？（排除法只是考試技巧，不是測量的目標(biāo)或行為標(biāo)準(zhǔn)）（排除法只是考試技巧，不是測量的目標(biāo)或行為標(biāo)準(zhǔn)）大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)難度問題 考試的難度問題是科學(xué)問題，也是社會(huì)問題?？荚嚨碾y度問題是科學(xué)問

32、題，也是社會(huì)問題。難度影響到考生分?jǐn)?shù)分布，因此影響到招生錄取決難度影響到考生分?jǐn)?shù)分布，因此影響到招生錄取決策誤差。策誤差。難度影響學(xué)生和家長的應(yīng)試心理，因此影響社會(huì)穩(wěn)難度影響學(xué)生和家長的應(yīng)試心理，因此影響社會(huì)穩(wěn)定定難度影響學(xué)校教學(xué)深度和廣度，影響學(xué)生學(xué)習(xí)的深難度影響學(xué)校教學(xué)深度和廣度，影響學(xué)生學(xué)習(xí)的深度和廣度。度和廣度。 難度涉及到兩個(gè)層面難度涉及到兩個(gè)層面試卷層面試卷層面試題層面試題層面大規(guī)模教育考試命題理論和實(shí)踐問題難度科學(xué)問題 難度對(duì)考生成績分布的影響難度對(duì)考生成績分布的影響難度系數(shù)為難度系數(shù)為0.5時(shí)，考生成績大致呈正態(tài)分布，時(shí)，考生成績大致呈正態(tài)分布，試卷的標(biāo)準(zhǔn)差也相應(yīng)大致達(dá)到最大，

33、此時(shí)，考生試卷的標(biāo)準(zhǔn)差也相應(yīng)大致達(dá)到最大，此時(shí)，考生成績?cè)谄骄謨蓚?cè)的分布最分散。因此，依據(jù)考成績?cè)谄骄謨蓚?cè)的分布最分散。因此，依據(jù)考試成績對(duì)考生進(jìn)行選擇決策時(shí)，發(fā)生決策誤差的試成績對(duì)考生進(jìn)行選擇決策時(shí)，發(fā)生決策誤差的人數(shù)也會(huì)最少。人數(shù)也會(huì)最少。難度系數(shù)越高，考生成績?cè)较蚋叻忠欢思?，分難度系數(shù)越高，考生成績?cè)较蚋叻忠欢思?，分布范圍變小，因此，依?jù)考試成績對(duì)考生進(jìn)行選布范圍變小，因此，依據(jù)考試成績對(duì)考生進(jìn)行選擇決策時(shí)，發(fā)生決策誤差的人數(shù)也會(huì)增多。擇決策時(shí)，發(fā)生決策誤差的人數(shù)也會(huì)增多。大規(guī)模教育考試命題理論和實(shí)踐問題難度科學(xué)問題05001000150020000204060801001101

34、30150考試分?jǐn)?shù)人數(shù)圖11.3 考試分?jǐn)?shù)概率分布（平均分105，標(biāo)準(zhǔn)差17）圖11.1 考試分?jǐn)?shù)概率分布（平均分75，標(biāo)準(zhǔn)差20）050010001500200002040607590110130150考試分?jǐn)?shù)人數(shù)大規(guī)模教育考試命題理論和實(shí)踐問題難度科學(xué)問題曲線1：均分423，難度系數(shù)0.67；曲線2：均分378，難度系數(shù)0.60；曲線3：均分315，難度系數(shù)0.50；實(shí)線相當(dāng)于第一批分?jǐn)?shù)線位置；虛線相當(dāng)于第二批分?jǐn)?shù)線位置。曲線1曲線3曲線2圖4 選擇決策卡帕指數(shù)與考試平均分、錄取分?jǐn)?shù)線的關(guān)系0.800.850.900.951.00270290310330350370390410430450

35、470490510530分?jǐn)?shù)卡帕指數(shù)大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)試題難度4.003.503.002.502.001.501.00.500.00-.50-1.00-1.50-2.00-2.5020100試題難度參數(shù)分布圖11.5 樣本考生能力參數(shù)分布頻數(shù)2.001.501.00.500.00-.50-1.00-1.50-2.00-2.50-3.00頻數(shù)3002001000考生能力參數(shù)分布大規(guī)模教育考試命題理論和實(shí)踐問題Theta-4-20246,0978,5798994,68311,7255,6798,59912,1532,61751414510,83712,49311,9919,9

36、7297797,2563,4308,3843,43291682811,0496505,095b1-4-2024試卷結(jié)構(gòu)試題難度大規(guī)模教育考試命題理論和實(shí)踐問題204060801001200.20.40.60.81.0試卷長度（題數(shù)）信度圖1 試卷長度與信度關(guān)系（據(jù)謝小慶 1999）試卷結(jié)構(gòu)題量大規(guī)模教育考試命題理論和實(shí)踐問題 mmrrmr11 2Y12)1 (1cjjXjStrat平行試題模型法真分?jǐn)?shù)等值試題模型試卷結(jié)構(gòu)題量的計(jì)算)1 (1212Xmiimmm大規(guī)模教育考試命題理論和實(shí)踐問題 多元概化理論模型多元概化理論模型試卷結(jié)構(gòu)題量的計(jì)算全卷最佳題量部分最佳題量常模參照考試標(biāo)準(zhǔn)參照考試全卷

37、最佳題量部分最佳題量nnnnnn)()(22piwpiwnniinnnnnn)(96. 1222piwnnNinnnnnnn)()(96. 12222piiwnnNinnnnnnnn)()()()(2222piiwpiiwnnii大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)題量的計(jì)算大大 題題聽力聽力語法語法詞匯詞匯CLOCLOZEZE閱讀閱讀翻譯翻譯過過 去去202010355理論理論情況情況常模常模參照參照條件條件212110105 53939101085+1標(biāo)準(zhǔn)標(biāo)準(zhǔn)參照參照條件條件262611115 5404013139595現(xiàn)現(xiàn)在在常模常模參照參照2424202040406 690+190

38、+1大規(guī)模教育考試命題理論和實(shí)踐問題大規(guī)模教育考試：命題與評(píng)價(jià)（大規(guī)模教育考試：命題與評(píng)價(jià)（2006）考試數(shù)據(jù)的統(tǒng)計(jì)分析和解釋考試數(shù)據(jù)的統(tǒng)計(jì)分析和解釋(2007)雷新勇雷新勇 華東師大出版社華東師大出版社大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)題型 題型代表了測量方法，它與教育考試關(guān)注的核心問題型代表了測量方法，它與教育考試關(guān)注的核心問題密切相關(guān)。題密切相關(guān)。 題型與考試的效度和信度有相當(dāng)強(qiáng)的關(guān)系。題型與考試的效度和信度有相當(dāng)強(qiáng)的關(guān)系。 大規(guī)模教育考試的題型對(duì)學(xué)校的教學(xué)方式和教學(xué)訓(xùn)大規(guī)模教育考試的題型對(duì)學(xué)校的教學(xué)方式和教學(xué)訓(xùn)練方式有明顯的影響。練方式有明顯的影響。 從經(jīng)濟(jì)的角度看，大規(guī)模教育考

39、試題型對(duì)評(píng)分的成從經(jīng)濟(jì)的角度看，大規(guī)模教育考試題型對(duì)評(píng)分的成本也有很大的影響。本也有很大的影響。 最常見的題型分類：客觀題、主觀題最常見的題型分類：客觀題、主觀題大規(guī)模教育考試命題理論和實(shí)踐問題 試卷結(jié)構(gòu)客觀題與主觀題的比較 客 觀 型 主 觀 型 測量的學(xué) 能有效地測量事實(shí)性知識(shí)。某些 能夠測量理解、思維技能和其他復(fù)雜 習(xí)成果 題型也能測量理解、思維技能和 的行為目標(biāo)。測量與現(xiàn)實(shí)貼近的行為 其他復(fù)雜的行為目標(biāo)。但是不適 目標(biāo)比較有效，但不適合用來測量事合測量選擇和組織觀點(diǎn)的技能、 實(shí)性知識(shí)。 寫作能力或某些問題解決技能。 命題的 考試所需的試題量較大，命題時(shí) 考試要求的題量少，命題相對(duì)比較容

40、 準(zhǔn)備 間長，難度比較大。 易 內(nèi)容領(lǐng) 由于試題量較大，內(nèi)容覆蓋面較 由于考試的試題量較少，內(nèi)容覆蓋面 域樣本 廣，考試內(nèi)容領(lǐng)域樣本代表性較 較小，考試內(nèi)容領(lǐng)域樣本的代表性有 好。 限。 對(duì)學(xué)生應(yīng) 完全結(jié)構(gòu)化的試題限制了考生的 考生可以按照自己的理解進(jìn) 行自由應(yīng) 答的控制 應(yīng)答類型，能夠防止許多非測量 答，可以使考生表現(xiàn)自己的創(chuàng)造力， 目標(biāo)因素，如寫作能力的影響， 有效地減少猜測的概率。 但選擇題有一定的猜測概率。 大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)客觀題與主觀題的比較評(píng)分 客觀，信度高，試題越嚴(yán)謹(jǐn)， 主觀評(píng)分，多人評(píng)分的不一 誤差越小。 致，降低了評(píng)分結(jié)果的信 度，增加了誤差。 對(duì)學(xué)習(xí)

41、 通常鼓勵(lì)考生掌握具體的 鼓勵(lì)學(xué)生關(guān)注大的內(nèi)容單元，的影響 細(xì)節(jié)內(nèi)容，注重對(duì)具體概 注重對(duì)所學(xué)內(nèi)容的整合和建構(gòu)。 念、原理的區(qū)分。如果試 強(qiáng)調(diào)組織、整合和有效表達(dá)思 題設(shè)計(jì)的好，也可以促進(jìn) 想的能力。 學(xué)生發(fā)展理解力，思維能 力以及其他的高級(jí)認(rèn)知能 力。信度 考試設(shè)計(jì)的越嚴(yán)謹(jǐn)，結(jié)果 信度通常低于客觀題型，主要 信度越高。 是因?yàn)樵u(píng)分信度較低以及試題 數(shù)量有限。大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)題型選擇的原則 從認(rèn)知特征、試題和考試的特征以及考試的經(jīng)濟(jì)性來看，每從認(rèn)知特征、試題和考試的特征以及考試的經(jīng)濟(jì)性來看，每種題型都有其優(yōu)勢(shì)，也有其缺點(diǎn)，任何一種題型都不能獨(dú)自種題型都有其優(yōu)勢(shì)，也有其缺

42、點(diǎn)，任何一種題型都不能獨(dú)自完成所有的教育測量目標(biāo)。因此，考試中應(yīng)該采用多種題型，完成所有的教育測量目標(biāo)。因此，考試中應(yīng)該采用多種題型，發(fā)揮每種題型的優(yōu)勢(shì)，減少其劣勢(shì)。發(fā)揮每種題型的優(yōu)勢(shì)，減少其劣勢(shì)。 如果兩種題型的測量結(jié)果有很強(qiáng)的類似性時(shí)，選擇測量效率如果兩種題型的測量結(jié)果有很強(qiáng)的類似性時(shí)，選擇測量效率高的題型（通常是選擇型題型）是合理的；如果兩種題型的高的題型（通常是選擇型題型）是合理的；如果兩種題型的測量結(jié)果類似性比較低時(shí)，應(yīng)該考慮試題的在認(rèn)知過程、內(nèi)測量結(jié)果類似性比較低時(shí)，應(yīng)該考慮試題的在認(rèn)知過程、內(nèi)容等方面與測量目標(biāo)的一致程度，通常選擇一致程度高的題容等方面與測量目標(biāo)的一致程度，通常選

43、擇一致程度高的題型型建構(gòu)型題型。建構(gòu)型題型。大規(guī)模教育考試命題理論和實(shí)踐問題 題型的選擇要考慮試題測量的行為或者認(rèn)知過程、涉題型的選擇要考慮試題測量的行為或者認(rèn)知過程、涉及到的內(nèi)容以及需要的條件，即題型應(yīng)該與測量目標(biāo)及到的內(nèi)容以及需要的條件，即題型應(yīng)該與測量目標(biāo)的行為要求一致。這反映了考試的效度為第一考慮的的行為要求一致。這反映了考試的效度為第一考慮的觀點(diǎn)。觀點(diǎn)。 題型的選擇要保證考試結(jié)果達(dá)到預(yù)先設(shè)定的信度要求，題型的選擇要保證考試結(jié)果達(dá)到預(yù)先設(shè)定的信度要求，即必須考慮不同題型試題的比例。這反映了考試結(jié)果即必須考慮不同題型試題的比例。這反映了考試結(jié)果的高信度是考試高效度前提的認(rèn)識(shí)。的高信度是考

44、試高效度前提的認(rèn)識(shí)。 題型的選擇要考慮學(xué)校課堂教學(xué)方式和學(xué)生學(xué)習(xí)方式題型的選擇要考慮學(xué)校課堂教學(xué)方式和學(xué)生學(xué)習(xí)方式的轉(zhuǎn)變，題型要考慮反映高質(zhì)量的教學(xué)活動(dòng)和學(xué)習(xí)活的轉(zhuǎn)變，題型要考慮反映高質(zhì)量的教學(xué)活動(dòng)和學(xué)習(xí)活動(dòng)。動(dòng)。試卷結(jié)構(gòu)題型選擇的原則大規(guī)模教育考試命題理論和實(shí)踐問題試卷結(jié)構(gòu)材料選擇 考試考試學(xué)校學(xué)習(xí)結(jié)果的遷移。學(xué)校學(xué)習(xí)結(jié)果的遷移。學(xué)科性的考試學(xué)科性的考試主要是專門遷移。主要是專門遷移。 專門遷移成功與否取決于兩個(gè)條件：專門遷移成功與否取決于兩個(gè)條件： 考生對(duì)相關(guān)知識(shí)，如概念、原理的理解及其本身的思維考生對(duì)相關(guān)知識(shí)，如概念、原理的理解及其本身的思維 能力；能力；考生對(duì)遷移的新情景的熟悉程度?？?/p>

45、生對(duì)遷移的新情景的熟悉程度。 試題背景材料選擇不當(dāng)，易于導(dǎo)致出現(xiàn)試題的功能偏差，試題背景材料選擇不當(dāng)，易于導(dǎo)致出現(xiàn)試題的功能偏差，降低考試的效度和信度。降低考試的效度和信度。大規(guī)模教育考試命題理論和實(shí)踐問題 材料應(yīng)該與考試的測量目標(biāo)以及試題欲測量的行為目標(biāo)相關(guān)材料應(yīng)該與考試的測量目標(biāo)以及試題欲測量的行為目標(biāo)相關(guān) 材料應(yīng)該與考生的學(xué)習(xí)經(jīng)歷和生活經(jīng)歷相適應(yīng)材料應(yīng)該與考生的學(xué)習(xí)經(jīng)歷和生活經(jīng)歷相適應(yīng) 材料提供的信息類型材料提供的信息類型有新知識(shí)信息有新知識(shí)信息無新知識(shí)信息無新知識(shí)信息 材料的信息量材料的信息量 材料提供的信息與應(yīng)答間的關(guān)系材料提供的信息與應(yīng)答間的關(guān)系 關(guān)系的范圍指的是完成試題的應(yīng)答，必

46、須加工、處理的信關(guān)系的范圍指的是完成試題的應(yīng)答，必須加工、處理的信息的數(shù)量，包括寬泛范圍和狹窄范圍。息的數(shù)量，包括寬泛范圍和狹窄范圍。關(guān)系的直接性是指期望的應(yīng)答對(duì)所提供的信息的依賴程度。關(guān)系的直接性是指期望的應(yīng)答對(duì)所提供的信息的依賴程度。 試卷結(jié)構(gòu)材料選擇的基本原則大規(guī)模教育考試命題理論和實(shí)踐問題主觀題評(píng)分標(biāo)準(zhǔn)的制定 賦分賦分 賦分值與等第賦分值與等第 選擇最合適于試題和評(píng)價(jià)目的的評(píng)分方法選擇最合適于試題和評(píng)價(jià)目的的評(píng)分方法 總體評(píng)分法總體評(píng)分法分值稍低的、測量目標(biāo)較單一的試題分值稍低的、測量目標(biāo)較單一的試題 分析評(píng)分法分析評(píng)分法高分值的、測量目標(biāo)非單一的試題高分值的、測量目標(biāo)非單一的試題 評(píng)

47、價(jià)的行為特征應(yīng)該與測量的行為目標(biāo)相一致評(píng)價(jià)的行為特征應(yīng)該與測量的行為目標(biāo)相一致 在分析評(píng)分法中，每個(gè)評(píng)分項(xiàng)目一般應(yīng)只包含一個(gè)獨(dú)立的行為在分析評(píng)分法中，每個(gè)評(píng)分項(xiàng)目一般應(yīng)只包含一個(gè)獨(dú)立的行為特征特征 要明確評(píng)價(jià)的行為特征等級(jí)數(shù)要明確評(píng)價(jià)的行為特征等級(jí)數(shù) 對(duì)評(píng)價(jià)的行為特征和標(biāo)準(zhǔn)中的每個(gè)等級(jí)應(yīng)該進(jìn)行清楚的定義對(duì)評(píng)價(jià)的行為特征和標(biāo)準(zhǔn)中的每個(gè)等級(jí)應(yīng)該進(jìn)行清楚的定義大規(guī)模教育考試命題理論和實(shí)踐問題大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠運(yùn)用適當(dāng)?shù)募夹g(shù)，參與到解決問題、推理、估能夠運(yùn)用適當(dāng)?shù)募夹g(shù)，參與到解決問題、推理、估算、交流、聯(lián)系和應(yīng)用的數(shù)學(xué)過程中。算、交流、聯(lián)系和應(yīng)用的數(shù)學(xué)過程中。

48、能夠理解和運(yùn)用各類數(shù)和各類數(shù)的運(yùn)算。能夠理解和運(yùn)用各類數(shù)和各類數(shù)的運(yùn)算。 能夠運(yùn)用各種代數(shù)的概念、過程和語言來模擬和解能夠運(yùn)用各種代數(shù)的概念、過程和語言來模擬和解決真實(shí)問題和數(shù)學(xué)問題。決真實(shí)問題和數(shù)學(xué)問題。 能夠理解幾何圖形，運(yùn)用幾何學(xué)原理。能夠理解幾何圖形，運(yùn)用幾何學(xué)原理。 理解可測的特質(zhì)，并能夠運(yùn)用測量過程解決問題理解可測的特質(zhì)，并能夠運(yùn)用測量過程解決問題. 能夠理解和運(yùn)用數(shù)據(jù)分析、概率和統(tǒng)計(jì)原理解決問能夠理解和運(yùn)用數(shù)據(jù)分析、概率和統(tǒng)計(jì)原理解決問題。題。 能夠理解、運(yùn)用各類模型、關(guān)系和函數(shù)。能夠理解、運(yùn)用各類模型、關(guān)系和函數(shù)。大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠運(yùn)用適

49、當(dāng)?shù)募夹g(shù)，參與到解決問題、推理、估能夠運(yùn)用適當(dāng)?shù)募夹g(shù)，參與到解決問題、推理、估算、交流、聯(lián)系和應(yīng)用的數(shù)學(xué)過程中。算、交流、聯(lián)系和應(yīng)用的數(shù)學(xué)過程中。 根據(jù)數(shù)學(xué)或非數(shù)學(xué)情景，確認(rèn)和形成問題；并運(yùn)用解決問根據(jù)數(shù)學(xué)或非數(shù)學(xué)情景，確認(rèn)和形成問題；并運(yùn)用解決問題策略來解決這些問題。題策略來解決這些問題。 在問題解決過程中，選擇、應(yīng)用和評(píng)價(jià)適當(dāng)?shù)墓浪悴呗?。在問題解決過程中，選擇、應(yīng)用和評(píng)價(jià)適當(dāng)?shù)墓浪悴呗浴?形成定義，做出推斷并對(duì)推斷的合理性進(jìn)行判別，表達(dá)各形成定義，做出推斷并對(duì)推斷的合理性進(jìn)行判別，表達(dá)各類概括和推廣，交流各類數(shù)學(xué)思想和關(guān)系。類概括和推廣，交流各類數(shù)學(xué)思想和關(guān)系。 對(duì)同一問題情景或同一數(shù)學(xué)概

50、念的不同表達(dá)方式進(jìn)行轉(zhuǎn)換對(duì)同一問題情景或同一數(shù)學(xué)概念的不同表達(dá)方式進(jìn)行轉(zhuǎn)換和應(yīng)用；對(duì)非數(shù)學(xué)學(xué)科的問題情景建立數(shù)學(xué)模型。和應(yīng)用；對(duì)非數(shù)學(xué)學(xué)科的問題情景建立數(shù)學(xué)模型。 選擇和運(yùn)用適當(dāng)?shù)臄?shù)學(xué)技術(shù)來加強(qiáng)數(shù)學(xué)理解。適當(dāng)?shù)募歼x擇和運(yùn)用適當(dāng)?shù)臄?shù)學(xué)技術(shù)來加強(qiáng)數(shù)學(xué)理解。適當(dāng)?shù)募?術(shù)術(shù)可以包括，但不僅限于，紙、筆、計(jì)算器、計(jì)算機(jī)和數(shù)據(jù)可以包括，但不僅限于，紙、筆、計(jì)算器、計(jì)算機(jī)和數(shù)據(jù)收集裝置。收集裝置。 大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠理解和運(yùn)用各類數(shù)和各類數(shù)的運(yùn)算。能夠理解和運(yùn)用各類數(shù)和各類數(shù)的運(yùn)算。理解和運(yùn)用實(shí)數(shù)，及其運(yùn)算、符號(hào)、和實(shí)數(shù)范圍的理解和運(yùn)用實(shí)數(shù)，及其運(yùn)算、符號(hào)、和實(shí)數(shù)范圍

51、的其他數(shù)。其他數(shù)。運(yùn)用復(fù)數(shù)的定義和基本運(yùn)算。運(yùn)用復(fù)數(shù)的定義和基本運(yùn)算。 大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠運(yùn)用各種代數(shù)的概念、過程和語言來模擬和解能夠運(yùn)用各種代數(shù)的概念、過程和語言來模擬和解決真實(shí)問題和數(shù)學(xué)問題。決真實(shí)問題和數(shù)學(xué)問題。運(yùn)用代數(shù)表示各種模型變化。運(yùn)用代數(shù)表示各種模型變化。運(yùn)用代數(shù)表達(dá)式的基本運(yùn)算。運(yùn)用代數(shù)表達(dá)式的基本運(yùn)算。解代數(shù)方程和不等式：線形方程、四次方程、指數(shù)方解代數(shù)方程和不等式：線形方程、四次方程、指數(shù)方程、程、對(duì)數(shù)方程和冪函數(shù)方程。對(duì)數(shù)方程和冪函數(shù)方程。解代數(shù)方程組、不等式組，包括運(yùn)用矩陣。解代數(shù)方程組、不等式組，包括運(yùn)用矩陣。運(yùn)用代數(shù)模型來解數(shù)

52、學(xué)問題和真實(shí)問題。運(yùn)用代數(shù)模型來解數(shù)學(xué)問題和真實(shí)問題。 大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠理解幾何圖形，運(yùn)用幾何學(xué)原理。能夠理解幾何圖形，運(yùn)用幾何學(xué)原理。構(gòu)筑和解釋三維物體，繪制三維物體圖形。構(gòu)筑和解釋三維物體，繪制三維物體圖形。根據(jù)全等、相似對(duì)圖形進(jìn)行分類，并運(yùn)用這些關(guān)系。根據(jù)全等、相似對(duì)圖形進(jìn)行分類，并運(yùn)用這些關(guān)系。能夠進(jìn)行綜合法和坐標(biāo)法之間的轉(zhuǎn)換。能夠進(jìn)行綜合法和坐標(biāo)法之間的轉(zhuǎn)換。在問題解決中，運(yùn)用轉(zhuǎn)換、坐標(biāo)和矢量來推導(dǎo)圖形的在問題解決中，運(yùn)用轉(zhuǎn)換、坐標(biāo)和矢量來推導(dǎo)圖形的性質(zhì)。性質(zhì)。運(yùn)用三角函數(shù)（正弦、余弦、正切）解與三角有關(guān)的運(yùn)用三角函數(shù)（正弦、余弦、正切）解與

53、三角有關(guān)的問題。問題。 大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 理解可測的特質(zhì)，并能夠運(yùn)用測量過程解決問題理解可測的特質(zhì)，并能夠運(yùn)用測量過程解決問題.運(yùn)用間接測量的概念。運(yùn)用間接測量的概念。運(yùn)用維度分析檢查過程的合理性。運(yùn)用維度分析檢查過程的合理性。研究導(dǎo)出的測量單位系統(tǒng)。研究導(dǎo)出的測量單位系統(tǒng)。適當(dāng)?shù)剡\(yùn)用測量中估計(jì)、誤差、容忍度和精確度的適當(dāng)?shù)剡\(yùn)用測量中估計(jì)、誤差、容忍度和精確度的概念。概念。 大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠理解和運(yùn)用數(shù)據(jù)分析、概率和統(tǒng)計(jì)原理解決問能夠理解和運(yùn)用數(shù)據(jù)分析、概率和統(tǒng)計(jì)原理解決問題。題。根據(jù)數(shù)據(jù)運(yùn)用曲線擬合方法進(jìn)行預(yù)測。根

54、據(jù)數(shù)據(jù)運(yùn)用曲線擬合方法進(jìn)行預(yù)測。運(yùn)用趨中測量參數(shù)，理解變化和相關(guān)的概念。運(yùn)用趨中測量參數(shù)，理解變化和相關(guān)的概念。對(duì)一定統(tǒng)計(jì)分析選擇適當(dāng)?shù)牟蓸臃椒?。?duì)一定統(tǒng)計(jì)分析選擇適當(dāng)?shù)牟蓸臃椒?。運(yùn)用實(shí)驗(yàn)概率、理論概率和模擬方法表示和解決問題，運(yùn)用實(shí)驗(yàn)概率、理論概率和模擬方法表示和解決問題，包包括期望值問題。括期望值問題。設(shè)計(jì)統(tǒng)計(jì)實(shí)驗(yàn)來研究問題，交流成果。設(shè)計(jì)統(tǒng)計(jì)實(shí)驗(yàn)來研究問題，交流成果。用一般的術(shù)語描述正態(tài)曲線，用正態(tài)曲線的性質(zhì)回答用一般的術(shù)語描述正態(tài)曲線，用正態(tài)曲線的性質(zhì)回答有關(guān)假定是正態(tài)分布的各類數(shù)據(jù)的問題。有關(guān)假定是正態(tài)分布的各類數(shù)據(jù)的問題。 大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) 能夠

55、理解、運(yùn)用各類模型、關(guān)系和函數(shù)。能夠理解、運(yùn)用各類模型、關(guān)系和函數(shù)。 運(yùn)用圖形、數(shù)字、物理的、代數(shù)的和語言的數(shù)學(xué)模型運(yùn)用圖形、數(shù)字、物理的、代數(shù)的和語言的數(shù)學(xué)模型和表示方法，來描述函數(shù)和反函數(shù)。和表示方法，來描述函數(shù)和反函數(shù)。分析多項(xiàng)式函數(shù)、有理函數(shù)、冪函數(shù)、指數(shù)函數(shù)、對(duì)分析多項(xiàng)式函數(shù)、有理函數(shù)、冪函數(shù)、指數(shù)函數(shù)、對(duì)數(shù)函數(shù)函數(shù)和周期函數(shù)圖形。數(shù)和周期函數(shù)圖形。分析參數(shù)變化對(duì)函數(shù)圖形的影響。分析參數(shù)變化對(duì)函數(shù)圖形的影響。用各種函數(shù)來建立真實(shí)問題模型。用各種函數(shù)來建立真實(shí)問題模型。將作圖技術(shù)應(yīng)用于參數(shù)方程、三維方程和遞歸關(guān)系。將作圖技術(shù)應(yīng)用于參數(shù)方程、三維方程和遞歸關(guān)系。 大規(guī)模教育考試命題理論和

56、實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) -表現(xiàn)水平標(biāo)準(zhǔn) 高級(jí)水平：在數(shù)學(xué)領(lǐng)域達(dá)到高級(jí)水平的畢業(yè)生應(yīng)該能夠高級(jí)水平：在數(shù)學(xué)領(lǐng)域達(dá)到高級(jí)水平的畢業(yè)生應(yīng)該能夠展示：展示：能夠自我激勵(lì)，獨(dú)立學(xué)習(xí)；能夠拓展和聯(lián)系各種思想。能夠自我激勵(lì)，獨(dú)立學(xué)習(xí)；能夠拓展和聯(lián)系各種思想。能夠準(zhǔn)確、清晰和有效地應(yīng)用所有數(shù)學(xué)過程。能夠準(zhǔn)確、清晰和有效地應(yīng)用所有數(shù)學(xué)過程。有效地運(yùn)用多種策略，將各種概念拓展到新的情境中，并且有效地運(yùn)用多種策略，將各種概念拓展到新的情境中，并且熟練地交流成果。熟練地交流成果。探索假定的問題，使用復(fù)雜的推理操作各種有效論證，形成探索假定的問題，使用復(fù)雜的推理操作各種有效論證，形成各種證據(jù)。各種證據(jù)。運(yùn)用適當(dāng)?shù)?/p>

57、技術(shù)、應(yīng)用函數(shù)、圖形和代數(shù)的概念解決真實(shí)和運(yùn)用適當(dāng)?shù)募夹g(shù)、應(yīng)用函數(shù)、圖形和代數(shù)的概念解決真實(shí)和理論問題。理論問題。應(yīng)用復(fù)雜的測量以及幾何、代數(shù)關(guān)系模擬各種問題和情境。應(yīng)用復(fù)雜的測量以及幾何、代數(shù)關(guān)系模擬各種問題和情境。根據(jù)數(shù)據(jù)、概率和統(tǒng)計(jì)一致性地做出準(zhǔn)確、合理的預(yù)測和決根據(jù)數(shù)據(jù)、概率和統(tǒng)計(jì)一致性地做出準(zhǔn)確、合理的預(yù)測和決策。策。能夠確認(rèn)數(shù)學(xué)學(xué)科內(nèi)以及學(xué)科外各種問題的相互聯(lián)系。能夠確認(rèn)數(shù)學(xué)學(xué)科內(nèi)以及學(xué)科外各種問題的相互聯(lián)系。大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) -表現(xiàn)水平標(biāo)準(zhǔn)熟練水平：在數(shù)學(xué)領(lǐng)域達(dá)到熟練水平的畢業(yè)生應(yīng)該熟練水平：在數(shù)學(xué)領(lǐng)域達(dá)到熟練水平的畢業(yè)生應(yīng)該 能夠展示：能夠展

58、示：一致性地、正確地應(yīng)用各種數(shù)學(xué)過程，解決各種問一致性地、正確地應(yīng)用各種數(shù)學(xué)過程，解決各種問題，交流各種成果。題，交流各種成果。在各種情境下應(yīng)用數(shù)學(xué)過程。在各種情境下應(yīng)用數(shù)學(xué)過程。一致性地使用各種技術(shù)，應(yīng)用函數(shù)、圖形和代數(shù)概一致性地使用各種技術(shù)，應(yīng)用函數(shù)、圖形和代數(shù)概念解決真實(shí)和理論問題。念解決真實(shí)和理論問題。運(yùn)用復(fù)雜的推理，使用適當(dāng)?shù)臄?shù)學(xué)思想，形成各種運(yùn)用復(fù)雜的推理，使用適當(dāng)?shù)臄?shù)學(xué)思想，形成各種邏輯論證和證據(jù)。邏輯論證和證據(jù)。一致性地應(yīng)用復(fù)雜的測量和幾何、代數(shù)關(guān)系模擬各一致性地應(yīng)用復(fù)雜的測量和幾何、代數(shù)關(guān)系模擬各種問題和情境。種問題和情境。根據(jù)數(shù)據(jù)、概率和統(tǒng)計(jì)做出合理的預(yù)測和決策。根據(jù)數(shù)據(jù)、

59、概率和統(tǒng)計(jì)做出合理的預(yù)測和決策。能夠確認(rèn)數(shù)學(xué)學(xué)科內(nèi)以及學(xué)科外各種問題的相互聯(lián)能夠確認(rèn)數(shù)學(xué)學(xué)科內(nèi)以及學(xué)科外各種問題的相互聯(lián)系。系。大規(guī)模教育考試命題理論和實(shí)踐問題蒙大拿州數(shù)學(xué)課程標(biāo)準(zhǔn) -表現(xiàn)水平標(biāo)準(zhǔn) 準(zhǔn)熟練水平：在數(shù)學(xué)領(lǐng)域達(dá)到準(zhǔn)熟練水平的畢業(yè)生應(yīng)準(zhǔn)熟練水平：在數(shù)學(xué)領(lǐng)域達(dá)到準(zhǔn)熟練水平的畢業(yè)生應(yīng)該部分掌握了熟練水平必須的預(yù)備知識(shí)和基本技能。該部分掌握了熟練水平必須的預(yù)備知識(shí)和基本技能。應(yīng)用不完全或不正確的數(shù)學(xué)過程解決問題，且常常是不應(yīng)用不完全或不正確的數(shù)學(xué)過程解決問題，且常常是不準(zhǔn)確的。準(zhǔn)確的。能夠交流數(shù)學(xué)思想，有時(shí)能夠拓展數(shù)學(xué)思想，但常常不能夠交流數(shù)學(xué)思想，有時(shí)能夠拓展數(shù)學(xué)思想，但常常不準(zhǔn)確。準(zhǔn)確

60、。有時(shí)能夠理解和使用適當(dāng)?shù)募夹g(shù)，運(yùn)用函數(shù)、圖形和代有時(shí)能夠理解和使用適當(dāng)?shù)募夹g(shù)，運(yùn)用函數(shù)、圖形和代數(shù)概念解決真實(shí)問題和數(shù)學(xué)問題。數(shù)概念解決真實(shí)問題和數(shù)學(xué)問題。在確認(rèn)復(fù)雜的測量以及幾何、代數(shù)關(guān)系方面有時(shí)會(huì)有困在確認(rèn)復(fù)雜的測量以及幾何、代數(shù)關(guān)系方面有時(shí)會(huì)有困難，導(dǎo)致產(chǎn)生不準(zhǔn)確性。難，導(dǎo)致產(chǎn)生不準(zhǔn)確性。有時(shí)能夠根據(jù)數(shù)據(jù)、概率和統(tǒng)計(jì)做出預(yù)測和決策，但常有時(shí)能夠根據(jù)數(shù)據(jù)、概率和統(tǒng)計(jì)做出預(yù)測和決策，但常常不準(zhǔn)確。常不準(zhǔn)確。能夠做出各種聯(lián)系，但不能拓展或證明這些聯(lián)系，論證能夠做出各種聯(lián)系，但不能拓展或證明這些聯(lián)系，論證常常缺乏適當(dāng)?shù)臄?shù)學(xué)思想的支持和嚴(yán)格的推理。常常缺乏適當(dāng)?shù)臄?shù)學(xué)思想的支持和嚴(yán)格的推理。大規(guī)模教育考試