7 教育測驗(yàn)的標(biāo)準(zhǔn)及其建立方法

教育測驗(yàn)的標(biāo)準(zhǔn)及其建立方法

2021/5/91第一節(jié)教育測驗(yàn)標(biāo)準(zhǔn)的含義2021/5/92一、對(duì)標(biāo)準(zhǔn)參照測驗(yàn)及其標(biāo)準(zhǔn)的再認(rèn)識(shí)心理學(xué)家波帕姆認(rèn)為標(biāo)準(zhǔn)參照測驗(yàn)是依據(jù)實(shí)現(xiàn)明確規(guī)定的知識(shí)能力標(biāo)準(zhǔn)而制訂，并據(jù)此標(biāo)準(zhǔn)可以對(duì)被試的測驗(yàn)成績做出解釋的一類測驗(yàn)。標(biāo)準(zhǔn)測驗(yàn)主要關(guān)心的問題是要獲得嚴(yán)格而精確的領(lǐng)域規(guī)范（specificationsfordomains)或行為領(lǐng)域規(guī)范。上述定義的缺陷：“切斷點(diǎn)”（cut-offpoint)2021/5/93標(biāo)準(zhǔn)的內(nèi)涵從定性方面講，標(biāo)準(zhǔn)一詞指的是測驗(yàn)的內(nèi)容或行為的范圍，而這個(gè)范圍是測驗(yàn)分?jǐn)?shù)所參照的，它將通過內(nèi)容領(lǐng)域規(guī)范得到明確；從定量方面講，每當(dāng)人們利用標(biāo)準(zhǔn)參照測驗(yàn)成績進(jìn)行有關(guān)評(píng)價(jià)決策時(shí)，客觀上需要一個(gè)切斷點(diǎn)作為分類決策的依據(jù)。切斷點(diǎn)在一定程度上體現(xiàn)了標(biāo)準(zhǔn)一詞在測量評(píng)價(jià)功能上的定量標(biāo)準(zhǔn)。2021/5/94常模參照測驗(yàn)與標(biāo)準(zhǔn)測驗(yàn)的對(duì)比2021/5/95二、幾個(gè)與標(biāo)準(zhǔn)參照測驗(yàn)相關(guān)的概念領(lǐng)域參照測驗(yàn)（或內(nèi)容參照測驗(yàn)，domain-referencedtest）是建立在一套完善的題目匯編或內(nèi)容領(lǐng)域規(guī)范匯編基礎(chǔ)上用以檢查被試的素質(zhì)及發(fā)展水平的測驗(yàn)?zāi)繕?biāo)參照測驗(yàn)是由和目標(biāo)相適應(yīng)的一組題目所構(gòu)成的測驗(yàn)掌握測驗(yàn)是建立一組教學(xué)和行為目標(biāo)上的測驗(yàn)，主要用于判斷學(xué)生是否掌握某組給定的教育目標(biāo)2021/5/96思考：領(lǐng)域參照測驗(yàn)、目標(biāo)參照測驗(yàn)和掌握測驗(yàn)有何異同？若將“標(biāo)準(zhǔn)參照測驗(yàn)”視作“依據(jù)某種特定操作標(biāo)準(zhǔn)可以直接解釋測量結(jié)果的及測驗(yàn)”，上述三種測驗(yàn)在本質(zhì)上無多大差別。領(lǐng)域參照測驗(yàn)可以看成標(biāo)準(zhǔn)參照測驗(yàn)的同義詞，目標(biāo)參照測驗(yàn)和掌握參照測驗(yàn)是標(biāo)準(zhǔn)參照測驗(yàn)的變式。2021/5/97第二節(jié)標(biāo)準(zhǔn)參照測驗(yàn)分?jǐn)?shù)的解釋2021/5/98一、正確百分?jǐn)?shù)正確百分?jǐn)?shù)是以學(xué)生在標(biāo)準(zhǔn)參照測驗(yàn)中答對(duì)題目的比例來解釋測驗(yàn)分?jǐn)?shù)或描述學(xué)生取得成就的方法。2021/5/99使用百分?jǐn)?shù)，應(yīng)注意：測驗(yàn)所要測定的內(nèi)容（成就）范圍必須明確，而且測驗(yàn)題目能夠組成成為這個(gè)內(nèi)容（成就）范圍的代表性良好的樣本在標(biāo)準(zhǔn)參照測驗(yàn)中，可以針對(duì)整個(gè)測驗(yàn)為每一個(gè)學(xué)生確定其答案的正確百分?jǐn)?shù)，對(duì)學(xué)生的內(nèi)容掌握作出判斷。在課堂教學(xué)評(píng)價(jià)及其他有關(guān)資格證書的測驗(yàn)中，為了對(duì)多層次的測驗(yàn)結(jié)果分別作出解釋和描述，就需要分別針對(duì)每一教育目標(biāo)或內(nèi)容板塊去選擇題目組，構(gòu)成總測驗(yàn)。2021/5/910為求客觀，可利用學(xué)生測驗(yàn)的原始分?jǐn)?shù)和測驗(yàn)總分?jǐn)?shù)之間的關(guān)系，計(jì)算學(xué)生個(gè)人的得分百分?jǐn)?shù)2021/5/911二、掌握分?jǐn)?shù)掌握分?jǐn)?shù)用于判斷學(xué)生是否掌握所學(xué)的內(nèi)容，分?jǐn)?shù)的標(biāo)準(zhǔn)是人為確定的，可以是百分之評(píng)分量尺上的某一個(gè)點(diǎn)，也可以是80%-90%的正確反應(yīng)所對(duì)應(yīng)的分?jǐn)?shù)，作為最低通過標(biāo)準(zhǔn)。以掌握分?jǐn)?shù)為判斷標(biāo)準(zhǔn)，可將學(xué)生區(qū)分為掌握和為掌握兩類2021/5/912“掌握”與“未掌握”是人為確定的；從知識(shí)的掌握狀態(tài)來講，事實(shí)上更應(yīng)該是一種連續(xù)模型；“掌握”、“及格”或“合格”的概念類似，但有區(qū)別。當(dāng)利用測驗(yàn)的掌握分?jǐn)?shù)給學(xué)生進(jìn)行二分類時(shí)，對(duì)于不同的年級(jí)、不同的課程內(nèi)容、不同的測驗(yàn)?zāi)酥镣粶y驗(yàn)中不同的分測驗(yàn)，人為規(guī)定的掌握分?jǐn)?shù)也未必相同。2021/5/913三、內(nèi)容等級(jí)分?jǐn)?shù)為了更好地解釋教育測驗(yàn)的分?jǐn)?shù)，人們把內(nèi)容參照和常模參照結(jié)合起來。在編制測驗(yàn)的過程中，不僅要明確內(nèi)容范圍、具體任務(wù)，而且要把成就分成若干差別明顯的等級(jí)水平，標(biāo)明不同等級(jí)水平的成就特征與問題類型，建立起內(nèi)容等級(jí)分?jǐn)?shù)及其評(píng)定量表。內(nèi)容等級(jí)分?jǐn)?shù)體現(xiàn)了相對(duì)評(píng)價(jià)與絕對(duì)評(píng)價(jià)的相結(jié)合2021/5/914第三節(jié)標(biāo)準(zhǔn)參照測驗(yàn)的定性標(biāo)準(zhǔn)——測驗(yàn)內(nèi)容領(lǐng)域規(guī)范2021/5/915內(nèi)容領(lǐng)域規(guī)范是標(biāo)準(zhǔn)參照測驗(yàn)最重要的一環(huán)：為試題編寫人員準(zhǔn)備試題時(shí)提供內(nèi)容和技術(shù)上的指導(dǎo)；向內(nèi)容方面或測量方面的專家提供每種能力所包括的內(nèi)容和行為的清晰描述；幫助解釋被試個(gè)體的能力水平；向用戶提供能力廣度和范圍的明確規(guī)定2021/5/916一、漢布萊頓模式內(nèi)容領(lǐng)域規(guī)范的四個(gè)組成部分：說明實(shí)例指導(dǎo)與題目樣本內(nèi)容范圍答案范圍2021/5/9172021/5/918二、美國IOE模式IOE（InstructionalObjectivesExchange）:教學(xué)目標(biāo)交流所。其所運(yùn)用的標(biāo)準(zhǔn)參照測驗(yàn)格式由以下五部分組成：一般描述樣本題目刺激的界定反應(yīng)的界定其他補(bǔ)充說明2021/5/919三、英國GCSE模式英國中等教育普通證書（簡稱GCSE考試）是面向校內(nèi)外舉辦的英國國家證書制度，其顯著特點(diǎn)之一是有全國統(tǒng)一考試標(biāo)準(zhǔn)。包含“總標(biāo)準(zhǔn)”和“學(xué)科具體標(biāo)準(zhǔn)”不同科目的測驗(yàn)編寫結(jié)構(gòu)大同小異。一般包含：簡介或引言、目標(biāo)、評(píng)價(jià)目標(biāo)、內(nèi)容或核心內(nèi)容、評(píng)價(jià)目標(biāo)和內(nèi)容的關(guān)系、評(píng)價(jià)技術(shù)、等級(jí)描述2021/5/920來自GCSE考試的啟發(fā)考試大綱應(yīng)強(qiáng)調(diào)與鼓勵(lì)學(xué)生理解本學(xué)科與其他學(xué)科、生活、政治、經(jīng)濟(jì)、社會(huì)、環(huán)境等方面的聯(lián)系考試大綱必須包括對(duì)課程學(xué)習(xí)所期望達(dá)到的教育目標(biāo)的描述考試大綱必須包括足夠的知識(shí)覆蓋面，使考試能充分表現(xiàn)出學(xué)生對(duì)某一知識(shí)和技能的掌握程度考試大綱都應(yīng)有一定的學(xué)科知識(shí)考查深度，而不應(yīng)以犧牲技能和理解力的考查為代價(jià)去追求學(xué)科知識(shí)內(nèi)容的考查廣度考試大綱不僅應(yīng)包括某一學(xué)科所要測試的內(nèi)容范圍，也要介紹測試方法，提供樣卷（題）以及一些必要的指導(dǎo)性材料2021/5/921四、我國高中考試畢業(yè)會(huì)考標(biāo)準(zhǔn)的建立模式：浙江的模式定性描述學(xué)科標(biāo)準(zhǔn)，形成學(xué)科考試大綱規(guī)范性文件編制有良好內(nèi)容效度的參照試卷，取樣抽測，建立高中畢業(yè)會(huì)考的標(biāo)準(zhǔn)份數(shù)量將高中畢業(yè)會(huì)考的成績確定為五個(gè)等級(jí)，與T分?jǐn)?shù)的關(guān)系如下表：2021/5/922編制一份與參照試卷大體平行的學(xué)科會(huì)考試卷，準(zhǔn)備用于實(shí)際的高中畢業(yè)會(huì)考在保密狀態(tài)下，在省內(nèi)或省外抽取一批高中生（其水平應(yīng)與浙江省高中生的總體水平相當(dāng)），隨機(jī)分成兩組后，分別用會(huì)考試卷和參照試卷進(jìn)行測驗(yàn)，取得數(shù)據(jù)利用百分等級(jí)的等值技術(shù)或線性標(biāo)準(zhǔn)分?jǐn)?shù)的等值技術(shù)，在會(huì)考試卷原始分?jǐn)?shù)Y和參照試卷原始分?jǐn)?shù)X之間建立等值對(duì)應(yīng)關(guān)系，從而在X-Y-T之間建立對(duì)應(yīng)關(guān)系的轉(zhuǎn)換表把會(huì)考試卷正式用于高中會(huì)考，每個(gè)學(xué)生都得到自己的會(huì)考原始分?jǐn)?shù)Xi,通過X-Y-T分?jǐn)?shù)轉(zhuǎn)換表，得到每位高中生的畢業(yè)會(huì)考學(xué)科量分表。根據(jù)表7-2，得到高中畢業(yè)會(huì)考的等級(jí)分?jǐn)?shù)。2021/5/923五、我國高等教育自學(xué)考試標(biāo)準(zhǔn)的建立模式自學(xué)考試課程大綱包括四部分概括敘述課程性質(zhì)與設(shè)置目的具體敘述各章節(jié)的課程內(nèi)容與考試目標(biāo)要求有關(guān)考試說明與實(shí)施的要求提供樣題或樣卷2021/5/924第四節(jié)標(biāo)準(zhǔn)參照測驗(yàn)的定量標(biāo)準(zhǔn)——合格分?jǐn)?shù)線2021/5/925一、基于題目分類下的經(jīng)驗(yàn)判斷方法利用課任教師或?qū)Τ删蜏y驗(yàn)標(biāo)準(zhǔn)的“格式塔”心理現(xiàn)象和教師具備的考評(píng)經(jīng)驗(yàn)來分析測驗(yàn)題目，并作出分類與判斷的思想方法具體方法編制測驗(yàn)把測驗(yàn)中所有的題目分為三類：“基本要求的”、“中等要求的”、“高要求的”假想一組“最低能力的且恰是可接受”的被試，對(duì)他們?cè)谧鞔鹨陨先愵}目時(shí)提出具體標(biāo)準(zhǔn)2021/5/926

如：題型要求每人至少答對(duì)的比率基本要求的90%中等要求的60%高要求的30%現(xiàn)設(shè)三類題目在測驗(yàn)中所占分?jǐn)?shù)即為W1、W2和W3,再設(shè)課任教師經(jīng)過協(xié)商認(rèn)為，最低能力且又是可接受的任一位學(xué)生，其至少應(yīng)答對(duì)第一類題目的P1%、第二類題目的P2%、第三類題目的P3%，那么，該特定測驗(yàn)的最低合格分?jǐn)?shù)線E確定為：2021/5/927例：某次數(shù)學(xué)測驗(yàn)，課任教師認(rèn)為屬于第一類的有22個(gè)題目，占40分；屬于第二類的有8個(gè)題目，占32分；屬于第三類的只有兩個(gè)題目，占28分。如果課任老師認(rèn)為最低能力限度下可接受的學(xué)生，至少應(yīng)答對(duì)第一類題目的80%，第二類題目的50%，第三類題目的20%，求該次數(shù)學(xué)測驗(yàn)最低合格線。

解：2021/5/928二、基于題目雙基度指標(biāo)下的經(jīng)驗(yàn)評(píng)判法“雙基度”指的是題目的考查內(nèi)容和測量目標(biāo)對(duì)體現(xiàn)特定學(xué)科“基礎(chǔ)知識(shí)、基本技能”雙基教學(xué)要求的適切性程度。雙基度的取值在0-1之間。題目的雙基度越大，說明該題目的教學(xué)雙基性要求越強(qiáng)，題目越能體現(xiàn)教學(xué)過程和知識(shí)結(jié)構(gòu)中的基本要求，題目內(nèi)容對(duì)學(xué)生越是重要。題目的雙基度與經(jīng)典測驗(yàn)理論中的難度沒有必然的聯(lián)系。2021/5/929題目的雙基度指標(biāo)賦值，可以由任課教師根據(jù)教學(xué)與考評(píng)經(jīng)驗(yàn)，在較徹底的理解教學(xué)大綱課程標(biāo)準(zhǔn)和熟悉教材內(nèi)容結(jié)構(gòu)的前提下進(jìn)行，可參照表7-32021/5/930同一考查內(nèi)容中題目所設(shè)計(jì)的測量目標(biāo)不同，雙基度也不同。

假設(shè)一份測驗(yàn)卷中有N個(gè)題目，它們的雙基度及其分?jǐn)?shù)值可用（b1,x1）,（b2,x2），…，（bN,XN）來表示，該測驗(yàn)的合格線分?jǐn)?shù)為：2021/5/931

例：某次語文測驗(yàn)共有50道試題，每題2分，今已知題目的雙基度指標(biāo)如表7-4所示：解：2021/5/932三、基于題目“目標(biāo)—難度”層次評(píng)估法主要思路：根據(jù)對(duì)題目考查目標(biāo)層次的認(rèn)識(shí)以及對(duì)題目難易程度作出的經(jīng)驗(yàn)判斷，把整個(gè)測驗(yàn)卷中所有題目按照兩個(gè)特征進(jìn)行雙向分類；由課任教師給每一類題目指派一個(gè)臨界概率。

臨界概率是，設(shè)想一個(gè)尚可接受的最低能力的學(xué)生能夠正確回答該類題目的可能性大小，或者說這一臨界概率是對(duì)每一位合格的學(xué)生至少應(yīng)答對(duì)該類題目的比例大小。2021/5/933方法課任教師把一份測驗(yàn)卷中的所有題目按K個(gè)考查目標(biāo)能力層次進(jìn)行分類，設(shè)這K類所占分?jǐn)?shù)分別為M1,M2,…，Mk把上述每一題目按照難、中、易分成三組，計(jì)算各組題目的分?jǐn)?shù)，可得到測驗(yàn)題目雙向分類下的數(shù)據(jù)塊，以矩陣的形式記為：2021/5/934設(shè)想一個(gè)可接受的最低能力的被試，答對(duì)上述“第i個(gè)難度層次第j個(gè)能力目標(biāo)層次”所有題目的可能性大小為Pij（i=1,2,3;j=1,2…，K），得到一個(gè)概率矩陣，記為：計(jì)算該試驗(yàn)的最低合格分?jǐn)?shù)，記為：2021/5/935進(jìn)一步地，綜合若干位學(xué)科專家和命題人員的意見，認(rèn)為一個(gè)尚可接受的最低能力的學(xué)生，答對(duì)上述各組題目的概率為：例：某次《教育統(tǒng)計(jì)學(xué)》課程結(jié)業(yè)考試，由課任教師命題雙向細(xì)目