第七章-目標(biāo)參照測(cè)驗(yàn)

1、第七章第七章 目標(biāo)參照測(cè)驗(yàn)?zāi)繕?biāo)參照測(cè)驗(yàn)第一節(jié)第一節(jié) 目標(biāo)參照測(cè)驗(yàn)概述目標(biāo)參照測(cè)驗(yàn)概述第二節(jié)第二節(jié) 目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析第三節(jié)第三節(jié) 目標(biāo)參照測(cè)驗(yàn)的信度和效度目標(biāo)參照測(cè)驗(yàn)的信度和效度第四節(jié)第四節(jié) 測(cè)驗(yàn)分?jǐn)?shù)的解釋測(cè)驗(yàn)分?jǐn)?shù)的解釋第一節(jié)第一節(jié) 目標(biāo)參照測(cè)驗(yàn)概述目標(biāo)參照測(cè)驗(yàn)概述一、目標(biāo)參照測(cè)驗(yàn)的產(chǎn)生一、目標(biāo)參照測(cè)驗(yàn)的產(chǎn)生l20世紀(jì)早期，出于解釋測(cè)驗(yàn)原始分?jǐn)?shù)含義的需要，西方世紀(jì)早期，出于解釋測(cè)驗(yàn)原始分?jǐn)?shù)含義的需要，西方早期心理與教育測(cè)量學(xué)專家提出了相對(duì)能力的測(cè)量，由此早期心理與教育測(cè)量學(xué)專家提出了相對(duì)能力的測(cè)量，由此發(fā)展起來(lái)的測(cè)驗(yàn)?zāi)Ｊ骄褪浅Ｄ⒄諟y(cè)驗(yàn)，隨之發(fā)展了常模發(fā)展起來(lái)的測(cè)驗(yàn)?zāi)?/p>

2、式就是常模參照測(cè)驗(yàn)，隨之發(fā)展了常模參照測(cè)驗(yàn)項(xiàng)目分析、信效度分析及分?jǐn)?shù)解釋的方法。參照測(cè)驗(yàn)項(xiàng)目分析、信效度分析及分?jǐn)?shù)解釋的方法。l20世紀(jì)中期，人們發(fā)現(xiàn)了常模參照測(cè)驗(yàn)的局限：并不是世紀(jì)中期，人們發(fā)現(xiàn)了常模參照測(cè)驗(yàn)的局限：并不是所有的測(cè)驗(yàn)都只關(guān)心個(gè)體間的差異，有的測(cè)驗(yàn)?zāi)康脑谟诹怂械臏y(cè)驗(yàn)都只關(guān)心個(gè)體間的差異，有的測(cè)驗(yàn)?zāi)康脑谟诹私獗辉囋跍y(cè)驗(yàn)內(nèi)容上掌握的絕對(duì)水平。解被試在測(cè)驗(yàn)內(nèi)容上掌握的絕對(duì)水平。問(wèn)題：?jiǎn)栴}：l怎樣通過(guò)測(cè)驗(yàn)評(píng)價(jià)被試在教學(xué)活動(dòng)中對(duì)內(nèi)容的掌握程度？怎樣通過(guò)測(cè)驗(yàn)評(píng)價(jià)被試在教學(xué)活動(dòng)中對(duì)內(nèi)容的掌握程度？l這一測(cè)驗(yàn)的目的在于確定在某個(gè)教學(xué)領(lǐng)域內(nèi)，被試是否掌握這一測(cè)驗(yàn)的目的在于確定在某個(gè)教學(xué)領(lǐng)域內(nèi)，

3、被試是否掌握了該教學(xué)領(lǐng)域的知識(shí)和技能，了解被試在該領(lǐng)域的困難，并了該教學(xué)領(lǐng)域的知識(shí)和技能，了解被試在該領(lǐng)域的困難，并對(duì)其有目的地加以教學(xué)輔導(dǎo)與補(bǔ)救。由于常模參照測(cè)驗(yàn)不能對(duì)其有目的地加以教學(xué)輔導(dǎo)與補(bǔ)救。由于常模參照測(cè)驗(yàn)不能解決這一問(wèn)題，目標(biāo)參照測(cè)驗(yàn)應(yīng)運(yùn)而生。解決這一問(wèn)題，目標(biāo)參照測(cè)驗(yàn)應(yīng)運(yùn)而生。l1962年，戈萊塞、克勞斯首先提出了目標(biāo)參照測(cè)驗(yàn)的概念。年，戈萊塞、克勞斯首先提出了目標(biāo)參照測(cè)驗(yàn)的概念。二、目標(biāo)參照測(cè)驗(yàn)的定義二、目標(biāo)參照測(cè)驗(yàn)的定義1971年，戈萊塞把目標(biāo)參照測(cè)驗(yàn)明確界定為：年，戈萊塞把目標(biāo)參照測(cè)驗(yàn)明確界定為：l根據(jù)某一明確界定的內(nèi)容范圍而縝密編制的測(cè)驗(yàn)，并且，根據(jù)某一明確界定的內(nèi)容范圍

4、而縝密編制的測(cè)驗(yàn)，并且，被試在測(cè)驗(yàn)中所得的結(jié)果，也是根據(jù)某一明確界定的行被試在測(cè)驗(yàn)中所得的結(jié)果，也是根據(jù)某一明確界定的行為標(biāo)準(zhǔn)直接進(jìn)行解釋的。為標(biāo)準(zhǔn)直接進(jìn)行解釋的。l“內(nèi)容范圍內(nèi)容范圍”-要有邊界；明確的結(jié)構(gòu)（專家評(píng)定法）要有邊界；明確的結(jié)構(gòu)（專家評(píng)定法）l“行為標(biāo)準(zhǔn)行為標(biāo)準(zhǔn)”分界點(diǎn)。分界點(diǎn)。第二節(jié)第二節(jié) 目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析一、內(nèi)容范圍的確定一、內(nèi)容范圍的確定l內(nèi)容范圍要有邊界內(nèi)容范圍要有邊界l每一內(nèi)容范圍均可分為幾類每一內(nèi)容范圍均可分為幾類主要形式：雙向細(xì)目表主要形式：雙向細(xì)目表第二節(jié)第二節(jié) 目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析二、測(cè)驗(yàn)項(xiàng)目的內(nèi)容效度分析二、

5、測(cè)驗(yàn)項(xiàng)目的內(nèi)容效度分析l專家評(píng)定法專家評(píng)定法第二節(jié)第二節(jié) 目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析目標(biāo)參照測(cè)驗(yàn)的項(xiàng)目分析三、測(cè)驗(yàn)項(xiàng)目的難度和區(qū)分度分析三、測(cè)驗(yàn)項(xiàng)目的難度和區(qū)分度分析l測(cè)驗(yàn)的預(yù)測(cè)測(cè)驗(yàn)的預(yù)測(cè)l項(xiàng)目的難度項(xiàng)目的難度l項(xiàng)目區(qū)分度項(xiàng)目區(qū)分度1測(cè)驗(yàn)的預(yù)測(cè)測(cè)驗(yàn)的預(yù)測(cè)l前測(cè)前測(cè)后測(cè)方法（同一組被試）后測(cè)方法（同一組被試）l已接受教學(xué)組已接受教學(xué)組未接受教學(xué)組方法（兩組被試）未接受教學(xué)組方法（兩組被試）l對(duì)照組方法（兩組均接受了教學(xué)的被試，教師評(píng)定掌握對(duì)照組方法（兩組均接受了教學(xué)的被試，教師評(píng)定掌握組和末掌握組，進(jìn)行比較）組和末掌握組，進(jìn)行比較）2項(xiàng)目的難度項(xiàng)目的難度l相對(duì)于標(biāo)準(zhǔn)的高低相對(duì)于標(biāo)準(zhǔn)的高低l通過(guò)率通過(guò)

6、率3項(xiàng)目區(qū)分度項(xiàng)目區(qū)分度l難度差值難度差值個(gè)人獲得指數(shù)：個(gè)體在前后測(cè)中答題的變化。個(gè)人獲得指數(shù)：個(gè)體在前后測(cè)中答題的變化。掌握組掌握組未掌握組鑒別指數(shù)未掌握組鑒別指數(shù)D Dl相關(guān)系數(shù)相關(guān)系數(shù)（1）個(gè)人獲得指數(shù)）個(gè)人獲得指數(shù)D = Ppost PpreD =個(gè)人獲得指數(shù)個(gè)人獲得指數(shù)Ppost =后測(cè)中（已接受教學(xué)組）的通過(guò)率后測(cè)中（已接受教學(xué)組）的通過(guò)率Ppre =前測(cè)（未接受教學(xué)組）中的通過(guò)率前測(cè)（未接受教學(xué)組）中的通過(guò)率問(wèn)題：?jiǎn)栴}：l練習(xí)效應(yīng)；練習(xí)效應(yīng)；lD值低難以區(qū)分是教學(xué)不良還是題目區(qū)分度不好值低難以區(qū)分是教學(xué)不良還是題目區(qū)分度不好。（2）鑒別度指數(shù)）鑒別度指數(shù)B = U/n1L/n2B

7、：某一測(cè)題在達(dá)標(biāo)分?jǐn)?shù)線為某一特定值時(shí)的區(qū)分能力：某一測(cè)題在達(dá)標(biāo)分?jǐn)?shù)線為某一特定值時(shí)的區(qū)分能力U：掌握組中正確回答了某題的人數(shù)：掌握組中正確回答了某題的人數(shù)n1：掌握組的人數(shù)：掌握組的人數(shù)L：未掌握組中正確回答了某題的人數(shù)：未掌握組中正確回答了某題的人數(shù)n2：未掌握組的人數(shù)：未掌握組的人數(shù)問(wèn)題：依賴具體的達(dá)標(biāo)分?jǐn)?shù)線。問(wèn)題：依賴具體的達(dá)標(biāo)分?jǐn)?shù)線。（3）相關(guān)系數(shù)）相關(guān)系數(shù)l求取項(xiàng)目得分和測(cè)驗(yàn)總分間的一致性程度，計(jì)算方求取項(xiàng)目得分和測(cè)驗(yàn)總分間的一致性程度，計(jì)算方法同常模參照測(cè)驗(yàn)。法同常模參照測(cè)驗(yàn)。l指標(biāo)：指標(biāo)：-1,1，當(dāng)其值為負(fù)時(shí)，應(yīng)檢查題目的問(wèn)題所，當(dāng)其值為負(fù)時(shí)，應(yīng)檢查題目的問(wèn)題所在，進(jìn)行修改或刪

8、除；當(dāng)其值為正值時(shí)，越接近于在，進(jìn)行修改或刪除；當(dāng)其值為正值時(shí)，越接近于1，題目越有效；當(dāng)其值為題目越有效；當(dāng)其值為0時(shí)，題目不具有區(qū)分力，一時(shí)，題目不具有區(qū)分力，一般不予保留。般不予保留。l注意：在純粹的目標(biāo)參照測(cè)驗(yàn)中應(yīng)視題目所測(cè)內(nèi)容注意：在純粹的目標(biāo)參照測(cè)驗(yàn)中應(yīng)視題目所測(cè)內(nèi)容范圍中的特殊性而決定取舍。范圍中的特殊性而決定取舍。第三節(jié)第三節(jié) 目標(biāo)參照測(cè)驗(yàn)的信度與效度目標(biāo)參照測(cè)驗(yàn)的信度與效度l信度估計(jì)信度估計(jì)l效度估計(jì)效度估計(jì)1信度估計(jì)信度估計(jì)l分類一致性信度分類一致性信度l方差分析方法方差分析方法（1）分類一致性信度）分類一致性信度l目標(biāo)參照測(cè)驗(yàn)常根據(jù)某一分?jǐn)?shù)分界點(diǎn)將被試分為掌握者目標(biāo)參照測(cè)

9、驗(yàn)常根據(jù)某一分?jǐn)?shù)分界點(diǎn)將被試分為掌握者和未掌握者兩類。和未掌握者兩類。l常用的估計(jì)方式是考查被試在同一測(cè)驗(yàn)的兩次施測(cè)中或常用的估計(jì)方式是考查被試在同一測(cè)驗(yàn)的兩次施測(cè)中或兩個(gè)復(fù)本的施測(cè)中是否被分在同一類中。兩個(gè)復(fù)本的施測(cè)中是否被分在同一類中。 （再測(cè)法和（再測(cè)法和復(fù)本法）復(fù)本法） l一般采用同一被試團(tuán)體在兩次測(cè)驗(yàn)結(jié)果中均被分為及格一般采用同一被試團(tuán)體在兩次測(cè)驗(yàn)結(jié)果中均被分為及格或不及格類別中的人數(shù)比例作為分類一致性信度的指標(biāo)?；虿患案耦悇e中的人數(shù)比例作為分類一致性信度的指標(biāo)。分類一致性信度計(jì)算分類一致性信度計(jì)算測(cè)測(cè) 驗(yàn)驗(yàn) A及格及格不及格不及格abcd及格及格不及格不及格測(cè)驗(yàn)測(cè)驗(yàn)B 如圖所示，測(cè)

10、驗(yàn)的分類一致信度為兩次施測(cè)中均為及格和均如圖所示，測(cè)驗(yàn)的分類一致信度為兩次施測(cè)中均為及格和均為不及格的人數(shù)占總?cè)藬?shù)的比例，為不及格的人數(shù)占總?cè)藬?shù)的比例， p=（a+d）/N例：l一個(gè)一個(gè)8080的團(tuán)體，在某測(cè)驗(yàn)的兩次施測(cè)中有的團(tuán)體，在某測(cè)驗(yàn)的兩次施測(cè)中有4141人人均及格，有均及格，有2121均不及格，那么，該測(cè)驗(yàn)的分類均不及格，那么，該測(cè)驗(yàn)的分類一致性信度是多少？一致性信度是多少？ （41+2141+21）/80/800.770.77l試問(wèn)試問(wèn): : 1 1、分類一致性信度的最大值是多少、分類一致性信度的最大值是多少? ? 2 2、分類一致性信度受哪些因素的影響？、分類一致性信度受哪些因素的

11、影響？（2）方差分析法）方差分析法l利用方差分析的方法，找出個(gè)體水平的真正變異在總變利用方差分析的方法，找出個(gè)體水平的真正變異在總變異中的比例。異中的比例。l計(jì)算公式同常模參照測(cè)驗(yàn)的信度計(jì)算（計(jì)算公式同常模參照測(cè)驗(yàn)的信度計(jì)算（P53，4.14）2效度估計(jì)效度估計(jì)l內(nèi)容效度內(nèi)容效度l效標(biāo)關(guān)聯(lián)效度效標(biāo)關(guān)聯(lián)效度（1）內(nèi)容效度）內(nèi)容效度l因?yàn)槟繕?biāo)參照測(cè)驗(yàn)主要考察的是被試在所測(cè)內(nèi)容范圍因?yàn)槟繕?biāo)參照測(cè)驗(yàn)主要考察的是被試在所測(cè)內(nèi)容范圍內(nèi)的掌握程度，因此，測(cè)驗(yàn)的內(nèi)容效度非常重要。內(nèi)的掌握程度，因此，測(cè)驗(yàn)的內(nèi)容效度非常重要。l評(píng)估測(cè)驗(yàn)的內(nèi)容效度依賴兩個(gè)條件：評(píng)估測(cè)驗(yàn)的內(nèi)容效度依賴兩個(gè)條件： 測(cè)驗(yàn)有明確界定的內(nèi)容

12、范圍測(cè)驗(yàn)有明確界定的內(nèi)容范圍 對(duì)測(cè)驗(yàn)每一題目的內(nèi)容效度分析對(duì)測(cè)驗(yàn)每一題目的內(nèi)容效度分析（2）效標(biāo)關(guān)聯(lián)效度）效標(biāo)關(guān)聯(lián)效度l在目標(biāo)參照測(cè)驗(yàn)中常用在目標(biāo)參照測(cè)驗(yàn)中常用“決策效度決策效度”來(lái)評(píng)估其效標(biāo)關(guān)來(lái)評(píng)估其效標(biāo)關(guān)聯(lián)效度。聯(lián)效度。l所謂的所謂的“決策效度決策效度”是指在預(yù)測(cè)源測(cè)驗(yàn)和效標(biāo)測(cè)驗(yàn)中是指在預(yù)測(cè)源測(cè)驗(yàn)和效標(biāo)測(cè)驗(yàn)中均通過(guò)和均不通過(guò)的被試人數(shù)百分比例。均通過(guò)和均不通過(guò)的被試人數(shù)百分比例。l例：根據(jù)預(yù)測(cè)源測(cè)驗(yàn)將被試分為掌握組（例：根據(jù)預(yù)測(cè)源測(cè)驗(yàn)將被試分為掌握組（A，30人）人）和未掌握組（和未掌握組（B，15人）；在后續(xù)的效標(biāo)測(cè)驗(yàn)中人）；在后續(xù)的效標(biāo)測(cè)驗(yàn)中A組通組通過(guò)過(guò)25人，人，B組未通過(guò)人數(shù)為組

13、未通過(guò)人數(shù)為10人，則該測(cè)驗(yàn)的效標(biāo)關(guān)人，則該測(cè)驗(yàn)的效標(biāo)關(guān)聯(lián)效度是多少？聯(lián)效度是多少？ 25/45+10/450.78第四節(jié)第四節(jié) 測(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)的確定測(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)的確定l專家判斷法專家判斷法 l效標(biāo)組預(yù)測(cè)法效標(biāo)組預(yù)測(cè)法一、專家判斷法一、專家判斷法1、Nedelsky方法方法 主要針對(duì)多重選擇題組成的測(cè)驗(yàn)而言，由專家來(lái)判主要針對(duì)多重選擇題組成的測(cè)驗(yàn)而言，由專家來(lái)判斷處于臨界水平的被試在每一題上有能力排除的錯(cuò)誤選斷處于臨界水平的被試在每一題上有能力排除的錯(cuò)誤選項(xiàng)，從而計(jì)算其正確回答的可能性，再求每一題上正確項(xiàng)，從而計(jì)算其正確回答的可能性，再求每一題上正確回答的可能性之和，作為測(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)。回答

14、的可能性之和，作為測(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)。例：某測(cè)驗(yàn)由四擇一的選擇題構(gòu)成，某題例：某測(cè)驗(yàn)由四擇一的選擇題構(gòu)成，某題A、B、C、D四四個(gè)答案中個(gè)答案中A是正確的，若專家判斷處于臨界水平的被試是正確的，若專家判斷處于臨界水平的被試可以正確排除可以正確排除B和和D，那么在該題上正確回答的可能性，那么在該題上正確回答的可能性為為1/（4-2）=0.5。最后對(duì)每一題求和，可得及格線。最后對(duì)每一題求和，可得及格線。2、Angoff方法方法 由專家直接判斷處于臨界水平的被試在某測(cè)驗(yàn)的每由專家直接判斷處于臨界水平的被試在某測(cè)驗(yàn)的每一題目正確作答的可能性（一題目正確作答的可能性（Pi），設(shè)每題的滿分為），設(shè)每題的滿分為

15、Fi，則該測(cè)驗(yàn)的分?jǐn)?shù)分界點(diǎn)（則該測(cè)驗(yàn)的分?jǐn)?shù)分界點(diǎn)（）為：）為： = =Fi Pi二、效標(biāo)組預(yù)測(cè)法二、效標(biāo)組預(yù)測(cè)法1、臨界組法、臨界組法 由由專家判斷和選擇專家判斷和選擇一組正處于臨界水平的被試，將一組正處于臨界水平的被試，將測(cè)驗(yàn)施測(cè)于該組被試，計(jì)算他們?cè)跍y(cè)驗(yàn)上的平均成績(jī)，測(cè)驗(yàn)施測(cè)于該組被試，計(jì)算他們?cè)跍y(cè)驗(yàn)上的平均成績(jī)，以體現(xiàn)測(cè)驗(yàn)的內(nèi)容范圍所要求的臨界水平，因而可視該以體現(xiàn)測(cè)驗(yàn)的內(nèi)容范圍所要求的臨界水平，因而可視該平均成績(jī)?yōu)闇y(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)的估計(jì)值。平均成績(jī)?yōu)闇y(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)的估計(jì)值。 注：該方法的困難在于臨界水平被試的選擇和評(píng)定。注：該方法的困難在于臨界水平被試的選擇和評(píng)定。2、對(duì)照組法、對(duì)照組法

16、 先采取先采取專家評(píng)定的方法專家評(píng)定的方法確定兩組被試，一組被明確確定兩組被試，一組被明確判為掌握組，另一組被明確判為未掌握組，那些不容易判為掌握組，另一組被明確判為未掌握組，那些不容易被判為被判為“掌握掌握”或或“未掌握未掌握”的被試一概剔除。對(duì)這兩的被試一概剔除。對(duì)這兩組被試施測(cè)，可得到兩組被試原始分?jǐn)?shù)分布圖，分布圖組被試施測(cè)，可得到兩組被試原始分?jǐn)?shù)分布圖，分布圖中兩條分布曲線的交界點(diǎn)即為測(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)。中兩條分布曲線的交界點(diǎn)即為測(cè)驗(yàn)分?jǐn)?shù)分界點(diǎn)。本章小結(jié)l目標(biāo)參照測(cè)驗(yàn)是根據(jù)某一明確界定的內(nèi)容范圍而縝密編目標(biāo)參照測(cè)驗(yàn)是根據(jù)某一明確界定的內(nèi)容范圍而縝密編制的測(cè)驗(yàn)，并且，被試在測(cè)驗(yàn)中所得結(jié)果也是根據(jù)某一制的測(cè)驗(yàn)，并且，被試在測(cè)驗(yàn)中所得結(jié)果也是根據(jù)某一明確界定的行為標(biāo)準(zhǔn)直接進(jìn)行解釋的。明確界定的行為標(biāo)準(zhǔn)直接進(jìn)行解釋的。l目標(biāo)參照測(cè)驗(yàn)的三種預(yù)測(cè)方法（前后測(cè)法；對(duì)照組法；目標(biāo)參照測(cè)驗(yàn)的三種預(yù)測(cè)方法（前后測(cè)法；對(duì)照組法；接受接受-