05項目分析ppt課件

1、第五章 工程分析定性分析 主要由專家對工程的內(nèi)容和方式進(jìn)展分析，包括調(diào)查內(nèi)容效度、標(biāo)題編寫的恰當(dāng)性和有效性等。定量分析 主要計算工程的難度、區(qū)分度等。目的 對工程進(jìn)展挑選和修訂，提高檢驗的信度和效度。.第一節(jié) 工程的難度工程的難度difficulty是指檢驗工程或試題的難易程度。在才干檢驗中就是指試題的難度程度。人格檢驗不存在難度問題，與此相應(yīng)的目的稱為通俗性或流行性popularity level，即總體中在答案方向上回答的人數(shù)比率。.一、難度的計算二級評分法工程的難度計算多級評分法工程的難度計算.1、二級評分法工程的難度計算經(jīng)過率P=試題的難度R=答對該題的人數(shù)N=參與檢驗的總?cè)藬?shù).例題1

2、0名被試在某選擇題上的得分如下，試計算該題的難度。被試12345678910得分1100110110.極端分組法將被試按總分高低依次排序；劃出人數(shù)相等的高分組和低分組例如比例為27%；計算高分組和低分組在該題上的經(jīng)過率PH和 PL ；該題的難度計算公式為：.例題選取有代表性的試卷370份，按照總分高低排序，將從最高分向下的27%100人作為高分組，將從最低分向上的27%100人作為低分組。某題的答題情況如下表。試計算該題的難度。組別選擇各項答案的人數(shù)A B C D 未答正確答案高分組低分組8 36 34 21 14 30 46 20 0B.2、多級評分法工程的難度計算 P =試題的難度 =全體

3、被試在該題上的平均分?jǐn)?shù) =該題的總分值分?jǐn)?shù).例題問答題總分值為15分，10名被試在該題的得分如下。試計算該題的難度。被試12345678910得分131510109111091110.二、二級評分法工程難度的矯正排除由于被試猜測而答對某些標(biāo)題致使P值增大的能夠性。比較答案選項數(shù)不同的標(biāo)題的難度。矯正公式為：CP=矯正后的難度P=未矯正的難度K=測題的選項數(shù)目.難度矯正公式的推導(dǎo).例題一個五擇一的工程，其經(jīng)過率為0.50，那么排除猜測的影響，矯正后的難度為 多少？.三、難度的等距量表用百分比表示的難度值是等級數(shù)據(jù)。P值越大，工程越容易。將以等級量表表示的P值轉(zhuǎn)換為具有相等單位的等距量表Z值： 將

4、某題的經(jīng)過率P視為正態(tài)分布曲線下的面積；查正態(tài)分布表找出正態(tài)曲線右側(cè)面積所對應(yīng)的Z分?jǐn)?shù)。 Z值越大，工程越難。美國教育檢驗效力社ETS： = 13 + 4Z 取值范圍為125.四、難度對檢驗分布的影響常態(tài)分布：平均難度在0.5左右負(fù)偏態(tài)分布：檢驗容易，P值大正偏態(tài)分布：檢驗過難，P值小ACB.第二節(jié) 工程的鑒別力一、定義二、估計方法.一、定義工程的鑒別力Item discrimination，又稱工程的區(qū)分度。指工程得分對被試實踐程度的區(qū)分才干或鑒別才干。.二、估計方法極端組法相關(guān)分析法要素分析法.1鑒別指數(shù)極端組法高分組與低分組在某一工程上的經(jīng)過率之差D = PHPLD鑒別指數(shù)PH高分組經(jīng)過

5、率PL低分組經(jīng)過率.例題選取有代表性的試卷370份，按照總分高低排序，將從最高分向下的27%100人作為高分組，將從最低分向上的27%100人作為低分組。某題的答題情況如下表。試計算該題的鑒別指數(shù)。組別選擇各項答案的人數(shù)A B C D 未答正確答案高分組低分組8 36 34 21 14 30 46 20 0B.鑒別指數(shù)與工程的優(yōu)劣 D 測題評鑒 0.4以上 優(yōu)良 0.30-0.39 良好，如能修改更好 0.20-0.29 尚可，仍需修改 0.19以下 劣，必須淘汰 .2相關(guān)分析法工程得分與總分的相關(guān)工程間的相互相關(guān)工程得分與效標(biāo)的相關(guān).工程與總分的相關(guān)點二列相關(guān)二列相關(guān)積差相關(guān).點二列相關(guān)工程

6、是0、1記分，總分是延續(xù)變量.例題學(xué)生12345678總分9087838080777168項目得分11101000.二列相關(guān)工程和總分都是正態(tài)延續(xù)變量，但工程得分被人為地分為兩個類別.例題學(xué)生12345678總分9087838080777168作文得分3635332824262122通過與否11111100.積差相關(guān)工程和總分均為正態(tài)延續(xù)變量.工程間的相互相關(guān)又稱工程的組間相關(guān)工程是0、1記分工程是非0、1記分.工程是0、1記分第i題01第j題1ABA+B0CDC+DA+CB+D.工程是0、1記分四項相關(guān)相關(guān).工程是非0、1記分積差相關(guān).工程與效標(biāo)的相關(guān)工程的效標(biāo)效度分析計算方法與前面工程與總

7、分的相關(guān)根本一樣.相關(guān)系數(shù)的統(tǒng)計檢驗以相關(guān)系數(shù)計算工程的鑒別力時，鑒別力到達(dá)多高時才可以接受？相關(guān)系數(shù)不是來源于=0的總體！參考王孝玲第十一章1993.3要素分析法普通是先經(jīng)過要素分析發(fā)現(xiàn)檢驗中的假設(shè)干共同要素，再分析每一工程在各共同要素上的要素載荷Factor Loading。當(dāng)一個工程在預(yù)先假定要丈量的要素上要較高的載荷時，該工程就被以為是有較高區(qū)分度的。工程的要素載荷普通要在0.30以上才是可以接受的。.第三節(jié) 工程分析的相關(guān)問題一、難度、區(qū)分度與檢驗信度和效度二、根據(jù)工程統(tǒng)計量挑選工程三、選擇題的選答項分析四、規(guī)范參照檢驗的工程分析.一、難度、區(qū)分度與檢驗信度和效度難度與區(qū)分度的關(guān)系難

8、度與檢驗的信度和效度區(qū)分度與檢驗的信度和效度.1難度與區(qū)分度的關(guān)系測題難度對其區(qū)分度的影響可以經(jīng)過不同難度的測題提供了多少次被試間相互比較的時機(jī)而得到闡明。假設(shè)經(jīng)過某題的有R人，未經(jīng)過的有W人，那么該題鑒別出的差別是RW人次。當(dāng)P=0.50時，標(biāo)題鑒別出的差別次數(shù)最多，即該工程的鑒別力最大。.難度與區(qū)分度最大值的關(guān)系難度P 區(qū)分度最大值 1.00 0.00 0.90 0.20 0.80 0.40 0.70 0.60 0.60 0.80 0.501.00 .2難度與檢驗的信度和效度當(dāng)檢驗標(biāo)題的平均難度為0.50時，檢驗分?jǐn)?shù)呈正態(tài)分布：檢驗的方差最大，信度也就最高；與心思特質(zhì)的正態(tài)分布吻合，檢驗具

9、有最大的鑒別力，檢驗的效度才干到達(dá)最高。.3區(qū)分度與檢驗的信度和效度以工程與總分的相關(guān)來計算時，區(qū)分度表達(dá)了檢驗的同質(zhì)性。區(qū)分度高時，檢驗的同質(zhì)性就越高，檢驗的信度就高。工程區(qū)分度的總和就是檢驗的效度。.區(qū)分度與信度的關(guān)系區(qū)分度（D） 信度 0.1225 0.000.16 0.420.20 0.630.30 0.840.40 0.9150.50 0.949.二、根據(jù)工程統(tǒng)計量挑選工程根據(jù)難度挑選工程根據(jù)區(qū)分度挑選工程.1根據(jù)難度挑選工程對大規(guī)模群體的個體程度進(jìn)展區(qū)分和鑒別： 一切工程平均難度為0.50左右，難度值在0.200.80之間或0.350.65之間選拔或挑選檢驗：難度P=優(yōu)秀人員的錄取

10、率選擇題：難度普通應(yīng)大于猜測概率.2根據(jù)區(qū)分度挑選工程鑒別指數(shù)D在0.30以上；相關(guān)系數(shù)不低于相應(yīng)的臨界值。.三、選擇題的選答項分析普通要求正確選項：高分組選擇人數(shù)多于低分組錯誤選項：高分組選擇人數(shù)少于低分組異常情況正確答案無人選，或一切被試都選擇正確答案；錯誤答案選的人太多；正確選項高分組選擇人數(shù)少于低分組；錯誤選項高分組選擇人數(shù)多于低分組；某個選項無人選擇；未答的人數(shù)較多。.工程分析實例題號組別選擇各項答案的人數(shù)A B C D 未答正確答案難度P區(qū)分度D1高分組低分組0 36 39 23 20 32 46 18 4B2高分組低分組22 12 10 48 832 25 11 23 9A3高分

11、組低分組16 15 7 62 036 28 7 26 3D4高分組低分組2 1 95 2 018 12 54 16 0C.工程分析實例題號組別選擇各項答案的人數(shù)A B C D 未答正確答案難度P區(qū)分度D1高分組低分組0 36 39 23 20 32 46 18 4B0.340.042高分組低分組22 12 10 48 832 25 11 23 9A0.27-0.103高分組低分組16 15 7 62 036 28 7 26 3D0.440.364高分組低分組2 1 95 2 018 12 54 16 0C0.7450.41.四、規(guī)范參照檢驗的工程分析工程的難度工程區(qū)分度.1工程的難度與檢驗?zāi)康挠嘘P(guān)。相對于規(guī)范的高低。P = 掌握組的經(jīng)過率 未掌握組的經(jīng)過率.2工程區(qū)分度教學(xué)敏感度指數(shù)鑒別度指數(shù).教學(xué)敏感度指數(shù)D = Ppost PpreD =教學(xué)敏感度指數(shù)Ppost =后測中的經(jīng)過率Ppre =前測中的經(jīng)過率.問題練習(xí)效應(yīng)；需求有后測；D值低難以區(qū)分是教學(xué)不良還是標(biāo)題區(qū)分度不好