第四章-心理測驗(yàn)的難度與區(qū)分度(ppt)課件

1、第四章 項(xiàng)目分析心理測量學(xué)第四章 項(xiàng)目分析第一節(jié) 項(xiàng)目的難度1第二節(jié) 項(xiàng)目的區(qū)分度 2第三節(jié) 題目的猜測度與控制 3第四節(jié) 選擇題選項(xiàng)分析與修改 4心理測量學(xué)第四章 項(xiàng)目第一節(jié) 項(xiàng)目的難度1一、難度的定義難度定義難度difficulty：指項(xiàng)目的難易程度，即就是被試完成題目或項(xiàng)目任務(wù)時(shí)所遇到的困難程度 難度系數(shù) ：p定量刻畫被試作答一個(gè)題目所遇到的困難程度的量數(shù)，就叫題目的難度系數(shù)，也常稱為難度值,用符號P表示。二、難度系數(shù)計(jì)算方法以全體被試得分率為難度系數(shù)以全體被試通過率為難度系數(shù) P=K/N 以兩端組被試得分率的均值為難度系數(shù) P=(PH+PL)/2P：題目難度X拔：被試在某題目上 的平均

2、得分Xmax：該題目的滿分P：題目難度K：答對人數(shù)N：全體被試人數(shù)P：題目難度PH：高分組被試的得分率PL：低分組被試的得分率（1）按被試的總分，將全體被試者從高到低進(jìn)行排序。（2）從高分往下找，找出高分組；由低分往高找，找出低分組 兩組人數(shù)分別占總?cè)藬?shù)的27%。（3）分別計(jì)算高分組、低分組的被試在該題目上的平均得分。（4）代入公式分別計(jì)算高分組和低分組被試在同一個(gè)題目上 的難度系數(shù)。（5）把 和 代入P=(PH+PL)/2 ，計(jì)算這個(gè)題目的難度系數(shù)。難度計(jì)算實(shí)例例4-1 下表是隨機(jī)抽取22名被試在某數(shù)學(xué)測驗(yàn)中四道題目的得分情況，每題的滿分分別為1分、2分、3分和4分，請分析其難度。哪道題最難

3、？三、難度系數(shù)變換 上述所得難度系數(shù)，不論是得分率還是失分率，都屬于順序變量，不具有相等的單位，因此，通過p值比較并不能客觀指出題目難度之間的差異大小 。Eg：三個(gè)題目難度系數(shù)分別為0.5、0.6、0.7，三個(gè)題目之間難度差是否相等？可知第一題最難，第二題次之，第三題最容易難度系數(shù)相差都是10%，但并不代表第一題 與 第二題難度只差等于第二題與第三題難度之差難度系數(shù)變換辦法假設(shè)每個(gè)試題所要測量的潛在特質(zhì)或能力是呈正態(tài)分布的，然后就可以根據(jù)正態(tài)分布曲線,將試題的難度系數(shù)P作為正態(tài)曲線下的概率面積，轉(zhuǎn)換成具有相等單位的等距量表,即Z分?jǐn)?shù)（標(biāo)準(zhǔn)分?jǐn)?shù)）量表。 難度等距轉(zhuǎn)換實(shí)例題號答對率難度Z值難度差異

4、10.151.04-20.250.670.3730.350.390.2840.400.250.1450.60-0.250.5060.70-0.840.59思考：Z分?jǐn)?shù)為負(fù)值時(shí)，說明試題難還是容易？ Z值存在負(fù)值不易理解，因此做如下轉(zhuǎn)換難度Z值轉(zhuǎn)換公式:=13+4Z：題目難度；Z：由p轉(zhuǎn)換來的標(biāo)準(zhǔn)分?jǐn)?shù)思考：的取值范圍？1-25 第1題：=13+4*1.04=17.16第2題：=13+4*0.67=15.68第3題：=13+4*0.39=14.56第4題：=13+4*0.25=14第5題：=13+4*（-0.25）=12第6題：=13+4*（-0.59）=9.64難度等距轉(zhuǎn)換公式四、題目的難度分布

5、 P的取值范圍為：0P1當(dāng)P=0時(shí)，試題的實(shí)際困難程度最大(所有的考生都得0分)當(dāng)P=l時(shí)，試題的實(shí)際難度最小(所有的考生都全對)。 常模參照測驗(yàn)難度分布要盡可能地區(qū)分被試的個(gè)別差異，測驗(yàn)結(jié)果就盡可能拉開距離 。P值盡量接近0.50 為宜思考：P等于1或0時(shí)，以為著什么，是否還可以區(qū)分被試？ 實(shí)驗(yàn)表明：所有題目的難度系數(shù)分布在0.30至0.70之間，并且整個(gè)測驗(yàn)的平均難度系數(shù)在0.50左右時(shí)，測驗(yàn)對被試有較大的鑒別力，測驗(yàn)分?jǐn)?shù)也接近正態(tài)分布 標(biāo)準(zhǔn)參照測驗(yàn)難度分布目的是檢驗(yàn)被試是否已達(dá)到教學(xué)目標(biāo)規(guī)定的掌握程度教師期望學(xué)生都能夠在教學(xué)之后掌握所有的教學(xué)內(nèi)容通過率達(dá)到1.00時(shí)，所有學(xué)生都掌握了教學(xué)

6、內(nèi)容。如果教學(xué)是有效的，多數(shù)試題的難度系數(shù)P值都會很大，難度系數(shù)反映的是教學(xué)質(zhì)量的好壞的成分多于試題質(zhì)量的好壞的成分不同測驗(yàn)，目的不同，難度值不同。奧林匹克測驗(yàn)？選擇補(bǔ)習(xí)功課的學(xué)生？心理測量學(xué)第四章 心理測量的難度與區(qū)分度第二節(jié) 項(xiàng)目的區(qū)分度 2一、區(qū)分度的定義定義：指測驗(yàn)對考生實(shí)際水平的區(qū)分程度或測驗(yàn)對被試特質(zhì)差異的區(qū)分能力，用符號D表示。具有良好區(qū)分度的測驗(yàn)，實(shí)際水平高的應(yīng)該得高分，實(shí)際水平低的應(yīng)該得低分。所以，區(qū)分度又叫鑒別力。是評價(jià)試題質(zhì)量，篩選試題的主要指標(biāo)與依據(jù)區(qū)分度的分類正區(qū)分(D0)稱積極區(qū)分，指實(shí)際水平高的考生得了高分，實(shí)際水平低的考生得了低分負(fù)區(qū)分(D0)，稱消極區(qū)分，實(shí)際

7、水平高的考生得了低分，實(shí)際水平低的學(xué)生得了高分零區(qū)分(D=0)指實(shí)際水平高低與得分之間沒有太大的關(guān)系，呈現(xiàn)出零相關(guān)二、區(qū)分度的計(jì)算 1、相關(guān)系數(shù)法點(diǎn)二列相關(guān)積差相關(guān)2、用極端分組法計(jì)算區(qū)分度： D=PHPLD表示區(qū)分度PH表示高分組的難度PL表示低分組的難度 心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心該方法的基本思想是，若題目有好的區(qū)分度，則高能力的被試在該題上應(yīng)得高分，低能力被試應(yīng)得低分，即被試在題目上的得分應(yīng)與測驗(yàn)總分相一致。其基本假設(shè)是測驗(yàn)得高分的被試即為高能力被試，測驗(yàn)得低分的被試即為低能力被試。1、相關(guān)系數(shù)法心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心（1）點(diǎn)二列相關(guān)法1、相關(guān)系數(shù)法心理測

8、量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心（2）積差相關(guān)法1、相關(guān)系數(shù)法心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心基本思想：2、極端分組法（鑒別指數(shù)法）心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心例4-2 下表是隨機(jī)抽取22名被試在某語文測驗(yàn)中四道題目的得分情況，四題滿分分別為1分、3分、5分和60分，其中第4題為作文題，請計(jì)算四題的區(qū)分度。3、題目區(qū)分度計(jì)算實(shí)例心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心3、題目區(qū)分度計(jì)算實(shí)例心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心三、區(qū)分度的評價(jià)標(biāo)準(zhǔn)1965年美國測量學(xué)家伊貝爾根據(jù)長期經(jīng)驗(yàn)提出如下標(biāo)準(zhǔn)：四、區(qū)分度與測驗(yàn)信度、難度的關(guān)系區(qū)分度與信度關(guān)系此表是1962年RL艾伯

9、發(fā)表的，這里是假定全部試題的難度均為050時(shí)所預(yù)測的信度系數(shù)。里面的區(qū)分度指的是平均值?？梢?，要想達(dá)到理想的測驗(yàn)信度，提高區(qū)分度是一個(gè)好方法。四、區(qū)分度與測驗(yàn)信度、難度的關(guān)系區(qū)分度與難度關(guān)系由上表可知，難度適中，可使區(qū)分度達(dá)到最大值。心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心(1)題目難度(2)被試群體的同質(zhì)性(3)全卷各題所測心理品質(zhì)的一致性。(4)題目本身的文字與內(nèi)容的質(zhì)量也會影響 題目的區(qū)分度五、影響題目區(qū)分度的因素心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心(1)控制好題目難度。將題目難度在0.5左右時(shí)，區(qū)分能力理論上會比較高。(2)保證題目所測心理品質(zhì)與全卷所測心理品質(zhì)的一致性。(3)題干

10、及答案無歧義。(4)語言準(zhǔn)確規(guī)范。(5)借助選項(xiàng)分析提供的信息對不良選項(xiàng)進(jìn)行修改，以提高題目區(qū)分能力。六、提高題目區(qū)分度方法心理測量學(xué)第四章 心理測量的難度與區(qū)分度第三節(jié) 題目的猜測度與控制 3一、猜測度的定義猜測度是指被試全憑隨機(jī)猜測而答對題目的概率。猜測行為主要出現(xiàn)在客觀題（如選擇題、是非判斷題、配對題等）心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心增加選擇題選擇項(xiàng)的個(gè)數(shù)(一般不少于四個(gè)) 。增加干擾項(xiàng)的迷惑性?？刂拼嬖诓聹y行為的總題量，以保證猜測誤差控制在較小范圍。如有特殊需要，還可采用警告、扣分等方式控制被試的猜測行為。二、猜測度的控制心理測量學(xué)第四

11、章 心理測量的難度與區(qū)分度第四節(jié) 選擇題選項(xiàng)分析與修改 4心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心一、選項(xiàng)分析基本過程1、根據(jù)被試的測驗(yàn)總分，對被試進(jìn)行排序2、確定高分組和低分組被試3、分別登記高分組被試和低分組被試在每個(gè)備選項(xiàng)的人數(shù)及未作答人數(shù)（也可以是人數(shù)百分比），最終整理成類似表中的數(shù)據(jù)資料4、根據(jù)第3步整理好的數(shù)據(jù)資料，進(jìn)行具體分析。心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心1、首先分析兩組平均選答率一般正確答案的選答率應(yīng)該在0.4到0.6之間，每個(gè)干擾項(xiàng)應(yīng)該平均分剩余的選答率。如果正確答案的選答率過高或過低，這都不利于區(qū)分高分組和低分組被試。如果某干擾項(xiàng)選答率特低，則說明該干擾項(xiàng)錯的過

12、于明顯應(yīng)加以淘汰；若某干擾項(xiàng)選答率特高，則要考慮該題正確答案是否錯誤或有兩個(gè)正確答案。二、選項(xiàng)分析的方法及選項(xiàng)修改原則 心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心2、對于正確答案 主要考察高分組和低分組被試在正確答案上的選答率是否是正差，及這一差距是否足夠大。只有當(dāng)高分組和低分組被試在正確答案上的選答率是正差，且這一差距足夠大時(shí)，這時(shí)題目質(zhì)量較佳。二、選項(xiàng)分析的方法及選項(xiàng)修改原則 心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心3、對于干擾項(xiàng)考察高分組和低分組被試在干擾項(xiàng)上的選答率是否是負(fù)差，及這一差距是否足夠大。只有當(dāng)高分組和低分組被試在正確答案上的選答率是負(fù)差，且這一距差足夠大時(shí)，這時(shí)干擾項(xiàng)的設(shè)置比

13、較合理，否則干擾項(xiàng)設(shè)置不合理，應(yīng)對干擾項(xiàng)進(jìn)行刪除或修改。二、選項(xiàng)分析的方法及選項(xiàng)修改原則 心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心4、其它如果高分組被試的選答集中在兩個(gè)答案上，且人數(shù)又相近，說明此題可能有兩個(gè)正確答案，或者在某種意義上另一個(gè)選擇項(xiàng)也有一定道理。應(yīng)考慮題目本身是否存有歧義或有兩個(gè)正確答案。如果高分組對正確答案的選答率與低分組相等或低于后者，說明該題所考察東西與被試水平無關(guān)，即不具有鑒別力，此題應(yīng)作大修改或刪除。如果一個(gè)題目被試未作答的人數(shù)較多（速度測驗(yàn)除外），或選擇各個(gè)備選項(xiàng)答案的人數(shù)相等，說明該題目過難或題意不清，被試無法作答或全憑猜測。應(yīng)修改或刪除本題。二、選項(xiàng)分析的方法及選

14、項(xiàng)修改原則 心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心例4-3下表為一個(gè)由370人參加的英語測驗(yàn)中四道選擇題的統(tǒng)計(jì)結(jié)果，試分析每題難度、區(qū)分度是如何計(jì)算出來的？并對這四題的選項(xiàng)質(zhì)量進(jìn)行評價(jià)。 三、項(xiàng)目分析實(shí)例心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心三、項(xiàng)目分析實(shí)例心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心選項(xiàng)分析：第1題，正確答案和干擾項(xiàng)的兩組平均選答率都基本正常，在正確答案上高分組的被試選擇人數(shù)要多于低分組被試，且在非正確選項(xiàng)上，高分組的被試選擇人數(shù)要少于低分組被試，這符合實(shí)際情況，四個(gè)選項(xiàng)的設(shè)置均較合理；三、項(xiàng)目分析實(shí)例心理測量學(xué)江西師大心理與教育統(tǒng)計(jì)測量中心三、項(xiàng)目分析實(shí)例選項(xiàng)分析：第2題，正確答案和干擾項(xiàng)B的兩兩組平均選答率基本一致，且正確答案上高分組的被試選擇人數(shù)要少于低分組被試，而在非正確選項(xiàng)B、D上，高分