項(xiàng)目分析 (3)ppt課件

1、第六章檢驗(yàn)的工程分析第一節(jié)檢驗(yàn)的難度第二節(jié)檢驗(yàn)的區(qū)分度第三節(jié)猜測問題與猜測率第四節(jié)多重選擇題的工程分析第五節(jié)規(guī)范參照檢驗(yàn)的工程分析第一節(jié)檢驗(yàn)的難度一、難度的意義、定義: 測題的難易程度(才干檢驗(yàn)) 測題的“通俗性或“流行性的程度 (人格檢驗(yàn))、難度與難度系數(shù)成反比、難度系數(shù)的范圍在0至1之間二、難度估計的方法、經(jīng)過率法 A. 用于二值記分的測題B. 用于非二值記分的測題、分組法 用于樣本很大的測題 P 為難度系數(shù)為高分組(總分排在前27%的被試)答對該題的百分比為低分組(總分排在前27%的被試)答對該題的百分比三、檢驗(yàn)難度程度確實(shí)定工程難度多高適宜，取決于檢驗(yàn)的目的、性質(zhì)以及工程的方式。1、假

2、設(shè)檢驗(yàn)是為了了解被試對知識、技藝的掌握情況，就不用過多思索難度；2、假設(shè)檢驗(yàn)用于選拔人員，就應(yīng)該比較多地采用難度值接近錄取率的工程。3、假設(shè)檢驗(yàn)是為檢驗(yàn)被試個體間的差別，那么應(yīng)選擇接近中等難度的工程。四、難度的等距變換由于難度系數(shù)僅具有順序性，不同的難度的工程無法直接進(jìn)展比較。假設(shè)要進(jìn)展比較，那么需求把它轉(zhuǎn)換成等距量表。=13+4值越大，難度越高， 值越小，難度越低五、測題難度確實(shí)定與分?jǐn)?shù)分布 越是接近中等難度的標(biāo)題越具有區(qū)分的作用,也就是越是接近0.50的標(biāo)題越好,其區(qū)分程度越高. 如: 1 99 = 99 2 98 = 196 30 70 = 2100 50 50 = 2500直觀檢驗(yàn)難度

3、的方法：第二節(jié)檢驗(yàn)的區(qū)分度一、區(qū)分度的意義是指檢驗(yàn)工程對被試心思質(zhì)量程度差別的區(qū)分才干。區(qū)分度的取值范圍介于-1.00至+1.00之間。通常D為正值，稱作積極區(qū)分；D為負(fù)值，稱為消極區(qū)分，D為0稱作無區(qū)分作用。具有積極區(qū)分作用的工程，其D值越大，區(qū)分的效果越好。二、區(qū)分度的計算一工程鑒別指數(shù)法適用于計分題、鑒別指數(shù)的計算高分組經(jīng)過率減去低分組經(jīng)過率. 公式: D = PH - PL 、鑒別指數(shù)與測題的評價 _ D 測題評價 - 0.40以上 非常優(yōu)良 0.30-0.39 良好,如能修正更好 0.20-0.29 尚可,但必需修正 0.20以下 劣,淘汰 -、極端組的劃分根據(jù)效標(biāo)成果或檢驗(yàn)總分將被

4、試排隊，取的高分端被試組成高分組，另外的低分端組成低分組，其他的被試可以不作分析。普通情況下，介于即可。當(dāng)樣本人數(shù)過少時n，不宜采用的規(guī)那么，可以用作為分界點(diǎn)。優(yōu)點(diǎn)：計算方便，容易了解缺陷：只利用了部分信息，計算結(jié)果的準(zhǔn)確性差二、相關(guān)法以工程分?jǐn)?shù)與效標(biāo)分?jǐn)?shù)或檢驗(yàn)總分的相關(guān)作為工程區(qū)分度的目的相關(guān)越高，工程區(qū)分度越高 、 二列相關(guān)(兩個延續(xù)變量，但其中一個變量被人為分成兩類。) 公式:= 該題及格的被試在總分上的平均分= 該題不及格的被試在總分上的平均分p = 該題的難度 q = 1-pSt = 全體被試的總分規(guī)范差 或= 總分平均數(shù)y為p與q交界處正態(tài)曲線的高度二列相關(guān)系數(shù) 的顯著性檢驗(yàn)公式N

5、 為被試總?cè)藬?shù)y為 正態(tài)分布下答對百分比所在位置曲線的高度例：下表有20個學(xué)生言語檢驗(yàn)部分以及在作文題上的得分情況，假設(shè)作文37分(包括37分)算經(jīng)過，試計算作文題的區(qū)分度?？偡?652947265227683807576736291477481886258作文題得分4737552722103542463940413852213942482927解：P=1320=0.65， q=1-p=1-0.65=0.35查表 y=0.3704可見，作文分?jǐn)?shù)與總分相關(guān)顯著2 、點(diǎn)二列相關(guān)(一個變量為延續(xù)變量，另一個變量為二分變量) 公式:或= 該題及格的被試在總分上的平均分= 該題不及格的被試在總分上的平均

6、分p = 該題的難度 q = 1-pSt = 全體被試的總分規(guī)范差= 總分平均數(shù)15個學(xué)生某測題的得分與總分情況學(xué)生123456789101112131415總分908180787770696555504942353110某題101111100010100查相關(guān)系數(shù)顯著性臨界表，當(dāng)df=13時，Rpb必需到達(dá).514才到達(dá).05的顯著性程度。3 、用系數(shù)計算區(qū)分度(二變量均為二分稱名變量)假設(shè)檢驗(yàn)值能否顯著，應(yīng)先將值轉(zhuǎn)換成 值：答錯答對合計升級2a6b8a+b留級5c2d7c+d合計7a+c8b+d1515個學(xué)生數(shù)學(xué)成果四格表 查 值表，df=13時， =3.841才到達(dá)0.05的顯著性程度。

7、計算出 的值仍未到達(dá)顯著性程度。 、積差相關(guān)法兩變量均為延續(xù)變量，且被試團(tuán)體較大時，可以以為工程分?jǐn)?shù)服從正態(tài)分布可將工程得分與效標(biāo)分?jǐn)?shù)求積差相關(guān)系數(shù)以得到工程的區(qū)分度 三 要素分析 分析測題在一個要素上的負(fù)荷,負(fù)荷越大闡明越有區(qū)分度,普通在0.30以上才是可以接受的. 四 方差法 方差大闡明離散程度越高,那就具有鑒別力. 公式:當(dāng)n30時當(dāng)n30時三、難度與鑒別力區(qū)分度的關(guān)系 - P D - 1.00 0.00 0.90 0.20 0.70 0.60 0.60 0.80 0.50 1.00 0.40 0.80 0.30 0.60 0.10 0.20 0.00 0.00 - 區(qū)分度與難度的關(guān)系續(xù)

8、1難度和區(qū)分度都是相對的，是針對一定團(tuán)體而言的，絕對難度和區(qū)分度是不存在的。2普通說來，較難的工程對高程度被試區(qū)分度高，較易工程對程度低的被試區(qū)分度高，中等難度的工程對中等程度的被試區(qū)分度高。3由于人的多數(shù)心思特性呈常態(tài)分布，所以工程難度的分布也以常態(tài)為好，即特別難與特別容易的標(biāo)題較少，越接近中等難度的標(biāo)題越多，而一切工程的平均難度為0.50.四、區(qū)分度的相對性 、不同的計算方法，所得區(qū)分度不同 、樣本容量大小影響相關(guān)法區(qū)分度值的大小 、分組規(guī)范影響鑒別指數(shù) 、被試樣本的同質(zhì)性程度影響區(qū)分度值的大小第三節(jié)猜測問題與猜測率一、客觀檢驗(yàn)題中的猜測問題與猜測率 、在客觀題中，尤其在是非題、配對題及選

9、項(xiàng)較少的選擇題中，被試的猜測會提高他們的分?jǐn)?shù)被試憑猜測選擇正確答案的時機(jī)是 、猜測誤差的來源：猜相對于不猜引起的誤差能否猜得對引起的誤差二、工程難度受猜測影響的校正 、校正公式適用于對單一工程經(jīng)過率的校正為校正后的經(jīng)過率，為實(shí)踐經(jīng)過率，為備選答案數(shù)目 、校正難度的作用檢驗(yàn)實(shí)踐難度 例: 某題經(jīng)過率為75%,是一個五選一的標(biāo)題.比較兩個不同選項(xiàng)數(shù)標(biāo)題的難度 例: 有二道題,一題的難度為0.50,有五個選項(xiàng),另一題的難度為0.53,有四個選項(xiàng). 、總分校正公式假設(shè)被試參與的檢驗(yàn)全部是由選擇題或是非題組成，那么被試總分也有猜測的成份，需求對其總分進(jìn)展校正式中為校正后的得分，為被試答對的工程數(shù)，為被試

10、答錯的工程數(shù)，為工程的選項(xiàng)數(shù)目例：某被試參與由200道選擇題組成的檢驗(yàn)，每道題都有五個備選答案，檢驗(yàn)結(jié)果是答對了120題，而答錯了80題，請問假設(shè)除去猜測成份，那么該被試的實(shí)得分?jǐn)?shù)每題0.5分是多少？答：該被試的實(shí)得分?jǐn)?shù)應(yīng)該是50分 、猜測校正的優(yōu)缺陷贊成的理由：可防止降低檢驗(yàn)的信度；校正后的得分可以反映被試的真正程度和才干；在教育檢驗(yàn)中，可以培育被試?yán)蠈?shí)的美德；比較公平反對的理由：公式的根本假設(shè)不成立；只需被試能答完全部標(biāo)題上，那么猜測校正無本質(zhì)作用，因校正前后的相對分?jǐn)?shù)完全一樣；不采用猜測校正對信度并無艱苦影響；有時會出現(xiàn)無法解釋的景象，如校正后得零分或負(fù)分的景象；在實(shí)踐生活中，合理的猜測

11、是值得培育的習(xí)慣第四節(jié) 選項(xiàng)分析 、選項(xiàng)設(shè)置不當(dāng)會降低標(biāo)題的難度,所以也要對選項(xiàng)作分析,看有無異常情況. 通常判別選項(xiàng)好壞有以下幾點(diǎn): 1) 正確答案無人選或少于其它選項(xiàng)的人數(shù). 2) 錯誤答案選的人太多. 3) 正確選項(xiàng)高分組選擇人數(shù)少于低分組. 4) 錯誤選項(xiàng)上高分組選擇人數(shù)多于低分組. 5) 選項(xiàng)無人選擇. 6) 未答人數(shù)較多.題號組別選答人數(shù)正確答案ABCD未答1高分組592120B低分組2250121602高分組581015161A低分組2621153623高分組1715282812D低分組25111934114高分組14414365C低分組15610285 也可以用高分組的反響情況

12、來判別選項(xiàng)選擇能否得當(dāng). 1) 選項(xiàng) A B C D* 高分組 1 1 9 2 2) 選項(xiàng) A B C* D 高分組 4 3 3 3 3) 選項(xiàng) A* B C D 高分組 6 0 1 6項(xiàng)目U（20）M（20）L（20）難度（U+M+L）鑒別度（U-L）11597318220201656a43191894610410111637-6a5111311350a61614939775005a575a:選出要討論的工程項(xiàng)目組別反應(yīng)選項(xiàng)123452高分組低分組0200012016014高分組低分組0210169200105高分組低分組2133331111227高分組低分組5035584334個別工程的反

13、響分析注：黑體為正確選項(xiàng) 、工程分析步驟1選取有代表性的樣組實(shí)施檢驗(yàn).2計算每個人的總分,然后按總分分組.3計算高分組和低分組經(jīng)過每一題的比率.4分別求出每一測題的難度和鑒別指數(shù).5選項(xiàng)分析.6修正測題或選項(xiàng).第五節(jié)規(guī)范參照檢驗(yàn)的工程分析 規(guī)范參照檢驗(yàn)是用來丈量學(xué)習(xí)前后被試的差別或受過訓(xùn)練與沒有受過訓(xùn)練被試之間的差別.檢驗(yàn)結(jié)果參照的不是常模,而是某一種規(guī)范.規(guī)范參照檢驗(yàn)的工程分析所采用的方法1.以達(dá)標(biāo)與否分組,然后計算兩組被試在每一題上的成果差別,算出難度和區(qū)分度. 公式(難度) : 2.教育效果敏感指 公式:(區(qū)分度):學(xué)生測 題12345前后前后前后前后前后A-+-+-+-B+-+-+-C-+-+-+-D-+-+-+-E+-+-+-F-+-+-15個學(xué)生某測題的得分與總分情況學(xué)生123456789101