試卷質(zhì)量分析漫談

試卷質(zhì)量分析漫談翟建才第三軍醫(yī)大學(xué)訓(xùn)練部考試中心目錄錄一、考試和試卷二、高質(zhì)質(zhì)量試卷卷的基本本要求三、決定定試題質(zhì)質(zhì)量的主主要因素素四、試卷卷質(zhì)量分分析的目目的和意意義五、試卷卷質(zhì)量分分析的內(nèi)內(nèi)容六、工作作進(jìn)度和和基本要要求一、考試和試卷考試是各各類各級級教育管管理機(jī)構(gòu)構(gòu)了解教教學(xué)狀況況、對學(xué)學(xué)生的學(xué)學(xué)習(xí)目標(biāo)標(biāo)達(dá)成度度給予認(rèn)認(rèn)定的重重要手段段，也是是一種對對教、學(xué)學(xué)的階段段性效果果的評估估手段。。歷來是是選拔人人才和認(rèn)認(rèn)證資格格的公認(rèn)認(rèn)工具。。作為考試試載體形形式的試試卷的質(zhì)質(zhì)量對于于教育和和人才的的質(zhì)量控控制有著著至關(guān)重重要的作作用。教育部2007年啟動動實施““高等學(xué)學(xué)校本科科教學(xué)質(zhì)質(zhì)量與教教學(xué)改革革工程””（簡稱稱質(zhì)量工工程）創(chuàng)造安全全、便捷捷、高效效的考試試平臺。。

-----2007年高教教1號文文件教育部2007年啟動動實施““高等學(xué)學(xué)校本科科教學(xué)質(zhì)質(zhì)量與教教學(xué)改革革工程””（簡稱稱質(zhì)量工工程）“進(jìn)一步步完善高高等學(xué)校校的內(nèi)部部質(zhì)量監(jiān)監(jiān)控和評評價體系系。…完完善教師師、院系系、學(xué)校校三級質(zhì)質(zhì)量保障障機(jī)制，，逐步建建立保證證教學(xué)質(zhì)質(zhì)量不斷斷提高的的長效機(jī)機(jī)制。””---2007年高教教2號文文件本科教學(xué)學(xué)工作評評價指標(biāo)標(biāo)體系5.5質(zhì)質(zhì)量控控制5.5..2教學(xué)過程程質(zhì)量監(jiān)監(jiān)控A級指標(biāo)標(biāo)：“監(jiān)監(jiān)控體系系完善，，能及時時對主要要教學(xué)環(huán)環(huán)節(jié)和教教學(xué)階段段進(jìn)行檢查、調(diào)調(diào)控，效果明明顯。””5.5..3試卷質(zhì)量量與考核核方式A級指標(biāo)標(biāo)：““試題庫庫完善，，試卷質(zhì)量量高；考核方方式符合合課程要要求，有有利于提提高學(xué)員員的綜合合素質(zhì)。。”二、高質(zhì)質(zhì)量試卷卷的基本本要求先決條件件：建有一個個數(shù)量龐龐大、質(zhì)質(zhì)量優(yōu)異異的試題題庫是使使得試卷卷質(zhì)量高高的先決決條件。?；疽笄螅嚎陀^、科科學(xué)、公公正、有有效是對對考試也也是對試試卷的基基本要求求。三、決定定試題質(zhì)質(zhì)量的主主要因素素命題命題必須須熟悉和和明確考考試的內(nèi)內(nèi)容領(lǐng)域域和相應(yīng)應(yīng)的行為為目標(biāo)。。內(nèi)容結(jié)結(jié)構(gòu)領(lǐng)域域即不同同方面知知識的比比例劃分分，行為為目標(biāo)即即認(rèn)知程程度的設(shè)設(shè)定。命命題的核核心問題題是測量量什么（（即考試試內(nèi)容范范圍的確確定）、、如何測測量（講講的是題題型的選選定）以以及數(shù)量量多少（（包括總總題量和和上述各各考察項項目的具具體數(shù)量量）。試題的生生命在于于試題本本身能夠夠提供的的信息量量的大小小，它和和試題質(zhì)質(zhì)量緊密密相關(guān)。。因此，，命題時必必須十分分關(guān)注試試題背景景材料的的選定。。三、決定定試題質(zhì)質(zhì)量的主主要因素素組卷影響試卷卷質(zhì)量除除試題本本身給出出的內(nèi)容容和指標(biāo)標(biāo)外，還還應(yīng)該包包括組成成試卷后后整體質(zhì)質(zhì)量的評評估指標(biāo)標(biāo)體系，，它們是是試卷的的考試重重點內(nèi)容容覆蓋面面、試卷卷的題量量和難易易度是否否和考試試時間適適配、試試卷的規(guī)規(guī)范性、、制卷過過失率以以及與測測試目標(biāo)標(biāo)的符合合程度等等項目。。就我們多多年教學(xué)學(xué)督導(dǎo)的的結(jié)果來來看，組組卷方面面的不足足也不可可忽視。。四、試卷卷質(zhì)量分分析的目目的和意意義目的：1主要要是通過過考試結(jié)結(jié)果的實實際數(shù)據(jù)據(jù)來做出出學(xué)生成成績分布布曲線，，以及對對分組成成績的相相關(guān)性分分析來評評價本次次考試、、試題以以及組卷卷的信度度、效度度、難度度和區(qū)分分度等賦賦值。2利用用試卷的的質(zhì)量評評價綜合合指標(biāo)來來校驗組組卷時的的設(shè)計方方案的符符合程度度，并根根據(jù)這種種偏離來來確定是是否需要要對評分分予以調(diào)調(diào)整，并并確定是是否需要要對試題題的屬性性指標(biāo)作作必要的的修正。。3從試試卷質(zhì)量量分析入入手，做做好教學(xué)學(xué)質(zhì)量的的評估、、反饋和和控制。。四、試卷卷質(zhì)量分分析的目目的和意意義意義：無論是試試題還是是試卷的的質(zhì)量指指標(biāo)，都都是需要要通過考考試的結(jié)結(jié)果作為為基本數(shù)數(shù)據(jù)來確確定的。。此外。。我們還還可以從從考試結(jié)結(jié)果的實實際數(shù)據(jù)據(jù)來分析析知識點點、學(xué)科科整體的的教和學(xué)學(xué)兩方面面的成績績與不足足，給出出評價性性意見。。橫向比比較學(xué)生生其它學(xué)學(xué)科和同同學(xué)科其其它學(xué)生生的學(xué)習(xí)習(xí)情況，，以及縱縱向比較較近幾年年的分析析結(jié)果對對教學(xué)質(zhì)質(zhì)量給出出建議性性結(jié)果。。總之一句句話：試卷質(zhì)量量分析是是提高教教學(xué)質(zhì)量量的長效效機(jī)制的的重要組組成部分分。五、試卷卷質(zhì)量分分析的內(nèi)內(nèi)容試卷的質(zhì)質(zhì)量分析析主要包包括兩方方面的內(nèi)內(nèi)容：試試卷質(zhì)量量的統(tǒng)計性分分析以及教學(xué)學(xué)質(zhì)量的的診斷和可可能性分分析。目前對對前者的的研究相相對地還還比較充充分，而而對后者者的研究究和應(yīng)用用則欠缺缺得多。。究其原原因主要要有兩條條：一是是缺少指指標(biāo)體系系，二是是缺少功功能執(zhí)行行主體。。我們對對前者主主要是介介紹統(tǒng)計計學(xué)方法法在教育育測量學(xué)學(xué)方面的的應(yīng)用，，對后者者主要是是根據(jù)我我們的教教學(xué)經(jīng)驗驗和理論論學(xué)習(xí)提提供一些些建設(shè)性性意見，，供大家家參考。五、試卷卷質(zhì)量分分析的內(nèi)內(nèi)容統(tǒng)計性分分析：信度、效效度、難難易度和和區(qū)分度度是教育育測量學(xué)學(xué)的質(zhì)量量評價的的常用統(tǒng)統(tǒng)計學(xué)指指標(biāo)，有有著嚴(yán)格格定義而而且規(guī)定定了相應(yīng)應(yīng)的計算算方法和和公式。。試卷質(zhì)質(zhì)量分析析的基本本依據(jù)也也主要采采用這四四個指標(biāo)標(biāo)。下面面我們僅僅只介紹紹它們的的內(nèi)涵，，而省去去了計算算方法和和公式的的討論。。信度和效效度信度和效度是對考試試成績的的期望值值與真值值偏差的的概率評評價分析析。效度是對對總誤差差，特別別是系統(tǒng)統(tǒng)誤差的的賦值和和評價。。它的內(nèi)內(nèi)涵是通通過此考考試所得得結(jié)果而而對教學(xué)學(xué)效果的的認(rèn)定或或相關(guān)推推斷適當(dāng)當(dāng)、有效效程度的的概率。。二者均是是統(tǒng)計學(xué)學(xué)結(jié)果（（不受系系統(tǒng)和偶偶然偏差差影響的的程度））的表征征，它們們的取值值區(qū)間均均為[0，1]]，數(shù)值越大大越佳。。信度和效效度信度和效度是對考試試成績的的期望值值與真值值偏差的的概率評評價分析析。設(shè)考試成成績?yōu)閄，真實實值是T，那么么考試結(jié)結(jié)果存在在著隨機(jī)機(jī)誤差Ep和系系統(tǒng)誤差差Es，，四者的的關(guān)系是是X=T++Ep+Es。而信度度是對隨隨機(jī)誤差差大小評評價的賦賦值，它它是對此此考試和和除它之之外的同同一目標(biāo)標(biāo)的其他他考試（（無論是是否已實實施）一一致程度度的評價價。實踐踐表明，，信度評評價的重重點是對對影響因因素的分分析，而而不是獲獲得信度度。難易度和和區(qū)分度度試題的難易度可以用答答對該試試題考生生占總數(shù)數(shù)的純小小數(shù)值來來表示。。中等難度度的數(shù)值值在（0.3--0.8）,把易易答題控控制在20%，，難答題題在10%以內(nèi)內(nèi)較妥。。區(qū)分度是對學(xué)習(xí)習(xí)目標(biāo)達(dá)達(dá)成度區(qū)區(qū)分能力力的鑒定定指標(biāo)。。方法是是把考試試成績分分成優(yōu)、、中、差差三組（（客觀題題按對錯錯只分成成優(yōu)差二二組），，把優(yōu)、、差的得得分值（（比例））的差與與平均得得分（答答對率））的比值值作為區(qū)區(qū)分度；；區(qū)分度的的賦值以以適中為為好。試卷的質(zhì)質(zhì)量評價價綜合指指標(biāo)所有題目目的某指指標(biāo)的加加權(quán)平均均值即為為試卷的的該項指指標(biāo)；試試卷四項項指標(biāo)的的加權(quán)平平均值即即為試卷的質(zhì)質(zhì)量評價價綜合指指標(biāo)。雖然對對試卷質(zhì)質(zhì)量評價價的統(tǒng)計計學(xué)指標(biāo)標(biāo)可以只只用一個個，但是是它又是是所有試試題的四四個指標(biāo)標(biāo)的加權(quán)權(quán)平均值值。五、試卷卷質(zhì)量分分析的內(nèi)內(nèi)容診斷和可可能性分分析：試卷的考考試重點點內(nèi)容覆覆蓋面、、試卷的的題量和和難易度度是否和和考試時時間適配配、試卷卷的規(guī)范范性、制制卷過失失率以及及與測試試目標(biāo)的的符合程程度、錨題的設(shè)置是是否有效效等。注：為了“校校準(zhǔn)”試試卷測試試系統(tǒng)的的一致性性，并為為未來的的分?jǐn)?shù)調(diào)調(diào)整、教教學(xué)質(zhì)量量的縱向向和橫向向比較提提供盡可可能相同同的標(biāo)準(zhǔn)準(zhǔn)，在試試卷中要要安排一一定數(shù)目目的“錨題””。錨題或或稱共同同參照試試題，顧顧名思義義就是在在同一測測試目標(biāo)標(biāo)下在不不同批次次的試卷卷中共同同的試題題（可能能在形式式上略有有變動））。適用對象適用專業(yè)層次明確適當(dāng)命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計劃、針對學(xué)科特點、課程標(biāo)準(zhǔn)、使用主教材及課程教學(xué)實施計劃合理進(jìn)行命題思想對本課程的考核要全面、有效、符合因材施教的實際，能反映課程學(xué)習(xí)達(dá)標(biāo)的基本要求。試卷命題既要反映教與學(xué)的重點，又要照顧全面；既要能檢查學(xué)員對基本概念和基本知識的理解應(yīng)用能力，又要考核其運用已學(xué)知識綜合分析問題的能力。題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問，測量學(xué)員對各考點的理解深度、掌握廣度和應(yīng)用活度?？傤}量和各種題型所占比例適當(dāng)，要使中等程度的學(xué)員在規(guī)定考試時間內(nèi)能完成全部的答題并留有一定的檢查時間。內(nèi)容分布試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對教學(xué)重點要有所側(cè)重，對教學(xué)難點要有所涉及，對于課時分配較少的了解層次的常識性內(nèi)容的試題數(shù)量相對較少。試卷中掌握、熟悉、了解等各層次要求的內(nèi)容分布分別為70%，20%和10%。章節(jié)覆蓋率要達(dá)到80%左右，知識點覆蓋率要達(dá)到70%。測量指標(biāo)教育測量學(xué)的基本指標(biāo)信度、效度、難易度和區(qū)分度的設(shè)置合理。建議難：較難：中等：較易題量的比例大致為1：3：4：2；難度系數(shù)在0.3-0.8之間，區(qū)分度適當(dāng)，信度和效度較高。其它項目1.根據(jù)課程特點，主客觀試題比例、定性定量試題比例合理。2.使用的試卷要求格式規(guī)范、卷面清晰、語法書寫出錯率低。3.各試題之間彼此獨立，表達(dá)明確、簡練，不會出現(xiàn)歧義。4.試卷要有答案以及準(zhǔn)確、全面、合理的評分標(biāo)準(zhǔn)。5.近三年內(nèi)考題的復(fù)用率不超過總量的15%。6.要在試卷中設(shè)置數(shù)目適當(dāng)?shù)摹板^題”，以便作信度和效度等分析。7.要能確定非常重要問題試題（vip），或特別具有分析價值的試題。命題依據(jù)據(jù)依據(jù)學(xué)校校頒發(fā)的的人才培培養(yǎng)方案案和教學(xué)學(xué)計劃、、針對學(xué)學(xué)科特點點、課程程標(biāo)準(zhǔn)、、使用主主教材及及課程教教學(xué)實施施計劃合合理進(jìn)行行。命題思想想對本課程程的考核核要全面面、有效效、符合合因材施施教的實實際，能能反映課課程學(xué)習(xí)習(xí)達(dá)標(biāo)的的基本要要求。試試卷命題題既要反反映教與與學(xué)的重重點，又又要照顧顧全面；；既要能能檢查學(xué)學(xué)員對基基本概念念和基本本知識的的理解應(yīng)應(yīng)用能力力，又要要考核其其運用已已學(xué)知識識綜合分分析問題題的能力力。題型題量量題型要多多樣化，，有利于于承載試試題信息息、設(shè)置置疑問，，測量學(xué)學(xué)員對各各考點的的理解深深度、掌掌握廣度度和應(yīng)用用活度。。總題量量和各種種題型所所占比例例適當(dāng)，，要使中中等程度度的學(xué)員員在規(guī)定定考試時時間內(nèi)能能完成全全部的答答題并留留有一定定的檢查查時間。。內(nèi)容分布布試卷內(nèi)容容分布要要體現(xiàn)總總體的教教學(xué)目標(biāo)標(biāo)，對教教學(xué)重點點要有所所側(cè)重，，對教學(xué)學(xué)難點要要有所涉涉及，對對于課時時分配較較少的了了解層次次的常識識性內(nèi)容容的試題題數(shù)量相相對較少少。試卷卷中掌握握、熟悉悉、了解解等各層層次要求求的內(nèi)容容分布分分別為70%，，20%%和10%。章章節(jié)覆蓋蓋率要達(dá)達(dá)到80%左右右，知識識點覆蓋蓋率要達(dá)達(dá)到70%。測量指標(biāo)標(biāo)教育測量量學(xué)的基基本指標(biāo)標(biāo)信度、、效度、、難易度度和區(qū)分分度的設(shè)設(shè)置合理理。建議議難：較較難：中中等：較較易題量量的比例例大致為為1：3：4：：2；難難度系數(shù)數(shù)在0..3-0.8之之間，區(qū)區(qū)分度適適當(dāng)，信信度和效效度較高高。其它項目目1.根根據(jù)課程程特點，，主客觀觀試題比比例、定定性定量量試題比比例合理理。2.使使用的試試卷要求求格式規(guī)規(guī)范、卷卷面清晰晰、語法法書寫出出錯率低低。3.各各試題之之間彼此此獨立，，表達(dá)明明確、簡簡練，不不會出現(xiàn)現(xiàn)歧義。。4.試試卷要有有答案以以及準(zhǔn)確確、全面面、合理理的評分分標(biāo)準(zhǔn)。。5.近近三年內(nèi)內(nèi)考題的的復(fù)用率率不超過過總量的的15%%。6.要要在試卷卷中設(shè)置置數(shù)目適適當(dāng)?shù)摹啊板^題””，以便便作信度度和效度度等分析析。7.要要能確定定非常重重要問題題試題（（vip），或或特別具具有分析析價值的的試題。。六、工作作進(jìn)度和和基本要要求試卷質(zhì)量量分析是是系統(tǒng)工工程中的的一部分分，也是是我校有有待加強(qiáng)強(qiáng)的工作作內(nèi)容之之一。工工作需要要分層次次、分階階段的進(jìn)進(jìn)行。關(guān)關(guān)鍵在領(lǐng)領(lǐng)導(dǎo)、科科室是基基礎(chǔ)，考考試中心心應(yīng)該發(fā)發(fā)揮抓總總、規(guī)劃劃指導(dǎo)、、總成的的重要作作用。整個工作作大致可可分成動動員、計計劃指導(dǎo)導(dǎo)、驗收收總成、、分析報報告四個個階段。。原始數(shù)數(shù)據(jù)由各各教研室室組織教教員認(rèn)真真