試卷質(zhì)量分析漫談?wù)n件

試卷質(zhì)量分析漫談翟建才第三軍醫(yī)大學(xué)訓(xùn)練部考試中心試卷質(zhì)量分析漫談翟建才1目錄一、考試和試卷二、高質(zhì)量試卷的基本要求三、決定試題質(zhì)量的主要因素四、試卷質(zhì)量分析的目的和意義五、試卷質(zhì)量分析的內(nèi)容六、工作進(jìn)度和基本要求目錄一、考試和試卷2一、考試和試卷考試是各類(lèi)各級(jí)教育管理機(jī)構(gòu)了解教學(xué)狀況、對(duì)學(xué)生的學(xué)習(xí)目標(biāo)達(dá)成度給予認(rèn)定的重要手段，也是一種對(duì)教、學(xué)的階段性效果的評(píng)估手段。歷來(lái)是選拔人才和認(rèn)證資格的公認(rèn)工具。作為考試載體形式的試卷的質(zhì)量對(duì)于教育和人才的質(zhì)量控制有著至關(guān)重要的作用。一、考試和試卷考試是各類(lèi)各級(jí)教育管理機(jī)構(gòu)了解教學(xué)狀況、對(duì)學(xué)生3教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與教學(xué)改革工程”（簡(jiǎn)稱(chēng)質(zhì)量工程）

創(chuàng)造安全、便捷、高效的考試平臺(tái)。

----2007年高教1號(hào)文件

教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與4教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與教學(xué)改革工程”（簡(jiǎn)稱(chēng)質(zhì)量工程）

“進(jìn)一步完善高等學(xué)校的內(nèi)部質(zhì)量監(jiān)控和評(píng)價(jià)體系?！晟平處?、院系、學(xué)校三級(jí)質(zhì)量保障機(jī)制，逐步建立保證教學(xué)質(zhì)量不斷提高的長(zhǎng)效機(jī)制?！?--2007年高教2號(hào)文件

教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與教學(xué)改革工程5本科教學(xué)工作評(píng)價(jià)指標(biāo)體系

5.5質(zhì)量控制5.5.2教學(xué)過(guò)程質(zhì)量監(jiān)控

A級(jí)指標(biāo)：“監(jiān)控體系完善，能及時(shí)對(duì)主要教學(xué)環(huán)節(jié)和教學(xué)階段進(jìn)行檢查、調(diào)控，效果明顯?！?/p>

5.5.3試卷質(zhì)量與考核方式

A級(jí)指標(biāo)：“試題庫(kù)完善，試卷質(zhì)量高；考核方式符合課程要求，有利于提高學(xué)員的綜合素質(zhì)?！北究平虒W(xué)工作評(píng)價(jià)指標(biāo)體系5.5質(zhì)量控制6二、高質(zhì)量試卷的基本要求先決條件：建有一個(gè)數(shù)量龐大、質(zhì)量?jī)?yōu)異的試題庫(kù)是使得試卷質(zhì)量高的先決條件?；疽螅嚎陀^、科學(xué)、公正、有效是對(duì)考試也是對(duì)試卷的基本要求。

二、高質(zhì)量試卷的基本要求先決條件：建有一個(gè)數(shù)量龐大、質(zhì)量?jī)?yōu)異7三、決定試題質(zhì)量的主要因素命題命題必須熟悉和明確考試的內(nèi)容領(lǐng)域和相應(yīng)的行為目標(biāo)。內(nèi)容結(jié)構(gòu)領(lǐng)域即不同方面知識(shí)的比例劃分，行為目標(biāo)即認(rèn)知程度的設(shè)定。命題的核心問(wèn)題是測(cè)量什么（即考試內(nèi)容范圍的確定）、如何測(cè)量（講的是題型的選定）以及數(shù)量多少（包括總題量和上述各考察項(xiàng)目的具體數(shù)量）。試題的生命在于試題本身能夠提供的信息量的大小，它和試題質(zhì)量緊密相關(guān)。因此，命題時(shí)必須十分關(guān)注試題背景材料的選定。三、決定試題質(zhì)量的主要因素命題命題必須熟悉和明確考試的內(nèi)8三、決定試題質(zhì)量的主要因素組卷影響試卷質(zhì)量除試題本身給出的內(nèi)容和指標(biāo)外，還應(yīng)該包括組成試卷后整體質(zhì)量的評(píng)估指標(biāo)體系，它們是試卷的考試重點(diǎn)內(nèi)容覆蓋面、試卷的題量和難易度是否和考試時(shí)間適配、試卷的規(guī)范性、制卷過(guò)失率以及與測(cè)試目標(biāo)的符合程度等項(xiàng)目。就我們多年教學(xué)督導(dǎo)的結(jié)果來(lái)看，組卷方面的不足也不可忽視。三、決定試題質(zhì)量的主要因素組卷影響試卷質(zhì)量除試題本身給出9四、試卷質(zhì)量分析的目的和意義目的：1主要是通過(guò)考試結(jié)果的實(shí)際數(shù)據(jù)來(lái)做出學(xué)生成績(jī)分布曲線，以及對(duì)分組成績(jī)的相關(guān)性分析來(lái)評(píng)價(jià)本次考試、試題以及組卷的信度、效度、難度和區(qū)分度等賦值。2利用試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)來(lái)校驗(yàn)組卷時(shí)的設(shè)計(jì)方案的符合程度，并根據(jù)這種偏離來(lái)確定是否需要對(duì)評(píng)分予以調(diào)整，并確定是否需要對(duì)試題的屬性指標(biāo)作必要的修正。3從試卷質(zhì)量分析入手，做好教學(xué)質(zhì)量的評(píng)估、反饋和控制。四、試卷質(zhì)量分析的目的和意義目的：10四、試卷質(zhì)量分析的目的和意義意義：無(wú)論是試題還是試卷的質(zhì)量指標(biāo)，都是需要通過(guò)考試的結(jié)果作為基本數(shù)據(jù)來(lái)確定的。此外。我們還可以從考試結(jié)果的實(shí)際數(shù)據(jù)來(lái)分析知識(shí)點(diǎn)、學(xué)科整體的教和學(xué)兩方面的成績(jī)與不足，給出評(píng)價(jià)性意見(jiàn)。橫向比較學(xué)生其它學(xué)科和同學(xué)科其它學(xué)生的學(xué)習(xí)情況，以及縱向比較近幾年的分析結(jié)果對(duì)教學(xué)質(zhì)量給出建議性結(jié)果?？傊痪湓挘涸嚲碣|(zhì)量分析是提高教學(xué)質(zhì)量的長(zhǎng)效機(jī)制的重要組成部分。四、試卷質(zhì)量分析的目的和意義意義：11五、試卷質(zhì)量分析的內(nèi)容試卷的質(zhì)量分析主要包括兩方面的內(nèi)容：試卷質(zhì)量的統(tǒng)計(jì)性分析以及教學(xué)質(zhì)量的診斷和可能性分析。目前對(duì)前者的研究相對(duì)地還比較充分，而對(duì)后者的研究和應(yīng)用則欠缺得多。究其原因主要有兩條：一是缺少指標(biāo)體系，二是缺少功能執(zhí)行主體。我們對(duì)前者主要是介紹統(tǒng)計(jì)學(xué)方法在教育測(cè)量學(xué)方面的應(yīng)用，對(duì)后者主要是根據(jù)我們的教學(xué)經(jīng)驗(yàn)和理論學(xué)習(xí)提供一些建設(shè)性意見(jiàn)，供大家參考。五、試卷質(zhì)量分析的內(nèi)容試卷的質(zhì)量分析主要包括兩方面的內(nèi)容：試12五、試卷質(zhì)量分析的內(nèi)容統(tǒng)計(jì)性分析：信度、效度、難易度和區(qū)分度是教育測(cè)量學(xué)的質(zhì)量評(píng)價(jià)的常用統(tǒng)計(jì)學(xué)指標(biāo)，有著嚴(yán)格定義而且規(guī)定了相應(yīng)的計(jì)算方法和公式。試卷質(zhì)量分析的基本依據(jù)也主要采用這四個(gè)指標(biāo)。下面我們僅只介紹它們的內(nèi)涵，而省去了計(jì)算方法和公式的討論。五、試卷質(zhì)量分析的內(nèi)容統(tǒng)計(jì)性分析：信度、效度、難易度和區(qū)分度13信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)分析。效度是對(duì)總誤差，特別是系統(tǒng)誤差的賦值和評(píng)價(jià)。它的內(nèi)涵是通過(guò)此考試所得結(jié)果而對(duì)教學(xué)效果的認(rèn)定或相關(guān)推斷適當(dāng)、有效程度的概率。二者均是統(tǒng)計(jì)學(xué)結(jié)果（不受系統(tǒng)和偶然偏差影響的程度）的表征，它們的取值區(qū)間均為[0，1]，數(shù)值越大越佳。信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)14信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)分析。設(shè)考試成績(jī)?yōu)閄，真實(shí)值是T，那么考試結(jié)果存在著隨機(jī)誤差Ep和系統(tǒng)誤差Es，四者的關(guān)系是X=T+Ep+Es。而信度是對(duì)隨機(jī)誤差大小評(píng)價(jià)的賦值，它是對(duì)此考試和除它之外的同一目標(biāo)的其他考試（無(wú)論是否已實(shí)施）一致程度的評(píng)價(jià)。實(shí)踐表明，信度評(píng)價(jià)的重點(diǎn)是對(duì)影響因素的分析，而不是獲得信度。信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)15難易度和區(qū)分度試題的難易度可以用答對(duì)該試題考生占總數(shù)的純小數(shù)值來(lái)表示。中等難度的數(shù)值在（0.3-0.8）,把易答題控制在20%，難答題在10%以?xún)?nèi)較妥。區(qū)分度是對(duì)學(xué)習(xí)目標(biāo)達(dá)成度區(qū)分能力的鑒定指標(biāo)。方法是把考試成績(jī)分成優(yōu)、中、差三組（客觀題按對(duì)錯(cuò)只分成優(yōu)差二組），把優(yōu)、差的得分值（比例）的差與平均得分（答對(duì)率）的比值作為區(qū)分度；區(qū)分度的賦值以適中為好。難易度和區(qū)分度試題的難易度可以用答對(duì)該試題考生占總數(shù)的純小數(shù)16試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)所有題目的某指標(biāo)的加權(quán)平均值即為試卷的該項(xiàng)指標(biāo)；試卷四項(xiàng)指標(biāo)的加權(quán)平均值即為試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)。雖然對(duì)試卷質(zhì)量評(píng)價(jià)的統(tǒng)計(jì)學(xué)指標(biāo)可以只用一個(gè)，但是它又是所有試題的四個(gè)指標(biāo)的加權(quán)平均值。試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)所有題目的某指標(biāo)的加權(quán)平均值即為試卷的17五、試卷質(zhì)量分析的內(nèi)容診斷和可能性分析：試卷的考試重點(diǎn)內(nèi)容覆蓋面、試卷的題量和難易度是否和考試時(shí)間適配、試卷的規(guī)范性、制卷過(guò)失率以及與測(cè)試目標(biāo)的符合程度、錨題的設(shè)置是否有效等。

注：為了“校準(zhǔn)”試卷測(cè)試系統(tǒng)的一致性，并為未來(lái)的分?jǐn)?shù)調(diào)整、教學(xué)質(zhì)量的縱向和橫向比較提供盡可能相同的標(biāo)準(zhǔn)，在試卷中要安排一定數(shù)目的“錨題”。錨題或稱(chēng)共同參照試題，顧名思義就是在同一測(cè)試目標(biāo)下在不同批次的試卷中共同的試題（可能在形式上略有變動(dòng)）。

五、試卷質(zhì)量分析的內(nèi)容診斷和可能性分析：試卷的考試重點(diǎn)內(nèi)容覆18適用對(duì)象適用專(zhuān)業(yè)層次明確適當(dāng)命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計(jì)劃、針對(duì)學(xué)科特點(diǎn)、課程標(biāo)準(zhǔn)、使用主教材及課程教學(xué)實(shí)施計(jì)劃合理進(jìn)行命題思想對(duì)本課程的考核要全面、有效、符合因材施教的實(shí)際，能反映課程學(xué)習(xí)達(dá)標(biāo)的基本要求。試卷命題既要反映教與學(xué)的重點(diǎn)，又要照顧全面；既要能檢查學(xué)員對(duì)基本概念和基本知識(shí)的理解應(yīng)用能力，又要考核其運(yùn)用已學(xué)知識(shí)綜合分析問(wèn)題的能力。題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問(wèn)，測(cè)量學(xué)員對(duì)各考點(diǎn)的理解深度、掌握廣度和應(yīng)用活度?？傤}量和各種題型所占比例適當(dāng)，要使中等程度的學(xué)員在規(guī)定考試時(shí)間內(nèi)能完成全部的答題并留有一定的檢查時(shí)間。內(nèi)容分布試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對(duì)教學(xué)重點(diǎn)要有所側(cè)重，對(duì)教學(xué)難點(diǎn)要有所涉及，對(duì)于課時(shí)分配較少的了解層次的常識(shí)性?xún)?nèi)容的試題數(shù)量相對(duì)較少。試卷中掌握、熟悉、了解等各層次要求的內(nèi)容分布分別為70%，20%和10%。章節(jié)覆蓋率要達(dá)到80%左右，知識(shí)點(diǎn)覆蓋率要達(dá)到70%。測(cè)量指標(biāo)教育測(cè)量學(xué)的基本指標(biāo)信度、效度、難易度和區(qū)分度的設(shè)置合理。建議難：較難：中等：較易題量的比例大致為1：3：4：2；難度系數(shù)在0.3-0.8之間，區(qū)分度適當(dāng)，信度和效度較高。其它項(xiàng)目1.根據(jù)課程特點(diǎn)，主客觀試題比例、定性定量試題比例合理。2.使用的試卷要求格式規(guī)范、卷面清晰、語(yǔ)法書(shū)寫(xiě)出錯(cuò)率低。3.各試題之間彼此獨(dú)立，表達(dá)明確、簡(jiǎn)練，不會(huì)出現(xiàn)歧義。4.試卷要有答案以及準(zhǔn)確、全面、合理的評(píng)分標(biāo)準(zhǔn)。5.近三年內(nèi)考題的復(fù)用率不超過(guò)總量的15%。6.要在試卷中設(shè)置數(shù)目適當(dāng)?shù)摹板^題”，以便作信度和效度等分析。7.要能確定非常重要問(wèn)題試題（vip），或特別具有分析價(jià)值的試題。適用對(duì)象適用專(zhuān)業(yè)層次明確適當(dāng)命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方19命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計(jì)劃、針對(duì)學(xué)科特點(diǎn)、課程標(biāo)準(zhǔn)、使用主教材及課程教學(xué)實(shí)施計(jì)劃合理進(jìn)行。

命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計(jì)劃、針對(duì)學(xué)科特點(diǎn)、20命題思想

對(duì)本課程的考核要全面、有效、符合因材施教的實(shí)際，能反映課程學(xué)習(xí)達(dá)標(biāo)的基本要求。試卷命題既要反映教與學(xué)的重點(diǎn)，又要照顧全面；既要能檢查學(xué)員對(duì)基本概念和基本知識(shí)的理解應(yīng)用能力，又要考核其運(yùn)用已學(xué)知識(shí)綜合分析問(wèn)題的能力。命題思想對(duì)本課程的考核要全面、有效、符合因材施教的實(shí)際，能21題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問(wèn)，測(cè)量學(xué)員對(duì)各考點(diǎn)的理解深度、掌握廣度和應(yīng)用活度?？傤}量和各種題型所占比例適當(dāng)，要使中等程度的學(xué)員在規(guī)定考試時(shí)間內(nèi)能完成全部的答題并留有一定的檢查時(shí)間。題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問(wèn)，測(cè)量學(xué)員22內(nèi)容分布

試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對(duì)教學(xué)重點(diǎn)要有所側(cè)重，對(duì)教學(xué)難點(diǎn)要有所涉及，對(duì)于課時(shí)分配較少的了解層次的常識(shí)性?xún)?nèi)容的試題數(shù)量相對(duì)較少。試卷中掌握、熟悉、了解等各層次要求的內(nèi)容分布分別為70%，20%和10%。章節(jié)覆蓋率要達(dá)到80%左右，知識(shí)點(diǎn)覆蓋率要達(dá)到70%。內(nèi)容分布試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對(duì)教學(xué)重點(diǎn)要有所23測(cè)量指標(biāo)

教育測(cè)量學(xué)的基本指標(biāo)信度、效度、難易度和區(qū)分度的設(shè)置合理。建議難：較難：中等：較易題量的比例大致為1：3：4：2；難度系數(shù)在0.3-0.8之間，區(qū)分度適當(dāng)，信度和效度較高。測(cè)量指標(biāo)教育測(cè)量學(xué)的基本指標(biāo)信度、效度、難易度和區(qū)分度的設(shè)24其它項(xiàng)目

1.根據(jù)課程特點(diǎn)，主客觀試題比例、定性定量試題比例合理。2.使用的試卷要求格式規(guī)范、卷面清晰、語(yǔ)法書(shū)寫(xiě)出錯(cuò)率低。3.各試題之間彼此獨(dú)立，表達(dá)明確、簡(jiǎn)練，不會(huì)出現(xiàn)歧義。4.試卷要有答案以及準(zhǔn)確、全面、合理的評(píng)分標(biāo)準(zhǔn)。5.近三年內(nèi)考題的復(fù)用率不超過(guò)總量的15%。6.要在試卷中設(shè)置數(shù)目適當(dāng)?shù)摹板^題”，以便作信度和效度等分析。7.要能確定非常重要問(wèn)題試題（vip），或特別具有分析價(jià)值的試題。其它項(xiàng)目1.根據(jù)課程特點(diǎn)，主客觀試題比例、定性定量試題比25六、工作進(jìn)度和基本要求

試卷質(zhì)量分析是系統(tǒng)工程中的一部分，也是我校有待加強(qiáng)的工作內(nèi)容之一。工作需要分層次、分階段的進(jìn)行。關(guān)鍵在領(lǐng)導(dǎo)、科室是基礎(chǔ)，考試中心應(yīng)該發(fā)揮抓總、規(guī)劃指導(dǎo)、總成的重要作用。整個(gè)工作大致可分成動(dòng)員、計(jì)劃指導(dǎo)、驗(yàn)收總成、分析報(bào)告四個(gè)階段。原始數(shù)據(jù)由各教研室組織教員認(rèn)真完成（原始數(shù)據(jù)的收集和格式見(jiàn)下面附表和說(shuō)明），部院系作整體驗(yàn)收、電子歸檔，在考試中心指導(dǎo)下寫(xiě)出各自的分析報(bào)告，考試中心完成總成結(jié)構(gòu)和整體分析報(bào)告，整個(gè)過(guò)程有檢查驗(yàn)收。具體工作的進(jìn)程從這次期末考試開(kāi)始，前推一學(xué)年，按照規(guī)定的內(nèi)容和任務(wù)，力爭(zhēng)在本年十月底前完成，把電子文檔上交考試中心，并由考試中心歸總成文存檔于教學(xué)評(píng)估辦公室?？傮w完成期限為年底。力爭(zhēng)下學(xué)期末試卷分析納入常規(guī)。六、工作進(jìn)度和基本要求試卷質(zhì)量分析是系統(tǒng)工程中的一部分，也26

XXXX試卷質(zhì)量分析原始數(shù)據(jù)制作日期：制作人：

學(xué)員序號(hào)學(xué)員學(xué)號(hào)題號(hào)1題號(hào)2題號(hào)3題號(hào)4題號(hào)5題號(hào)6題號(hào)7題號(hào)8滿分值滿分值滿分值滿分值滿分值滿分值滿分值滿分值12345678實(shí)際得分XXXX試卷質(zhì)量分析原始數(shù)據(jù)學(xué)員學(xué)員題號(hào)1題號(hào)27相關(guān)說(shuō)明用Excel仿照上表結(jié)構(gòu)制作并收集考試質(zhì)量分析原始數(shù)據(jù)，以待今后輸入質(zhì)量分析軟件獲得基本統(tǒng)計(jì)指標(biāo)。而其它的分析項(xiàng)目應(yīng)有教研室組織責(zé)任教師和有經(jīng)驗(yàn)的教員完成。由教研室主任或主講教員寫(xiě)出質(zhì)量分析報(bào)告。相關(guān)說(shuō)明用Excel仿照上表結(jié)構(gòu)制作并收集考試質(zhì)量分析原始28謝謝大家的參加！歡迎大家批評(píng)指正，共同討論；并預(yù)祝此項(xiàng)工作圓滿完成！謝謝大家的參加！歡迎大家批評(píng)指正，共同討論；并預(yù)祝此項(xiàng)工作圓29試卷質(zhì)量分析漫談翟建才第三軍醫(yī)大學(xué)訓(xùn)練部考試中心試卷質(zhì)量分析漫談翟建才30目錄一、考試和試卷二、高質(zhì)量試卷的基本要求三、決定試題質(zhì)量的主要因素四、試卷質(zhì)量分析的目的和意義五、試卷質(zhì)量分析的內(nèi)容六、工作進(jìn)度和基本要求目錄一、考試和試卷31一、考試和試卷考試是各類(lèi)各級(jí)教育管理機(jī)構(gòu)了解教學(xué)狀況、對(duì)學(xué)生的學(xué)習(xí)目標(biāo)達(dá)成度給予認(rèn)定的重要手段，也是一種對(duì)教、學(xué)的階段性效果的評(píng)估手段。歷來(lái)是選拔人才和認(rèn)證資格的公認(rèn)工具。作為考試載體形式的試卷的質(zhì)量對(duì)于教育和人才的質(zhì)量控制有著至關(guān)重要的作用。一、考試和試卷考試是各類(lèi)各級(jí)教育管理機(jī)構(gòu)了解教學(xué)狀況、對(duì)學(xué)生32教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與教學(xué)改革工程”（簡(jiǎn)稱(chēng)質(zhì)量工程）

創(chuàng)造安全、便捷、高效的考試平臺(tái)。

----2007年高教1號(hào)文件

教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與33教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與教學(xué)改革工程”（簡(jiǎn)稱(chēng)質(zhì)量工程）

“進(jìn)一步完善高等學(xué)校的內(nèi)部質(zhì)量監(jiān)控和評(píng)價(jià)體系?！晟平處?、院系、學(xué)校三級(jí)質(zhì)量保障機(jī)制，逐步建立保證教學(xué)質(zhì)量不斷提高的長(zhǎng)效機(jī)制?！?--2007年高教2號(hào)文件

教育部2007年啟動(dòng)實(shí)施“高等學(xué)校本科教學(xué)質(zhì)量與教學(xué)改革工程34本科教學(xué)工作評(píng)價(jià)指標(biāo)體系

5.5質(zhì)量控制5.5.2教學(xué)過(guò)程質(zhì)量監(jiān)控

A級(jí)指標(biāo)：“監(jiān)控體系完善，能及時(shí)對(duì)主要教學(xué)環(huán)節(jié)和教學(xué)階段進(jìn)行檢查、調(diào)控，效果明顯?！?/p>

5.5.3試卷質(zhì)量與考核方式

A級(jí)指標(biāo)：“試題庫(kù)完善，試卷質(zhì)量高；考核方式符合課程要求，有利于提高學(xué)員的綜合素質(zhì)?！北究平虒W(xué)工作評(píng)價(jià)指標(biāo)體系5.5質(zhì)量控制35二、高質(zhì)量試卷的基本要求先決條件：建有一個(gè)數(shù)量龐大、質(zhì)量?jī)?yōu)異的試題庫(kù)是使得試卷質(zhì)量高的先決條件?；疽螅嚎陀^、科學(xué)、公正、有效是對(duì)考試也是對(duì)試卷的基本要求。

二、高質(zhì)量試卷的基本要求先決條件：建有一個(gè)數(shù)量龐大、質(zhì)量?jī)?yōu)異36三、決定試題質(zhì)量的主要因素命題命題必須熟悉和明確考試的內(nèi)容領(lǐng)域和相應(yīng)的行為目標(biāo)。內(nèi)容結(jié)構(gòu)領(lǐng)域即不同方面知識(shí)的比例劃分，行為目標(biāo)即認(rèn)知程度的設(shè)定。命題的核心問(wèn)題是測(cè)量什么（即考試內(nèi)容范圍的確定）、如何測(cè)量（講的是題型的選定）以及數(shù)量多少（包括總題量和上述各考察項(xiàng)目的具體數(shù)量）。試題的生命在于試題本身能夠提供的信息量的大小，它和試題質(zhì)量緊密相關(guān)。因此，命題時(shí)必須十分關(guān)注試題背景材料的選定。三、決定試題質(zhì)量的主要因素命題命題必須熟悉和明確考試的內(nèi)37三、決定試題質(zhì)量的主要因素組卷影響試卷質(zhì)量除試題本身給出的內(nèi)容和指標(biāo)外，還應(yīng)該包括組成試卷后整體質(zhì)量的評(píng)估指標(biāo)體系，它們是試卷的考試重點(diǎn)內(nèi)容覆蓋面、試卷的題量和難易度是否和考試時(shí)間適配、試卷的規(guī)范性、制卷過(guò)失率以及與測(cè)試目標(biāo)的符合程度等項(xiàng)目。就我們多年教學(xué)督導(dǎo)的結(jié)果來(lái)看，組卷方面的不足也不可忽視。三、決定試題質(zhì)量的主要因素組卷影響試卷質(zhì)量除試題本身給出38四、試卷質(zhì)量分析的目的和意義目的：1主要是通過(guò)考試結(jié)果的實(shí)際數(shù)據(jù)來(lái)做出學(xué)生成績(jī)分布曲線，以及對(duì)分組成績(jī)的相關(guān)性分析來(lái)評(píng)價(jià)本次考試、試題以及組卷的信度、效度、難度和區(qū)分度等賦值。2利用試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)來(lái)校驗(yàn)組卷時(shí)的設(shè)計(jì)方案的符合程度，并根據(jù)這種偏離來(lái)確定是否需要對(duì)評(píng)分予以調(diào)整，并確定是否需要對(duì)試題的屬性指標(biāo)作必要的修正。3從試卷質(zhì)量分析入手，做好教學(xué)質(zhì)量的評(píng)估、反饋和控制。四、試卷質(zhì)量分析的目的和意義目的：39四、試卷質(zhì)量分析的目的和意義意義：無(wú)論是試題還是試卷的質(zhì)量指標(biāo)，都是需要通過(guò)考試的結(jié)果作為基本數(shù)據(jù)來(lái)確定的。此外。我們還可以從考試結(jié)果的實(shí)際數(shù)據(jù)來(lái)分析知識(shí)點(diǎn)、學(xué)科整體的教和學(xué)兩方面的成績(jī)與不足，給出評(píng)價(jià)性意見(jiàn)。橫向比較學(xué)生其它學(xué)科和同學(xué)科其它學(xué)生的學(xué)習(xí)情況，以及縱向比較近幾年的分析結(jié)果對(duì)教學(xué)質(zhì)量給出建議性結(jié)果?？傊痪湓挘涸嚲碣|(zhì)量分析是提高教學(xué)質(zhì)量的長(zhǎng)效機(jī)制的重要組成部分。四、試卷質(zhì)量分析的目的和意義意義：40五、試卷質(zhì)量分析的內(nèi)容試卷的質(zhì)量分析主要包括兩方面的內(nèi)容：試卷質(zhì)量的統(tǒng)計(jì)性分析以及教學(xué)質(zhì)量的診斷和可能性分析。目前對(duì)前者的研究相對(duì)地還比較充分，而對(duì)后者的研究和應(yīng)用則欠缺得多。究其原因主要有兩條：一是缺少指標(biāo)體系，二是缺少功能執(zhí)行主體。我們對(duì)前者主要是介紹統(tǒng)計(jì)學(xué)方法在教育測(cè)量學(xué)方面的應(yīng)用，對(duì)后者主要是根據(jù)我們的教學(xué)經(jīng)驗(yàn)和理論學(xué)習(xí)提供一些建設(shè)性意見(jiàn)，供大家參考。五、試卷質(zhì)量分析的內(nèi)容試卷的質(zhì)量分析主要包括兩方面的內(nèi)容：試41五、試卷質(zhì)量分析的內(nèi)容統(tǒng)計(jì)性分析：信度、效度、難易度和區(qū)分度是教育測(cè)量學(xué)的質(zhì)量評(píng)價(jià)的常用統(tǒng)計(jì)學(xué)指標(biāo)，有著嚴(yán)格定義而且規(guī)定了相應(yīng)的計(jì)算方法和公式。試卷質(zhì)量分析的基本依據(jù)也主要采用這四個(gè)指標(biāo)。下面我們僅只介紹它們的內(nèi)涵，而省去了計(jì)算方法和公式的討論。五、試卷質(zhì)量分析的內(nèi)容統(tǒng)計(jì)性分析：信度、效度、難易度和區(qū)分度42信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)分析。效度是對(duì)總誤差，特別是系統(tǒng)誤差的賦值和評(píng)價(jià)。它的內(nèi)涵是通過(guò)此考試所得結(jié)果而對(duì)教學(xué)效果的認(rèn)定或相關(guān)推斷適當(dāng)、有效程度的概率。二者均是統(tǒng)計(jì)學(xué)結(jié)果（不受系統(tǒng)和偶然偏差影響的程度）的表征，它們的取值區(qū)間均為[0，1]，數(shù)值越大越佳。信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)43信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)分析。設(shè)考試成績(jī)?yōu)閄，真實(shí)值是T，那么考試結(jié)果存在著隨機(jī)誤差Ep和系統(tǒng)誤差Es，四者的關(guān)系是X=T+Ep+Es。而信度是對(duì)隨機(jī)誤差大小評(píng)價(jià)的賦值，它是對(duì)此考試和除它之外的同一目標(biāo)的其他考試（無(wú)論是否已實(shí)施）一致程度的評(píng)價(jià)。實(shí)踐表明，信度評(píng)價(jià)的重點(diǎn)是對(duì)影響因素的分析，而不是獲得信度。信度和效度信度和效度是對(duì)考試成績(jī)的期望值與真值偏差的概率評(píng)價(jià)44難易度和區(qū)分度試題的難易度可以用答對(duì)該試題考生占總數(shù)的純小數(shù)值來(lái)表示。中等難度的數(shù)值在（0.3-0.8）,把易答題控制在20%，難答題在10%以?xún)?nèi)較妥。區(qū)分度是對(duì)學(xué)習(xí)目標(biāo)達(dá)成度區(qū)分能力的鑒定指標(biāo)。方法是把考試成績(jī)分成優(yōu)、中、差三組（客觀題按對(duì)錯(cuò)只分成優(yōu)差二組），把優(yōu)、差的得分值（比例）的差與平均得分（答對(duì)率）的比值作為區(qū)分度；區(qū)分度的賦值以適中為好。難易度和區(qū)分度試題的難易度可以用答對(duì)該試題考生占總數(shù)的純小數(shù)45試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)所有題目的某指標(biāo)的加權(quán)平均值即為試卷的該項(xiàng)指標(biāo)；試卷四項(xiàng)指標(biāo)的加權(quán)平均值即為試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)。雖然對(duì)試卷質(zhì)量評(píng)價(jià)的統(tǒng)計(jì)學(xué)指標(biāo)可以只用一個(gè)，但是它又是所有試題的四個(gè)指標(biāo)的加權(quán)平均值。試卷的質(zhì)量評(píng)價(jià)綜合指標(biāo)所有題目的某指標(biāo)的加權(quán)平均值即為試卷的46五、試卷質(zhì)量分析的內(nèi)容診斷和可能性分析：試卷的考試重點(diǎn)內(nèi)容覆蓋面、試卷的題量和難易度是否和考試時(shí)間適配、試卷的規(guī)范性、制卷過(guò)失率以及與測(cè)試目標(biāo)的符合程度、錨題的設(shè)置是否有效等。

注：為了“校準(zhǔn)”試卷測(cè)試系統(tǒng)的一致性，并為未來(lái)的分?jǐn)?shù)調(diào)整、教學(xué)質(zhì)量的縱向和橫向比較提供盡可能相同的標(biāo)準(zhǔn)，在試卷中要安排一定數(shù)目的“錨題”。錨題或稱(chēng)共同參照試題，顧名思義就是在同一測(cè)試目標(biāo)下在不同批次的試卷中共同的試題（可能在形式上略有變動(dòng)）。

五、試卷質(zhì)量分析的內(nèi)容診斷和可能性分析：試卷的考試重點(diǎn)內(nèi)容覆47適用對(duì)象適用專(zhuān)業(yè)層次明確適當(dāng)命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計(jì)劃、針對(duì)學(xué)科特點(diǎn)、課程標(biāo)準(zhǔn)、使用主教材及課程教學(xué)實(shí)施計(jì)劃合理進(jìn)行命題思想對(duì)本課程的考核要全面、有效、符合因材施教的實(shí)際，能反映課程學(xué)習(xí)達(dá)標(biāo)的基本要求。試卷命題既要反映教與學(xué)的重點(diǎn)，又要照顧全面；既要能檢查學(xué)員對(duì)基本概念和基本知識(shí)的理解應(yīng)用能力，又要考核其運(yùn)用已學(xué)知識(shí)綜合分析問(wèn)題的能力。題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問(wèn)，測(cè)量學(xué)員對(duì)各考點(diǎn)的理解深度、掌握廣度和應(yīng)用活度?？傤}量和各種題型所占比例適當(dāng)，要使中等程度的學(xué)員在規(guī)定考試時(shí)間內(nèi)能完成全部的答題并留有一定的檢查時(shí)間。內(nèi)容分布試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對(duì)教學(xué)重點(diǎn)要有所側(cè)重，對(duì)教學(xué)難點(diǎn)要有所涉及，對(duì)于課時(shí)分配較少的了解層次的常識(shí)性?xún)?nèi)容的試題數(shù)量相對(duì)較少。試卷中掌握、熟悉、了解等各層次要求的內(nèi)容分布分別為70%，20%和10%。章節(jié)覆蓋率要達(dá)到80%左右，知識(shí)點(diǎn)覆蓋率要達(dá)到70%。測(cè)量指標(biāo)教育測(cè)量學(xué)的基本指標(biāo)信度、效度、難易度和區(qū)分度的設(shè)置合理。建議難：較難：中等：較易題量的比例大致為1：3：4：2；難度系數(shù)在0.3-0.8之間，區(qū)分度適當(dāng)，信度和效度較高。其它項(xiàng)目1.根據(jù)課程特點(diǎn)，主客觀試題比例、定性定量試題比例合理。2.使用的試卷要求格式規(guī)范、卷面清晰、語(yǔ)法書(shū)寫(xiě)出錯(cuò)率低。3.各試題之間彼此獨(dú)立，表達(dá)明確、簡(jiǎn)練，不會(huì)出現(xiàn)歧義。4.試卷要有答案以及準(zhǔn)確、全面、合理的評(píng)分標(biāo)準(zhǔn)。5.近三年內(nèi)考題的復(fù)用率不超過(guò)總量的15%。6.要在試卷中設(shè)置數(shù)目適當(dāng)?shù)摹板^題”，以便作信度和效度等分析。7.要能確定非常重要問(wèn)題試題（vip），或特別具有分析價(jià)值的試題。適用對(duì)象適用專(zhuān)業(yè)層次明確適當(dāng)命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方48命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計(jì)劃、針對(duì)學(xué)科特點(diǎn)、課程標(biāo)準(zhǔn)、使用主教材及課程教學(xué)實(shí)施計(jì)劃合理進(jìn)行。

命題依據(jù)依據(jù)學(xué)校頒發(fā)的人才培養(yǎng)方案和教學(xué)計(jì)劃、針對(duì)學(xué)科特點(diǎn)、49命題思想

對(duì)本課程的考核要全面、有效、符合因材施教的實(shí)際，能反映課程學(xué)習(xí)達(dá)標(biāo)的基本要求。試卷命題既要反映教與學(xué)的重點(diǎn)，又要照顧全面；既要能檢查學(xué)員對(duì)基本概念和基本知識(shí)的理解應(yīng)用能力，又要考核其運(yùn)用已學(xué)知識(shí)綜合分析問(wèn)題的能力。命題思想對(duì)本課程的考核要全面、有效、符合因材施教的實(shí)際，能50題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問(wèn)，測(cè)量學(xué)員對(duì)各考點(diǎn)的理解深度、掌握廣度和應(yīng)用活度?？傤}量和各種題型所占比例適當(dāng)，要使中等程度的學(xué)員在規(guī)定考試時(shí)間內(nèi)能完成全部的答題并留有一定的檢查時(shí)間。題型題量題型要多樣化，有利于承載試題信息、設(shè)置疑問(wèn)，測(cè)量學(xué)員51內(nèi)容分布

試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對(duì)教學(xué)重點(diǎn)要有所側(cè)重，對(duì)教學(xué)難點(diǎn)要有所涉及，對(duì)于課時(shí)分配較少的了解層次的常識(shí)性?xún)?nèi)容的試題數(shù)量相對(duì)較少。試卷中掌握、熟悉、了解等各層次要求的內(nèi)容分布分別為70%，20%和10%。章節(jié)覆蓋率要達(dá)到80%左右，知識(shí)點(diǎn)覆蓋率要達(dá)到70%。內(nèi)容分布試卷內(nèi)容分布要體現(xiàn)總體的教學(xué)目標(biāo)，對(duì)教學(xué)重點(diǎn)要有所52測(cè)量指標(biāo)

教育測(cè)量學(xué)的基本指標(biāo)信度、效度、