第四章 人員素質(zhì)測評(píng)工具的評(píng)價(jià)與選擇1

第四章人員素質(zhì)測評(píng)工具

的評(píng)價(jià)與選擇1第一節(jié)人員素質(zhì)測評(píng)工具

的測量學(xué)特征2一、信度信度是指測驗(yàn)結(jié)果的可靠性、穩(wěn)定性，即測驗(yàn)手段和結(jié)果不受隨機(jī)誤差干擾的程度。1、再測信度

也稱穩(wěn)定性系數(shù)，指同一測評(píng)對(duì)象在不同時(shí)間用同一測評(píng)工具測量兩次（間隔一定時(shí)間），兩次測評(píng)所得結(jié)果的（分?jǐn)?shù)）之間的相關(guān)系數(shù)（差異程度），表示測評(píng)工具在時(shí)間上的穩(wěn)定性。

通過積差相關(guān)系數(shù)來計(jì)算，驗(yàn)證測評(píng)的科學(xué)性與可靠性。32、復(fù)本信度又稱等值系數(shù)，反映的是兩個(gè)相等的（等值的）復(fù)份測驗(yàn)之間的一致性，是兩個(gè)平行測驗(yàn)分?jǐn)?shù)的相關(guān)性。優(yōu)點(diǎn)：①避免再測信度的記憶效果和練習(xí)效應(yīng)；②適用于長期追蹤研究或調(diào)查某些干涉變量對(duì)檢測結(jié)果的影響③減少作弊的可能性缺點(diǎn)：①不能消除練習(xí)效應(yīng)；②副本與正本之間仍有遷移作用③副本及其難度難以把握43、內(nèi)部一致性信度又稱內(nèi)在一致性系數(shù)，反映測評(píng)工具（項(xiàng)目）內(nèi)部之間的同質(zhì)性，考察一個(gè)測評(píng)工具中想要測量相同內(nèi)容或特質(zhì)的各個(gè)項(xiàng)目是否真正測量了相同的內(nèi)容或特質(zhì)。分析方法：（1）項(xiàng)目折半分析

rt=2r/1+rr：奇數(shù)項(xiàng)與偶數(shù)項(xiàng)分?jǐn)?shù)的相關(guān)系數(shù)5（2）ａ系數(shù)分析rt=(n/n-1)×(s2t-∑v2i)/s2tn：測評(píng)工具包含的項(xiàng)目數(shù)S2t：測評(píng)結(jié)果總分的方差V2i：第i個(gè)項(xiàng)目得分的方差例P31264、評(píng)分者一致性信度指的是不同的評(píng)分者使用同一測評(píng)工具時(shí)所評(píng)分?jǐn)?shù)間一致性。主要反映測評(píng)者主觀上的誤差。分析方法：肯得爾和諧系數(shù)

W=[∑R2i﹣

(∑Ri)2]/(1/12)n2(m3﹣m)

n：測評(píng)者人數(shù)

m:測評(píng)項(xiàng)目個(gè)數(shù)

R:第i個(gè)項(xiàng)目所有被測者的等級(jí)之和或（分?jǐn)?shù)之和）例P31375、影響信度的因素被測試者測評(píng)者（主試）測評(píng)內(nèi)容分?jǐn)?shù)的分布情況意外干擾因素8二、效度測評(píng)工具的有效性就叫效度，指測量的正確性與準(zhǔn)確程度。反映測量的結(jié)果是否與實(shí)際的結(jié)果相符合。9（一）效度與信度的關(guān)系1、二者所考慮的誤差性質(zhì)不同信度評(píng)估的是隨機(jī)誤差效度評(píng)估的是系統(tǒng)誤差2、高信度是高效度的必要條件，而不是充分條件10二、效度的種類1、內(nèi)容效度即測評(píng)工具的內(nèi)容能否有效代表測評(píng)所要求的內(nèi)容范圍。①內(nèi)容效度最適合于評(píng)估教育和職業(yè)成就測試；②適合于某些用于選拔和分類的人事測評(píng)；③內(nèi)容效度一般不適用于能力傾向測試和人格測試11內(nèi)容效度應(yīng)用中應(yīng)注意1、內(nèi)容效度背后的假設(shè)是，將來被聘用的人在被聘用是已經(jīng)具備了一定的知識(shí)、技術(shù)和能力；2、由于主觀判斷在內(nèi)容效度中所取的作用很大，因而將判斷過程中的推測成分降到最小顯得非常關(guān)鍵。122、構(gòu)想效度人員素質(zhì)測評(píng)所關(guān)心的心理特征往往具有一定的理論構(gòu)想，例如關(guān)于能力結(jié)構(gòu)、人格結(jié)構(gòu)的假設(shè)。那么，從測評(píng)的理論依據(jù)來說，測驗(yàn)實(shí)際所得的結(jié)果應(yīng)該符合測驗(yàn)的理論構(gòu)想或假設(shè)，即測評(píng)的構(gòu)想效度。確定構(gòu)想效度的步驟：①建立理論框架，以解釋被試者在測試上的表現(xiàn)②依據(jù)理論框架，推演出有關(guān)各種測試成績的假設(shè)；③以邏輯或?qū)嵶C的方法來驗(yàn)證假設(shè)。133、實(shí)證效度就是指測評(píng)工具對(duì)處于特定環(huán)境中的個(gè)體行為進(jìn)行預(yù)測時(shí)的有效性，即測評(píng)工具對(duì)于我們所感興趣的行為能夠預(yù)測得怎么樣。14（三）影響效度的因素被測試者測試的長度測試題目的質(zhì)量實(shí)施測試時(shí)的干擾因素15三、難度和區(qū)分度1、項(xiàng)目難度P=R/NP：難度指數(shù)R：答對(duì)人數(shù)N：參與測試總?cè)藬?shù)一般測試試題難度指數(shù)應(yīng)在0.3—0.7之間；整份測試試卷的平均難度指數(shù)在0.5是理想的。應(yīng)注意避免“天花板效應(yīng)”和“地板效應(yīng)”。162、項(xiàng)目區(qū)分度D=（H-L）/ND：區(qū)分度指數(shù)H：高分組答對(duì)題的人數(shù)L：低分組答對(duì)題的人數(shù)N：參與測試總?cè)藬?shù)例P317

區(qū)分度與難度是密切相關(guān)的。也就是對(duì)被測試者的水平有良好的鑒別能力，能將高水平的受測者與低水平的受測者很好的區(qū)分開來。17三、標(biāo)準(zhǔn)化標(biāo)準(zhǔn)化是指測驗(yàn)編制、實(shí)施、記分和對(duì)分?jǐn)?shù)的解釋必須遵循嚴(yán)格的統(tǒng)一的科學(xué)程序，保證對(duì)所有被測者來說，施測的內(nèi)容、條件、記分過程、解釋系統(tǒng)都相同。它包括：①測驗(yàn)題目的標(biāo)準(zhǔn)化；②實(shí)施過程和記分的標(biāo)準(zhǔn)化；③選用有代表性的常模。18第二節(jié)人員素質(zhì)測評(píng)的常用工具19一、標(biāo)準(zhǔn)化紙筆測驗(yàn)標(biāo)準(zhǔn)化紙筆測驗(yàn)就是只用筆和紙就能進(jìn)行的測驗(yàn)，但它要求測驗(yàn)全過程（包括題目、回答方式、測驗(yàn)時(shí)間、評(píng)分及分?jǐn)?shù)解釋等的標(biāo)準(zhǔn)化。

常用的標(biāo)準(zhǔn)化紙筆測驗(yàn)有：人格測驗(yàn)、成就測驗(yàn)、能力測驗(yàn)等。20標(biāo)準(zhǔn)化紙筆測驗(yàn)的優(yōu)缺點(diǎn)優(yōu)點(diǎn)方便性經(jīng)濟(jì)性客觀性缺點(diǎn)無法測驗(yàn)被測者的行為表現(xiàn)；測驗(yàn)實(shí)施程序較為正式化；無法避免考試技巧和猜測因素的影響。21二、投射測驗(yàn)1、投射測驗(yàn)的含義要求被試對(duì)一些模棱兩可或模糊不清、結(jié)構(gòu)不明確的刺激做出描述和反映，據(jù)此來分析和推斷被試的內(nèi)在心里特征。投射測驗(yàn)主要用于人格、動(dòng)機(jī)等內(nèi)容的測驗(yàn)。2、投射測驗(yàn)的特點(diǎn)非結(jié)構(gòu)性隱蔽性整體性223、投射測驗(yàn)的分類聯(lián)想法投射測驗(yàn)構(gòu)造法投射測驗(yàn)完成法投射測驗(yàn)表露法投射測驗(yàn)選擇或排列法投射測驗(yàn)4、投射測驗(yàn)的局限計(jì)分和解釋缺乏客觀標(biāo)準(zhǔn)；難以體現(xiàn)公平難以避免防御反映的干擾耗費(fèi)的時(shí)間精力大，對(duì)主試要求高23三、行為模擬與觀察類測驗(yàn)它是通過安排一定的情境，在其中觀察特定的個(gè)體或群體的特定行為，從中分析需要考察對(duì)象的內(nèi)在素質(zhì)或特征，它的技術(shù)核心是行為觀察。具體又分為：自然觀察設(shè)計(jì)觀察自我觀察24行為模擬與觀察類測驗(yàn)的優(yōu)缺點(diǎn)優(yōu)點(diǎn)真實(shí)預(yù)測效果好可獲取較多信息缺點(diǎn)操作較為困難；測驗(yàn)成本高；分析較復(fù)雜。25四、基于工作情景的綜合類測驗(yàn)公文筐測驗(yàn)：即讓被測試者在所安排的假想的情境中扮演某一管理者的角色，進(jìn)行一系列的公文處理，對(duì)其處理的方式方法以及結(jié)果等進(jìn)行評(píng)價(jià)的一種方法。這類測驗(yàn)主要有：面試：即考官針對(duì)與工作有關(guān)的內(nèi)容，與被試進(jìn)行面對(duì)面的交談，達(dá)到了解，評(píng)價(jià)的目的。調(diào)查：即對(duì)員工的某些意愿、態(tài)度、觀點(diǎn)或感受等認(rèn)知性或情感性心里狀態(tài)或行為傾向進(jìn)行信息搜集，并做出分析評(píng)價(jià)。26第三節(jié)人員素質(zhì)測評(píng)工具設(shè)計(jì)27一、素質(zhì)測評(píng)工具設(shè)計(jì)和編制的一般程序明確測驗(yàn)?zāi)康闹贫ň庮}計(jì)劃編輯題目題目的測試與分析組合成測驗(yàn)將測驗(yàn)標(biāo)準(zhǔn)化對(duì)測驗(yàn)進(jìn)行鑒定編寫測驗(yàn)說明書28（一）測量目標(biāo)的分析1、預(yù)測性測驗(yàn)2、顯示性測驗(yàn)3、特殊心理品質(zhì)或特質(zhì)測驗(yàn)29（二）制定編題計(jì)劃1、指標(biāo)范圍、權(quán)重和內(nèi)容2、題目類型與數(shù)量3、編題記分方法30（三）編輯題目1、搜集有關(guān)資料2、