第四章 測量信度

第一節(jié)信度概述一、信度的定義（reliability）信度是指測量結(jié)果的穩(wěn)定性程度。（測量結(jié)果的可靠性程度?？尚哦?。）信度就是測驗在測量它所測東西的一致性?；蛘哒f，就是同一測驗先后測同一對象時所得分?jǐn)?shù)的一致性。信度系數(shù)是表示測量結(jié)果的穩(wěn)定性程度的指標(biāo)。記為：信度系數(shù)的值域：[0,1]二、信度的統(tǒng)計定義信度是被試團體真分?jǐn)?shù)方差與實得分?jǐn)?shù)方差之比：信度是被試團體真分?jǐn)?shù)與實得分?jǐn)?shù)相關(guān)系數(shù)的平方：理論定義操作定義信度是一個測驗X（A卷）與它的任意一個平行測驗（B卷）的相關(guān)系數(shù)。兩組測驗分?jǐn)?shù)之間的相關(guān)二、信度的作用信度是測量過程中所存在的隨機誤差大小的反映（評價測驗好壞）標(biāo)準(zhǔn)化學(xué)績或能力測驗0.9以上人格測驗0.8以上教師自編學(xué)績測驗0.6以上信度可以用來解釋個人測驗分?jǐn)?shù)的意義——測量標(biāo)準(zhǔn)誤（用區(qū)間估計來表示真分?jǐn)?shù)的范圍）理論上：用一個測驗對一個人測無數(shù)次，實測值的標(biāo)準(zhǔn)差即為標(biāo)準(zhǔn)誤造作上：用一組被試兩次施測的結(jié)果之間的差異來表示，差異的分布為標(biāo)準(zhǔn)誤例題某智力測驗的信度為0.95，標(biāo)準(zhǔn)差為15，某兒童得分為120分，試估計真分?jǐn)?shù)的范圍。SE=3.35120-1.96*3.35120+1.96*3.35信度可以幫助進行不同測驗分?jǐn)?shù)的比較（一個人在不同測驗上的得分是否有顯著差異）不同測驗的原始分不能直接比較轉(zhuǎn)換成相同尺度的標(biāo)準(zhǔn)分?jǐn)?shù)（Z分?jǐn)?shù)或T分?jǐn)?shù)）求標(biāo)準(zhǔn)誤求Z值？測驗分?jǐn)?shù)的比較與平均數(shù)差異顯著性檢驗是一回事嗎？第二節(jié)信度的估計方法信度的估計方法①重測信度：用同一個量表對同一組被試施測兩次結(jié)果的一致性程度。②復(fù)本信度：兩個平行測驗測量同一批被試所得結(jié)果的一致性程度。③分半信度：將一個測驗分成對等兩半后，所有被試在這兩半上所得分?jǐn)?shù)的一致性程度。④同質(zhì)性信度：指測驗內(nèi)部所有題目間的一致性程度，也叫內(nèi)部一致性系數(shù)。⑤評分者信度一、重測信度含義同一測驗同組對象前后測2次相關(guān)系數(shù)穩(wěn)定性程序誤差時間太短練習(xí)效應(yīng)記憶效應(yīng)A卷一定時距A卷太長身心變化優(yōu)點省力、省時測量屬性相同提供隨時間變化的資料不足適用范圍所測心理特質(zhì)穩(wěn)定運動技能速度時間間隔長短被試的積極性評價二、復(fù)本信度兩個平行測驗測量同一批被試所得結(jié)果的一致性程度。(積差相關(guān))等值性系數(shù)測驗A1測驗B1等值穩(wěn)定性系數(shù)測驗A1測驗B1

最短時距

合適時距等值性系數(shù)含義兩等值測驗最短時間內(nèi)對同組對象施測結(jié)果r等值性程序誤差內(nèi)容取樣A卷最短時距B卷優(yōu)點代表性增強，信度更準(zhǔn)避免練習(xí)、記憶效應(yīng)不足編制復(fù)本難影響積極性觸類旁通順序效應(yīng)評價等值穩(wěn)定性系數(shù)含義兩等值測驗一定時間內(nèi)對同組對象施測結(jié)果r等值性穩(wěn)定性程序誤差內(nèi)容取樣時間A卷一定時距B卷等值穩(wěn)定性系數(shù)反映題目間的差別、兩次實測時的情境、被試特質(zhì)水平方面的差異。兩個測驗要具有更高的等值性測驗的時距要根據(jù)問題性質(zhì)和測量目的來定經(jīng)費的問題報告結(jié)果時，應(yīng)報告間隔的時間等值穩(wěn)定性系數(shù)與重測、等值性系數(shù)誰得估計更嚴(yán)格，為何？三、內(nèi)部一致性信度含義測驗各題間一致性題目一致性是否測量同一特性分半信度類型內(nèi)容取樣同質(zhì)性信度（一）分半信度將一個測驗分成對等兩半后，所有被試在這兩半上所得分?jǐn)?shù)的一致性程度。只能測一次或沒有副本的情況下使用要把題目分成對等的兩半（分半的方法不同，結(jié)果不同）公式斯皮爾曼-布朗公式方差相等時弗拉南根公式盧尤公式方差不等時（二）同質(zhì)信度同質(zhì)性題目間的內(nèi)部一致性類型庫-理信度克龍巴赫系數(shù)0、1題型K-R20難度不同k-R21難度相近各類題型四、評分者信度含義評分者評分的一致性方法2評分者2個以上者rXYrρ肯德爾和諧系數(shù)直接解釋真分?jǐn)?shù)與實得分?jǐn)?shù)相關(guān)的解釋rXX間接解釋信度系數(shù)決定系數(shù)∵r2XT=ST2/SX2=rXX∴rXX為各方差的百分比S2X分為各S2E和S2T∵誤差源不同信度估計法不同rXX=0.90信度系數(shù)和指數(shù)例2-13：設(shè)有兩平等的創(chuàng)造力測驗（A和B）?，F(xiàn)：1）間隔兩月施測100人，其信度為0.70；2）兩卷分半信度校正值為0.80；3）第2個評分者隨機抽50份，信度0.92；試問：1）真分?jǐn)?shù)的方差是多少？2）各種信度的誤差是多少？間接解釋范例信度類型rXX重測復(fù)本0.70分半信度0.80評分者信度0.92總誤差方差真分?jǐn)?shù)方差分析結(jié)果誤差源時間、內(nèi)容內(nèi)容取樣評分者差異

兩者之差誤差的方差時間取樣1-0.70=0.31-0.80=0.20.3-0.2=0.10.2+0.1+0.08=0.381-0.38=0.621-0.92=0.08典型測驗的信度高低水平測驗類型低中高成套成就測驗學(xué)術(shù)能力測驗成套傾向性測驗客觀人格測驗興趣問卷態(tài)度量表.66.92.98.56.90.97.26.88.96.46.85.97.42.84.93.47.79.98各種信度反映的誤差來源比較信度類型誤差來源重測信度等值性系數(shù)等值穩(wěn)定性系數(shù)分半信度同質(zhì)性信度評分者信度時間內(nèi)容時間和內(nèi)容內(nèi)容內(nèi)容評分者之間的差異注意問題以上方法僅適用于常模參照測驗?zāi)繕?biāo)參照測驗要以概化理論為基礎(chǔ)進行處理以上方法僅適用于難度測驗速度測驗的信度問題目標(biāo)參照測驗的信度前期目標(biāo)預(yù)測測驗和后期目標(biāo)檢測測驗的比較（第二次達標(biāo)的人在第一次測試中達標(biāo)的比例）一致性百分比法（兩次測驗合格人數(shù)+兩次測驗不合格人數(shù)）/測驗總?cè)藬?shù)

第三節(jié)提高測驗信度的方法一、影響測量信度的因素影響測量信度的因素施測間隔的時間被試主試施測環(huán)境測量工具被試方面身心狀況、應(yīng)試動機、作答態(tài)度等樣本團體異質(zhì)性的影響樣本團體平均能力水平的影響特點樣本越異質(zhì)，分?jǐn)?shù)分布越廣，S↑，r↑，測驗越可靠樣本團體異質(zhì)性的影響分析散點圖計算散點圖整段范圍低高樣本團體平均能力水平的影響團體平均水平太高或太低，使測驗分?jǐn)?shù)的分布變窄，低估測量的信度選擇測驗時應(yīng)注意取樣團體的變異性和能力水平建立信度的團體與欲測團體是否一致測量工具試題取樣（題目太少，考察的不全面）試題之間的同質(zhì)性程度試題難度智力的時間變化間隔期信度系數(shù)同日或次日0.90～0.951年0.852～2.5年0.805年