測評的結(jié)果和質(zhì)量分析

1、w 可靠性分析可靠性分析信度的含義、分類、估算信度的含義、分類、估算影響信度的因素影響信度的因素w 有效性分析有效性分析效度的含義、分類、估算效度的含義、分類、估算影響效度的因素影響效度的因素w 質(zhì)量分析質(zhì)量分析適合度、區(qū)分度適合度、區(qū)分度項目的獨立性項目的獨立性w 結(jié)果的轉(zhuǎn)化結(jié)果的轉(zhuǎn)化標準分數(shù)、常模標準分數(shù)、常模w 誤差是指在測量中與目的無關(guān)的因素所產(chǎn)誤差是指在測量中與目的無關(guān)的因素所產(chǎn)生的不準確或不一致的結(jié)果。生的不準確或不一致的結(jié)果。w 誤差的種類誤差的種類隨機誤差、系統(tǒng)誤差隨機誤差、系統(tǒng)誤差w 誤差的原因誤差的原因測驗自身、施測過程、被試測驗自身、施測過程、被試w 1.1 1.1 信度

2、的含義信度的含義：信度指測評與選拔結(jié)果的信度指測評與選拔結(jié)果的準確性準確性或或一致性一致性程度。程度。w 1.2 1.2 信度的分類信度的分類：再測信度再測信度復本信度復本信度內(nèi)在一致性信度內(nèi)在一致性信度w 含義：含義：指同一測驗在間隔一段時間先后兩次測試同指同一測驗在間隔一段時間先后兩次測試同一組被試所得兩次分數(shù)的一致性程度。一組被試所得兩次分數(shù)的一致性程度。w 估算方法：估算方法：穩(wěn)定系數(shù)穩(wěn)定系數(shù)w 含義含義同一測驗的不同版本（副本）對同一組被同一測驗的不同版本（副本）對同一組被試測驗結(jié)果的一致性程度。試測驗結(jié)果的一致性程度。w 估算方法：估算方法：等值系數(shù)等值系數(shù)w 含義含義指所測素質(zhì)相

3、同的各測評項目分數(shù)間的一致性。指所測素質(zhì)相同的各測評項目分數(shù)間的一致性。w 估算方法：估算方法：內(nèi)在一致性系數(shù)內(nèi)在一致性系數(shù)w項目折半分析項目折半分析wa a 系數(shù)系數(shù)w 含義含義多個測評者對同一組被測樣組進行評分的一致性多個測評者對同一組被測樣組進行評分的一致性程度。程度。w 估算方法：估算方法：肯德爾和諧系數(shù)肯德爾和諧系數(shù)w 1.3 1.3 影響信度的因素影響信度的因素：測評者測評者被測者被測者測評工具測評工具測評環(huán)境測評環(huán)境w 2.1 2.1 效度的效度的含義含義效度是測驗有效測量測量目標的程度。效度是測驗有效測量測量目標的程度。w 2.2 2.2 效度的分類效度的分類內(nèi)容效度內(nèi)容效度結(jié)

4、構(gòu)效度結(jié)構(gòu)效度關(guān)聯(lián)效度關(guān)聯(lián)效度w 指測題選擇的恰當性，也就是測驗題目對指測題選擇的恰當性，也就是測驗題目對整個測量內(nèi)容的代表性。整個測量內(nèi)容的代表性。w 內(nèi)容效度高指測題對整個測量內(nèi)容的覆蓋內(nèi)容效度高指測題對整個測量內(nèi)容的覆蓋面廣，測題是測量內(nèi)容中的重點、要點和面廣，測題是測量內(nèi)容中的重點、要點和主要的實質(zhì)性內(nèi)容。主要的實質(zhì)性內(nèi)容。w 內(nèi)容效度一般由專家通過資料研究和邏輯內(nèi)容效度一般由專家通過資料研究和邏輯分析而作出判斷分析而作出判斷。w 指測驗結(jié)果與理論構(gòu)想的一致性。指測驗結(jié)果與理論構(gòu)想的一致性。w 測驗內(nèi)的方法：通過研究測驗內(nèi)部結(jié)構(gòu)來測驗內(nèi)的方法：通過研究測驗內(nèi)部結(jié)構(gòu)來評估測驗的結(jié)構(gòu)效度，

5、如搜集內(nèi)容效度資評估測驗的結(jié)構(gòu)效度，如搜集內(nèi)容效度資料、統(tǒng)治信度資料、項目相關(guān)資料等。料、統(tǒng)治信度資料、項目相關(guān)資料等。w 測驗間的方法：通過與其它測驗的比較來測驗間的方法：通過與其它測驗的比較來評估新測驗的結(jié)構(gòu)效度評估新測驗的結(jié)構(gòu)效度。w 含義：效標資料與測驗結(jié)果的一致性。含義：效標資料與測驗結(jié)果的一致性。w 根據(jù)效標與測驗分數(shù)是否可以同時獲得，根據(jù)效標與測驗分數(shù)是否可以同時獲得，分為同時效度和預(yù)測效度。分為同時效度和預(yù)測效度。w 同時效度：效標資料與測驗分數(shù)同時獲得，同時效度：效標資料與測驗分數(shù)同時獲得，預(yù)測后馬上可以估計效度。預(yù)測后馬上可以估計效度。w 預(yù)測效度：效標資料要在測驗以后較長

6、一預(yù)測效度：效標資料要在測驗以后較長一段時間后才能獲得。段時間后才能獲得。w 2.3 2.3 影響效度的因素影響效度的因素：測評者測評者被測者被測者測評工具測評工具效標因素效標因素信度因素信度因素w 3.1 3.1 項目的適合度項目的適合度指測驗項目的難易程度指測驗項目的難易程度w 3.2 3.2 項目的區(qū)分度項目的區(qū)分度反映測評工具區(qū)分應(yīng)試人心理特征差異性的反映測評工具區(qū)分應(yīng)試人心理特征差異性的指標。指標。w 3.3 3.3 項目的獨立性項目的獨立性指測驗項目之間不相關(guān)或者低度相關(guān)。指測驗項目之間不相關(guān)或者低度相關(guān)。w 影響項目適合度的因素影響項目適合度的因素內(nèi)容本身的難易程度內(nèi)容本身的難易

7、程度測驗的編制技術(shù)測驗的編制技術(shù)被試的知識經(jīng)驗有關(guān)被試的知識經(jīng)驗有關(guān)測驗的適合度具有相對性測驗的適合度具有相對性。正因為如此，必。正因為如此，必須進行試測。須進行試測。（1 1） 是非題、選擇題，用通過率來表示適合度是非題、選擇題，用通過率來表示適合度w P=R/NP=R/NR R 試題答對或通過該項目的人數(shù)試題答對或通過該項目的人數(shù)N N 全體考生人數(shù)全體考生人數(shù)（2 2）多項選擇）多項選擇w CP=(KP-1)/(K-1)CP=(KP-1)/(K-1)CP CP 校正后的試題適合度校正后的試題適合度P P 校正前的試題適合度校正前的試題適合度K K 選擇項的數(shù)量選擇項的數(shù)量校正后的適合度值

8、要低于校正前的適合度值。校正后的適合度值要低于校正前的適合度值。一般認為適合度在一般認為適合度在0.30.70.30.7比較合適，整份比較合適，整份試卷的適合度指最好把握在試卷的適合度指最好把握在0.50.5左右。左右。（3 3）論述題）論述題w P=X/XP=X/XmaxmaxX X 全體被試在某一項目上的平均分全體被試在某一項目上的平均分X Xmaxmax 該項目的滿分該項目的滿分w 難度的大小是否合適還取決于測試目的；難度的大小是否合適還取決于測試目的；w 同時，與測試分數(shù)的分布有關(guān)。同時，與測試分數(shù)的分布有關(guān)。分數(shù)分數(shù)分數(shù)分數(shù)人次人次人次人次w P=(PP=(PH H+P+PL L)/

9、2)/2P PH H 高分組的通過率高分組的通過率P PL L 低分組的通過率低分組的通過率w D=D=P PH HP PL LD D 區(qū)分度指數(shù)區(qū)分度指數(shù)w區(qū)分度指數(shù)高，區(qū)分能力越強區(qū)分度指數(shù)高，區(qū)分能力越強PDw 區(qū)分度與難度的關(guān)系區(qū)分度與難度的關(guān)系w 指測驗的編制、實施、計分和解釋程序的一指測驗的編制、實施、計分和解釋程序的一致性。致性。w 測驗計分和解釋的標準化，只要有詳細同意測驗計分和解釋的標準化，只要有詳細同意的標準，并且測驗分數(shù)只能與一個確定的參的標準，并且測驗分數(shù)只能與一個確定的參照標準相比較。照標準相比較。w 參照標準有參照標準有標準參照標準參照、常模參照常模參照。w 名次名次w 百分位法：百分位法：P PR R=100-(100R-50)/N=100-(100R-50)/Nw Z Z分數(shù)：分數(shù)：Z=(X-X)/SZ=(X-X)/S . . S S為原始分數(shù)的標準差為原始分數(shù)的標準差w T T分數(shù)：分數(shù)：T=100Z+50T=100Z+50w 標準九分：標準九分：4% 7% 12% 17% 20% 4% 7% 12% 17% 20% w C C量表分數(shù)：量表分數(shù)：1% 3% 7% 12% 17% 20% 1% 3% 7% 12% 17% 20% w 斯坦分數(shù)：斯坦分數(shù)：% % % % % 1% 1%