評分者信度計算及其SPSS實現(xiàn)

1、懷天下 求真知 編輯課件 學(xué)科教學(xué)（化學(xué)）學(xué)科教學(xué)（化學(xué)）懷天下 求真知 評分者信度評分者信度例如：高考時三個老師同時評一份試卷，需評分者一致性很高懷天下 求真知 評分者信度適用情況評分者信度適用情況1有關(guān)評分者信度的估計與評分者人數(shù)的多少有關(guān)。2斯皮爾曼（斯皮爾曼（Spearman）等級相關(guān)系數(shù)）等級相關(guān)系數(shù)若只有兩人參加評N份試卷，或一人先后兩次評N份試卷肯德爾（肯德爾（Kendall）和諧系數(shù)）和諧系數(shù)若三個以上的評分者評N份試卷懷天下 求真知 斯皮爾曼等級相關(guān)公式斯皮爾曼等級相關(guān)公式懷天下 求真知 例題例題甲、乙兩位教師評閱10份作文試卷，他們對每個考生評定的分數(shù)和等級如下表所示。試問

2、兩位教師評分的一致性如何？懷天下 求真知 例題例題懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)啟動SPSS，打開“斯皮爾曼相關(guān)等級系數(shù).sav”懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)選擇Anayze Correlate Bivariate懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)如下圖所示，選中兩個變量“甲”“乙”，勾選”Spearman”選項，點“OK”懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)結(jié)果分析：斯皮爾曼相關(guān)系數(shù)為0.841（結(jié)果上帶有兩個*的，下面有說明“顯著相關(guān)”），評分者一致性很高懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)相關(guān)解釋說明：相關(guān)解釋說明：上表中的甲乙等級是按照秩次

3、的排列規(guī)則得到的，在斯皮爾曼檢驗中，直接用數(shù)據(jù)以及用相應(yīng)的等級數(shù)據(jù)進行運算，最終得到的結(jié)果是相同的。懷天下 求真知 肯德爾和諧系數(shù)肯德爾和諧系數(shù)適用條件：適用條件：懷天下 求真知 肯德爾和諧系數(shù)計算公式肯德爾和諧系數(shù)計算公式注意這個公式！后面會再次提到！懷天下 求真知 例題例題有5位教師對8篇作文進行等級評定，評定結(jié)果如下表所示。請問，5位教師評定結(jié)果是否一致？懷天下 求真知 例題例題懷天下 求真知 例題例題前文中有計算公式文件夾中附有該表懷天下 求真知 例題例題懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)啟動SPSS，打開“肯德爾和諧系數(shù) 無相同等級.sav”注意：橫行和數(shù)列的數(shù)據(jù)輸入與斯皮爾

4、曼相關(guān)系數(shù)檢驗的輸入順序不同懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)選擇Analyze Nonparametric Tests K Related Samples懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)如下圖所示，選中八個變量“一八”，勾選”Kendalls W”選項，點“OK”懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)結(jié)果分析：結(jié)果分析：肯德爾和諧系數(shù)W值為0.928因為N7，計算X2值，對X2值進行顯著性檢驗注： X2 =k(N-1)W懷天下 求真知 肯德爾和諧系數(shù)計算公式肯德爾和諧系數(shù)計算公式懷天下 求真知 例題例題懷天下 求真知 例題例題懷天下 求真知 例題例題懷天下 求真知 例題例題懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)啟動SPSS，打開“肯德爾和諧系數(shù) 有相同等級.sav”注：此表中數(shù)據(jù)是按照秩次順序賦分后得到的懷天下 求真知 例題例題 SPSS實現(xiàn)實現(xiàn)接下來的操作同“無相同等級”的檢驗步驟，得到結(jié)果如