多類問(wèn)題評(píng)價(jià)

文本分類的評(píng)價(jià)

多類問(wèn)題評(píng)價(jià)多元分類的問(wèn)題分類算法多元分類的問(wèn)題/01多元分類問(wèn)題除了二元分類的問(wèn)題，很多情況下分類算法要處理多元分類的問(wèn)題，即將文檔分成若干個(gè)類別的集合。在對(duì)多類問(wèn)題的分類算法進(jìn)行評(píng)估時(shí)，通常將多元分類問(wèn)題轉(zhuǎn)化為二元問(wèn)題來(lái)看，這樣就可通過(guò)利用每一個(gè)類別的樣本被正確分類的比例信息來(lái)對(duì)算法的整體性能進(jìn)行評(píng)估。

分類算法/02

下頁(yè)中兩個(gè)矩陣是進(jìn)行SVD分解后的矩陣（左）和（右）。其中，包含5個(gè)信息量，刪除一部分較小的非零特征值后，得到的僅包含2個(gè)信息量。用替代乘分解的特征向量，可以得到維度更低的文檔集合矩陣，即“隱含語(yǔ)義---文檔”矩陣。類別1類別2類別3合計(jì)實(shí)際True實(shí)際False實(shí)際True實(shí)際False實(shí)際True實(shí)際Fasle實(shí)際True實(shí)際False判斷TrueTP_1FP_1TP_2FP_2TP_3FP_3TP_1+TP_2+TP_3FP_1+FP_2+FP_3判斷falseFN_1TN_1FN_2TN_2FN_3TN_3FN_1+FN_2+FN_3TN_1+TN_2+TN_3分類算法分類算法

假設(shè)文檔分為3類，類別1，類別2和類別3。對(duì)文檔進(jìn)行分類的問(wèn)題可以分解為對(duì)類別1、類別2、類別3是否為真例的判斷。在對(duì)該分類問(wèn)題的算法進(jìn)行評(píng)估時(shí)，需要分別統(tǒng)計(jì)并獲得各個(gè)類別的混淆矩陣。在宏平均情況下，分別計(jì)算每個(gè)類別基于混淆矩陣的二元分類指標(biāo)，然后根據(jù)類的個(gè)數(shù)取平均；在微平均的情況下，根據(jù)各個(gè)類別的混淆矩陣進(jìn)行匯總，獲得整體的混淆矩陣計(jì)數(shù)結(jié)果，然后根據(jù)矩陣每個(gè)維度上的和計(jì)算評(píng)估指標(biāo)。

分類算法

假設(shè)以精確率指標(biāo)來(lái)對(duì)多元分類問(wèn)題進(jìn)行評(píng)估。以宏平均的方法來(lái)獲得分類算法的評(píng)估結(jié)果時(shí)，首先計(jì)算：其次對(duì)所有精確率指標(biāo)取平均，有：

分類算法

采用微平均的方法來(lái)獲得分類算法的評(píng)估結(jié)果時(shí)，對(duì)TP、FP、FN、TN四個(gè)維度的值分別進(jìn)行匯總，基于匯總值進(jìn)行計(jì)算，有：微平均的方法比較傾向于文檔集合中大類別樣本的精度。如果在對(duì)模