財(cái)政支出的績(jī)效評(píng)價(jià)與項(xiàng)目預(yù)算管理07課件講義

第七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選第七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選11、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（4）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（2）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

2七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選31、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（4）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（2）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

4

（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，能較好地反映不同評(píng)價(jià)對(duì)象在財(cái)政支出績(jī)效方面的差異。（4）可靠性

所選指標(biāo)真實(shí)、可靠，能準(zhǔn)確反映實(shí)際情況。

（5）可獲得性

所選指標(biāo)為常規(guī)資料，容易得到。（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，51、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（4）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（2）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

6

（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，能較好地反映不同評(píng)價(jià)對(duì)象在財(cái)政支出績(jī)效方面的差異。（4）可靠性

所選指標(biāo)真實(shí)、可靠，能準(zhǔn)確反映實(shí)際情況。

（5）可獲得性

所選指標(biāo)為常規(guī)資料，容易得到。（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，7七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選81、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（2）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（3）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

9

（4）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，能較好地反映不同評(píng)價(jià)對(duì)象在財(cái)政支出績(jī)效方面的差異。（5）可靠性

所選指標(biāo)真實(shí)、可靠，能準(zhǔn)確反映實(shí)際情況。

（6）可獲得性

所選指標(biāo)為常規(guī)資料，容易得到。（4）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，102、當(dāng)前財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)體系構(gòu)建實(shí)踐中存在的問題

（1）不能很好地解決指標(biāo)的全面性、代表性、精煉性之間的矛盾指標(biāo)體系的構(gòu)建者往往希望指標(biāo)體系能涵蓋績(jī)效評(píng)價(jià)應(yīng)涉及的方方面面,這就很容易導(dǎo)致指標(biāo)的數(shù)目過多,出現(xiàn)相關(guān)指標(biāo)、冗余指標(biāo)、重疊指標(biāo)。2、當(dāng)前財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)體系構(gòu)建實(shí)踐中存在的11

（2）對(duì)指標(biāo)體系的有效性重視不足不同的評(píng)價(jià)者基于不同的知識(shí)、經(jīng)驗(yàn)、思維,會(huì)構(gòu)建不一樣的指標(biāo)體系,究竟哪個(gè)指標(biāo)體系更科學(xué),得到的評(píng)價(jià)結(jié)論更有效,沒有客觀的標(biāo)準(zhǔn)來衡量。

（3）不重視指標(biāo)體系的可靠性和穩(wěn)定性即使采用相同的指標(biāo)體系，不同的評(píng)價(jià)專家由于對(duì)指標(biāo)的理解不同,特別是某些定性指標(biāo)易受主觀因素的影響,致使評(píng)價(jià)結(jié)果差異較大。（2）對(duì)指標(biāo)體系的有效性重視不足12針對(duì)第一個(gè)問題,需要對(duì)指標(biāo)進(jìn)行適當(dāng)?shù)募s簡(jiǎn)，以恰當(dāng)處理指標(biāo)體系的全面性與精煉性的問題。

針對(duì)第二個(gè)問題，需要對(duì)指標(biāo)體系的有效性實(shí)施科學(xué)的測(cè)度，以便形成能夠充分體現(xiàn)績(jī)效評(píng)價(jià)目的的指標(biāo)體系。

針對(duì)第三個(gè)問題，需要對(duì)不同專家的評(píng)價(jià)數(shù)據(jù)進(jìn)行差異度分析,以提高績(jī)效評(píng)價(jià)結(jié)果的穩(wěn)定性和可靠性。針對(duì)第一個(gè)問題,需要對(duì)指標(biāo)進(jìn)行適當(dāng)?shù)募s簡(jiǎn)，以恰當(dāng)133、指標(biāo)體系的約簡(jiǎn)

(1)有統(tǒng)計(jì)數(shù)據(jù)的可量化指標(biāo)體系的約簡(jiǎn)

約簡(jiǎn)的目的就是剔除區(qū)分能力弱、相關(guān)性強(qiáng)的指標(biāo)。對(duì)于量化的、有統(tǒng)計(jì)數(shù)據(jù)的指標(biāo)體系,可采用一些常規(guī)統(tǒng)計(jì)方法實(shí)施簡(jiǎn)約。例如,條件廣義方差極小法、極大不相關(guān)法、選取典型指標(biāo)法等。3、指標(biāo)體系的約簡(jiǎn)

(1)有統(tǒng)計(jì)數(shù)據(jù)的可量14用條件廣義方差極小法進(jìn)行指標(biāo)約簡(jiǎn),就是用廣義方差來反映指標(biāo)內(nèi)部的相關(guān)性。例如，假定有p個(gè)指標(biāo)，n個(gè)評(píng)價(jià)對(duì)象，各評(píng)價(jià)對(duì)象的指標(biāo)值如下所示：用條件廣義方差極小法進(jìn)行指標(biāo)約簡(jiǎn),就是用廣義方差15計(jì)算每一個(gè)指標(biāo)的均值：計(jì)算每一個(gè)指標(biāo)的方差：計(jì)算每一個(gè)指標(biāo)的均值：16計(jì)算每?jī)蓚€(gè)指標(biāo)間的協(xié)方差：進(jìn)而得到方差-協(xié)方差矩陣：計(jì)算每?jī)蓚€(gè)指標(biāo)間的協(xié)方差：17上述方差-協(xié)方差矩陣的行列式，就是所謂的廣義方差。可以證明：當(dāng)廣義方差達(dá)到極大值的時(shí)候，說明p個(gè)指標(biāo)相互獨(dú)立；而當(dāng)廣義方差等于零的時(shí)候，說明p個(gè)指標(biāo)完全線性相關(guān)。因此，廣義方差的大小可以反映指標(biāo)間的相關(guān)性。我們可以剔除廣義方差較小的指標(biāo)。上述方差-協(xié)方差矩陣的行列式，就18具體方法是：將矩陣X劃分成兩部分：其前p-1列記為X1，最后一列記為X2，并用S11、S22、S12表示二者的方差及協(xié)方差，則在滿足正態(tài)分布的假定下，有X2的條件廣義方差式：若上式的值小于一個(gè)預(yù)定的水平，就刪除指標(biāo)p。依此類推，逐步刪除與其他指標(biāo)相關(guān)度較高的指標(biāo)。具體方法是：19用極大不相關(guān)法進(jìn)行指標(biāo)約簡(jiǎn),就是計(jì)算每一個(gè)指標(biāo)與其它指標(biāo)之間的線性相關(guān)程度,當(dāng)大于某臨界值時(shí),可以去掉該指標(biāo)。用典型指標(biāo)法進(jìn)行指標(biāo)約簡(jiǎn),就是先對(duì)指標(biāo)進(jìn)行聚類，然后計(jì)算每一個(gè)類中每一指標(biāo)與其它指標(biāo)的相關(guān)系數(shù)，最后選擇其中相關(guān)系數(shù)最大的指標(biāo)作為該類指標(biāo)中的典型指標(biāo)。用極大不相關(guān)法進(jìn)行指標(biāo)約簡(jiǎn),就是計(jì)算每一個(gè)指標(biāo)與其20(2)針對(duì)定量指標(biāo)和定性指標(biāo)并存的指標(biāo)體系的約簡(jiǎn)

當(dāng)指標(biāo)體系中既存在定量指標(biāo),也存在定性指標(biāo)時(shí),定量指標(biāo)的評(píng)價(jià)可以依據(jù)統(tǒng)計(jì)數(shù)據(jù),而定性指標(biāo)的評(píng)價(jià)則由專家根據(jù)知識(shí)、經(jīng)驗(yàn)來主觀評(píng)價(jià)。針對(duì)這種類型的指標(biāo)體系，可采用粗糙集方法進(jìn)行指標(biāo)約簡(jiǎn)。

(2)針對(duì)定量指標(biāo)和定性指標(biāo)并存的指標(biāo)體系的約簡(jiǎn)21運(yùn)用粗糙集進(jìn)行指標(biāo)篩選和約簡(jiǎn),有多種思路。對(duì)于指標(biāo)數(shù)量不太多的情形，可以快速約簡(jiǎn)，從空集開始，一個(gè)個(gè)地增加指標(biāo)的個(gè)數(shù)，每一次選擇增加最大分類質(zhì)量γ(X)的指標(biāo)加入當(dāng)前的指標(biāo)子集。重復(fù)這一過程直到分類質(zhì)量γ(X)達(dá)到1或等于整個(gè)指標(biāo)集的分類質(zhì)量。

運(yùn)用粗糙集進(jìn)行指標(biāo)篩選和約簡(jiǎn),有多種思路。22(3)無統(tǒng)計(jì)數(shù)據(jù)或統(tǒng)計(jì)數(shù)據(jù)非常有限的指標(biāo)體系的約簡(jiǎn)

當(dāng)指標(biāo)體系不能獲得統(tǒng)計(jì)數(shù)據(jù),如對(duì)于新建系統(tǒng)的評(píng)價(jià),或者所能獲得的統(tǒng)計(jì)數(shù)據(jù)非常有限,需要依靠專家知識(shí)來進(jìn)行指標(biāo)的篩選和約簡(jiǎn),可以采用Vague集方法。Vague集方法充分利用專家知識(shí),表示專家支持、反對(duì)和棄權(quán)的情況,且方法簡(jiǎn)單易行。

(3)無統(tǒng)計(jì)數(shù)據(jù)或統(tǒng)計(jì)數(shù)據(jù)非常有限的指標(biāo)體系的約23(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)價(jià)對(duì)象為復(fù)雜非線性系統(tǒng)時(shí)，難以通過統(tǒng)計(jì)數(shù)據(jù)找出指標(biāo)間存在的相關(guān)性，可以利用神經(jīng)網(wǎng)絡(luò)的映射和泛化能力，基于神經(jīng)網(wǎng)絡(luò)的權(quán)值譜分析方法，將指標(biāo)值作為神經(jīng)網(wǎng)絡(luò)的輸入，指標(biāo)到各個(gè)隱層神經(jīng)元的平均權(quán)值即為指標(biāo)的譜值，反映指標(biāo)對(duì)輸出結(jié)果的影響，最后選取對(duì)輸出結(jié)果的相對(duì)貢獻(xiàn)率大的指標(biāo)，相對(duì)貢獻(xiàn)率小的指標(biāo)略去。

(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)244、評(píng)價(jià)指標(biāo)的鑒別力分析所謂評(píng)價(jià)指標(biāo)的鑒別力指的是評(píng)價(jià)指標(biāo)區(qū)分評(píng)價(jià)對(duì)象特征差異的能力。如果所有的評(píng)價(jià)對(duì)象在某個(gè)評(píng)價(jià)指標(biāo)上的取值高度地近似，則說明該評(píng)價(jià)指標(biāo)鑒別評(píng)價(jià)對(duì)象業(yè)績(jī)差異的能力很差，則從績(jī)效評(píng)價(jià)的目的角度考慮，這些指標(biāo)應(yīng)被剔除：

①最小均方差法首先計(jì)算各評(píng)價(jià)對(duì)象在每一個(gè)指標(biāo)上取值的均方差。然后剔除其中樣本均方差近似為零的指標(biāo)。②極小極大離差法首先在每一個(gè)指標(biāo)下計(jì)算各評(píng)價(jià)對(duì)象的最大取值與最小取值之差。然后剔除其中離差過小的指標(biāo)。4、評(píng)價(jià)指標(biāo)的鑒別力分析25(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)價(jià)對(duì)象為復(fù)雜非線性系統(tǒng)時(shí)，難以通過統(tǒng)計(jì)數(shù)據(jù)找出指標(biāo)間存在的相關(guān)性，可以利用神經(jīng)網(wǎng)絡(luò)的映射和泛化能力，基于神經(jīng)網(wǎng)絡(luò)的權(quán)值譜分析方法，將指標(biāo)值作為神經(jīng)網(wǎng)絡(luò)的輸入，指標(biāo)到各個(gè)隱層神經(jīng)元的平均權(quán)值即為指標(biāo)的譜值，反映指標(biāo)對(duì)輸出結(jié)果的影響，最后選取對(duì)輸出結(jié)果的相對(duì)貢獻(xiàn)率大的指標(biāo)，相對(duì)貢獻(xiàn)率小的指標(biāo)略去。

(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)264、評(píng)價(jià)指標(biāo)的鑒別力分析所謂評(píng)價(jià)指標(biāo)的鑒別力指的是評(píng)價(jià)指標(biāo)區(qū)分評(píng)價(jià)對(duì)象特征差異的能力。如果所有的評(píng)價(jià)對(duì)象在某個(gè)評(píng)價(jià)指標(biāo)上的取值高度地近似，則說明該評(píng)價(jià)指標(biāo)鑒別評(píng)價(jià)對(duì)象業(yè)績(jī)差異的能力很差，則從績(jī)效評(píng)價(jià)的目的角度考慮，這些指標(biāo)應(yīng)被剔除：

①最小均方差法首先計(jì)算各評(píng)價(jià)對(duì)象在每一個(gè)指標(biāo)上取值的均方差。然后剔除其中樣本均方差近似為零的指標(biāo)。②極小極大離差法首先在每一個(gè)指標(biāo)下計(jì)算各評(píng)價(jià)對(duì)象的最大取值與最小取值之差。然后剔除其中離差過小的指標(biāo)。4、評(píng)價(jià)指標(biāo)的鑒別力分析27③變差系數(shù)法我們把所有評(píng)價(jià)對(duì)象在某個(gè)指標(biāo)上的取值的標(biāo)準(zhǔn)差與相應(yīng)的均值之比，稱為變差系數(shù)。則變差系數(shù)越大，說明該指標(biāo)的鑒別力越強(qiáng)。我們可以把變差系數(shù)小于特定值的指標(biāo)剔除。③變差系數(shù)法285、指標(biāo)體系有效性的測(cè)度

在多個(gè)評(píng)價(jià)者采用同一指標(biāo)體系對(duì)評(píng)價(jià)對(duì)象進(jìn)行評(píng)價(jià)時(shí)，認(rèn)識(shí)的偏離程度越小,得出的評(píng)價(jià)結(jié)果差異越小，說明對(duì)該指標(biāo)體系所具備的評(píng)價(jià)作用的認(rèn)識(shí)越一致,該指標(biāo)體系的有效性越強(qiáng)。

如果多組專家采用同一組指標(biāo)的評(píng)估結(jié)果差異太大，我們就認(rèn)為該指標(biāo)體系不能有效實(shí)現(xiàn)評(píng)價(jià)的目標(biāo)，就應(yīng)該拋棄之。5、指標(biāo)體系有效性的測(cè)度

在多個(gè)評(píng)價(jià)者采用29(1)采用效度系數(shù)法測(cè)度指標(biāo)體系的有效性

效度系數(shù)法反映了在用同一指標(biāo)體系進(jìn)行評(píng)價(jià)時(shí)不同專家認(rèn)識(shí)的偏離程度,效度系數(shù)值越小,則指標(biāo)體系的有效性越高。當(dāng)指標(biāo)體系的效度系數(shù)小于0.1時(shí),則該指標(biāo)體系的有效性較高。這一方法可從多個(gè)評(píng)價(jià)者所建立的指標(biāo)體系中選取最有效的。

(1)采用效度系數(shù)法測(cè)度指標(biāo)體系的有效性

效30(2)采用結(jié)構(gòu)方程模型方法測(cè)度指標(biāo)體系有效性

當(dāng)有條件進(jìn)行抽樣問卷調(diào)查時(shí),可采用結(jié)構(gòu)方程模型來測(cè)度指標(biāo)體系有效性。結(jié)構(gòu)方程模型是一種實(shí)證分析模型方法,通過尋找變量間內(nèi)在的結(jié)構(gòu)關(guān)系,以驗(yàn)證某種結(jié)構(gòu)關(guān)系或者模型。(2)采用結(jié)構(gòu)方程模型方法測(cè)度指標(biāo)體系有效性

316、指標(biāo)體系穩(wěn)定性和可靠性的檢驗(yàn)

指標(biāo)體系的穩(wěn)定可靠性檢驗(yàn)，重在考察對(duì)某一指標(biāo)體系的多次評(píng)價(jià)結(jié)果之間的“差異度”或評(píng)價(jià)結(jié)果與理想值的“貼近度”。如采用某指標(biāo)體系得到的評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”越接近,則該指標(biāo)體系反映評(píng)價(jià)對(duì)象的能力就越強(qiáng),該指標(biāo)體系的穩(wěn)定可靠性就更高。

6、指標(biāo)體系穩(wěn)定性和可靠性的檢驗(yàn)

指標(biāo)體系的32

(1)通過穩(wěn)定性系數(shù)檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

計(jì)算s次專家評(píng)價(jià)數(shù)據(jù)與其平均值的差異程度,從而反映出對(duì)同一指標(biāo)體系s次評(píng)價(jià)數(shù)據(jù)的差異性,差異越小,則該指標(biāo)體系穩(wěn)定性越高。

(1)通過穩(wěn)定性系數(shù)檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性33(2)通過貼近度檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

由多位專家用某個(gè)指標(biāo)體系對(duì)評(píng)價(jià)對(duì)象進(jìn)行評(píng)價(jià),用貼近度反映評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”之間的接近程度,接近程度越高,貼近度越大。如果依據(jù)指標(biāo)體系所得到的評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”的貼近度大于設(shè)定的閾值,則該指標(biāo)體系具有較好的穩(wěn)定性和可靠性。

(2)通過貼近度檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

34確定出合適的指標(biāo)體系，并得到相應(yīng)的評(píng)價(jià)值之后，數(shù)據(jù)的預(yù)處理就成為最終得出評(píng)價(jià)結(jié)果之前的最后一道工序。7、數(shù)據(jù)預(yù)處理(又稱規(guī)范化)的原因（1）有些指標(biāo)的值越大越好，如科研成果數(shù)、科研經(jīng)費(fèi)等是效益型。有些指標(biāo)的值越小越好，稱作成本型。另有一些指標(biāo)值的屬性既非效益型又非成本型。例如高校的生師比值過高，學(xué)生的培養(yǎng)質(zhì)量難以保證；比值過低；教師的工作量不飽滿。這幾類指標(biāo)放在同一表中不便于直接從數(shù)值大小來判斷優(yōu)劣，因此需要對(duì)指標(biāo)數(shù)據(jù)進(jìn)行預(yù)處理，使所有指標(biāo)的取值與其優(yōu)劣的對(duì)應(yīng)關(guān)系相同。確定出合適的指標(biāo)體系，并得到相應(yīng)的評(píng)價(jià)值之后，數(shù)據(jù)35(2)通過貼近度檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

由多位專家用某個(gè)指標(biāo)體系對(duì)評(píng)價(jià)對(duì)象進(jìn)行評(píng)價(jià),用貼近度反映評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”之間的接近程度,接近程度越高,貼近度越大。如果依據(jù)指標(biāo)體系所得到的評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”的貼近度大于設(shè)定的閾值,則該指標(biāo)體系具有較好的穩(wěn)定性和可靠性。

(2)通過貼近度檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

36確定出合適的指標(biāo)體系，并得到相應(yīng)的評(píng)價(jià)值之后，數(shù)據(jù)的預(yù)處理就成為最終得出評(píng)價(jià)結(jié)果之前的最后一道工序。7、數(shù)據(jù)預(yù)處理(又稱規(guī)范化)的原因（1）有些指標(biāo)的值越大越好，如科研成果數(shù)、科研經(jīng)費(fèi)等是效益型。有些指標(biāo)的值越小越好，稱作成本型。另有一些指標(biāo)值的屬性既非效益型又非成本型。例如高校的生師比值過高，學(xué)生的培養(yǎng)質(zhì)量難以保證；比值過低；教師的工作量不飽滿。這幾類指標(biāo)放在同一表中不便于直接從數(shù)值大小來判斷優(yōu)劣，因此需要對(duì)指標(biāo)數(shù)據(jù)進(jìn)行預(yù)處理，使所有指標(biāo)的取值與其優(yōu)劣的對(duì)應(yīng)關(guān)系相同。確定出合適的指標(biāo)體系，并得到相應(yīng)的評(píng)價(jià)值之后，數(shù)據(jù)37(2)非量綱化。由于不同指標(biāo)所使用的計(jì)量單位不同，因此指標(biāo)間經(jīng)常不可公度。這就需要排除量綱的選用對(duì)評(píng)估結(jié)果的影響，這就是非量綱化，亦即設(shè)法消去(而不是簡(jiǎn)單刪去)量綱，僅用數(shù)值的大小來反映屬性值的優(yōu)劣。(2)非量綱化。38（3）歸一化。不同指標(biāo)屬性值的大小差別很大，有的指標(biāo)取值動(dòng)輒千萬，而有的指標(biāo)取值不可能超過1。因此，為使得指標(biāo)間的取值具有可比性，需要把屬性值表中的數(shù)值歸一化，亦即設(shè)法使得各指標(biāo)的取值集中于［0，1］的區(qū)間上。（3）歸一化。398、常用的數(shù)據(jù)預(yù)處理方法舉例效益型的指標(biāo)：Zij=yij/yjmax可見，變換后各評(píng)價(jià)對(duì)象關(guān)于該指標(biāo)的取值最差不為0，最佳為1。成本型的指標(biāo)：Zij=1-yij/yjmax可見，變換后各評(píng)價(jià)對(duì)象關(guān)于該指標(biāo)的取值值最佳不為1，最差為0。當(dāng)然，成本型的指標(biāo)也可以這樣規(guī)范化：Zij=/yjmin/yij這時(shí),變換后的屬性值最差不為0，最佳為1。8、常用的數(shù)據(jù)預(yù)處理方法舉例40第七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選第七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選411、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（4）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（2）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

42七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選431、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（4）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（2）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

44

（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，能較好地反映不同評(píng)價(jià)對(duì)象在財(cái)政支出績(jī)效方面的差異。（4）可靠性

所選指標(biāo)真實(shí)、可靠，能準(zhǔn)確反映實(shí)際情況。

（5）可獲得性

所選指標(biāo)為常規(guī)資料，容易得到。（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，451、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（4）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（2）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

46

（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，能較好地反映不同評(píng)價(jià)對(duì)象在財(cái)政支出績(jī)效方面的差異。（4）可靠性

所選指標(biāo)真實(shí)、可靠，能準(zhǔn)確反映實(shí)際情況。

（5）可獲得性

所選指標(biāo)為常規(guī)資料，容易得到。（3）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，47七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選七、績(jī)效評(píng)價(jià)指標(biāo)體系的篩選481、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

（1）代表性所選定的指標(biāo)應(yīng)能在某一個(gè)方面準(zhǔn)確地刻畫出評(píng)價(jià)對(duì)象的績(jī)效。（2）重要性

所選擇的指標(biāo)應(yīng)能刻畫出評(píng)價(jià)對(duì)象財(cái)政支出績(jī)效的重要特征。（3）特異性或獨(dú)立性

所選取的指標(biāo)應(yīng)能從一定角度反映某一方面的的信息，且不能被其它指標(biāo)所代替。1、選擇財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)應(yīng)遵循的基本原則

49

（4）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，能較好地反映不同評(píng)價(jià)對(duì)象在財(cái)政支出績(jī)效方面的差異。（5）可靠性

所選指標(biāo)真實(shí)、可靠，能準(zhǔn)確反映實(shí)際情況。

（6）可獲得性

所選指標(biāo)為常規(guī)資料，容易得到。（4）敏感性

所選取的指標(biāo)應(yīng)該區(qū)別力強(qiáng)，502、當(dāng)前財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)體系構(gòu)建實(shí)踐中存在的問題

（1）不能很好地解決指標(biāo)的全面性、代表性、精煉性之間的矛盾指標(biāo)體系的構(gòu)建者往往希望指標(biāo)體系能涵蓋績(jī)效評(píng)價(jià)應(yīng)涉及的方方面面,這就很容易導(dǎo)致指標(biāo)的數(shù)目過多,出現(xiàn)相關(guān)指標(biāo)、冗余指標(biāo)、重疊指標(biāo)。2、當(dāng)前財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)體系構(gòu)建實(shí)踐中存在的51

（2）對(duì)指標(biāo)體系的有效性重視不足不同的評(píng)價(jià)者基于不同的知識(shí)、經(jīng)驗(yàn)、思維,會(huì)構(gòu)建不一樣的指標(biāo)體系,究竟哪個(gè)指標(biāo)體系更科學(xué),得到的評(píng)價(jià)結(jié)論更有效,沒有客觀的標(biāo)準(zhǔn)來衡量。

（3）不重視指標(biāo)體系的可靠性和穩(wěn)定性即使采用相同的指標(biāo)體系，不同的評(píng)價(jià)專家由于對(duì)指標(biāo)的理解不同,特別是某些定性指標(biāo)易受主觀因素的影響,致使評(píng)價(jià)結(jié)果差異較大。（2）對(duì)指標(biāo)體系的有效性重視不足52針對(duì)第一個(gè)問題,需要對(duì)指標(biāo)進(jìn)行適當(dāng)?shù)募s簡(jiǎn)，以恰當(dāng)處理指標(biāo)體系的全面性與精煉性的問題。

針對(duì)第二個(gè)問題，需要對(duì)指標(biāo)體系的有效性實(shí)施科學(xué)的測(cè)度，以便形成能夠充分體現(xiàn)績(jī)效評(píng)價(jià)目的的指標(biāo)體系。

針對(duì)第三個(gè)問題，需要對(duì)不同專家的評(píng)價(jià)數(shù)據(jù)進(jìn)行差異度分析,以提高績(jī)效評(píng)價(jià)結(jié)果的穩(wěn)定性和可靠性。針對(duì)第一個(gè)問題,需要對(duì)指標(biāo)進(jìn)行適當(dāng)?shù)募s簡(jiǎn)，以恰當(dāng)533、指標(biāo)體系的約簡(jiǎn)

(1)有統(tǒng)計(jì)數(shù)據(jù)的可量化指標(biāo)體系的約簡(jiǎn)

約簡(jiǎn)的目的就是剔除區(qū)分能力弱、相關(guān)性強(qiáng)的指標(biāo)。對(duì)于量化的、有統(tǒng)計(jì)數(shù)據(jù)的指標(biāo)體系,可采用一些常規(guī)統(tǒng)計(jì)方法實(shí)施簡(jiǎn)約。例如,條件廣義方差極小法、極大不相關(guān)法、選取典型指標(biāo)法等。3、指標(biāo)體系的約簡(jiǎn)

(1)有統(tǒng)計(jì)數(shù)據(jù)的可量54用條件廣義方差極小法進(jìn)行指標(biāo)約簡(jiǎn),就是用廣義方差來反映指標(biāo)內(nèi)部的相關(guān)性。例如，假定有p個(gè)指標(biāo)，n個(gè)評(píng)價(jià)對(duì)象，各評(píng)價(jià)對(duì)象的指標(biāo)值如下所示：用條件廣義方差極小法進(jìn)行指標(biāo)約簡(jiǎn),就是用廣義方差55計(jì)算每一個(gè)指標(biāo)的均值：計(jì)算每一個(gè)指標(biāo)的方差：計(jì)算每一個(gè)指標(biāo)的均值：56計(jì)算每?jī)蓚€(gè)指標(biāo)間的協(xié)方差：進(jìn)而得到方差-協(xié)方差矩陣：計(jì)算每?jī)蓚€(gè)指標(biāo)間的協(xié)方差：57上述方差-協(xié)方差矩陣的行列式，就是所謂的廣義方差?？梢宰C明：當(dāng)廣義方差達(dá)到極大值的時(shí)候，說明p個(gè)指標(biāo)相互獨(dú)立；而當(dāng)廣義方差等于零的時(shí)候，說明p個(gè)指標(biāo)完全線性相關(guān)。因此，廣義方差的大小可以反映指標(biāo)間的相關(guān)性。我們可以剔除廣義方差較小的指標(biāo)。上述方差-協(xié)方差矩陣的行列式，就58具體方法是：將矩陣X劃分成兩部分：其前p-1列記為X1，最后一列記為X2，并用S11、S22、S12表示二者的方差及協(xié)方差，則在滿足正態(tài)分布的假定下，有X2的條件廣義方差式：若上式的值小于一個(gè)預(yù)定的水平，就刪除指標(biāo)p。依此類推，逐步刪除與其他指標(biāo)相關(guān)度較高的指標(biāo)。具體方法是：59用極大不相關(guān)法進(jìn)行指標(biāo)約簡(jiǎn),就是計(jì)算每一個(gè)指標(biāo)與其它指標(biāo)之間的線性相關(guān)程度,當(dāng)大于某臨界值時(shí),可以去掉該指標(biāo)。用典型指標(biāo)法進(jìn)行指標(biāo)約簡(jiǎn),就是先對(duì)指標(biāo)進(jìn)行聚類，然后計(jì)算每一個(gè)類中每一指標(biāo)與其它指標(biāo)的相關(guān)系數(shù)，最后選擇其中相關(guān)系數(shù)最大的指標(biāo)作為該類指標(biāo)中的典型指標(biāo)。用極大不相關(guān)法進(jìn)行指標(biāo)約簡(jiǎn),就是計(jì)算每一個(gè)指標(biāo)與其60(2)針對(duì)定量指標(biāo)和定性指標(biāo)并存的指標(biāo)體系的約簡(jiǎn)

當(dāng)指標(biāo)體系中既存在定量指標(biāo),也存在定性指標(biāo)時(shí),定量指標(biāo)的評(píng)價(jià)可以依據(jù)統(tǒng)計(jì)數(shù)據(jù),而定性指標(biāo)的評(píng)價(jià)則由專家根據(jù)知識(shí)、經(jīng)驗(yàn)來主觀評(píng)價(jià)。針對(duì)這種類型的指標(biāo)體系，可采用粗糙集方法進(jìn)行指標(biāo)約簡(jiǎn)。

(2)針對(duì)定量指標(biāo)和定性指標(biāo)并存的指標(biāo)體系的約簡(jiǎn)61運(yùn)用粗糙集進(jìn)行指標(biāo)篩選和約簡(jiǎn),有多種思路。對(duì)于指標(biāo)數(shù)量不太多的情形，可以快速約簡(jiǎn)，從空集開始，一個(gè)個(gè)地增加指標(biāo)的個(gè)數(shù)，每一次選擇增加最大分類質(zhì)量γ(X)的指標(biāo)加入當(dāng)前的指標(biāo)子集。重復(fù)這一過程直到分類質(zhì)量γ(X)達(dá)到1或等于整個(gè)指標(biāo)集的分類質(zhì)量。

運(yùn)用粗糙集進(jìn)行指標(biāo)篩選和約簡(jiǎn),有多種思路。62(3)無統(tǒng)計(jì)數(shù)據(jù)或統(tǒng)計(jì)數(shù)據(jù)非常有限的指標(biāo)體系的約簡(jiǎn)

當(dāng)指標(biāo)體系不能獲得統(tǒng)計(jì)數(shù)據(jù),如對(duì)于新建系統(tǒng)的評(píng)價(jià),或者所能獲得的統(tǒng)計(jì)數(shù)據(jù)非常有限,需要依靠專家知識(shí)來進(jìn)行指標(biāo)的篩選和約簡(jiǎn),可以采用Vague集方法。Vague集方法充分利用專家知識(shí),表示專家支持、反對(duì)和棄權(quán)的情況,且方法簡(jiǎn)單易行。

(3)無統(tǒng)計(jì)數(shù)據(jù)或統(tǒng)計(jì)數(shù)據(jù)非常有限的指標(biāo)體系的約63(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)價(jià)對(duì)象為復(fù)雜非線性系統(tǒng)時(shí)，難以通過統(tǒng)計(jì)數(shù)據(jù)找出指標(biāo)間存在的相關(guān)性，可以利用神經(jīng)網(wǎng)絡(luò)的映射和泛化能力，基于神經(jīng)網(wǎng)絡(luò)的權(quán)值譜分析方法，將指標(biāo)值作為神經(jīng)網(wǎng)絡(luò)的輸入，指標(biāo)到各個(gè)隱層神經(jīng)元的平均權(quán)值即為指標(biāo)的譜值，反映指標(biāo)對(duì)輸出結(jié)果的影響，最后選取對(duì)輸出結(jié)果的相對(duì)貢獻(xiàn)率大的指標(biāo)，相對(duì)貢獻(xiàn)率小的指標(biāo)略去。

(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)644、評(píng)價(jià)指標(biāo)的鑒別力分析所謂評(píng)價(jià)指標(biāo)的鑒別力指的是評(píng)價(jià)指標(biāo)區(qū)分評(píng)價(jià)對(duì)象特征差異的能力。如果所有的評(píng)價(jià)對(duì)象在某個(gè)評(píng)價(jià)指標(biāo)上的取值高度地近似，則說明該評(píng)價(jià)指標(biāo)鑒別評(píng)價(jià)對(duì)象業(yè)績(jī)差異的能力很差，則從績(jī)效評(píng)價(jià)的目的角度考慮，這些指標(biāo)應(yīng)被剔除：

①最小均方差法首先計(jì)算各評(píng)價(jià)對(duì)象在每一個(gè)指標(biāo)上取值的均方差。然后剔除其中樣本均方差近似為零的指標(biāo)。②極小極大離差法首先在每一個(gè)指標(biāo)下計(jì)算各評(píng)價(jià)對(duì)象的最大取值與最小取值之差。然后剔除其中離差過小的指標(biāo)。4、評(píng)價(jià)指標(biāo)的鑒別力分析65(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)價(jià)對(duì)象為復(fù)雜非線性系統(tǒng)時(shí)，難以通過統(tǒng)計(jì)數(shù)據(jù)找出指標(biāo)間存在的相關(guān)性，可以利用神經(jīng)網(wǎng)絡(luò)的映射和泛化能力，基于神經(jīng)網(wǎng)絡(luò)的權(quán)值譜分析方法，將指標(biāo)值作為神經(jīng)網(wǎng)絡(luò)的輸入，指標(biāo)到各個(gè)隱層神經(jīng)元的平均權(quán)值即為指標(biāo)的譜值，反映指標(biāo)對(duì)輸出結(jié)果的影響，最后選取對(duì)輸出結(jié)果的相對(duì)貢獻(xiàn)率大的指標(biāo)，相對(duì)貢獻(xiàn)率小的指標(biāo)略去。

(4)復(fù)雜非線性系統(tǒng)的指標(biāo)體系的約簡(jiǎn)

當(dāng)評(píng)664、評(píng)價(jià)指標(biāo)的鑒別力分析所謂評(píng)價(jià)指標(biāo)的鑒別力指的是評(píng)價(jià)指標(biāo)區(qū)分評(píng)價(jià)對(duì)象特征差異的能力。如果所有的評(píng)價(jià)對(duì)象在某個(gè)評(píng)價(jià)指標(biāo)上的取值高度地近似，則說明該評(píng)價(jià)指標(biāo)鑒別評(píng)價(jià)對(duì)象業(yè)績(jī)差異的能力很差，則從績(jī)效評(píng)價(jià)的目的角度考慮，這些指標(biāo)應(yīng)被剔除：

①最小均方差法首先計(jì)算各評(píng)價(jià)對(duì)象在每一個(gè)指標(biāo)上取值的均方差。然后剔除其中樣本均方差近似為零的指標(biāo)。②極小極大離差法首先在每一個(gè)指標(biāo)下計(jì)算各評(píng)價(jià)對(duì)象的最大取值與最小取值之差。然后剔除其中離差過小的指標(biāo)。4、評(píng)價(jià)指標(biāo)的鑒別力分析67③變差系數(shù)法我們把所有評(píng)價(jià)對(duì)象在某個(gè)指標(biāo)上的取值的標(biāo)準(zhǔn)差與相應(yīng)的均值之比，稱為變差系數(shù)。則變差系數(shù)越大，說明該指標(biāo)的鑒別力越強(qiáng)。我們可以把變差系數(shù)小于特定值的指標(biāo)剔除。③變差系數(shù)法685、指標(biāo)體系有效性的測(cè)度

在多個(gè)評(píng)價(jià)者采用同一指標(biāo)體系對(duì)評(píng)價(jià)對(duì)象進(jìn)行評(píng)價(jià)時(shí)，認(rèn)識(shí)的偏離程度越小,得出的評(píng)價(jià)結(jié)果差異越小，說明對(duì)該指標(biāo)體系所具備的評(píng)價(jià)作用的認(rèn)識(shí)越一致,該指標(biāo)體系的有效性越強(qiáng)。

如果多組專家采用同一組指標(biāo)的評(píng)估結(jié)果差異太大，我們就認(rèn)為該指標(biāo)體系不能有效實(shí)現(xiàn)評(píng)價(jià)的目標(biāo)，就應(yīng)該拋棄之。5、指標(biāo)體系有效性的測(cè)度

在多個(gè)評(píng)價(jià)者采用69(1)采用效度系數(shù)法測(cè)度指標(biāo)體系的有效性

效度系數(shù)法反映了在用同一指標(biāo)體系進(jìn)行評(píng)價(jià)時(shí)不同專家認(rèn)識(shí)的偏離程度,效度系數(shù)值越小,則指標(biāo)體系的有效性越高。當(dāng)指標(biāo)體系的效度系數(shù)小于0.1時(shí),則該指標(biāo)體系的有效性較高。這一方法可從多個(gè)評(píng)價(jià)者所建立的指標(biāo)體系中選取最有效的。

(1)采用效度系數(shù)法測(cè)度指標(biāo)體系的有效性

效70(2)采用結(jié)構(gòu)方程模型方法測(cè)度指標(biāo)體系有效性

當(dāng)有條件進(jìn)行抽樣問卷調(diào)查時(shí),可采用結(jié)構(gòu)方程模型來測(cè)度指標(biāo)體系有效性。結(jié)構(gòu)方程模型是一種實(shí)證分析模型方法,通過尋找變量間內(nèi)在的結(jié)構(gòu)關(guān)系,以驗(yàn)證某種結(jié)構(gòu)關(guān)系或者模型。(2)采用結(jié)構(gòu)方程模型方法測(cè)度指標(biāo)體系有效性

716、指標(biāo)體系穩(wěn)定性和可靠性的檢驗(yàn)

指標(biāo)體系的穩(wěn)定可靠性檢驗(yàn)，重在考察對(duì)某一指標(biāo)體系的多次評(píng)價(jià)結(jié)果之間的“差異度”或評(píng)價(jià)結(jié)果與理想值的“貼近度”。如采用某指標(biāo)體系得到的評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”越接近,則該指標(biāo)體系反映評(píng)價(jià)對(duì)象的能力就越強(qiáng),該指標(biāo)體系的穩(wěn)定可靠性就更高。

6、指標(biāo)體系穩(wěn)定性和可靠性的檢驗(yàn)

指標(biāo)體系的72

(1)通過穩(wěn)定性系數(shù)檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

計(jì)算s次專家評(píng)價(jià)數(shù)據(jù)與其平均值的差異程度,從而反映出對(duì)同一指標(biāo)體系s次評(píng)價(jià)數(shù)據(jù)的差異性,差異越小,則該指標(biāo)體系穩(wěn)定性越高。

(1)通過穩(wěn)定性系數(shù)檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性73(2)通過貼近度檢驗(yàn)指標(biāo)體系的穩(wěn)定性和可靠性

由多位專家用某個(gè)指標(biāo)體系對(duì)評(píng)價(jià)對(duì)象進(jìn)行評(píng)價(jià),用貼近度反映評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”之間的接近程度,接近程度越高,貼近度越大。如果依據(jù)指標(biāo)體系所得到的評(píng)價(jià)數(shù)據(jù)與“理想數(shù)據(jù)”的貼近度大于設(shè)定的閾值,則該