美國先進(jìn)技術(shù)計(jì)劃評估實(shí)踐的特點(diǎn)與啟示

1、 美國先進(jìn)技術(shù)計(jì)劃評估實(shí)踐的特點(diǎn)與啟示 編者按：國家科技計(jì)劃改革后，為重點(diǎn)研發(fā)計(jì)劃等新型科技計(jì)劃構(gòu)建評估體系既是改革的緊迫需求，也是支撐計(jì)劃管理和決策的必要手段。本文著重介紹和分析了美國先進(jìn)技術(shù)計(jì)劃的監(jiān)測評估方法以及典型的監(jiān)測評估實(shí)踐，包括項(xiàng)目評估、監(jiān)測系統(tǒng)、經(jīng)濟(jì)社會影響評估、反事實(shí)評估等，并在此基礎(chǔ)上從評估導(dǎo)向、評估方法、評估能力建設(shè)等方面為構(gòu)建我國新型科技計(jì)劃的評估體系提出幾點(diǎn)建議。1引 言2014年，國家科技計(jì)劃管理改革啟動，國務(wù)院印發(fā)關(guān)于深化中央財(cái)政科技計(jì)劃（專項(xiàng)、基金等）管理改革的方案（國發(fā)201464號文），明確要求建立統(tǒng)一的計(jì)劃評估和監(jiān)管體系。，中共中央和國務(wù)院印發(fā)關(guān)于深化項(xiàng)目評

2、審、人才評價(jià)、機(jī)構(gòu)評估改革的意見，旨在改革科技評估活動的不良導(dǎo)向，建立具有中國特色的科技評估體系。構(gòu)建適應(yīng)改革要求的科技計(jì)劃監(jiān)測與評估體系已成為迫切需求，也是加強(qiáng)計(jì)劃管理、保障計(jì)劃實(shí)施績效的必然要求。在新時(shí)期，借鑒國外科技計(jì)劃的監(jiān)測與評估經(jīng)驗(yàn)，對于構(gòu)建我國科技計(jì)劃監(jiān)測與評估體系十分必要。美國先進(jìn)技術(shù)計(jì)劃（Advanced Technology Program，以下簡稱ATP 計(jì)劃）是政府、產(chǎn)業(yè)部門和學(xué)術(shù)界合作的聯(lián)邦研發(fā)計(jì)劃，由美國商務(wù)部標(biāo)準(zhǔn)技術(shù)研究院（NIST）管理，于1990年開始實(shí)施，2007年結(jié)束。該計(jì)劃的宗旨是通過政府與工業(yè)界分擔(dān)研發(fā)成本，資助私營部門難以獨(dú)立承擔(dān)的高風(fēng)險(xiǎn)性研發(fā)項(xiàng)目，加

3、速技術(shù)的開發(fā)和商業(yè)化，增加美國的高收入就業(yè)，帶動美國經(jīng)濟(jì)的增長和產(chǎn)業(yè)界的競爭力提升。計(jì)劃資助項(xiàng)目分布在先進(jìn)材料及化學(xué)、信息技術(shù)、電子通訊、生物技術(shù)四個(gè)領(lǐng)域。截止2007年，該計(jì)劃共支持了824個(gè)項(xiàng)目，資助總額達(dá)24億美元，直接和間接參與單位1581家，是實(shí)現(xiàn)美國技術(shù)發(fā)展戰(zhàn)略轉(zhuǎn)型的一項(xiàng)重要計(jì)劃。在ATP計(jì)劃之前，美國的軍事科技和基礎(chǔ)研究主要由聯(lián)邦政府的科研經(jīng)費(fèi)資助，產(chǎn)業(yè)界僅負(fù)責(zé)開發(fā)民用技術(shù)。這一做法一直持續(xù)到克林頓政府時(shí)期提出ATP計(jì)劃這一新的技術(shù)戰(zhàn)略和政策，強(qiáng)調(diào)讓產(chǎn)業(yè)界參與對國民經(jīng)濟(jì)增長有重大影響的技術(shù)開發(fā)計(jì)劃，并分擔(dān)研發(fā)費(fèi)用。然而，ATP計(jì)劃也備受爭議，反對者認(rèn)為政府主導(dǎo)使計(jì)劃缺乏市場導(dǎo)向，

4、合資企業(yè)抑制競爭；支持者認(rèn)為合資企業(yè)可以調(diào)和不同部門的優(yōu)勢和責(zé)任。在計(jì)劃實(shí)施的十余年期間，爭議聲音不斷，對計(jì)劃評估產(chǎn)生了前所未有的需求。相繼圍繞ATP計(jì)劃開展了類型多樣、方法各異的評估活動，尤其在計(jì)劃的長期經(jīng)濟(jì)和社會影響評估方面，開展了不少探索性工作，提出了相關(guān)評估的基本思路和框架。ATP計(jì)劃評估顯示了在政治辯論的背景下，如何運(yùn)用評估工具來回應(yīng)各方關(guān)注的問題，進(jìn)而支撐管理和決策。ATP計(jì)劃的評估實(shí)踐將科技計(jì)劃評估的理論研究和實(shí)踐活動推向高潮，在美國乃至世界范圍的科技評估發(fā)展歷程中具有重要意義，值得其他科技計(jì)劃借鑒，尤其對于政府和產(chǎn)業(yè)界共同實(shí)施的科技計(jì)劃更具參考價(jià)值。國內(nèi)研究人員對ATP計(jì)劃的資

5、助和管理進(jìn)行過較多研究，但關(guān)于評估活動的研究較少且并不全面，僅對評估程序、評估工具，以及績效評估指標(biāo)和評級系統(tǒng)進(jìn)行過零散介紹。事實(shí)上，在監(jiān)測評估方面，ATP計(jì)劃仍有許多做法值得挖掘和借鑒。此外，我國科技計(jì)劃改革后形成了國家科技重大專項(xiàng)、國家重點(diǎn)研發(fā)計(jì)劃等五大類國家科技計(jì)劃，新時(shí)期科技計(jì)劃的一大特點(diǎn)是在實(shí)施時(shí)更加強(qiáng)調(diào)政府和市場的分工與合作，這與ATP計(jì)劃的特點(diǎn)類似。因此，進(jìn)一步挖掘、歸納ATP計(jì)劃的評估經(jīng)驗(yàn)，將其借鑒到新時(shí)期國家科技計(jì)劃的監(jiān)測評估體系中具有現(xiàn)實(shí)意義。本文在系統(tǒng)梳理ATP計(jì)劃主要評估方法以及代表性實(shí)踐的基礎(chǔ)上，從評估導(dǎo)向、評估方法、評估能力建設(shè)等方面為構(gòu)建科技計(jì)劃的監(jiān)測和評估體系提

6、出建議。2ATP計(jì)劃的評估需求與評估管理2.1 評估需求ATP計(jì)劃的評估需求是多方面的，包括國會議員、國會委員會、國家審計(jì)辦公室（GAO）、總統(tǒng)執(zhí)行委員會、總統(tǒng)管理和執(zhí)行辦公室（OMB）、監(jiān)察長辦公室、媒體、智庫、工業(yè)界等都有提出。這些評估需求主要源于各方對政府支持的爭議和質(zhì)疑，即對于ATP計(jì)劃這種具有技術(shù)風(fēng)險(xiǎn)的項(xiàng)目和計(jì)劃，政府是否應(yīng)該使用納稅人的資金對其進(jìn)行支持，政府支持是否影響了企業(yè)公平公開的競爭過程，又是否能夠增加商業(yè)研發(fā)的利潤。對此，1991年的美國技術(shù)卓越法案（American Technology Preeminence Act）明確要求ATP計(jì)劃在1996年以前開展深入評估并將評

7、估結(jié)果提交給國會的每個(gè)部門以及總統(tǒng)。同時(shí)，ATP計(jì)劃也需服從政府績效與結(jié)果法案（GPRA）的要求，提交戰(zhàn)略計(jì)劃、年度績效計(jì)劃和年度績效報(bào)告。根據(jù)ATP 經(jīng)濟(jì)評估辦公室（Economic Assessment Office，以下簡稱EAO）主任的描述，ATP計(jì)劃也許是美國同類預(yù)算計(jì)劃中評估和審查最為嚴(yán)格的計(jì)劃。2.2 評估管理ATP計(jì)劃的評估活動由EAO統(tǒng)一組織和管理。EAO由經(jīng)濟(jì)學(xué)家、統(tǒng)計(jì)學(xué)家、信息專家、社會學(xué)家、商業(yè)聯(lián)絡(luò)專家，以及管理支撐人員組成，兼具組織實(shí)施相關(guān)研究和評估活動，以及就計(jì)劃執(zhí)行結(jié)果與內(nèi)外部利益相關(guān)者溝通的職能，主要負(fù)責(zé)：1）努力實(shí)現(xiàn)對ATP計(jì)劃結(jié)果的外部期望；2）將評估作為管

8、理工具，幫助計(jì)劃目標(biāo)的實(shí)現(xiàn)，提升計(jì)劃的有效性；3）研究和認(rèn)識計(jì)劃對美國創(chuàng)新體系的貢獻(xiàn)；4）開發(fā)創(chuàng)新性方法來衡量公共研發(fā)投入的影響。其具體工作包括跟蹤調(diào)查、數(shù)據(jù)收集、統(tǒng)計(jì)分析、組織政策研究、委托評估任務(wù)、開發(fā)評估和研究指南等；此外，還與美國資深經(jīng)濟(jì)學(xué)家共同開發(fā)ATP計(jì)劃的經(jīng)濟(jì)評估方法，定期召開會議討論評估結(jié)果和研究進(jìn)展，并提出建議。3ATP計(jì)劃的監(jiān)測與評估方法圖1是ATP計(jì)劃的評估通用邏輯模型，其中計(jì)劃產(chǎn)生、實(shí)施到評估結(jié)果反饋呈閉環(huán)狀態(tài)。從設(shè)定的社會目標(biāo)出發(fā)，根據(jù)國家公共政策的策略產(chǎn)生了計(jì)劃的動議和任務(wù)，進(jìn)而設(shè)計(jì)計(jì)劃實(shí)施的機(jī)制，并達(dá)到預(yù)期結(jié)果。評估環(huán)節(jié)在計(jì)劃實(shí)施過程中介入，涵蓋計(jì)劃的投入、產(chǎn)出、

9、成效和影響，評估結(jié)果反饋給計(jì)劃管理者和政策制定者。該模型是國外計(jì)劃設(shè)計(jì)與評估中使用的一項(xiàng)經(jīng)典工具，有助于各利益相關(guān)方形成有關(guān)計(jì)劃評估的共識，也是計(jì)劃監(jiān)測和評估框架設(shè)計(jì)的基礎(chǔ)。根據(jù)EAO的統(tǒng)計(jì)，在ATP計(jì)劃實(shí)施的第一個(gè)十年期間（19912000）所開展的45項(xiàng)評估實(shí)踐中共使用了81項(xiàng)評估方法。隨著年代推進(jìn)，實(shí)踐活動不斷增加，評估方法的應(yīng)用也越加豐富。在2000年前后，經(jīng)濟(jì)學(xué)模型、社會網(wǎng)絡(luò)分析等新興方法開始得到應(yīng)用。主要評估方法及應(yīng)用舉例如表1所示。4ATP計(jì)劃監(jiān)測與評估典型案例ATP計(jì)劃的評估體系包括多種類型、多種目標(biāo)的評估實(shí)踐，形成了全方位、多元化的監(jiān)測和評估體系，這些評估實(shí)踐大致可歸為微觀和

10、宏觀兩個(gè)層次。微觀層次的評估主要是圍繞項(xiàng)目的立項(xiàng)、監(jiān)測、統(tǒng)計(jì)和進(jìn)展實(shí)施，是貫穿每個(gè)項(xiàng)目始末的持續(xù)性工作，主要針對投入和產(chǎn)出信息。宏觀層次的評估主要圍繞項(xiàng)目群或整體計(jì)劃開展，主要針對成效和影響信息，具有階段性和選擇性。為了闡明計(jì)劃的宏觀成效和影響，評估人員一般會選擇某些項(xiàng)目群作為研究對象，并明確研究或評估的時(shí)間區(qū)間。4.1 微觀層次4.1.1 項(xiàng)目評估ATP計(jì)劃采取了嚴(yán)格的同行評議過程來選擇項(xiàng)目。評估小組成員包括技術(shù)專家、商業(yè)專家、經(jīng)濟(jì)專家等。衡量標(biāo)準(zhǔn)包括：項(xiàng)目對于國家科學(xué)和技術(shù)知識基礎(chǔ)的顯著貢獻(xiàn)；技術(shù)產(chǎn)生的潛在國家利益和ATP計(jì)劃的特殊貢獻(xiàn)；可能的市場化路徑和擴(kuò)散范圍；申請者克服技術(shù)和產(chǎn)品挑戰(zhàn)

11、的努力；項(xiàng)目的組織架構(gòu)、管理計(jì)劃、申請人的經(jīng)驗(yàn)、資質(zhì)和資源等。無論最終是否成功，每個(gè)完工的項(xiàng)目都要形成狀態(tài)報(bào)告（status report），該報(bào)告?zhèn)戎赜诿枋鲂⌒桶咐?，需要對每個(gè)項(xiàng)目給于04星的績效評級。其中對失敗項(xiàng)目的分析可以用于加強(qiáng)項(xiàng)目的遴選和管理。4.1.2 監(jiān)測系統(tǒng)ATP計(jì)劃的監(jiān)測系統(tǒng)是在計(jì)劃早期就建立起來的，并且在結(jié)構(gòu)、內(nèi)容和形式上不斷更新，在服務(wù)于管理的同時(shí)，也用于計(jì)劃的評估，可看作是評估體系的縮影，反映了所有具有價(jià)值的監(jiān)測與評估信息。該系統(tǒng)有兩個(gè)主要監(jiān)測數(shù)據(jù)庫，資助數(shù)據(jù)庫（award database）和商業(yè)報(bào)告系統(tǒng) （Business Reporting System，以下簡稱

12、BRS系統(tǒng)），前者主要提供項(xiàng)目描述性信息，后者則是通過電子問卷（封閉式）調(diào)查方式跟蹤獲取的項(xiàng)目商業(yè)化和經(jīng)濟(jì)目標(biāo)進(jìn)展信息，包含了4種例行性調(diào)查報(bào)告，分別是基線報(bào)告（baseline report）、年度報(bào)告（anniversary report）、結(jié)題報(bào)告（close-out report）、項(xiàng)目后期報(bào)告（postproject report）。BRS 系統(tǒng)調(diào)查的時(shí)點(diǎn)覆蓋項(xiàng)目的全周期；調(diào)查對象涉及大學(xué)和非盈利機(jī)構(gòu)、企業(yè)等不同對象；內(nèi)容覆蓋廣泛，包括研究的加速效果、參與者滿意程度、大學(xué)的角色、知識產(chǎn)權(quán)信息、社會效果、技術(shù)溢出效應(yīng)、研究合作、經(jīng)濟(jì)影響等（表2）。4.2 宏觀層次宏觀層次的評估實(shí)踐針對

13、項(xiàng)目群或某些技術(shù)展開，重點(diǎn)關(guān)注計(jì)劃產(chǎn)生的影響，主要包括經(jīng)濟(jì)影響、社會影響和反事實(shí)影響。4.2.1 經(jīng)濟(jì)影響評估經(jīng)濟(jì)影響評估是ATP計(jì)劃評估體系的重點(diǎn)工作。EAO與國家經(jīng)濟(jì)研究署的經(jīng)濟(jì)學(xué)家在ATP計(jì)劃早期就開始對溢出效應(yīng)、生產(chǎn)率等主要經(jīng)濟(jì)指標(biāo)進(jìn)行跟蹤，為后續(xù)的經(jīng)濟(jì)影響評估打下了基礎(chǔ)。以下介紹兩例經(jīng)濟(jì)影響評估的實(shí)踐案例，從中可以發(fā)現(xiàn)綜合利用上文提到的方法，能夠在有關(guān)ATP計(jì)劃宏觀結(jié)果方面獲得哪些證據(jù)。1）技術(shù)開發(fā)周期縮短帶來的經(jīng)濟(jì)效益。該案例主要基于商業(yè)報(bào)告系統(tǒng)（BRS）開展的問卷調(diào)查，對問卷調(diào)查獲得的商業(yè)信息進(jìn)行統(tǒng)計(jì)和分析，并運(yùn)用經(jīng)濟(jì)學(xué)方法將結(jié)果折算為貨幣價(jià)值。例如評估人員對28個(gè)1991年立項(xiàng)

14、的ATP項(xiàng)目（抽樣率10%）開展問卷調(diào)查。參與者將大中小型企業(yè)都包括在內(nèi)，同時(shí)涉及營利和非營利機(jī)構(gòu)。問卷要求參與者回答參與ATP計(jì)劃后技術(shù)開發(fā)周期的縮短時(shí)間，并估算由此減少的研發(fā)成本、產(chǎn)品提前進(jìn)入市場獲得的經(jīng)濟(jì)效益等。研究發(fā)現(xiàn)，大部分案例的開發(fā)周期縮短了50%，節(jié)約開發(fā)時(shí)間1年，節(jié)省研發(fā)成本一百萬數(shù)十億美元。具體而言，13%的機(jī)構(gòu)較正常周期超前1年完成，53%的機(jī)構(gòu)超前13年完成，7%的機(jī)構(gòu)提前3年以上完成。2）產(chǎn)品質(zhì)量提高對國家經(jīng)濟(jì)的影響。該案例通過設(shè)計(jì)宏觀經(jīng)濟(jì)產(chǎn)業(yè)模型對產(chǎn)品質(zhì)量提高帶來的經(jīng)濟(jì)影響進(jìn)行估算，涉及的經(jīng)濟(jì)學(xué)參數(shù)包括凈現(xiàn)值、內(nèi)部收益率和效益成本比。以ATP計(jì)劃資助的控制自動制造過程

15、研究為例，評估人員要求企業(yè)回答和估算新開發(fā)技術(shù)對生產(chǎn)過程的直接影響（主要涉及自動化制造商采用新技術(shù)的比率以及產(chǎn)品質(zhì)量提高帶來的銷售增加），進(jìn)而運(yùn)用經(jīng)濟(jì)學(xué)模型估算對國家經(jīng)濟(jì)的影響。結(jié)果顯示，五年內(nèi)工業(yè)產(chǎn)出增加了87億美元，并且增加了16萬個(gè)工作崗位。4.2.2 社會影響評估社會影響包括參與企業(yè)的回報(bào)和公共回報(bào)等，公共回報(bào)又包括知識、網(wǎng)絡(luò)、市場溢出效應(yīng)，以及其他的間接收益。盡管衡量社會收益非常困難，EAO還是與各界人士共同就如何評估社會影響開展了一系列探索性工作。例如針對一系列技術(shù)和項(xiàng)目進(jìn)行投入產(chǎn)出分析，包括制冷技術(shù)和流動控制加工技術(shù)的案例研究等。在衡量知識的溢出效應(yīng)方面，基于項(xiàng)目結(jié)題報(bào)告，設(shè)計(jì)了

16、專利樹來分析專利引用情況。除此之外，還委托實(shí)施了一項(xiàng)利用社會網(wǎng)絡(luò)分析來衡量知識擴(kuò)散效果的研究。在市場溢出效應(yīng)方面，對于50個(gè)已經(jīng)完工的項(xiàng)目，收集項(xiàng)目產(chǎn)業(yè)化情況來跟蹤新技術(shù)從產(chǎn)生到產(chǎn)業(yè)化的全過程。以下介紹知識溢出效應(yīng)研究和投入社會收益分析兩個(gè)案例。1）知識溢出效應(yīng)研究。評估人員通過對專利引用現(xiàn)象進(jìn)行分析，揭示大學(xué)、公司、實(shí)驗(yàn)室之間的研究網(wǎng)絡(luò)，進(jìn)而研究知識的溢出效應(yīng)。評估人員對微電子制造系統(tǒng)和光學(xué)記錄兩種新技術(shù)的研究網(wǎng)絡(luò)圖譜進(jìn)行研究發(fā)現(xiàn)，美國和日本是微電子制造系統(tǒng)溢出效應(yīng)的主要來源和接受者。舊金山、洛杉磯和波士頓地區(qū)是微電子制造系統(tǒng)在美國的主要來源和接受者，技術(shù)擴(kuò)散主要的推動者是麻省理工學(xué)院。光學(xué)

17、記錄技術(shù)研發(fā)網(wǎng)絡(luò)的主要成員是美國企業(yè)，其中兩家是受ATP計(jì)劃資助的合資企業(yè)。這兩家企業(yè)加入了國家存儲產(chǎn)業(yè)聯(lián)盟，最終聯(lián)盟中的成員和大學(xué)、政府實(shí)驗(yàn)室都在光學(xué)記錄技術(shù)研發(fā)網(wǎng)絡(luò)中受益。國家存儲產(chǎn)業(yè)聯(lián)盟中的核心公立研究機(jī)構(gòu)通過參與ATP計(jì)劃，形成了促進(jìn)溢出效應(yīng)的重要機(jī)制。2）投入社會收益分析。投入收益分析是典型的定量研究方法，將其用于衡量社會收益的具體做法是將社會收益折算為貨幣價(jià)值，再與計(jì)劃的投入值進(jìn)行比較。研究人員對40個(gè)ATP項(xiàng)目的社會影響進(jìn)行研究發(fā)現(xiàn)，19992004年間，其凈社會收益約為180億美元；在此期間，ATP計(jì)劃僅為項(xiàng)目投入了20億美元，投入產(chǎn)出收益是顯著的。另一個(gè)典型的案例是非晶硅探測

18、器低成本制造技術(shù)。該技術(shù)研發(fā)項(xiàng)目是由ATP計(jì)劃于1995年資助的。2003年，基于該制造技術(shù)的數(shù)字化X射線照相技術(shù)得到使用，降低了25%的制造成本。該項(xiàng)目的社會收益表現(xiàn)為提高診療率、避免不必要的醫(yī)療程序、提高乳腺癌的診斷率、降低病人的輻射，以及減少診療時(shí)間等。將這些社會收益折算為貨幣價(jià)值發(fā)現(xiàn)，在每年330萬例乳腺檢查和680萬例胸部X射線檢查中，ATP計(jì)劃每投入1美元，就會收到125193美元不等的社會收益。4.2.3 反事實(shí)影響評估反事實(shí)影響評估采用對照組的方式，剝離其他因素對結(jié)果的影響，有助于解決評估歸因的問題，可以了解政策實(shí)施的實(shí)際效果，但在科技計(jì)劃評估中很少使用。ATP計(jì)劃在科技計(jì)劃的

19、反事實(shí)影響評估方面做出了開創(chuàng)性的工作，分別在1998、2000和2002年對申請者進(jìn)行調(diào)查，將項(xiàng)目申請成功者與失敗者進(jìn)行比較，開展了反事實(shí)評估。其中，國會委托國家審計(jì)辦公室（GAO）對ATP計(jì)劃開展的反事實(shí)評估中邀請了89位ATP計(jì)劃的參與者以及39位未參與者參加評估。這39位未參與者具有高度的科學(xué)技術(shù)水平，也有很強(qiáng)的技術(shù)和商業(yè)特質(zhì)，符合計(jì)劃資助的標(biāo)準(zhǔn)但未獲得計(jì)劃資助，他們成為了對照組。128位受調(diào)查者接受了電話問卷調(diào)查。問卷包括76項(xiàng)內(nèi)容，涉及在申請計(jì)劃前的努力，被資助與否是否會影響項(xiàng)目的繼續(xù)執(zhí)行等等。未資助者還被問及他們的項(xiàng)目未被資助后的命運(yùn)。研究人員將項(xiàng)目組和對照組的回答進(jìn)行比較發(fā)現(xiàn)，未

20、受資助的項(xiàng)目有41%不再執(zhí)行，40%的以較小規(guī)模進(jìn)行，4/5的報(bào)告顯示項(xiàng)目的規(guī)模降低到預(yù)期的40%。54%的受資助者預(yù)計(jì)耗時(shí)四年或者更長的時(shí)間用于研發(fā)項(xiàng)目，而在未受資助者中的這一比例為1/3。幾乎所有繼續(xù)實(shí)施項(xiàng)目的未受資助者都調(diào)整了項(xiàng)目周期，實(shí)際實(shí)施周期晚于他們預(yù)計(jì)的時(shí)間周期。在許多案例中，ATP項(xiàng)目沒有得到私人領(lǐng)域資金的支持。63%的申請者在申請ATP計(jì)劃以前沒有嘗試申請其他渠道的資金。那些試圖尋找其他資金支持的申請者則花費(fèi)了很長時(shí)間，也嘗試了多種渠道。7位申請者拒絕了私人領(lǐng)域的資助，因?yàn)樗饺速Y助不能滿足項(xiàng)目的要求。在45位嘗試申請其他資金的申請者中，大約一半人因項(xiàng)目風(fēng)險(xiǎn)過大或者屬于競爭前項(xiàng)

21、目而不被資助。證據(jù)顯示，ATP計(jì)劃成功將資金瞄準(zhǔn)在那些具有高技術(shù)風(fēng)險(xiǎn)和長時(shí)間周期的項(xiàng)目上，而這些項(xiàng)目正是私人領(lǐng)域難以獨(dú)立資助的。5ATP計(jì)劃監(jiān)測評估實(shí)踐的啟示本文介紹了美國ATP計(jì)劃的典型評估方法和代表性評估實(shí)踐。雖然中美兩國國情不同，但ATP計(jì)劃與改革后我國的科技計(jì)劃具有共性特點(diǎn)。首先，二者的宗旨都是通過支持研發(fā)實(shí)現(xiàn)國家公共利益，促進(jìn)技術(shù)進(jìn)步和經(jīng)濟(jì)社會發(fā)展，這是公共支出研發(fā)活動的共性特征。其次，在實(shí)施方式上，ATP計(jì)劃以政府與產(chǎn)業(yè)界分擔(dān)研發(fā)成本的方式實(shí)施，通過技術(shù)開發(fā)帶動美國的經(jīng)濟(jì)發(fā)展。隨著市場化進(jìn)程推進(jìn)，新時(shí)期我國科技計(jì)劃的設(shè)計(jì)也凸顯了政府與產(chǎn)業(yè)界合作的特色，采取政府和實(shí)施機(jī)構(gòu)分擔(dān)成本的方

22、式。第三，在計(jì)劃導(dǎo)向方面，ATP計(jì)劃接近于市場端，支持面向應(yīng)用和市場的科研活動，以國家經(jīng)濟(jì)利益為導(dǎo)向，與我國科技重大專項(xiàng)、重點(diǎn)研發(fā)計(jì)劃等面向應(yīng)用和市場的計(jì)劃設(shè)計(jì)類似。第四，在目標(biāo)實(shí)現(xiàn)方面，計(jì)劃目標(biāo)的實(shí)現(xiàn)都需要較長的時(shí)間周期，具有復(fù)雜的路徑和影響因素?；谝陨蠋c(diǎn)，ATP計(jì)劃的評估實(shí)踐可以為構(gòu)建我國科技計(jì)劃的監(jiān)測評估體系提供借鑒。當(dāng)前，我國科技計(jì)劃的監(jiān)測與評估活動更多沿用了以往計(jì)劃評估的傳統(tǒng)，以微觀層次的項(xiàng)目立項(xiàng)、驗(yàn)收等為主；宏觀層次的監(jiān)測與評估活動正處于探索中，例如重點(diǎn)研發(fā)計(jì)劃重點(diǎn)專項(xiàng)的年度監(jiān)測、專項(xiàng)立項(xiàng)指南的評估活動?？傮w而言，科技計(jì)劃宏觀層次的評估活動較少，計(jì)劃的成果和影響體現(xiàn)不足，監(jiān)測評

23、估活動對計(jì)劃管理的支撐有限。從這一角度，ATP計(jì)劃通過多樣化監(jiān)測評估工具支撐管理和決策的做法值得借鑒。5.1 樹立良好的科技評估導(dǎo)向，中共中央、國務(wù)院印發(fā)了關(guān)于深化項(xiàng)目評審、人才評價(jià)、機(jī)構(gòu)評估改革的意見，旨在改革科研項(xiàng)目評審、人才評價(jià)、機(jī)構(gòu)評估中存在的問題。文件要求構(gòu)建科學(xué)、規(guī)范、高效、誠信的科技評價(jià)體系，發(fā)揮好評價(jià)指揮棒和風(fēng)向標(biāo)作用，形成中國特色科技評價(jià)體系。長期以來，在我國的科技評估活動中，過度強(qiáng)調(diào)論文、專利等微觀評估指標(biāo)，并將評估結(jié)果與獎勵(lì)掛鉤，形成了不良的評估導(dǎo)向，忽視了評估在決策和管理中的重要作用。“三評”改革有利于糾正不良做法，引導(dǎo)健康的評估導(dǎo)向。ATP計(jì)劃的評估實(shí)踐展示了評估活動

24、支撐決策和管理的經(jīng)驗(yàn)，在樹立評估導(dǎo)向方面值得借鑒。首先，ATP計(jì)劃運(yùn)用大量的評估信息來說明計(jì)劃的效果，支持利益相關(guān)方的辯論，為支撐計(jì)劃經(jīng)費(fèi)撥付和管理改進(jìn)提供了依據(jù)；其次，ATP 計(jì)劃將微觀評估和宏觀評估并重，以多樣化評估實(shí)現(xiàn)不同的目的，如利用同行評議來選擇項(xiàng)目，采用經(jīng)濟(jì)學(xué)方法來分析計(jì)劃影響等，體現(xiàn)了評估的科學(xué)性，而不是“一刀切”式地運(yùn)用一套指標(biāo)和方法來回答所有問題。第三，評估在計(jì)劃、政府、公眾之間建立起溝通的橋梁，滿足國會、媒體、公眾、科學(xué)界等不同對象的評估需求，發(fā)揮了監(jiān)督作用。建議我國科技界在“三評”改革引導(dǎo)下，將科技評估活動的關(guān)注點(diǎn)從微觀層次向宏觀層次擴(kuò)展，更好地發(fā)揮評估在揭示效果、支撐決

25、策和改進(jìn)管理方面的作用，淡化排名獎勵(lì)的功能。此外，建議評估人員采取多方法和多角度的分類評估策略，提升評估結(jié)果的科學(xué)性和準(zhǔn)確性。5.2 建立定量和定性并重的監(jiān)測系統(tǒng)ATP計(jì)劃的評估活動依賴于其強(qiáng)大的監(jiān)測系統(tǒng)。該監(jiān)測系統(tǒng)不僅涵蓋定量、客觀的數(shù)據(jù)，還將觀點(diǎn)、案例等定性信息納入其中。監(jiān)測從計(jì)劃初期嵌入，覆蓋項(xiàng)目和計(jì)劃的全周期，甚至在計(jì)劃結(jié)束后依然定期搜集信息用于分析。監(jiān)測活動具有比較明確的目標(biāo)，針對不同的對象設(shè)計(jì)了不同的調(diào)查方案，滿足不同評估活動的需求，導(dǎo)向性較強(qiáng)。詳盡和實(shí)時(shí)的監(jiān)測系統(tǒng)能夠及時(shí)反饋計(jì)劃信息，幫助管理改進(jìn)和決策調(diào)整，也為評估活動提供了堅(jiān)實(shí)的基礎(chǔ)。我國的科技計(jì)劃同樣具有長周期、復(fù)雜性等特點(diǎn)

26、，計(jì)劃的效果需要較長周期呈現(xiàn)。而高質(zhì)量的評估活動依賴于扎實(shí)的監(jiān)測和調(diào)查活動。建議管理部門在科技計(jì)劃論證時(shí)同步考慮設(shè)置核心監(jiān)測指標(biāo)，不僅包括基礎(chǔ)管理指標(biāo)，如目標(biāo)、經(jīng)費(fèi)、人員等；還包括調(diào)查性指標(biāo)，特別是面向市場的指標(biāo)，如應(yīng)用情況、銷售收入、合作網(wǎng)絡(luò)、產(chǎn)業(yè)化、增加就業(yè)、用戶反饋等。組織專業(yè)評估人員根據(jù)計(jì)劃評估的需求，設(shè)計(jì)定量和定性監(jiān)測指標(biāo)，定期形成監(jiān)測報(bào)告。在計(jì)劃執(zhí)行過程中，根據(jù)需求調(diào)整計(jì)劃的監(jiān)測體系，及時(shí)將有價(jià)值的監(jiān)測需求嵌入系統(tǒng)。5.3 重視經(jīng)濟(jì)和社會影響的監(jiān)測與評估科技計(jì)劃改革后，五大類科技計(jì)劃是國家公共研發(fā)投入的主戰(zhàn)場，投入數(shù)額巨大，社會關(guān)注度高，影響廣泛。針對重點(diǎn)研發(fā)計(jì)劃這類面向終端市場和用戶的科技計(jì)劃，評估活動除了展現(xiàn)科技創(chuàng)新的進(jìn)展，更應(yīng)該說明計(jì)劃對國家經(jīng)濟(jì)發(fā)展和社會進(jìn)步的貢獻(xiàn)。長期以來，科技評估唯專利和論文為標(biāo)準(zhǔn)的做