麗水市企業(yè)科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系構(gòu)建及應(yīng)用研究*

章 莉，孟月志

（1.麗水市科技發(fā)展研究中心，浙江 麗水323000；2.麗水市科技創(chuàng)新服務(wù)中心，浙江 麗水323000）

隨著黨的十八大明確提出要堅(jiān)持走中國(guó)特色自主創(chuàng)新道路、實(shí)施創(chuàng)新驅(qū)動(dòng)發(fā)展戰(zhàn)略以來(lái)，科技創(chuàng)新逐漸擺在國(guó)家發(fā)展的核心位置，而企業(yè)作為自主創(chuàng)新的主體，企業(yè)科技項(xiàng)目的重要性不言而喻。2018 年，全國(guó)企業(yè)研發(fā)經(jīng)費(fèi)支出15233.7 億元，比上年增長(zhǎng)11.5%，占全社會(huì)研發(fā)經(jīng)費(fèi)支出的比重高達(dá)77.4%?？蒲薪?jīng)費(fèi)投入力度不斷加大，對(duì)企業(yè)研發(fā)項(xiàng)目的補(bǔ)助也在逐年增加。企業(yè)科技項(xiàng)目績(jī)效評(píng)價(jià)作為科技項(xiàng)目管理的重要環(huán)節(jié)，不僅有助于提高財(cái)政資金使用效益，更可以為科技管理部門(mén)對(duì)于后續(xù)支持立項(xiàng)、撥款等決策提供一定的參考依據(jù)。

1 國(guó)內(nèi)外科技項(xiàng)目績(jī)效評(píng)估發(fā)展現(xiàn)狀分析

關(guān)于科技項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系的構(gòu)建，國(guó)內(nèi)外學(xué)者主要是從整體上研究財(cái)政支出績(jī)效評(píng)價(jià)指標(biāo)體系，并提出針對(duì)不同對(duì)象建立績(jī)效評(píng)價(jià)指標(biāo)體系及評(píng)價(jià)方法。肖利認(rèn)為科技項(xiàng)目的產(chǎn)生是以科技活動(dòng)為基礎(chǔ)，同樣具有多樣性，因此要評(píng)價(jià)科技項(xiàng)目，必須采取先分類再評(píng)價(jià)的方法，分類原則遵循同類型可比、不同階段分類及價(jià)值導(dǎo)向分類[1]。張軍果等基于科技項(xiàng)目后評(píng)價(jià)視角分別給出了基礎(chǔ)研究、應(yīng)用研究、試驗(yàn)發(fā)展和研發(fā)成果轉(zhuǎn)化四類項(xiàng)目的績(jī)效評(píng)估體系[2]。張小菁將地方科技計(jì)劃項(xiàng)目劃分為技術(shù)開(kāi)發(fā)類和科技支撐類，并從效益和管理兩個(gè)方面構(gòu)建了績(jī)效評(píng)價(jià)指標(biāo)體系和評(píng)價(jià)模型[3]。田時(shí)中等提出從財(cái)政資金資助的項(xiàng)目使用單位進(jìn)行分類，構(gòu)建財(cái)政支持企業(yè)項(xiàng)目和財(cái)政支持事業(yè)單位項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系。

關(guān)于科技項(xiàng)目后評(píng)價(jià)，國(guó)內(nèi)外學(xué)者研究方向主要是評(píng)價(jià)科技項(xiàng)目績(jī)效，并根據(jù)績(jī)效評(píng)價(jià)結(jié)果對(duì)各個(gè)項(xiàng)目進(jìn)行橫向?qū)Ρ取ｊ悋?guó)偉綜合利用同行評(píng)議法、層次分析法、對(duì)比法等后評(píng)估方法建立了一套包含技術(shù)價(jià)值、綜合效益、人才培養(yǎng)、科技管理四個(gè)一級(jí)指標(biāo)和若干二級(jí)指標(biāo)、三級(jí)指標(biāo)的后評(píng)估指標(biāo)體系。曾立波等結(jié)合研發(fā)目的與成果特點(diǎn)，將管道科技項(xiàng)目分為基礎(chǔ)與超前類、安全保障類、一般應(yīng)用類、產(chǎn)品類、經(jīng)濟(jì)信息與標(biāo)準(zhǔn)類5 類，采用層次分析法，結(jié)合專家評(píng)分與技術(shù)成熟度，建立后評(píng)價(jià)指標(biāo)體系。

2 企業(yè)科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系構(gòu)建

2.1 指標(biāo)體系構(gòu)建原則

（1）系統(tǒng)性原則。評(píng)價(jià)指標(biāo)應(yīng)能從系統(tǒng)的角度，綜合地反映科技項(xiàng)目績(jī)效的整體情況，既要能反映直接效果，又要能反映間接效果，以保證綜合評(píng)價(jià)的全面性。評(píng)價(jià)指標(biāo)應(yīng)構(gòu)成有一定聯(lián)系的若干層次，保證整個(gè)指標(biāo)體系具有較強(qiáng)的系統(tǒng)性。（2）科學(xué)性原則。評(píng)價(jià)指標(biāo)體系應(yīng)該能客觀真實(shí)地反映出科技項(xiàng)目所帶來(lái)的各方面影響程度和評(píng)價(jià)的目標(biāo)，不能憑空設(shè)計(jì)。（3）導(dǎo)向性原則?？萍加?jì)劃項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)系統(tǒng)要貫徹國(guó)家、省、市有關(guān)政策，在財(cái)政資金方面應(yīng)發(fā)揮宏觀調(diào)控的導(dǎo)向性作用。（4）定性定量相結(jié)合原則。在實(shí)際運(yùn)用中，定性指標(biāo)和定量指標(biāo)都不是完美的，基本都需要將定性指標(biāo)和定量指標(biāo)結(jié)合起來(lái)用。一般來(lái)說(shuō)，都是先用定性指標(biāo)大致判斷對(duì)象的總體情況，然后再根據(jù)定量指標(biāo)對(duì)定性評(píng)價(jià)的方法進(jìn)行驗(yàn)證，從而得到較為客觀準(zhǔn)確的評(píng)價(jià)結(jié)果。（5）可操作性原則?？萍柬?xiàng)目管理是一項(xiàng)較為日常且頻繁開(kāi)展的科技管理活動(dòng)，科技項(xiàng)目績(jī)效評(píng)價(jià)又是科技管理的重要內(nèi)容之一。為了保證科技項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系的實(shí)用性及適用性，評(píng)價(jià)指標(biāo)體系既要做到簡(jiǎn)繁適中，計(jì)算方法簡(jiǎn)便易行，也要保證所需的數(shù)據(jù)易于采集，數(shù)據(jù)獲得成本不高等，方便日常長(zhǎng)期開(kāi)展。

2.2 構(gòu)造指標(biāo)體系

在篩選評(píng)級(jí)指標(biāo)時(shí)，既要注意指標(biāo)的可行性，還要分析各個(gè)指標(biāo)之間的關(guān)系，注重指標(biāo)的代表性。指標(biāo)體系的構(gòu)造過(guò)程可分為評(píng)價(jià)指標(biāo)的初選和指標(biāo)體系的完善兩個(gè)階段。指標(biāo)體系的初選主要是文獻(xiàn)查閱法，通過(guò)查閱文獻(xiàn)資料了解各地的科技計(jì)劃項(xiàng)目后評(píng)價(jià)指標(biāo)體系，遵照指標(biāo)體系構(gòu)建的幾大原則，主觀初步確定指標(biāo)體系。指標(biāo)體系的完善主要是針對(duì)初選指標(biāo)可能存在一定的主觀偏頗，在初選指標(biāo)的基礎(chǔ)上通過(guò)一定的方法進(jìn)一步完善指標(biāo)體系，保證其科學(xué)性。本文采用德?tīng)柗品▽?duì)初步擬定的指標(biāo)體系進(jìn)行匿名評(píng)議。

2.3 指標(biāo)權(quán)重的確定

對(duì)于科技項(xiàng)目績(jī)效評(píng)價(jià)的方法，目前較有代表性的方法有層次分析法、德?tīng)柗品?、主成分分析法、模糊綜合評(píng)價(jià)法等，其中影響最大、應(yīng)用最多的是層次分析法。層次分析法是一種定性和定量相結(jié)合、具備系統(tǒng)化和層次化的分析方法。它適用于難以用定量指標(biāo)進(jìn)行分析的復(fù)雜問(wèn)題，并且具有可靠度較高、誤差較小的優(yōu)點(diǎn)，是一種行之有效的確定指標(biāo)權(quán)重系數(shù)的方法。但是層次分析法受主觀因素影響較大，并且評(píng)價(jià)工作量和評(píng)價(jià)準(zhǔn)確性較易受評(píng)價(jià)對(duì)象數(shù)量影響。為了使指標(biāo)權(quán)重更加科學(xué)合理，本文在構(gòu)建評(píng)估指標(biāo)體系的基礎(chǔ)上，采用層次分析法（AHP）和德?tīng)柗品ㄟM(jìn)行評(píng)價(jià)指標(biāo)權(quán)重的計(jì)算。先由專家對(duì)指標(biāo)體系中各個(gè)指標(biāo)的重要性進(jìn)行排序，再行利用層次分析法（AHP），形成判斷矩陣，計(jì)算各層指標(biāo)的權(quán)重集，并進(jìn)行一致性檢驗(yàn)CI＜0.1，確定指標(biāo)權(quán)重。

2.4 指標(biāo)評(píng)分標(biāo)準(zhǔn)的確定

評(píng)價(jià)指標(biāo)評(píng)分標(biāo)準(zhǔn)作為評(píng)判依據(jù)，應(yīng)確保客觀性、公正性和易操作性。本文的評(píng)分標(biāo)準(zhǔn)以幾年來(lái)申報(bào)重點(diǎn)研發(fā)項(xiàng)目的企業(yè)或地區(qū)平均水平為基準(zhǔn)，參考浙江省麗水市地方標(biāo)準(zhǔn)《科技項(xiàng)目績(jī)效評(píng)價(jià)規(guī)范》對(duì)各指標(biāo)的指標(biāo)區(qū)間進(jìn)行標(biāo)度。

企業(yè)科技項(xiàng)目注重的是新產(chǎn)品、新技術(shù)、新工藝的開(kāi)發(fā)研究，通過(guò)德?tīng)柗品?，最終將企業(yè)科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系分為以下三個(gè)部分。一是項(xiàng)目成果，主要包括論文或?qū)Ｖ?、知識(shí)產(chǎn)權(quán)、項(xiàng)目獲獎(jiǎng)情況。二是項(xiàng)目綜合效益，主要包括已獲直接經(jīng)濟(jì)效益、成果轉(zhuǎn)化應(yīng)用效果、人才培養(yǎng)、社會(huì)效益、帶動(dòng)后續(xù)資金投入。三是技術(shù)價(jià)值，主要包含技術(shù)水平、技術(shù)推廣情況。

由于績(jī)效評(píng)價(jià)指標(biāo)體系存在著半量化指標(biāo)和定性指標(biāo)，對(duì)于這些指標(biāo)，需要設(shè)置一定的量化數(shù)據(jù)幫助專家更科學(xué)客觀地為這些指標(biāo)評(píng)價(jià)打分。項(xiàng)目后評(píng)價(jià)針對(duì)的是驗(yàn)收后1-3 年的項(xiàng)目，各個(gè)指標(biāo)我們給出標(biāo)度設(shè)計(jì)，將各個(gè)指標(biāo)分為優(yōu)秀、良好、合格三檔進(jìn)行打分。本文在評(píng)價(jià)量表中設(shè)定績(jī)效評(píng)價(jià)結(jié)果滿分為10 分，將企業(yè)科技項(xiàng)目后評(píng)價(jià)結(jié)果擬定為四檔，即優(yōu)秀（8≤M≤10）、良好（5≤M＜8）、合格（2≤M＜5）、不合格（0≤M＜2）。績(jī)效評(píng)價(jià)結(jié)果以綜合加權(quán)得分衡量，計(jì)算公式為：

通過(guò)德?tīng)柗品ǎY(jié)合層次分析法確定的指標(biāo)體系及權(quán)重設(shè)計(jì)如表1。

3 企業(yè)科技項(xiàng)目后評(píng)估實(shí)證研究

本文選取了5 個(gè)麗水市科技局驗(yàn)收后1-3 年的企業(yè)重點(diǎn)研發(fā)計(jì)劃項(xiàng)目進(jìn)行績(jī)效后評(píng)價(jià)試評(píng)價(jià)。通過(guò)設(shè)計(jì)問(wèn)卷調(diào)查表以及查閱項(xiàng)目驗(yàn)收材料相結(jié)合的方式可以更為真實(shí)客觀地獲得企業(yè)的指標(biāo)完成情況。

被研究的5 個(gè)項(xiàng)目中，有1 個(gè)項(xiàng)目研發(fā)的新產(chǎn)品已停產(chǎn)，新技術(shù)已閑置，其余4 個(gè)項(xiàng)目的產(chǎn)品均處于推廣或批量生產(chǎn)階段，技術(shù)處于使用階段，說(shuō)明其余4 個(gè)項(xiàng)目的成果均處于應(yīng)用階段。

通過(guò)對(duì)5 個(gè)項(xiàng)目各個(gè)指標(biāo)的完成情況進(jìn)行打分，可以得出5 個(gè)項(xiàng)目的綜合評(píng)價(jià)得分分別為4.56、4.84、1.33、6.23、5.62，按照等級(jí)劃分，有2 個(gè)項(xiàng)目評(píng)級(jí)為“良好”，2 個(gè)項(xiàng)目評(píng)級(jí)為“合格”，1 個(gè)項(xiàng)目評(píng)級(jí)為“不合格”。

4 啟示與建議

本文的特色之處在于：一是所構(gòu)建的科技計(jì)劃項(xiàng)目績(jī)效評(píng)價(jià)指標(biāo)體系借鑒了包括國(guó)家自然科學(xué)基金、國(guó)家社科基金績(jī)效評(píng)價(jià)、麗水市地方標(biāo)準(zhǔn)科技項(xiàng)目績(jī)效評(píng)價(jià)規(guī)范等眾多國(guó)內(nèi)相關(guān)研究成果，能夠較為系統(tǒng)全面地反映科技計(jì)劃項(xiàng)目取得的績(jī)效情況。二是常規(guī)的項(xiàng)目后評(píng)價(jià)體系基本都是過(guò)程評(píng)價(jià)與結(jié)果評(píng)價(jià)相結(jié)合，導(dǎo)致項(xiàng)目后評(píng)價(jià)指標(biāo)體系類似撒胡椒面，沒(méi)有側(cè)重點(diǎn)。考慮到在項(xiàng)目驗(yàn)收后1-3年的指標(biāo)體系里再次評(píng)價(jià)項(xiàng)目過(guò)程相關(guān)指標(biāo)意義不大，本文的項(xiàng)目后評(píng)價(jià)著重考察項(xiàng)目績(jī)效成果。三是在評(píng)定方法上，為了克服主觀偏見(jiàn)，將層次分析法和德?tīng)柗品ㄏ嘟Y(jié)合用于確定評(píng)價(jià)指標(biāo)權(quán)重，并運(yùn)用綜合指數(shù)法進(jìn)行綜合評(píng)價(jià)。

通過(guò)軟科學(xué)項(xiàng)目“麗水市企業(yè)科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系構(gòu)建及應(yīng)用研究”的實(shí)證研究表明，本文提出的企業(yè)科技項(xiàng)目后評(píng)價(jià)指標(biāo)體系較為科學(xué)、合理、客觀，能夠真實(shí)反應(yīng)企業(yè)科技項(xiàng)目實(shí)施的效果和效益，為科技管理部門(mén)后續(xù)對(duì)企業(yè)項(xiàng)目立項(xiàng)、驗(yàn)收等管理提供一定的決策依據(jù)。

表1