基于AHP方法的高?？蒲薪?jīng)費績效評價指標構(gòu)建研究

劉 力 黃創(chuàng)霞

一、引 言

我國的科研經(jīng)費投入尤其是基礎性的科研經(jīng)費投入主要集中在高校，據(jù)中國統(tǒng)計年鑒2017年的最新數(shù)據(jù)，2016年全國高?？蒲校≧&D）經(jīng)費支出為1072.2億元，其中基礎研究支出為432.5億元，分別占全國科研經(jīng)費總支出及全國基礎研究總支出的6.84%與52.56%。結(jié)合高?？蒲薪?jīng)費使用的特征，國家對高校科研經(jīng)費的管理提出了“放、管、服”的要求，出臺了《關(guān)于進一步完善中央財政科研項目資金管理等政策的若干意見》（中辦發(fā)〔2016〕50號）專門文件。高校在此基礎上制定了一系列符合本單位實際情況的科研經(jīng)費管理辦法，進一步規(guī)范了本單位科研經(jīng)費使用的合理、合法及合規(guī)性。

與此同時，科研經(jīng)費的使用效率也越來越受到社會的廣泛關(guān)注。高?？蒲薪?jīng)費的高投入、低產(chǎn)出與成果轉(zhuǎn)化率不高仍然是目前高?？蒲薪?jīng)費使用過程中普遍存在的問題。早在2012年教育部就聯(lián)合財政部發(fā)布了《教育部財政部關(guān)于加強中央部門所屬高?？蒲薪?jīng)費管理的意見》（教財〔2012〕7號），其中明確指出了“健全管理機制，完善績效管理辦法；建立以高水平成果、高層次人才為導向的科研績效評價體系”。對高?？蒲薪?jīng)費績效進行科學評價是實現(xiàn)科研資源效益最大化的必然選擇。高校必須加強科研經(jīng)費績效管理，以管理促績效，以績效促發(fā)展?，F(xiàn)有文獻研究關(guān)于高校科研經(jīng)費使用的經(jīng)濟性、效率性、效果性的成果還十分鮮見。構(gòu)建一系列科學合理的績效指標，通過績效指標的定量數(shù)據(jù)，對科研經(jīng)費的使用效率進行科學評價勢在必行。

二、高校科研經(jīng)費績效評價的現(xiàn)狀

高?？蒲薪?jīng)費績效是高?？蒲型度胨a(chǎn)生的效益、效率和效果，衡量科研經(jīng)費投入與產(chǎn)出的關(guān)系?！翱冃А笔墙?jīng)費支出后科研項目所獲得的成果和工作完成的情況，“績”是科研經(jīng)費支出能夠達到的可量化的目標，“效”是科研經(jīng)費支出能夠達到的具體目標。對高?？蒲薪?jīng)費支出績效進行評價是經(jīng)費配置由分配型向投入產(chǎn)出型的轉(zhuǎn)變，即要按照投入產(chǎn)出效益最大化原則來配置高校科研經(jīng)費資源?，F(xiàn)階段我國對高校科研項目實行績效評估的具體做法主要體現(xiàn)在科研項目間接經(jīng)費中的績效支出。然而，從考核觀念、考核能力和考核水平等客觀因素來看，現(xiàn)有績效管理和績效考核缺乏對評價指標和評價方法的深入研究和分析，績效考核促進績效管理的效果并不明顯。這種缺陷主要表現(xiàn)在：

1、高校在科研經(jīng)費績效評價制度建設方面普遍比較粗放，缺乏精細化的績效評價制度，制度建設還不太完善。

2、雖然高校結(jié)合自身的科研經(jīng)費績效目標構(gòu)建了評價指標，建立了績效評價體系，但是各個高校由于績效評價目標差異性較大因此績效評價體系的構(gòu)建的差異性比較大。

3、高?？蒲薪?jīng)費的績效評價機構(gòu)多為科研部門或財務部門，缺乏第三方獨立機構(gòu)，獨立的執(zhí)行監(jiān)督機制有待進一步完善。

高校科研經(jīng)費績效評價的不足在一定程度上制約了高等學?？蒲薪?jīng)費的使用效率，造成了科研項目的資金和資源方面的浪費。

三、高?？蒲薪?jīng)費績效評價體系的構(gòu)建

為解決上述高校科研經(jīng)費績效評價方面的不足，滿足國家的科技發(fā)展戰(zhàn)略和社會經(jīng)濟建設需要，基于高校的科研發(fā)展現(xiàn)狀，本文從構(gòu)建原則、構(gòu)建方法、構(gòu)建指標三個方面深入分析績效評價指標體系的構(gòu)建，從定量的基礎上科學合理評價科研經(jīng)費使用績效。

（一）指標體系的構(gòu)建原則

1、科學性原則

高校的科研特征表現(xiàn)為進行科學探索和發(fā)展新技術(shù)，在設計績效評價指標時應緊密結(jié)合高?？蒲羞\行的實際情況，從眾多的評價指標中選取那些最能體現(xiàn)高?？蒲刑卣骱涂蒲袆?chuàng)新、科研綜合實力及發(fā)展?jié)摿Φ闹笜?，確保各項指標之間相互作用和影響，使每一個的評價指標都具有科學合理性。

2、系統(tǒng)可比性原則

選取的指標應聚焦圍繞高?？蒲械奶卣髡归_，不要過于分散，選取高?？蒲兄芯哂泄残蕴卣鞯闹笜藖碓O置，對評價數(shù)據(jù)進行標準化處理，使得指標體現(xiàn)高?？蒲械墓残蕴卣?，使科研項目投入、產(chǎn)出各環(huán)節(jié)的效率、效益和效果具有一定的可比性，既可以進行縱向比較，也可以進行橫向比較。

3、可操作性原則

理論上而言，一個理想的績效評價指標體系中指標數(shù)量越多，指標劃分越細，就越能對評價對象實行全方位的評價，評價的信用和有效度就越高。但在實際的操作過程中需要的數(shù)據(jù)越多數(shù)據(jù)采集的工作量和難度就越會增加，同時指標的權(quán)重確定將更加困難，因此在指標的選取和設計時要充分考慮其可操作性。

4、前置指標和后滯指標相結(jié)合原則

績效指標的設計應當符合國家的科技發(fā)展政策和社會發(fā)展的需要，結(jié)合高校制定的科研發(fā)展定位，引導高校找準自身的科研定位，因此目標的制定必須具有前瞻性。高?？蒲许椖窟M行績效評價時必須通過全面正確指標體系，對科研項目的投入、產(chǎn)出比，即對科研項目取得成果的最終效率進行考評。因此指標的獲得又具有一定的后滯性。

（二）基于層次分析法（AHP）的高?？蒲许椖拷?jīng)費績效指標構(gòu)建

近年來國內(nèi)外提出了一系列關(guān)于科研績效的評價方法，如比較法、關(guān)鍵績效指標考核法、目標管理法、平衡記分卡法（BSC）等。這些評價方法簡單地以科研產(chǎn)出的成果為目標，缺乏對產(chǎn)出效率的考慮。

針對上述方法的不足，本文以高校的科研項目為研究對象，充分考慮科研經(jīng)費的使用績效，用量化的指標數(shù)據(jù)科學的評價科研經(jīng)費的使用效率，擬采用層次分析法進行科研經(jīng)費的績效評價。層次分析法（Analytic Hierarchy Process簡稱 AHP），它最早是由美國運籌學家薩蒂（T.L.Saaty）于20世紀70年代初提出的，是將與決策目標有關(guān)的若干元素按等級分解為目標、準則、方案等層次，并在此基礎上進行定量與定性分析的一種決策方案。層次分析法具有系統(tǒng)性、簡潔性和實用性等優(yōu)點，可以利用較少的定量信息將決策思維過程數(shù)學化，將難以定量的主觀判斷借助數(shù)量的形式表達和處理。

在實際操作過程中，層次分析法（AHP）解決實際問題主要有如下四個步驟：第一，建立層次結(jié)構(gòu)模型；第二，構(gòu)造兩兩比較矩陣；第三，層次單排序權(quán)向量的計算及一致性檢驗；第四，層次總排序及一致性檢驗。

1、建立遞階層次模型

從復雜的現(xiàn)實問題中找出關(guān)鍵性問題，將與關(guān)鍵性問題相關(guān)的各個因素按照隸屬關(guān)系進行分層，構(gòu)建一個遞階層次模型。模型的層次分別為目標層，指決策的目的、要解決的問題；準則層，指需要考慮的因素、決策的準則；方案層，指決策時所選用的備選方案。

2、構(gòu)建兩兩比較矩陣

層次分析法（AHP）的主要特征之一是用兩兩元素的重要性程度之比來表示元素相對重要性的程度等級，因此在遞階層模型構(gòu)造完成后，將各層元素進行兩兩對比，對每一層次因素的相對重要性給出判斷，并將這些判斷用數(shù)值表示，構(gòu)成判斷矩陣。判斷矩陣表示本層次與上一層次有關(guān)因素之間的相對重要性的比較。階層判斷矩陣如下表。

表中對象A是用元素bij表示，意為指標Bi相對于指標Bj的重要性，記做比較值，它通常在1～7中取值，各個比較值的取值表示的含義如下：

比較值取值 比較值含義1針對對象A而言，bi和bj一樣重要3針對對象A而言，bi比bj稍微重要5針對對象A而言，bi比bj明顯重要針對對象A而言，bi和bj絕對重要2，4，6 針對對象A的重要程度介于上述兩兩比較值之間7倒數(shù)因素bij由i與j比較得出，bij則由j與i比較得出，可用公式表示bij=1。bij

比較值一般采用專家咨詢法獲取，通過獲取比較值我們來構(gòu)建判斷矩陣，并對同一層次指標進行兩兩比較。

3、層次單排序權(quán)向量的計算及一致性檢驗

得出判斷矩陣后，就能夠計算出最大特征值λmax及對應的標準化向量W，向量W的分量Wi即是相應因素的單排序的權(quán)值，為同一層次因素對于上一層次因素相對重要性的排序權(quán)值，得出層次單排序。具體步驟如下：

第一步，將矩陣每一列正規(guī)化：

第三步，對計算出的權(quán)重值是否合理，需對判斷矩陣進行一致性檢驗。

由于比較值的取值一般通過專家咨詢法取得的，存在一定的人為因素，矩陣難以避免存在不一致性，但必須控制在一定的范圍內(nèi)。因此，我們可以引入隨機一致性檢驗指標RI，RI作為判斷矩陣的平均隨機一致性指標可以通過查表直接取得，1-9階矩陣的RI值參見下表。

N 134589 RI0 2 0 0.580.901.12 6 7 1.24 1.321.411.45

當判斷矩陣A的CR＜0.1時或λmax＝n、CI＝0時，認為A具有滿意的一致性，否則需要調(diào)整 中的元素以使其具有滿意的一致性。一致性檢驗若通過，權(quán)向量即為特征向量；若不通過，需要重新構(gòu)成對比較陣。

4、層次總排序及一致性檢驗

計算最下層對最上層總排序的權(quán)向量。設A和B兩個層次，A層為B層的上一層。A層包含A1,A2,…,Am共m個指標，其權(quán)重值分別為a1,a2,…,am。B層包含B1,B2,…,Bn共n個指標，它們關(guān)于A1的層次權(quán)重分別為b1j,b2j,…,bnj（當Bi與Aj無關(guān)聯(lián)時，b1j＝0）。則B層中各指標相對于總指標的權(quán)重b1,b2,…,bn的計算公式如下：

同時每個層次的單個權(quán)重值即使通過了本層次的一致性檢驗，但每一層次單個權(quán)重值的非一致性數(shù)值不斷地累加，很有可能通不過層次總排序的一致性檢驗。層次總排序時用一致性比率計算公式如下：

若CR＜0.1則通過，決策的結(jié)果為總排序權(quán)向量，否則需要重新考慮模型或重新構(gòu)造一致性比率較大的比較矩陣。

確定完各指標的最終量化分和相應的權(quán)重后，可以得到最終的線性綜合評價模型，公式如下：

Z＝∑WiBi，Bi＝∑WijBij，Bij＝∑WijnBijn.

模型中，Z為綜合評價指數(shù)，通過公式中各層次的指標賦分值和權(quán)重的計算，我們可以得到最終的綜合評價指數(shù)。

四、高校科研項目績效評價指標的構(gòu)建

設計科學合理且可操作性強的績效評價指標是對高?？蒲许椖窟M行績效評價的必要條件，按照高?？蒲薪?jīng)費指標構(gòu)建的原則和方法在構(gòu)建績效評價指標體系時從三方面入手：一是找出高?？蒲薪?jīng)費績效評價的總?cè)蝿?；二是將總?cè)蝿者M行分解，按實現(xiàn)總?cè)蝿諔紤]的各項因素和決策方法建立有效的指標考核體系；三是確立合理的高?？冃гu價指標權(quán)重，用權(quán)重數(shù)值來反映構(gòu)建的每一個指標在整個體系中相對重要程度。

在實際構(gòu)建高?？蒲薪?jīng)費績效評價指標的操作過程中，應全面考慮國家的科技發(fā)展綱領和高校自身的科研發(fā)展方向，結(jié)合科研管理與經(jīng)費開支特性，重點兼顧并選擇有代表性的指標納入到績效評價指標體系中。在本文中我們結(jié)合科研工作的實際情況構(gòu)建三個一級指標，包括科研項目投入（A）、科研項目管理（B）和科研項目產(chǎn)出（C）三個重要指標，然后在此基礎上我們將指標進一步細化。

（一）科研項目投入（A）

科研項目的各種投入是為了保證高?？蒲许椖磕軌蝽樌M行的前提條件。我們將科研項目的投入細化為三個二級指標：科研項目的資金投入、科研項目的物力投入和科研項目的人力投入。同時我們將科研項目資金投入分為三個三級指標：國家級科研項目數(shù)量及金額、省部級科研項目數(shù)量及金額、其他等級科研項目數(shù)量及金額?？蒲许椖课锪ν度敕譃閮蓚€三級指標：科研項目所需的場地支持、科研項目所需的設備支持?？蒲许椖咳肆ν度敕譃槿齻€三級指標：首席科學家、骨干科研人員和輔助科研人員。

（二）科研項目管理（B）

科研項目管理的科學規(guī)范性是為了保障高?？蒲许椖窟M行有效績效評價的必要因素。我們將科研項目管理細化為二個二級指標：高?？蒲薪?jīng)費制度建設和高校科研經(jīng)費管理。同時我們將科研經(jīng)費的制度建設分為三個三級指標，分別為科研經(jīng)費管理制度制定、內(nèi)部控制制度的制定以及科研經(jīng)費制度的執(zhí)行情況?？蒲薪?jīng)費的管理細化為四個三級指標，分別為科研經(jīng)費預算的編制執(zhí)行及控制情況、科研經(jīng)費規(guī)范化核算情況、科研項目結(jié)題的及時性情況和科研項目結(jié)余資金的管理情況。

（三）科研項目產(chǎn)出（C）

高?？蒲腥藛T利用財力、人力和物力等各種科研資源形成的科研項目產(chǎn)出是高校對科研項目進行績效評價的決定性因素。在該項指標設計時，我們不簡單地以考核項目負責人發(fā)表的專著、專作為唯一衡量標準，更多地注重科研項目的實用性，即科研項目轉(zhuǎn)化為實際生產(chǎn)力的能力。因此我們將科研經(jīng)費產(chǎn)出細化為四個二級指標：科研成果、市場化能力、人才培養(yǎng)能力和社會相關(guān)性。同時我們將科研成果細化為三個三級指標，分別為學術(shù)論文及著作的級別和數(shù)量、科研成果獲獎的級別和數(shù)量以及申請專利的數(shù)量。適應市場能力細化為二個三級指標，分別為科研項目成果轉(zhuǎn)化數(shù)量和科研項目成果轉(zhuǎn)化收入。人才培養(yǎng)能力細化為二個三級指標，分別為培養(yǎng)研究生的質(zhì)量和培養(yǎng)研究生的數(shù)量。社會相關(guān)性細化為三個三級指標，分別為社會價值、社會影響和社會應用性。

二級指標科研經(jīng)費使用績效評價一級指標科研項目投入A科研項目資金投入A1三級指標國家級科研項目數(shù)量及金額A11省部級科研項目數(shù)量及金額A12其他等級科研項目數(shù)量及金額A13科研項目所需的場地支持A21科研項目物力投入A2 科研項目所需的設備支持A22科研項目人力投入A3首席科學家A31骨干科研人員A32輔助科研人員A33

高?？蒲薪?jīng)費制度建設B1科研經(jīng)費管理制度制定B11內(nèi)部控制制度的制定B12制度的執(zhí)行情況B13科研經(jīng)費使用績效評價科研項目管理B 高校科研經(jīng)費管理B2經(jīng)費預算編制、執(zhí)行及控制情況B21經(jīng)費規(guī)范化核算B22科研項目結(jié)題的及時性B23科研項目結(jié)余經(jīng)費的管理B24學術(shù)論文、著作（級別、數(shù)量）C11科研成果獲獎記錄（級別、數(shù)量）C12申請專利的項目數(shù)量C13市場轉(zhuǎn)化能力C2科研成果C1科研項目產(chǎn)出C科研項目成果轉(zhuǎn)化數(shù)量C21科研項目成果轉(zhuǎn)化收入C22人才培養(yǎng)能力C3培養(yǎng)研究生的質(zhì)量C31培養(yǎng)研究生的數(shù)量C32社會相關(guān)性C4社會價值C41社會影響C42社會應用性C43

上述指標構(gòu)建確認以后，我們進一步根據(jù)層次分析法的步驟確認指標的權(quán)重。在實際的操作過程中一般采用專家咨詢法確定比較值，即根據(jù)上表中確認的一系列不同的績效評價指標設計調(diào)查問卷，問卷中按指標的重要程度設計不同分值，通過邀請專家填寫科研經(jīng)費使用的調(diào)查問卷來獲得指標權(quán)重。我們邀請的專家范圍涉及科研項目的負責人及項目團隊人員、科研項目的輔助人員、科研工作的管理人員等，這些與科研經(jīng)費使用相關(guān)的人員根據(jù)各自的判斷尺度給調(diào)查表中各項指標進行打分。我們根據(jù)專家們給出的各項指標重要程度的數(shù)值平均取整得出一級層次指標的重要度取值，然后根據(jù)層次分析法構(gòu)造判斷矩陣并進行一級指標權(quán)重的計算，可并在此基礎上進行一致性的檢驗。二級、三級指標的計算過程與一級指標計算過程相同，最后得出科研經(jīng)費使用績效的綜合評價總分。

五、高校科研經(jīng)費績效評價體系構(gòu)建后的思考

現(xiàn)代科研是國家綜合實力的重要體現(xiàn)，高校是國家科技創(chuàng)新體系中的一個重要組成部分，科研工作應當滿足國家戰(zhàn)略和社會發(fā)展的需要，同時結(jié)合高校自身的發(fā)展戰(zhàn)略，提高科研實力。本文應用層次分析法，通過構(gòu)建起一系列科研經(jīng)費支出績效評估指標體系，建立層次結(jié)構(gòu)模型，構(gòu)建相應的判斷矩陣并進行層次排序的一致性檢驗，確定最終的績效評估指標權(quán)重，以量化指標評價科研經(jīng)費的績效，為科研經(jīng)費支出使用績效評價提供一種的實用方法。當然在指標評價的內(nèi)容以及設計得是否科學合理化都需要進一步的詳細探討。同時，現(xiàn)代社會信息技術(shù)飛速發(fā)展，層次分析法還可以結(jié)合Matlab數(shù)學建模編程軟件，來滿足人們高效率、高準確度的績效評價決策需要。指標設計完成后還必須有良好的指標執(zhí)行機制，建立一個完善的科研經(jīng)費管理信息系統(tǒng)和獨立于科研人員、經(jīng)費管理部門的第三方的績效評價機構(gòu)，根據(jù)績效指標體系得出的量化數(shù)據(jù)進行判定。根據(jù)判斷的結(jié)果更好地引導高?？蒲泄ぷ髡呙鞔_自身的科研目標，將高校的科研項目與社會和國家的需求緊密結(jié)合起來，以發(fā)揮科研服務社會的工作。