傅雷鳴, 陳一飛
(南京農(nóng)業(yè)大學(xué) 工學(xué)院,江蘇 南京 210031)
隨著經(jīng)濟(jì)的不斷發(fā)展,高校發(fā)展的速度很快,高校的投入不斷增加,為了適合市場經(jīng)濟(jì)的發(fā)展,高校自主性越來越高,高校管理質(zhì)量從量變向質(zhì)變發(fā)展,高??冃гu(píng)價(jià)是一種重要的高校管理手段[1-3]。高精度的高??冃гu(píng)價(jià)有利于高校的資源合理分配,通過建立一定的高??冃гu(píng)價(jià)模型來預(yù)測(cè)未來高校績效狀態(tài)[4]。要進(jìn)行高精度的科研績效評(píng)價(jià),科學(xué)的績效評(píng)價(jià)指標(biāo)體系是基礎(chǔ),直接影響高??冃гu(píng)價(jià)效果,因此成為當(dāng)前高??冃а芯康囊粋€(gè)熱點(diǎn)問題[5]。
高校績效評(píng)價(jià)內(nèi)容涉及面很廣,如高校環(huán)境、高校資源、高校投入、高校產(chǎn)出等,因此評(píng)價(jià)指標(biāo)數(shù)量比較大,建立的績效評(píng)價(jià)指標(biāo)體系比較龐大[6-7],如果將所有與績效評(píng)價(jià)結(jié)果相關(guān)的指標(biāo)都選擇進(jìn)來,那么使得績效評(píng)價(jià)過程十分復(fù)雜,因此需要精選績效評(píng)價(jià)指標(biāo),建立科學(xué)、合理的高??冃гu(píng)價(jià)指標(biāo)體系[8]。當(dāng)前建立績效評(píng)價(jià)指標(biāo)體系的主要方法有主成分分析方法、數(shù)據(jù)包絡(luò)分析方法、熵值法等[9-11],但是這些方法均存在一定的不足,如主成分分析法得到的指標(biāo)體系可解釋性比較差,會(huì)去掉一些重要的績效評(píng)價(jià)指標(biāo),信息不完整,對(duì)后續(xù)績效評(píng)價(jià)有一定的負(fù)面影響;數(shù)據(jù)包絡(luò)分析方法的指標(biāo)體系具有一定的主觀性,使得績效評(píng)價(jià)錯(cuò)誤率高;熵值法的績效評(píng)價(jià)指標(biāo)體系構(gòu)建過程過于復(fù)雜,影響績效評(píng)價(jià)效率[12-13]。
針對(duì)目前高校績效指標(biāo)體系存在的問題,為了更好地對(duì)高校績效進(jìn)行準(zhǔn)確評(píng)價(jià),提出了基于層次覆蓋模型的高??冃е笜?biāo)體系,采用層次分析法確定高??冃гu(píng)價(jià)指標(biāo)的權(quán)重值,引入權(quán)值覆蓋模型對(duì)高校績效評(píng)價(jià)指標(biāo)體系進(jìn)行優(yōu)化,最后通過具體應(yīng)用實(shí)例分析本文設(shè)計(jì)的高??冃е笜?biāo)體系的有效性和優(yōu)越性。
在進(jìn)行高??冃гu(píng)價(jià)建模之前,首先建立與高??冃гu(píng)價(jià)相關(guān)的指標(biāo)體系,高??冃гu(píng)價(jià)指標(biāo)體系的構(gòu)建不是主觀、盲目的,本文基于以下原則建立高校績效評(píng)價(jià)指標(biāo)體系。
(1)易理解性原則。對(duì)于每一個(gè)高??冃гu(píng)價(jià)指標(biāo)應(yīng)該含義明確、沒有歧義,不能有模棱兩可的現(xiàn)象,使得高??冃гu(píng)價(jià)專家十分容易理解每一個(gè)指標(biāo)所要包含的信息。
(2)指標(biāo)獨(dú)立性原則。每一個(gè)高??冃гu(píng)價(jià)指標(biāo)是獨(dú)立的,指標(biāo)之間不存在交叉、重疊信息,不能相互干擾。
(3)系統(tǒng)性原則。評(píng)價(jià)指標(biāo)體系不僅可以全面描述高??冃У木C合情況,而且可信度要高,同時(shí)要抓住主要因素。
(4)簡明性原則。在滿足高??冃гu(píng)價(jià)的基礎(chǔ)上,應(yīng)該盡可能使評(píng)價(jià)數(shù)量小,防止高校績效評(píng)價(jià)指標(biāo)體系過于龐大,且指標(biāo)數(shù)據(jù)易收集,可操作性強(qiáng)。
當(dāng)前高??冃Оê芏喾矫?,由于國家對(duì)科學(xué)技術(shù)的不斷重視,科研績效成為高校關(guān)注的重點(diǎn),因此本文主要針對(duì)高??蒲锌冃нM(jìn)行研究,建立的評(píng)價(jià)指標(biāo)體系具體如表1所示。
表1 高??冃гu(píng)價(jià)指標(biāo)體系
對(duì)表1的高??冃гu(píng)價(jià)指標(biāo)體系進(jìn)行分析可以發(fā)現(xiàn),每一種指標(biāo)所包含的信息不一樣,要表達(dá)的內(nèi)容也不相同,它們對(duì)高??冃гu(píng)價(jià)結(jié)果的貢獻(xiàn)程度不一樣,即它們的權(quán)重值不一樣,傳統(tǒng)高??冃гu(píng)價(jià)方法假設(shè)它們的貢獻(xiàn)是一樣的,因此權(quán)重值也一樣的,使得高校績效評(píng)價(jià)結(jié)果無法達(dá)到最優(yōu)。為了描述每一個(gè)指標(biāo)對(duì)高校績效評(píng)價(jià)結(jié)果的貢獻(xiàn)程度,本文選擇層次分析法確定高??冃гu(píng)價(jià)指標(biāo)的權(quán)值。
層次分析法是一種處理復(fù)雜問題的數(shù)據(jù)挖掘技術(shù),其核心思想為將復(fù)雜問題通過層次化,變得更加簡單,利用數(shù)學(xué)方法確定每一個(gè)指標(biāo)的權(quán)重值,根據(jù)權(quán)重值描述每一個(gè)指標(biāo)的重要性,并根據(jù)權(quán)重值對(duì)評(píng)價(jià)指標(biāo)排序,層次分析確定高校績效評(píng)價(jià)指標(biāo)權(quán)重值的步驟如下。
Step1:建立高??冃гu(píng)價(jià)指標(biāo)的判斷矩陣。判斷矩陣的具體描述如表2所示。
表2 高??冃гu(píng)價(jià)指標(biāo)的判斷矩陣
Step2:判斷高??冃гu(píng)價(jià)指標(biāo)矩陣次序的一致性。設(shè)aij表示第i個(gè)高??冃гu(píng)價(jià)指標(biāo)相對(duì)于第j個(gè)指標(biāo)的重要性,如果滿足條件aij>1,ajk>1,可以得到aik>1,那么表示高校績效評(píng)價(jià)指標(biāo)矩陣次序具有一致性,如果不滿足一致性,那么就要舍棄該高??冃гu(píng)價(jià)指標(biāo)矩陣。
Step3:計(jì)算高??冃гu(píng)價(jià)指標(biāo)矩陣的滿意一致性比率,具體如下。
a)計(jì)算高??冃гu(píng)價(jià)指標(biāo)矩陣的每行元素的積,即式(1)。
(1)
式中,i=1,2,…,n,n表示高校績效評(píng)價(jià)指標(biāo)數(shù)量。
b)計(jì)算Mi的n次方根,具體為式(2)。
(2)
式中,i=1,2,…,n,n表示高??冃гu(píng)價(jià)指標(biāo)數(shù)量。
(3)
d)計(jì)算高??冃гu(píng)價(jià)指標(biāo)判斷矩陣的最大特征值,即式(4)。
(4)
e)高??冃гu(píng)價(jià)指標(biāo)矩陣的滿意一致性比率計(jì)算式為式(5)。
(5)
式中,CR表示一致性的平均值。
如果CR<0.1,那么表示高校績效評(píng)價(jià)指標(biāo)矩陣符合滿意一致性,得到的權(quán)重值是可信的。
層次分析法確定高??冃гu(píng)價(jià)指標(biāo)的權(quán)重值如表3所示。
表3 高校績效評(píng)價(jià)指標(biāo)的權(quán)重值
通過表3可以看出,層次分析法能夠有效確定高??冃гu(píng)價(jià)指標(biāo)的權(quán)重值,有的權(quán)重值比較小,有的權(quán)重值比較大,為此引入權(quán)重覆蓋模型對(duì)高??冃е笜?biāo)體系進(jìn)行優(yōu)化,去掉一些對(duì)高??冃гu(píng)價(jià)結(jié)果影響不重要的指標(biāo),得到的結(jié)果如圖1所示。
圖1 權(quán)重覆蓋模型的高??冃е笜?biāo)優(yōu)化結(jié)果
從圖1中可以看出,可以去掉科研項(xiàng)目總數(shù)、SCI論文數(shù)、專著數(shù),因?yàn)樗鼈兲幱诟采w模型半徑的最里面,表示它們高校績效評(píng)價(jià)效果影響比較小,這樣可以減少高校績效指標(biāo)的數(shù)量,從而簡化高??冃е笜?biāo)體系。
為了分析層次覆蓋模型的高校績效指標(biāo)體系的有效性,選擇3類高??蒲锌冃?shù)據(jù)作為研究對(duì)象,每一類高校選擇的高校數(shù)量如表4所示。同時(shí)選擇主成分分析法的高??冃е笜?biāo)體系、數(shù)據(jù)包絡(luò)分析法的高??冃е笜?biāo)體系進(jìn)行對(duì)比實(shí)驗(yàn),采用的高??冃гu(píng)價(jià)建模方法為BP神經(jīng)網(wǎng)絡(luò),采用Java編程實(shí)現(xiàn)高??冃гu(píng)價(jià)程序。
表4 高??冃е笜?biāo)體系測(cè)試對(duì)象
采用主成分分析法、數(shù)據(jù)包絡(luò)分析法和層次覆蓋模型建立相應(yīng)高??冃е笜?biāo)體系,然后采用BP神經(jīng)網(wǎng)絡(luò)建立相應(yīng)的高校績效評(píng)價(jià)模型,并采用表4的高??冃?shù)據(jù)作為測(cè)試數(shù)據(jù),統(tǒng)計(jì)不同方法的高??冃гu(píng)價(jià)精度,結(jié)果如圖2所示。從圖2可以看出,層次覆蓋模型的高校績效評(píng)價(jià)精度為95.00%,主成分分析法的高??冃гu(píng)價(jià)精度為91.12%,數(shù)據(jù)包絡(luò)分析法的高??冃гu(píng)價(jià)精度為93.13%。相對(duì)于對(duì)比方法,層次覆蓋模型的高校績效評(píng)價(jià)誤差大幅度減少,這主要是因?yàn)楸疚囊肓藢哟畏治龇ê侠泶_定各高??冃гu(píng)價(jià)指標(biāo)的權(quán)值,并引入權(quán)重覆蓋模型對(duì)高??冃гu(píng)價(jià)指標(biāo)體系進(jìn)行了優(yōu)化,獲得了更優(yōu)的高??冃гu(píng)價(jià)效果,體現(xiàn)了本文研究設(shè)計(jì)的高??冃гu(píng)價(jià)指標(biāo)體系優(yōu)越性。
圖2 不同方法的高??冃гu(píng)價(jià)精度對(duì)比
統(tǒng)計(jì)不同方法的高??冃гu(píng)價(jià)時(shí)間,結(jié)果如圖3所示。
圖3 不同方法的高校績效評(píng)價(jià)時(shí)間對(duì)比
從圖3可知,層次覆蓋模型的高校績效評(píng)價(jià)時(shí)間少,主成分分析法的高??冃гu(píng)價(jià)時(shí)間次之,數(shù)據(jù)包絡(luò)分析法的高??冃гu(píng)價(jià)時(shí)間最多,層次覆蓋模型提高了高??冃гu(píng)價(jià)效率,主要是因?yàn)榻⒘烁玫膶哟胃采w模型的高??冃гu(píng)價(jià)指標(biāo)體系,加快了高??冃гu(píng)價(jià)速度。
高??冃гu(píng)價(jià)越來越受到國家和高校的重點(diǎn)關(guān)注,當(dāng)前傳統(tǒng)的高??冃гu(píng)價(jià)指標(biāo)體系設(shè)計(jì)方法無法滿足高校發(fā)展的需要,針對(duì)傳統(tǒng)高??冃гu(píng)價(jià)指標(biāo)體系設(shè)計(jì)方法存在的問題,設(shè)計(jì)了層次覆蓋模型的高??冃е笜?biāo)體系,結(jié)果表明本文研究設(shè)計(jì)體系可以滿足高??冃гu(píng)價(jià)的要求,為高??冃гu(píng)價(jià)建模分析提供有價(jià)值的信息,具有廣泛的應(yīng)用前景。