史竹琴，朱先奇

(1.太原理工大學(xué) 經(jīng)濟(jì)與管理學(xué)院，山西 太原 030024；2.太原科技大學(xué) 經(jīng)濟(jì)與管理學(xué)院，山西 太原 030024)

ESI在世界一流大學(xué)與學(xué)科評(píng)價(jià)中的問(wèn)題與對(duì)策研究

史竹琴1，2，朱先奇1

(1.太原理工大學(xué) 經(jīng)濟(jì)與管理學(xué)院，山西 太原 030024；2.太原科技大學(xué) 經(jīng)濟(jì)與管理學(xué)院，山西 太原 030024)

ESI是基于SCI和SSCI的統(tǒng)計(jì)數(shù)據(jù)庫(kù)，在世界一流大學(xué)與學(xué)科評(píng)價(jià)中發(fā)揮著非常重要的參考作用，受到了國(guó)內(nèi)高校的廣泛關(guān)注。在此背景下，文章討論ESI在世界一流大學(xué)與學(xué)科評(píng)價(jià)中應(yīng)注意的六大問(wèn)題，如ESI的成果分配方式與國(guó)內(nèi)的通行分配方式存在差異，ESI的不同檢索方式獲取同一評(píng)價(jià)目標(biāo)數(shù)據(jù)得到的結(jié)果不盡相同等。在此基礎(chǔ)上，針對(duì)問(wèn)題提出在實(shí)踐中應(yīng)采取的應(yīng)對(duì)措施，如要精準(zhǔn)把握ESI中各指標(biāo)的內(nèi)涵、結(jié)果顯示、基準(zhǔn)線及閾值標(biāo)準(zhǔn)、檢索方式，要更加重視高水平論文和拔尖人才的發(fā)現(xiàn)等。

ESI；一流大學(xué)；一流學(xué)科；教育評(píng)價(jià)

一、研究概述

2015年10月，國(guó)務(wù)院印發(fā)了《統(tǒng)籌推進(jìn)世界一流大學(xué)和一流學(xué)科建設(shè)總體方案》，在此方案中明確提出“到2020年若干所大學(xué)和一批學(xué)科進(jìn)入世界一流行列，若干學(xué)科進(jìn)入世界一流學(xué)科前列”等系列建設(shè)目標(biāo)[1]?！半p一流”建設(shè)由此受到中國(guó)各級(jí)政府和高校的高度重視，有多個(gè)省份和若干高校已經(jīng)制定了扶持政策和具體實(shí)施方案，“雙一流”建設(shè)必將成為中國(guó)高等教育發(fā)展的風(fēng)向標(biāo)和指揮棒。但是，迄今為止，對(duì)于“雙一流”的具體評(píng)價(jià)標(biāo)準(zhǔn)尚無(wú)精確界定，尤其是如何定量化評(píng)價(jià)更是處于探索階段。當(dāng)前，國(guó)內(nèi)主要是利用湯姆森路透的ESI(Essential science indicators，基本科學(xué)指標(biāo))數(shù)據(jù)庫(kù)[2]統(tǒng)計(jì)指標(biāo)對(duì)國(guó)內(nèi)高校和學(xué)科與國(guó)際上的高校和學(xué)科進(jìn)行比較。這一數(shù)據(jù)庫(kù)的確可以快速使得國(guó)內(nèi)高校在世界高校坐標(biāo)系中找到自己的定位，更能夠具體清楚地看到自己的既有優(yōu)勢(shì)與差距，因此最近幾年受到了中國(guó)高校的廣泛關(guān)注。但是，ESI本身作為一個(gè)國(guó)際化的論文統(tǒng)計(jì)數(shù)據(jù)庫(kù)，是否與中國(guó)高等教育實(shí)際相符合、相適應(yīng)需要深入思考與研究。

關(guān)于利用ESI進(jìn)行世界一流大學(xué)與學(xué)科的評(píng)價(jià)實(shí)踐并不是一個(gè)新話題，當(dāng)前研究主要集中在文獻(xiàn)計(jì)量領(lǐng)域，產(chǎn)生了眾多研究成果。一是關(guān)于ESI數(shù)據(jù)庫(kù)的基本功能與應(yīng)用介紹。熊璐在其碩士論文中較為系統(tǒng)地介紹了ESI數(shù)據(jù)庫(kù)并就其應(yīng)用進(jìn)行了闡述和分析[3]；劉雪立等則概括了近些年利用ESI數(shù)據(jù)進(jìn)行機(jī)構(gòu)、學(xué)科、地區(qū)等方面的應(yīng)用[4]；另外，劉雪立還介紹了ESI界定高被引論文的方法[5]。二是針對(duì)某一個(gè)學(xué)科領(lǐng)域的評(píng)價(jià)研究。這方面的研究比較多，是應(yīng)用研究的熱點(diǎn)。例如，Ma、Ni等對(duì)全球計(jì)算機(jī)學(xué)科進(jìn)行了系統(tǒng)分析[6]；邱均平、楊瑞仙對(duì)材料科學(xué)進(jìn)行了計(jì)量研究[7]。三是針對(duì)一所高校的整體分析。這方面的應(yīng)用研究成果也比較多，比如何春建對(duì)于南京師范大學(xué)[8]，寇繼虹和郭雨橙對(duì)于武漢大學(xué)科研產(chǎn)出的分析研究[9]。四是對(duì)地區(qū)科研實(shí)力的分析。這方面的研究需要較大的數(shù)據(jù)量，從更高層面進(jìn)行針對(duì)性分析。例如，陳燕對(duì)于山東省高校[10]、豐國(guó)政對(duì)于廣東省高校[11]的分析。五是綜合評(píng)價(jià)實(shí)踐研究，這方面以邱均平教授為首的研究團(tuán)隊(duì)每?jī)赡臧l(fā)布的《世界一流大學(xué)及學(xué)科競(jìng)爭(zhēng)力排行榜》為典型[12-13]，該報(bào)告自2006年發(fā)布以來(lái)得到了各界的廣泛關(guān)注，為中國(guó)科研機(jī)構(gòu)尤其是各學(xué)科認(rèn)知自身在國(guó)際上的發(fā)展水平提供了積極參考。六是對(duì)ESI存在問(wèn)題及改進(jìn)方法的研究。這方面的研究是隨著ESI越來(lái)越受中國(guó)高校重視而產(chǎn)生的，有一定的探索性。比如，梁瑛和鄒小筑提出了ESI工程類(lèi)與中國(guó)教育部學(xué)科分類(lèi)的對(duì)比研究，并提出了如何將兩者進(jìn)行對(duì)應(yīng)的方法[14]，具有較強(qiáng)的實(shí)踐意義。

從上面的分析看，基于ESI的研究成果大都偏向于應(yīng)用，對(duì)其本質(zhì)、使用時(shí)應(yīng)注意問(wèn)題等還研究得不夠系統(tǒng)和徹底。為此，本文將系統(tǒng)探討ESI在世界一流大學(xué)與學(xué)科評(píng)價(jià)中應(yīng)注意的問(wèn)題，并針對(duì)這些問(wèn)題提出應(yīng)對(duì)措施。

二、ESI在世界一流大學(xué)與學(xué)科評(píng)價(jià)中應(yīng)注意的問(wèn)題

ESI雖然創(chuàng)建時(shí)間較早(2001年)，但是在實(shí)際應(yīng)用中對(duì)其基本屬性以及應(yīng)用細(xì)節(jié)還缺乏深入、系統(tǒng)性認(rèn)識(shí)和思考，存在的一些問(wèn)題亟待解決。

(一)ESI是基于SCI和SSCI的一個(gè)統(tǒng)計(jì)庫(kù)，這是它的本質(zhì)屬性

ESI與SCI、SSCI是一脈相承的，SCI創(chuàng)建于1961年，SSCI則創(chuàng)建于1973年[15]，而SCI和SSCI是典型的引文數(shù)據(jù)庫(kù)，其最主要的功能是為了信息檢索——即通過(guò)引文構(gòu)建知識(shí)組織網(wǎng)絡(luò)，達(dá)到所謂的“越查越新、越查越舊”的檢索目的。而ESI建立在SCI和SSCI之上(并不包括A&HCI)，它的最主要的目的是建立一個(gè)統(tǒng)計(jì)庫(kù)，創(chuàng)建各種統(tǒng)計(jì)指標(biāo)(如高被引論文、高影響力作者)。制定不同閾值標(biāo)準(zhǔn)(如1%、5%等)，從SCI和SSCI出發(fā)統(tǒng)計(jì)國(guó)家、機(jī)構(gòu)、學(xué)科、學(xué)者、論文的科學(xué)表現(xiàn)[2]，所以它的主要功能是“科學(xué)評(píng)價(jià)”。另外，從ESI的名字——“基本科學(xué)指標(biāo)”也可以看出其評(píng)價(jià)功能。

由此，我們要認(rèn)清楚ESI的本質(zhì)。ESI的數(shù)據(jù)來(lái)源就是SCI和SSCI，沒(méi)有其他任何數(shù)據(jù)庫(kù)數(shù)據(jù)，也就是說(shuō)集中在學(xué)術(shù)論文方面，并且不包含人文藝術(shù)學(xué)科領(lǐng)域論文，所以它的評(píng)價(jià)有特定范疇，只能反映一個(gè)國(guó)家、組織、學(xué)科、學(xué)者在學(xué)術(shù)論文方面的表現(xiàn)，并不能反映這些評(píng)價(jià)對(duì)象的綜合實(shí)力。在實(shí)際評(píng)價(jià)中，切忌“以偏概全”，切忌“濫用誤用”工具。在世界一流大學(xué)和一流學(xué)科評(píng)價(jià)中，ESI只能是“反映論文生產(chǎn)力和影響力”的一個(gè)統(tǒng)計(jì)工具，超出這一范圍而夸大其功能并不可取。

(二)ESI是一個(gè)綜合性的工具，不單單能評(píng)價(jià)大學(xué)和學(xué)科，它為我們呈現(xiàn)多視角的統(tǒng)計(jì)分析結(jié)果

當(dāng)前版本的ESI是一個(gè)功能比較豐富的統(tǒng)計(jì)工具，提供了多種組合查詢(xún)方式，可以非常方便地提供多視角的統(tǒng)計(jì)分析結(jié)果。我們只有很好地掌握這些基本的檢索統(tǒng)計(jì)功能，才能更科學(xué)、更充分地利用這一數(shù)據(jù)庫(kù)。需要注意的是，ESI現(xiàn)實(shí)的結(jié)果都顯示“發(fā)文數(shù)、被引數(shù)、篇均被引、頂尖論文(包含高被引論文和熱門(mén)論文)”四個(gè)指標(biāo)數(shù)據(jù)，提供的功能如表1所示。

從表1看，ESI提供了非常強(qiáng)大的檢索統(tǒng)計(jì)功能，能夠從多個(gè)角度對(duì)評(píng)價(jià)對(duì)象進(jìn)行統(tǒng)計(jì)分析，比如查詢(xún)中國(guó)大陸當(dāng)前在所有國(guó)家(地區(qū))中的相對(duì)科技論文實(shí)力，可以沿著“國(guó)家(地區(qū))→不限定”查找(2006年1月1日-2016年8月31日的十余年數(shù)據(jù)，中國(guó)大陸發(fā)文、被引位居全球第二，頂尖論文位居全球第三，平均被引則排在104位)；如果想了解中國(guó)大陸計(jì)算機(jī)科學(xué)的相對(duì)實(shí)力，則可以沿著“國(guó)家(地區(qū))→研究領(lǐng)域”查找(發(fā)文、被引、頂尖論文都排在全球第二，平均被引排在第46位)。

表1 ESI的檢索功能

所以，ESI的檢索統(tǒng)計(jì)功能非常強(qiáng)大，通過(guò)組合檢索可以實(shí)現(xiàn)多個(gè)查詢(xún)目的，而不是僅僅局限在大學(xué)和學(xué)科評(píng)價(jià)方面。我們只有很好地研究這些功能，才能更快速、更準(zhǔn)確地查找到需要的信息。

(三)ESI的成果分配統(tǒng)計(jì)方式為“利益均沾，獨(dú)立計(jì)數(shù)”，與中國(guó)普遍實(shí)行的方式有差異

對(duì)于合著論文的成果分配一直是一個(gè)比較有爭(zhēng)議、棘手的問(wèn)題。在ESI中采取了比較“簡(jiǎn)單”的統(tǒng)計(jì)方式，即每一個(gè)合著者都平等對(duì)待，共同分享這一成果，且都記為1。如果一篇文章有N個(gè)作者，那么這N個(gè)作者的發(fā)文數(shù)都會(huì)累計(jì)1；如果這篇論文被引了100次，則每位作者的被引次數(shù)也都會(huì)累計(jì)100。同理，對(duì)于機(jī)構(gòu)、國(guó)家、學(xué)科等都采取同樣的成果分配方式。

ESI的這種“利益均沾，獨(dú)立計(jì)數(shù)”的成果分配方式需要引起我們的注意。在中國(guó)甚至很多西方國(guó)家，進(jìn)行科研考核、成果評(píng)價(jià)時(shí)都不采用這種方式，而是按照第一作者、通訊作者等“作者身份”來(lái)確定每個(gè)作者的比重；即使是每個(gè)作者都同等作用，一般也按照1/N來(lái)進(jìn)行成果分配。所以，ESI的這種計(jì)數(shù)方式雖然簡(jiǎn)單，但是和現(xiàn)實(shí)(尤其是中國(guó)的科研考核方式)計(jì)數(shù)方式存在較大差別，甚至在一定程度上具有一定的“迷惑性”，部分地掩蓋了某些評(píng)價(jià)目標(biāo)的實(shí)力，而相應(yīng)地夸大了某些評(píng)價(jià)目標(biāo)的實(shí)力。

(四)ESI不同檢索組合得到的同一研究對(duì)象的統(tǒng)計(jì)結(jié)果不盡相同，有的差異較大

上文已經(jīng)較為詳細(xì)地介紹了ESI的各項(xiàng)檢索功能，但是在實(shí)際操作中發(fā)現(xiàn)一個(gè)問(wèn)題：通過(guò)不同的檢索組合進(jìn)行同一目標(biāo)檢索時(shí)得到的結(jié)果有差異，個(gè)別結(jié)果差異較大。圖1、圖2、圖3給出的是“機(jī)構(gòu)→國(guó)家(地區(qū))”“研究領(lǐng)域→機(jī)構(gòu)”和“機(jī)構(gòu)→機(jī)構(gòu)”得到的北京大學(xué)的相關(guān)結(jié)果，這三個(gè)組合檢索式都可以得到北京大學(xué)在這10年間的總發(fā)文數(shù)和總被引次數(shù)等情況。在“機(jī)構(gòu)→國(guó)家(地區(qū))”檢索中，北京大學(xué)的發(fā)文為55 571，被引次數(shù)為712 811；在“研究領(lǐng)域→機(jī)構(gòu)”檢索中，北京大學(xué)的發(fā)文為55 570，被引次數(shù)為712 801；在“機(jī)構(gòu)→機(jī)構(gòu)”檢索中，其結(jié)果與“研究領(lǐng)域→機(jī)構(gòu)”所得結(jié)果一致。從北京大學(xué)的情況看，不同的組合得到的結(jié)果略有差別。接著，我們嘗試觀察中國(guó)的另一個(gè)機(jī)構(gòu)“INST MICROELECT”(中科院微電子研究所)，在“機(jī)構(gòu)→國(guó)家(地區(qū))”檢索中發(fā)文為1，被引次數(shù)為3，其中頂尖論文為8；在“研究領(lǐng)域→機(jī)構(gòu)”檢索中發(fā)文為624，被引次數(shù)為9 914，頂尖論文仍為8；在“機(jī)構(gòu)→機(jī)構(gòu)”檢索中所得結(jié)果與“研究領(lǐng)域→機(jī)構(gòu)”所得結(jié)果一致。從這一結(jié)果看，所得檢索結(jié)果差別非常大。通過(guò)頂尖論文數(shù)量來(lái)判斷，“機(jī)構(gòu)→國(guó)家(地區(qū))”所得結(jié)果可能存在一定問(wèn)題，因?yàn)榘l(fā)文為1不可能得到8篇頂尖論文。所以，雖然ESI提供了很全面的檢索功能，并且可能有多個(gè)組合檢索可以達(dá)到殊途同歸的目的，但是一定要謹(jǐn)慎比較各個(gè)結(jié)果，從而得到更為精準(zhǔn)的檢索結(jié)果。

圖1 通過(guò)“機(jī)構(gòu)+中國(guó)”查找方式得到的北京大學(xué)統(tǒng)計(jì)結(jié)果

圖2 通過(guò)“研究領(lǐng)域+機(jī)構(gòu)”查找方式得到的北京大學(xué)統(tǒng)計(jì)結(jié)果

圖3 通過(guò)“機(jī)構(gòu)+機(jī)構(gòu)”查找方式得到的北京大學(xué)統(tǒng)計(jì)結(jié)果

(五)ESI在處理重名時(shí)還不夠精確

重名問(wèn)題是Web of Knowledge中困擾已久的問(wèn)題，當(dāng)前該平臺(tái)已經(jīng)通過(guò)限定檢索可以更精準(zhǔn)地得到結(jié)果。但是，在ESI中重名問(wèn)題并沒(méi)有得到很好解決，尤其是在人名和機(jī)構(gòu)名方面，其處理功能還比較“粗糙”。

首先分析一下上文提及的“INST MICROELECT”，我們將這一機(jī)構(gòu)的8篇頂尖論文逐一打開(kāi)核查，發(fā)現(xiàn)沒(méi)有一篇屬于中國(guó)大陸，其中7篇屬于新加坡微電子研究所，1篇屬于俄羅斯微電子研究所。由此可見(jiàn)在機(jī)構(gòu)中存在“重名”的情況。接著，我們核查一位名為“Peng, K”的成果，結(jié)果顯示該人有5篇頂尖論文，逐一核查，發(fā)現(xiàn)有“Peng, Kang(1篇，美國(guó)天普大學(xué)，計(jì)算機(jī)領(lǐng)域)”“Peng, Ke(1篇，荷蘭萊頓大學(xué))”“Peng, Kathy(1篇，美國(guó)斯坦福大學(xué))”“Peng, Kang(2篇，中國(guó)中南大學(xué)，材料科學(xué)領(lǐng)域)，由此可見(jiàn)對(duì)于作者來(lái)說(shuō)，重名問(wèn)題廣泛存在，在ESI中并沒(méi)有得到很好處理。

(六)ESI中的研究領(lǐng)域與中國(guó)的學(xué)科分類(lèi)差別很大

在ESI中，總共提供了22個(gè)研究領(lǐng)域，它們中既有非常精細(xì)的領(lǐng)域，如分子生物學(xué)與遺傳學(xué)，也有比較粗的領(lǐng)域，如工程學(xué)，所以ESI把它們命名為研究領(lǐng)域(Research Fields)，而非學(xué)科。但是，中國(guó)不少人把這些研究領(lǐng)域當(dāng)成學(xué)科，這是認(rèn)識(shí)誤區(qū)。更為重要的是，這22個(gè)研究領(lǐng)域與中國(guó)《教育部學(xué)位授予和人才培養(yǎng)學(xué)科目錄》無(wú)法很好對(duì)應(yīng)。

表2 ESI研究領(lǐng)域與教育部學(xué)科分類(lèi)的“脫軌”現(xiàn)象

從表1看，ESI的研究領(lǐng)域和教育部學(xué)科分類(lèi)差別很大：一是一級(jí)學(xué)科和二級(jí)學(xué)科并列，如生物學(xué)(0710生物學(xué))與生物化學(xué)(071010生物化學(xué)與分子生物學(xué))；二是二級(jí)學(xué)科分為多個(gè)領(lǐng)域，如071010生物化學(xué)與分子生物學(xué)分為生物化學(xué)(與生物學(xué)并稱(chēng))和分子生物學(xué)兩個(gè)研究領(lǐng)域；三是一個(gè)領(lǐng)域?qū)?yīng)多個(gè)一級(jí)學(xué)科甚至跨學(xué)科門(mén)類(lèi)，如藥理學(xué)與毒理學(xué)這一研究領(lǐng)域?qū)?yīng)1007藥學(xué)和1004公共衛(wèi)生與預(yù)防醫(yī)學(xué)兩個(gè)一級(jí)學(xué)科，而環(huán)境學(xué)與生態(tài)學(xué)這一研究領(lǐng)域則跨了08工學(xué)和07理學(xué)兩大門(mén)類(lèi)；四是一個(gè)一級(jí)學(xué)科劃分為多個(gè)研究領(lǐng)域，其中最為明顯的是0710生物學(xué)分為生物學(xué)與生物化學(xué)、微生物學(xué)、分子生物學(xué)與遺傳學(xué)、神經(jīng)系統(tǒng)科學(xué)與行為學(xué)、植物學(xué)與動(dòng)物學(xué)6個(gè)研究領(lǐng)域；五是一些領(lǐng)域包含的范疇非常廣，如工程學(xué)實(shí)際包含多個(gè)一級(jí)學(xué)科。

從上面的分析可以看出，ESI的研究領(lǐng)域與教育部學(xué)科分類(lèi)無(wú)法很好對(duì)應(yīng)(表2)，有的領(lǐng)域較粗糙，有的領(lǐng)域則較精細(xì)。當(dāng)前中國(guó)的學(xué)科評(píng)估越來(lái)越著眼于一級(jí)學(xué)科，所以ESI提供的學(xué)科數(shù)據(jù)與我們的實(shí)際評(píng)估有些“脫軌”。

三、中國(guó)雙一流大學(xué)建設(shè)的應(yīng)對(duì)措施

從上面的分析來(lái)看，ESI是國(guó)外的產(chǎn)品，還存在一些問(wèn)題，尤其是如何有效的“本土化”還需要進(jìn)一步梳理。針對(duì)這些問(wèn)題，筆者提出相應(yīng)的應(yīng)對(duì)措施。

(一)精準(zhǔn)把握ESI中各指標(biāo)的內(nèi)涵、結(jié)果顯示、基準(zhǔn)線及閾值標(biāo)準(zhǔn)、檢索方式，這是合理利用ESI的基本出發(fā)點(diǎn)

首先我們必須了解ESI的三大指標(biāo)及其意義——頂級(jí)論文(Top papers)、高被引論文(Highly cited papers)和熱門(mén)論文(Hot papers)的內(nèi)涵。高被引論文是指一個(gè)研究領(lǐng)域內(nèi)，某年發(fā)表的論文迄今為止按照被引次數(shù)從高到低排序排在前1%的論文。熱門(mén)論文是指一個(gè)研究領(lǐng)域內(nèi)，近兩年發(fā)表的論文在最近兩個(gè)月的被引次數(shù)從高到底排在前0.1%的論文。頂級(jí)論文則是高被引論文和熱門(mén)論文的總和[2]。

需要強(qiáng)調(diào)的是，作者和機(jī)構(gòu)顯示的是在近10年被引次數(shù)排在前1%的作者和機(jī)構(gòu)，期刊和國(guó)家(地區(qū))則顯示近10年被引次數(shù)排在前50%的期刊和國(guó)家(地區(qū))[2]。所以，并不是所有作者、機(jī)構(gòu)、期刊和國(guó)家(地區(qū))都能得到顯示，而是顯示那些“代表性”的研究對(duì)象。

基準(zhǔn)線(Baseline)則主要理解高被引論文遴選標(biāo)準(zhǔn)，在ESI中常規(guī)顯示的是排在前1%的論文，但是也提供了其他各個(gè)百分比的標(biāo)準(zhǔn)，具體有0.01%、0.1%、1%、10%、20%和50%六個(gè)基準(zhǔn)線，所以，我們除了研究1%的高被引論文，還可以進(jìn)一步提高或者降低基準(zhǔn)線，從而發(fā)現(xiàn)更具競(jìng)爭(zhēng)力的論文。對(duì)于ESI，閾值(Threshold)給出了“ESI閾值”“高被引論文閾值”和“熱門(mén)論文閾值”，ESI閾值給出的是作者、機(jī)構(gòu)、期刊和國(guó)家(地區(qū))的最低被引次數(shù)，高被引論文閾值和熱門(mén)論文閾值則提供兩個(gè)指標(biāo)分研究領(lǐng)域、年度(月度)的最低被引次數(shù)。所以，通過(guò)ESI給定的基準(zhǔn)線和閾值，可以發(fā)現(xiàn)一所大學(xué)有潛力的學(xué)科、學(xué)者和論文，可以有重點(diǎn)、有針對(duì)性地支持它們進(jìn)一步發(fā)展。

需要再次強(qiáng)調(diào)的是，必須熟悉ESI的檢索功能，尤其是組合檢索的含義，特別是注意上文提及的可能出現(xiàn)的問(wèn)題。我們當(dāng)前只是發(fā)現(xiàn)了機(jī)構(gòu)發(fā)文和被引在不同組合檢索所得結(jié)果存在的不同問(wèn)題，至于是否還有其他“不一致”還需要進(jìn)一步核查。

(二)按照國(guó)內(nèi)通行的成果分配方式重新審視自身實(shí)際表現(xiàn)，對(duì)自己的實(shí)際水平做到心中有數(shù)

ESI的成果分配方式在中國(guó)科研管理中可能并不適用，一般很少將一篇論文的貢獻(xiàn)累計(jì)到每一個(gè)作者身上。ESI使用了這種方法，我們改變成果分配方式進(jìn)行重新統(tǒng)計(jì)困難很大，所以只能按照國(guó)內(nèi)通行的成果分配方式仔細(xì)檢查每所大學(xué)自身的具體情況，如果一所大學(xué)的大部分論文的第一作者或者通訊作者都不屬于這所大學(xué)，即使這所大學(xué)進(jìn)入了(尤其是剛剛進(jìn)入)ESI研究領(lǐng)域排行，實(shí)質(zhì)上仍然可能存在一定差距。但是，應(yīng)該鼓勵(lì)合作，在合作中不斷提升自己的水準(zhǔn)，盡早成為一個(gè)領(lǐng)域有影響力甚至領(lǐng)頭羊機(jī)構(gòu)。所以，每個(gè)機(jī)構(gòu)尤其是研究領(lǐng)域剛剛進(jìn)入ESI排行或者排名不穩(wěn)定(有時(shí)進(jìn)入有時(shí)又退出)更需要審視自身的實(shí)際表現(xiàn)。

(三)高度重視重名問(wèn)題，應(yīng)著眼于論文本身，尤其是在頂尖論文的判定方面更要謹(jǐn)慎

正如前文分析，在評(píng)價(jià)作者和機(jī)構(gòu)時(shí)會(huì)遇到重名的情況，這在實(shí)際應(yīng)用中需要重視，要將不屬于自己的論文排除。所以，每所大學(xué)要對(duì)自己的論文進(jìn)行審視，這與成果分配方式處理方式一致。對(duì)于一所大學(xué)的一個(gè)研究領(lǐng)域或者作者，要更加重視頂尖論文的歸屬，必須核查那些頂尖論文到底是否屬于這所大學(xué)的實(shí)際作者。當(dāng)前，國(guó)內(nèi)的科研獎(jiǎng)勵(lì)很大一部分是基于論文尤其是高水平論文，所以在ESI存在重名問(wèn)題的實(shí)際情況下，要謹(jǐn)慎對(duì)待頂尖論文的歸屬。

(四)重新審視研究領(lǐng)域，精準(zhǔn)把握每個(gè)領(lǐng)域確切包含的范疇

ESI實(shí)際上最基本的出發(fā)點(diǎn)就是“分類(lèi)評(píng)價(jià)”，這種分類(lèi)體現(xiàn)在研究領(lǐng)域細(xì)分上。但是，從上面的分析來(lái)看，ESI的研究領(lǐng)域與教育部的學(xué)科目錄很難很好對(duì)應(yīng)，很難將研究領(lǐng)域精確對(duì)應(yīng)教育部的學(xué)科目錄，所以評(píng)估世界一流學(xué)科需要謹(jǐn)慎。對(duì)于已經(jīng)非常精細(xì)的研究領(lǐng)域，如分子生物學(xué)與遺傳學(xué)需要清楚它們包含哪些期刊(SCI和SSCI給每個(gè)期刊劃分一個(gè)學(xué)科，ESI則將每個(gè)期刊強(qiáng)制性劃分到一個(gè)研究領(lǐng)域)，必須結(jié)合實(shí)際考察這些研究領(lǐng)域具體研究哪些內(nèi)容。對(duì)于比較粗的研究領(lǐng)域，如工程學(xué)則必須清楚它們包含哪些具體的學(xué)科領(lǐng)域，以及一所大學(xué)具體涉及到哪些學(xué)科領(lǐng)域、有哪些活躍作者、是否有高被引論文、熱門(mén)論文等。

當(dāng)然，了解研究領(lǐng)域的具體范疇，需要仔細(xì)研究每個(gè)研究領(lǐng)域包含的期刊有哪些，ESI提供了專(zhuān)門(mén)的期刊分類(lèi)列表，具體可參照ESI的幫助文件。然后，可以繼續(xù)結(jié)合和對(duì)照J(rèn)CR中SCI和SSCI的學(xué)科分類(lèi)(它們的分類(lèi)更加具體，SCI包括176個(gè)學(xué)科，SSCI包括56個(gè)學(xué)科)進(jìn)行進(jìn)一步的界定。當(dāng)然，有一些學(xué)者還就如何進(jìn)行學(xué)科細(xì)分提供了更為復(fù)雜的方法，具體方法在此不詳細(xì)展開(kāi)，請(qǐng)參見(jiàn)參考文獻(xiàn)[14]和[16]。

(五)更加重視高水平論文和拔尖人才的發(fā)現(xiàn)，為高校以及學(xué)科提供持久、根本動(dòng)力

高質(zhì)量人才、高水平成果是一所高校、一個(gè)學(xué)科可持續(xù)、高競(jìng)爭(zhēng)力發(fā)展的根本。從微觀上來(lái)講，高被引論文主要考察一篇論文的影響力，熱門(mén)論文則主要考察一篇論文的創(chuàng)新力，在這里統(tǒng)稱(chēng)為高水平論文。一個(gè)學(xué)科尤其是基礎(chǔ)學(xué)科的建設(shè)需要一批高水平論文的支撐，這些高水平論文可以大大提升一個(gè)學(xué)科的學(xué)術(shù)顯示度。在ESI中把高水平論文統(tǒng)稱(chēng)為頂尖論文(Top papers)，可以很方便地查找到一個(gè)學(xué)科、作者、機(jī)構(gòu)、期刊有哪些高水平論文。拔尖人才在ESI中主要是指一個(gè)學(xué)科排在前1%的作者，但是我們發(fā)現(xiàn)這些作者數(shù)量還比較多，比如社會(huì)科學(xué)綜合有就7 650人。Clarivate Analytics(當(dāng)前Web of Science平臺(tái)已經(jīng)全部交由公司運(yùn)營(yíng))采用更加嚴(yán)格的方法(基于高被引論文而非所有論文進(jìn)行統(tǒng)計(jì))確定了每個(gè)領(lǐng)域的高被引研究者(Highly cited researchers)[17]，這些拔尖人才影響力更高，比如社會(huì)科學(xué)綜合全球最終只有170人入選。拔尖人才是一個(gè)學(xué)科、一所高校在建設(shè)世界一流大學(xué)和一流學(xué)科中最為根本的智力保障。只有抓住人才，出大成果，一個(gè)學(xué)科才能更有話語(yǔ)權(quán)，才能在世界科技之林占有一席之地。

在當(dāng)前ESI還與中國(guó)實(shí)際結(jié)合不是很緊密的情況下，一所高校應(yīng)更加重視高水平論文和學(xué)者的挖掘，加大激勵(lì)和扶持，激發(fā)更大的創(chuàng)新力，產(chǎn)出更多的精品成果，通過(guò)積累盡快成為某一領(lǐng)域的具有國(guó)際影響力的學(xué)術(shù)重鎮(zhèn)。

四、小結(jié)

當(dāng)前，中國(guó)高校已經(jīng)把建設(shè)“雙一流”作為今后工作的重中之重，受到了廣泛的關(guān)注。ESI為當(dāng)前衡量一所高校、一個(gè)學(xué)科是否是世界一流高校、一流學(xué)科提供了很好的計(jì)量工具和參考。但是，ESI并不是萬(wàn)能的，也不是完美的，還存在著較多問(wèn)題，這些問(wèn)題既有計(jì)量方法的問(wèn)題，如成果分配的方式、高被引論文閾值的確定等，更為重要的問(wèn)題是ESI的研究領(lǐng)域與中國(guó)現(xiàn)行的學(xué)科分類(lèi)無(wú)法很好對(duì)應(yīng)，這就需要我們進(jìn)一步“加工”和“核查”，并進(jìn)行必要的技術(shù)處理。在認(rèn)清楚ESI本質(zhì)和指標(biāo)細(xì)節(jié)的基礎(chǔ)上，仔細(xì)分析自身論文的實(shí)際情況，不僅僅重視是否進(jìn)入ESI排行，還應(yīng)該清晰知曉自己的實(shí)際水平，真正做到知己知彼。在當(dāng)前無(wú)法大規(guī)模改變ESI統(tǒng)計(jì)方式的情況下，要更加重視高水平作者和高水平論文的發(fā)現(xiàn)，加大獎(jiǎng)勵(lì)和扶持，為學(xué)科良性循環(huán)和高速發(fā)展提供根本保障。所以，我們?cè)谠u(píng)估世界一流大學(xué)和學(xué)科時(shí)，既不能將ESI濫用，也不能棄而不用，在認(rèn)清楚其存在的問(wèn)題后根據(jù)自身情況進(jìn)行再統(tǒng)計(jì)和利用，這樣才能發(fā)揮其真正的參考作用。

[1]國(guó)務(wù)院.關(guān)于印發(fā)統(tǒng)籌推進(jìn)世界一流大學(xué)和一流學(xué)科建設(shè)總體方案的通知[EB/OL]. (2015-11-05).[2016-12-28].http://www.gov.cn/zhengce/content/2015-11/05/content_10269.htm.

[2]湯姆森路透集團(tuán).ESI數(shù)據(jù)庫(kù)[DB/OL].[2016-12-28].http://wokinfo.com/products_tools/analytical/essentialscienceindicators.

[3]熊璐. 美國(guó)《基本科學(xué)指標(biāo)數(shù)據(jù)庫(kù)》的研究與應(yīng)用[D]. 武漢：武漢大學(xué), 2005.

[4]劉雪立, 張?jiān)姌?lè), 蓋雙雙.基于論文產(chǎn)出的科研績(jī)效評(píng)價(jià)——ESI和InCites應(yīng)用研究綜述[J]. 現(xiàn)代情報(bào), 2016, 36(3):172-177.

[5]劉雪立. 基于Web of Science和ESI數(shù)據(jù)庫(kù)高被引論文的界定方法[J]. 中國(guó)科技期刊研究, 2012, 23(6):975-978.

[6]MA R, NI C, QIU J. Scientific research competitiveness of world universities in computer science[J]. Scientometrics, 2008, 76(2):245-260.

[7]邱均平, 楊瑞仙. 基于ESI數(shù)據(jù)庫(kù)的材料科學(xué)領(lǐng)域文獻(xiàn)計(jì)量分析研究[J]. 情報(bào)科學(xué), 2010(8):1121-1126.

[8]何春建. 南京師范大學(xué)2005年-2015年科技論文產(chǎn)出統(tǒng)計(jì)與分析——基于Web of Science、ESI、InCites數(shù)據(jù)庫(kù)[J]. 南京師大學(xué)報(bào)(自然科學(xué)版), 2016, 39(1):145-152.

[9]寇繼虹, 郭雨橙. 基于WOS和ESI的武漢大學(xué)科研產(chǎn)出分析[J]. 信息資源管理學(xué)報(bào), 2016(1):97-104.

[10]陳燕. 基于ESI的山東省省屬高?？蒲薪y(tǒng)計(jì)分析[J]. 中國(guó)科技信息, 2016(21):112-114.

[11]豐國(guó)政. 基于ESI數(shù)據(jù)庫(kù)的廣東重點(diǎn)建設(shè)高校科研競(jìng)爭(zhēng)力計(jì)量分析[J].高教探索, 2016(3):41-45.

[12]邱均平, 趙蓉英, 郭鳳嬌. 世界一流大學(xué)及學(xué)科競(jìng)爭(zhēng)力評(píng)價(jià)報(bào)告[M].科學(xué)出版社, 2015.

[13]邱均平, 趙蓉英, 馬瑞敏,等. 世界大學(xué)科研競(jìng)爭(zhēng)力排行榜是如何產(chǎn)生的?[J]. 高教發(fā)展與評(píng)估, 2006, 22(3):33-38.

[14]梁瑛, 鄒小筑. ESI工程類(lèi)與中國(guó)教育部學(xué)科分類(lèi)的對(duì)比研究[J]. 農(nóng)業(yè)圖書(shū)情報(bào)學(xué)刊, 2016, 28(1):76-81.

[15]Klein D B, Chiang E. The Social Science Citation Index: A Black Box—with an Ideological Bias?[J]. Econ Journal Watch, 2004, 1(1):134-165.

[16]馬瑞敏. 學(xué)術(shù)期刊影響力評(píng)價(jià)研究——基于歷時(shí)視角的新實(shí)踐[J]. 中國(guó)科技期刊研究, 2014, 25(11):1397-1403.

[17]Clarivate Analytics.Highly cited reserachers[DB/OL].[2016-12-28].http://hcr.stateofinnovation.com.

Theproblemsandsolutionsforworld-classuniversitiesandsubjectsevaluationusingESI

SHI Zhuqin1,2, ZHU Xianqi1

(1.SchoolofEconomicsandManagement,TaiyuanUniversityofTechnology,Taiyuan030024,P.R.China; 2.SchoolofEconomicsandManagement,TaiyuanUniversityofScienceandTechnology,Taiyuan030024,P.R.China)

ESI, based on SCI and SSCI, plays an important role in world-class universities and subjects evaluation and attracts broad attentions from domestic universities. Under this background, we discussed the six problems in world-class universities and subjects evaluation using ESI, such as the differences between the method of output allocation in ESI and that used in general in China; the different retrieval results for the same evaluation objects. On the basis of these problems, corresponding solutions were put forward, such as accurately grasping the connotation of indicators, result shows, baselines and thresholds, and retrieval methods; further valuing the discovery of high-level papers and scientific elites.

ESI; first-class universities; first-class subjects; educational evaluation

10.11835/j.issn.1008-5831.2017.06.009

史竹琴，朱先奇.ESI在世界一流大學(xué)與學(xué)科評(píng)價(jià)中的問(wèn)題與對(duì)策研究[J].重慶大學(xué)學(xué)報(bào)(社會(huì)科學(xué)版),2017(6):84-91.

FormatSHI Zhuqin, ZHU Xianqi.The problems and solutions for world-class universities and subjects evaluation using ESI[J].Journal of Chongqing University(Social Science Edition),2017(6):84-91.

2017-04-29

山西省高校人文社科重點(diǎn)研究基地項(xiàng)目“山西省本科高校社會(huì)科學(xué)類(lèi)學(xué)科競(jìng)爭(zhēng)力評(píng)價(jià)研究(2016309)”；山西省高?！?31”領(lǐng)軍人才工程項(xiàng)目“中西部地方高校績(jī)效評(píng)價(jià)研究(2015052009)”

史竹琴(1979-)，女，山西襄汾人，太原理工大學(xué)經(jīng)濟(jì)與管理學(xué)院博士研究生，太原科技大學(xué)經(jīng)濟(jì)與管理學(xué)院講師，主要從事科技創(chuàng)新與知識(shí)管理、高等教育管理研究，Email:574610321@qq.com；朱先奇(1954-)，男，山西定襄人，太原理工大學(xué)經(jīng)濟(jì)與管理學(xué)院教授，博士研究生導(dǎo)師，主要從事科技創(chuàng)新與知識(shí)管理、高等教育管理研究。

G40-058.1

A

1008-5831(2017)06-0084-08

(責(zé)任編輯 彭建國(guó))