姚曉娜 祝忠明 劉巍 張旺強(qiáng)

（中國(guó)科學(xué)院西北生態(tài)環(huán)境資源研究院文獻(xiàn)情報(bào)中心，蘭州 730000）

科研評(píng)價(jià)具有完善科研資源分配、提升機(jī)構(gòu)管理水平、促進(jìn)科研機(jī)構(gòu)可持續(xù)發(fā)展的意義。同行評(píng)議和文獻(xiàn)計(jì)量是目前科研評(píng)價(jià)使用的主要方法。同行評(píng)議需要耗費(fèi)較多的人力和時(shí)間，結(jié)果可能存在一定的主觀性；而文獻(xiàn)計(jì)量采用定量的方法對(duì)科研產(chǎn)出進(jìn)行統(tǒng)計(jì)和評(píng)價(jià)，結(jié)果較為客觀，被越來(lái)越多地用于科研評(píng)價(jià)[1]?？蒲挟a(chǎn)出情況在各個(gè)世界著名大學(xué)排行中都是必要的核心數(shù)據(jù)：在U.S. News Report全球最佳大學(xué)排行榜中，文獻(xiàn)計(jì)量學(xué)指標(biāo)占65%；泰晤士高等教育排名中，研究產(chǎn)出量和論文引用率指標(biāo)占總分比達(dá)60%[2]。英國(guó)研究卓越框架（Research Excellence Framework，REF）科研評(píng)價(jià)體系[3]中的科研產(chǎn)出占比為65%，評(píng)價(jià)指標(biāo)不僅包括期刊論文、會(huì)議論文及專利，還包括產(chǎn)品、設(shè)備、新材料、軟件及研究報(bào)告等。機(jī)構(gòu)知識(shí)庫(kù)作為科研機(jī)構(gòu)保存和管理知識(shí)成果的主要平臺(tái)和構(gòu)建科研基礎(chǔ)設(shè)施的重要組件，具備了在科研評(píng)估中承擔(dān)文獻(xiàn)計(jì)量任務(wù)的基礎(chǔ)條件。近年來(lái)，機(jī)構(gòu)知識(shí)庫(kù)在傳統(tǒng)的知識(shí)收集、存儲(chǔ)、傳播功能上，擴(kuò)展了知識(shí)管理及審計(jì)、科研規(guī)劃及項(xiàng)目管理、科研評(píng)價(jià)等服務(wù)，從而更好地嵌入科研流程和支撐科研管理服務(wù)。機(jī)構(gòu)知識(shí)庫(kù)不再是孤立的系統(tǒng)，而轉(zhuǎn)變?yōu)檎麄€(gè)科研管理系統(tǒng)的有機(jī)構(gòu)成，機(jī)構(gòu)知識(shí)庫(kù)已經(jīng)“消失在科研流程中”[4]。

中國(guó)科學(xué)院（以下簡(jiǎn)稱“中科院”）將機(jī)構(gòu)知識(shí)庫(kù)的建設(shè)情況納入全院年度科研信息化評(píng)估指標(biāo)，部分研究所將其作為年度科研成果統(tǒng)計(jì)獎(jiǎng)勵(lì)基礎(chǔ)和依據(jù)，機(jī)構(gòu)知識(shí)庫(kù)提供知識(shí)資產(chǎn)統(tǒng)計(jì)服務(wù)來(lái)支持有關(guān)科研成果的統(tǒng)計(jì)分析和輔助支持有關(guān)評(píng)估應(yīng)用工作。中國(guó)農(nóng)業(yè)科學(xué)院機(jī)構(gòu)知識(shí)庫(kù)[5]也借助各院所科研處，推行科研管理、項(xiàng)目申報(bào)、成果評(píng)價(jià)一體化服務(wù)，將機(jī)構(gòu)知識(shí)庫(kù)發(fā)展與科研績(jī)效評(píng)價(jià)掛鉤。中國(guó)人民大學(xué)的機(jī)構(gòu)知識(shí)庫(kù)對(duì)每篇論文的收錄及引用情況進(jìn)行標(biāo)識(shí)，設(shè)置人氣指數(shù)、評(píng)價(jià)、分享、收藏等指標(biāo)用于統(tǒng)計(jì)機(jī)構(gòu)知識(shí)庫(kù)中的文獻(xiàn)使用情況，定期發(fā)布ESI學(xué)科動(dòng)態(tài)[6]。西安交通大學(xué)機(jī)構(gòu)知識(shí)庫(kù)在文獻(xiàn)詳細(xì)信息頁(yè)面中嵌入Altmetrics指標(biāo)聚合工具PlumX，評(píng)價(jià)指標(biāo)包括使用、引用、獲取、社交媒體及討論等多個(gè)方面；提供年份和機(jī)構(gòu)的成果類型統(tǒng)計(jì)、訪問(wèn)量統(tǒng)計(jì)、各類成果產(chǎn)出趨勢(shì)統(tǒng)計(jì)、學(xué)院產(chǎn)出對(duì)比統(tǒng)計(jì)等科研評(píng)價(jià)功能[7]。復(fù)旦大學(xué)上海醫(yī)學(xué)院機(jī)構(gòu)知識(shí)庫(kù)通過(guò)作者社交網(wǎng)絡(luò)和語(yǔ)義分析技術(shù)，能夠把海量的中外文數(shù)據(jù)準(zhǔn)確地分配到對(duì)應(yīng)的機(jī)構(gòu)及學(xué)者個(gè)人，大大地提高了科研評(píng)價(jià)的正確性。此外還支持按院系、學(xué)科以及個(gè)人進(jìn)行科研對(duì)比分析，可比較的評(píng)價(jià)指標(biāo)包括成果數(shù)量、引用次數(shù)、H指數(shù)、TOP學(xué)科發(fā)文量、TOP期刊發(fā)文量、SCI分區(qū)發(fā)文量和中科院分區(qū)發(fā)文量等[8]。

1 機(jī)構(gòu)知識(shí)庫(kù)科研評(píng)價(jià)應(yīng)用分類

科研評(píng)價(jià)的對(duì)象是各類科研實(shí)體，如機(jī)構(gòu)、項(xiàng)目、人員、團(tuán)隊(duì)及成果等，而機(jī)構(gòu)知識(shí)庫(kù)作為機(jī)構(gòu)保存和傳播學(xué)術(shù)成果的數(shù)據(jù)庫(kù)，本身對(duì)各類科研實(shí)體的信息表示及管理的能力有限。針對(duì)機(jī)構(gòu)知識(shí)庫(kù)科研信息管理能力不足的問(wèn)題，許多研究人員通過(guò)嘗試引入科研信息管理的機(jī)制來(lái)優(yōu)化或替代傳統(tǒng)機(jī)構(gòu)知識(shí)庫(kù)，相關(guān)應(yīng)用可以分為以下三類。

第一類是擴(kuò)展機(jī)構(gòu)知識(shí)庫(kù)本身，支持對(duì)與科研評(píng)價(jià)相關(guān)的科研實(shí)體進(jìn)行存儲(chǔ)、集成及管理，增加相關(guān)功能模塊，開(kāi)發(fā)面向用戶需求的科研評(píng)價(jià)服務(wù)。如美國(guó)普渡大學(xué)（Purdue University）機(jī)構(gòu)知識(shí)庫(kù)可以把資助機(jī)構(gòu)的數(shù)據(jù)管理規(guī)劃轉(zhuǎn)化為基于科研過(guò)程的數(shù)據(jù)管理模塊，支持項(xiàng)目組圍繞科研流程對(duì)各階段的各類數(shù)據(jù)進(jìn)行上傳、共享、轉(zhuǎn)移、保存、修改等，以及數(shù)據(jù)的采集、清理、審核、轉(zhuǎn)換、提取、融匯、關(guān)聯(lián)、可視化等，成為項(xiàng)目組的科研管理及統(tǒng)計(jì)分析平臺(tái)[9]。香港大學(xué)的機(jī)構(gòu)知識(shí)庫(kù)在2009年由DSpace擴(kuò)展為DSpace-CRIS，從只提供開(kāi)放存儲(chǔ)全文索引的傳統(tǒng)機(jī)構(gòu)知識(shí)庫(kù)提升為科研信息管理系統(tǒng)，不僅可以查詢、保存、展示、分析香港大學(xué)相關(guān)的科研信息，還可以管理科研人員、院系、項(xiàng)目、專利、出版物等科研實(shí)體，支持不同層級(jí)的科研統(tǒng)計(jì)和評(píng)價(jià)分析[10]。CNKI機(jī)構(gòu)知識(shí)庫(kù)依托于中國(guó)知網(wǎng)，保證了機(jī)構(gòu)知識(shí)庫(kù)數(shù)據(jù)的完整性和持續(xù)性，以及學(xué)術(shù)評(píng)價(jià)數(shù)據(jù)的全國(guó)性、全球性，在此基礎(chǔ)上開(kāi)發(fā)了一系列支持科研管理、評(píng)價(jià)和學(xué)科建設(shè)的擴(kuò)展服務(wù)，如查收查引、學(xué)科評(píng)估、科研考評(píng)等，支持科研管理和學(xué)科建設(shè)方面的決策[11]。

第二類是對(duì)已有的科研信息管理系統(tǒng)進(jìn)行擴(kuò)展，集成學(xué)術(shù)成果管理及共享功能，起到機(jī)構(gòu)知識(shí)庫(kù)的作用。如最初由丹麥奧爾堡大學(xué)（Aalborg University）開(kāi)發(fā)的科研信息管理系統(tǒng)Pure，同時(shí)具有機(jī)構(gòu)知識(shí)庫(kù)的功能，目前已被愛(ài)思唯爾公司收購(gòu)。其主要功能包括快速生成機(jī)構(gòu)和科研人員簡(jiǎn)歷，對(duì)管理目標(biāo)進(jìn)行實(shí)時(shí)分析和績(jī)效追蹤，支持定制和共享各種報(bào)告[12]。英國(guó)愛(ài)丁堡大學(xué)（the University of Edinburgh）于2011年采用Pure同時(shí)作為機(jī)構(gòu)知識(shí)庫(kù)和科研信息管理系統(tǒng)，收集了人員、成果產(chǎn)出、科研活動(dòng)及獎(jiǎng)勵(lì)、文獻(xiàn)計(jì)量數(shù)據(jù)、項(xiàng)目及資助信息、科研數(shù)據(jù)以及使用數(shù)據(jù)等，定期與人事系統(tǒng)、財(cái)務(wù)系統(tǒng)進(jìn)行同步，經(jīng)常應(yīng)用于科研評(píng)價(jià)工作。

第三類是將機(jī)構(gòu)知識(shí)庫(kù)與科研信息管理系統(tǒng)有機(jī)鏈接，兩個(gè)系統(tǒng)同時(shí)運(yùn)行并進(jìn)行信息交換，機(jī)構(gòu)知識(shí)庫(kù)從科研信息管理系統(tǒng)中獲取科研實(shí)體信息，科研信息管理系統(tǒng)從機(jī)構(gòu)知識(shí)庫(kù)中獲取學(xué)術(shù)成果及文獻(xiàn)計(jì)量等信息，兩者分別服務(wù)于不同的需求和領(lǐng)域，各自發(fā)揮不同的作用?？蒲行畔⒐芾硐到y(tǒng)以CRIS（Current Research Information Systems）系統(tǒng)為代表，CRIS系統(tǒng)可以為科研人員、科研管理部門、高校及科研機(jī)構(gòu)、項(xiàng)目基金管理部門等收集、管理并提供該領(lǐng)域內(nèi)的各類科研產(chǎn)出元數(shù)據(jù)，解決了在復(fù)雜的科研環(huán)境下對(duì)科研成果多角度、全方位信息化管理的問(wèn)題[13]。許多科研人員探索以CRIS+IR的組合服務(wù)構(gòu)建語(yǔ)義環(huán)境下的研究信息綜合管理框架，通過(guò)IR實(shí)現(xiàn)機(jī)構(gòu)成果保存、傳播與共享，通過(guò)CRIS實(shí)現(xiàn)成果登記注冊(cè)、研究評(píng)估和自動(dòng)報(bào)告。瑞典隆德大學(xué)（Lund University）將機(jī)構(gòu)知識(shí)庫(kù)與CRIS系統(tǒng)進(jìn)行集成，支持在線學(xué)習(xí)、團(tuán)隊(duì)協(xié)作、成果可視化、文獻(xiàn)計(jì)量、地圖檢索等，并可生成成果發(fā)布列表及其他科研信息[14]。挪威CRIStin是為集成機(jī)構(gòu)知識(shí)庫(kù)和CRIS系統(tǒng)開(kāi)發(fā)的，可以對(duì)科研機(jī)構(gòu)的人員、項(xiàng)目、成果等進(jìn)行統(tǒng)計(jì)分析，支持科研機(jī)構(gòu)績(jī)效評(píng)價(jià)及考核，從而作為政府撥款和項(xiàng)目資助的依據(jù)[15]。

上述三類應(yīng)用各有利弊，科研機(jī)構(gòu)要根據(jù)自身需求和現(xiàn)有條件選擇相應(yīng)的方式。第一類應(yīng)用比較適合評(píng)價(jià)需求主要為成果統(tǒng)計(jì)的情況，對(duì)機(jī)構(gòu)知識(shí)庫(kù)本身的改動(dòng)較少，如果評(píng)價(jià)需求涉及項(xiàng)目、基金等更多科研信息的時(shí)候，對(duì)機(jī)構(gòu)知識(shí)庫(kù)的改動(dòng)較多，成本較高；第二類應(yīng)用要求科研管理信息系統(tǒng)具有機(jī)構(gòu)知識(shí)庫(kù)的功能，而大多數(shù)機(jī)構(gòu)的科研管理信息系統(tǒng)主要在機(jī)構(gòu)內(nèi)部使用，與機(jī)構(gòu)知識(shí)庫(kù)開(kāi)放獲取的理念相悖，實(shí)施起來(lái)難度較高；第三類應(yīng)用對(duì)機(jī)構(gòu)已有的科研管理信息系統(tǒng)和機(jī)構(gòu)知識(shí)庫(kù)改動(dòng)少，但對(duì)系統(tǒng)間的集成和互操作要求較高。euroCRIS于2015年啟動(dòng)了一項(xiàng)關(guān)于CRIS/IR的調(diào)查，結(jié)論是CRIS和IR相輔相成，不能互相取代，IR作為管理出版物及論文等成果的首選，CRIS通常用于管理機(jī)構(gòu)科研信息，其中包括了成果的元數(shù)據(jù)[16]。目前國(guó)內(nèi)的相關(guān)應(yīng)用大多屬于第一類，科研評(píng)價(jià)服務(wù)主要還是對(duì)成果收錄、引用和使用情況的簡(jiǎn)單統(tǒng)計(jì)。而國(guó)外在第三類的相關(guān)應(yīng)用較多，更關(guān)注機(jī)構(gòu)知識(shí)庫(kù)和科研信息管理系統(tǒng)的集成及互操作。

2 機(jī)構(gòu)知識(shí)庫(kù)科研評(píng)價(jià)關(guān)鍵問(wèn)題分析

2.1 數(shù)據(jù)來(lái)源

數(shù)據(jù)來(lái)源的完整和準(zhǔn)確性決定評(píng)價(jià)分析結(jié)果是否可信。張曉林[17]提出首先要評(píng)價(jià)和核實(shí)機(jī)構(gòu)的知識(shí)產(chǎn)出在多大程度上已經(jīng)收集進(jìn)機(jī)構(gòu)知識(shí)庫(kù)，為此可以與綜合文摘索引系統(tǒng)進(jìn)行比對(duì)分析，或者與論文引證系統(tǒng)進(jìn)行對(duì)比分析，或者與科研管理/學(xué)位管理系統(tǒng)申報(bào)數(shù)據(jù)進(jìn)行比對(duì)分析。通過(guò)人工方式對(duì)成果數(shù)據(jù)進(jìn)行檢查和核對(duì)費(fèi)時(shí)費(fèi)力，Scopus、Web of Scicence、arXiv等綜合文摘索引系統(tǒng)提供了機(jī)器可讀的接口，可以自動(dòng)采集已發(fā)表成果的元數(shù)據(jù)（包括收錄類別信息）。一些論文引證系統(tǒng)可以提供引用次數(shù)、期刊影響因子及分區(qū)（JCR分區(qū)、中科院分區(qū)）、學(xué)科排名等重要的評(píng)價(jià)指標(biāo)數(shù)據(jù)。不過(guò)這些機(jī)器可讀的接口一般是需要購(gòu)買相應(yīng)的服務(wù)才可以使用。

學(xué)術(shù)機(jī)構(gòu)在基于機(jī)構(gòu)知識(shí)庫(kù)開(kāi)展科研評(píng)價(jià)服務(wù)時(shí)，應(yīng)充分利用已購(gòu)買的文摘索引服務(wù)接口。此外，還可以將機(jī)構(gòu)知識(shí)庫(kù)與機(jī)構(gòu)已有的科研管理/學(xué)位管理系統(tǒng)進(jìn)行系統(tǒng)對(duì)接和數(shù)據(jù)集成，如西安交通大學(xué)的機(jī)構(gòu)知識(shí)庫(kù)集成了本校的國(guó)際論文庫(kù)和學(xué)位論文庫(kù)，香港大學(xué)學(xué)術(shù)庫(kù)集成了來(lái)自研究成果申報(bào)系統(tǒng)的數(shù)據(jù)。

2.2 數(shù)據(jù)查重及關(guān)聯(lián)

在統(tǒng)計(jì)分析之前，需要對(duì)數(shù)據(jù)進(jìn)行清洗，識(shí)別重復(fù)的成果、科研人員以及項(xiàng)目等科研實(shí)體，匹配并建立正確的關(guān)聯(lián)關(guān)系。在對(duì)評(píng)價(jià)對(duì)象進(jìn)行唯一標(biāo)識(shí)的基礎(chǔ)上，還要通過(guò)各種匹配策略，實(shí)現(xiàn)人員、項(xiàng)目與研究成果之間的多向關(guān)聯(lián)和統(tǒng)計(jì)。對(duì)于從文摘索引系統(tǒng)集成的成果，可以通過(guò)文摘索引系統(tǒng)分配的唯一標(biāo)識(shí)符（如DOI、WOS ID、PubMed ID等）進(jìn)行查重。由于人員名稱存在同名同姓、漢字拼音多元化、錯(cuò)字、非拼音的英文名稱等問(wèn)題，僅憑成果元數(shù)據(jù)中的作者名稱，很難識(shí)別并匹配到正確的科研人員，造成論文和引用無(wú)法正確統(tǒng)計(jì)的問(wèn)題，從而影響科研人員評(píng)價(jià)的結(jié)果。馬雨萌等[18]指出科研人員是科研機(jī)構(gòu)的主體，以“人”為中心計(jì)量科研影響力，作為機(jī)構(gòu)評(píng)價(jià)的重要參考?？苫贠RCID（Open Researcher and Contributor Identifier，開(kāi)放研究者和貢獻(xiàn)者標(biāo)識(shí)符）圍繞科研人員生成成果清單，并集成科研成果在各個(gè)系統(tǒng)的利用數(shù)據(jù)。ORCID作為研究者標(biāo)識(shí)符方面的通用國(guó)際規(guī)范，通過(guò)為研究者提供16位唯一標(biāo)識(shí)符的注冊(cè)來(lái)解決作者名稱歧義問(wèn)題。

建議各學(xué)術(shù)機(jī)構(gòu)在具體應(yīng)用時(shí)，結(jié)合外部公共服務(wù)（如文摘索引系統(tǒng)、ORCID）和機(jī)構(gòu)內(nèi)部數(shù)據(jù)庫(kù)（如人員數(shù)據(jù)庫(kù)）為各類科研實(shí)體分配唯一標(biāo)識(shí)符，在此基礎(chǔ)上進(jìn)行識(shí)別管理，需要的時(shí)候可加以人工輔助，通過(guò)半自動(dòng)的方式進(jìn)行查重和關(guān)聯(lián)。

2.3 評(píng)價(jià)指標(biāo)及方法

科研評(píng)價(jià)從某種程度上來(lái)說(shuō)可以看作是采用文獻(xiàn)計(jì)量學(xué)的方法對(duì)知識(shí)成果及相關(guān)實(shí)體進(jìn)行統(tǒng)計(jì)分析。趙潔潔等[19]對(duì)機(jī)構(gòu)知識(shí)庫(kù)學(xué)術(shù)評(píng)價(jià)體系進(jìn)行總結(jié)，把評(píng)價(jià)指標(biāo)分為傳統(tǒng)計(jì)量學(xué)指標(biāo)（收錄、引文、影響因子、核心期刊等）和替代計(jì)量的指標(biāo)（使用、獲取、提及、社交媒體等）。

在實(shí)際應(yīng)用中，建議學(xué)術(shù)機(jī)構(gòu)可以根據(jù)自身的需求，對(duì)上述指標(biāo)體系進(jìn)行靈活擴(kuò)展或綜合計(jì)算。在發(fā)文量方面，除了統(tǒng)計(jì)院系/部門、人員、項(xiàng)目等不同實(shí)體的發(fā)文量，論文、專利及獎(jiǎng)勵(lì)的發(fā)文量可作為單獨(dú)的評(píng)價(jià)指標(biāo)進(jìn)行統(tǒng)計(jì)；通過(guò)統(tǒng)計(jì)各個(gè)年份的發(fā)文量可以評(píng)價(jià)目標(biāo)統(tǒng)計(jì)對(duì)象的發(fā)文趨勢(shì)；通過(guò)統(tǒng)計(jì)國(guó)際合作發(fā)文量及國(guó)際合作發(fā)文占比來(lái)評(píng)估國(guó)際合作的水平。在引文評(píng)價(jià)方面，除了基本的引用次數(shù)，還可以計(jì)算篇均被引次數(shù)、人均被引次數(shù)、高被引論文數(shù)、高被引論文百分比以及H指數(shù)等擴(kuò)展指標(biāo)，進(jìn)行更加有效的評(píng)價(jià)。替代計(jì)量中的使用統(tǒng)計(jì)一般是指成果在機(jī)構(gòu)知識(shí)庫(kù)內(nèi)部的瀏覽量和下載量，這些數(shù)據(jù)由系統(tǒng)自動(dòng)記錄。某些文摘索引系統(tǒng)和學(xué)術(shù)網(wǎng)站也會(huì)提供成果在自身系統(tǒng)里的使用情況，可以通過(guò)相應(yīng)的接口集成到機(jī)構(gòu)知識(shí)庫(kù)中。成果的人氣指數(shù)、評(píng)價(jià)、分享以及收藏等行為，可以通過(guò)PlumX等Altmetric聚合指標(biāo)工具[20]獲取。

2.4 元數(shù)據(jù)標(biāo)準(zhǔn)及互操作

為更好地了解科研活動(dòng)的整體形勢(shì)，優(yōu)化科研資源配置，高層次的管理者需要對(duì)多個(gè)機(jī)構(gòu)的統(tǒng)計(jì)結(jié)果進(jìn)行集成和比較。統(tǒng)一的元數(shù)據(jù)標(biāo)準(zhǔn)可以在整合數(shù)據(jù)的過(guò)程中減少重復(fù)勞動(dòng)，以及煩瑣的跨系統(tǒng)元數(shù)據(jù)對(duì)應(yīng)工作。歐盟科研元數(shù)據(jù)標(biāo)準(zhǔn)CERIF（the Common European Research Information Format，通用科研信息格式）[21]從科研管理流程出發(fā)，分析和明確了研究計(jì)劃、項(xiàng)目、成果、出版、專利、研究者等各個(gè)環(huán)節(jié)所涉及的主要科研實(shí)體及其科研關(guān)系，從而支持科研信息的交換和共享。CERIF定義了評(píng)價(jià)實(shí)體（measurement）和指標(biāo)實(shí)體（indicator）來(lái)擴(kuò)展定量評(píng)價(jià)能力，通過(guò)與機(jī)構(gòu)實(shí)體、成果實(shí)體的關(guān)聯(lián)，描述科學(xué)研究活動(dòng)的評(píng)價(jià)結(jié)果，支持跨機(jī)構(gòu)間進(jìn)行標(biāo)準(zhǔn)化的評(píng)估。CERIF模型目前廣泛地應(yīng)用于歐盟組織的科研信息管理系統(tǒng)及機(jī)構(gòu)知識(shí)庫(kù)中，香港大學(xué)學(xué)術(shù)庫(kù)DSpace-CRIS也是基于CERIF模型構(gòu)建的。CERIF模型沒(méi)有對(duì)具體的評(píng)價(jià)指標(biāo)和方法作出定義，因此對(duì)于某些機(jī)構(gòu)知識(shí)庫(kù)內(nèi)部的統(tǒng)計(jì)，如使用情況的統(tǒng)計(jì)，仍然缺乏統(tǒng)一的標(biāo)準(zhǔn)來(lái)互操作。英國(guó)PIRUS項(xiàng)目（Publisher and Institutional Repository Usage Statistics Project）研究利用COUNTER標(biāo)準(zhǔn)[22]統(tǒng)計(jì)機(jī)構(gòu)知識(shí)庫(kù)成果的使用情況，從英國(guó)各個(gè)成員知識(shí)庫(kù)中獲取原始使用數(shù)據(jù)（由知識(shí)庫(kù)推送給IRUS-UK），然后統(tǒng)一進(jìn)行分析和處理，生成符合COUNTER標(biāo)準(zhǔn)的統(tǒng)計(jì)報(bào)告，通過(guò)SUSHI協(xié)議提供給各個(gè)成員知識(shí)庫(kù)或者其他集成服務(wù)系統(tǒng)，實(shí)現(xiàn)了使用統(tǒng)計(jì)數(shù)據(jù)的共享和互操作。

建議學(xué)術(shù)機(jī)構(gòu)在制定元數(shù)據(jù)標(biāo)準(zhǔn)和互操作方案時(shí)，盡量參考和借鑒國(guó)外已有標(biāo)準(zhǔn)和協(xié)議，如CERIF模型和COUNTER標(biāo)準(zhǔn)，如果當(dāng)前系統(tǒng)內(nèi)部已有數(shù)據(jù)模型改動(dòng)難度較大，可通過(guò)接口的方式，將已有數(shù)據(jù)模型部分映射到CERIF模型描述并發(fā)布，便于實(shí)現(xiàn)與第三方系統(tǒng)的互操作。

3 基于CSpace的機(jī)構(gòu)知識(shí)庫(kù)科研評(píng)價(jià)功能實(shí)現(xiàn)

3.1 系統(tǒng)功能框架

本文基于中科院機(jī)構(gòu)知識(shí)庫(kù)CSpace系統(tǒng)進(jìn)行若干科研評(píng)價(jià)功能的開(kāi)發(fā)和實(shí)現(xiàn)，系統(tǒng)功能框架如圖1所示。

圖1 基于CSpace的科研評(píng)價(jià)功能框架

系統(tǒng)支持多種途徑的數(shù)據(jù)來(lái)源，除了科研人員或圖書(shū)館館員可以手動(dòng)提交和系統(tǒng)管理員批量導(dǎo)入之外，還支持通過(guò)iSwitch服務(wù)自動(dòng)集成本機(jī)構(gòu)已發(fā)表的學(xué)術(shù)成果，并定期更新收錄情況和引用次數(shù)；此外，還可以基于中科院核心期刊名稱規(guī)范服務(wù)獲取期刊的收錄類別、影響因子、5年影響因子、JCR分區(qū)以及中科院分區(qū)等信息，從技術(shù)角度保證了數(shù)據(jù)來(lái)源的完整和準(zhǔn)確。

數(shù)據(jù)查重方面，系統(tǒng)為成果定義了系統(tǒng)內(nèi)部唯一的標(biāo)識(shí)符，存繳流程中也有一定的查重機(jī)制。對(duì)于從文摘索引系統(tǒng)集成的成果，可以通過(guò)文摘索引系統(tǒng)分配的唯一標(biāo)識(shí)符（如DOI、WOS ID、PubMed ID等）進(jìn)行查重。對(duì)于科研人員或研究者，支持采用ResearcherID或ORCID作為作者的唯一標(biāo)識(shí)符。系統(tǒng)借助用戶別名庫(kù)，給用戶分配本地化的唯一標(biāo)識(shí)符，自動(dòng)匹配作品和用戶間可能的關(guān)聯(lián)，并發(fā)送郵件給對(duì)應(yīng)用戶認(rèn)領(lǐng)，保存認(rèn)領(lǐng)結(jié)果，解決了因作者姓名變體形式導(dǎo)致的難以建立作者與作品之間準(zhǔn)確關(guān)聯(lián)關(guān)系的問(wèn)題。

評(píng)價(jià)指標(biāo)方面，系統(tǒng)支持大部分傳統(tǒng)計(jì)量學(xué)指標(biāo)的統(tǒng)計(jì)，可以從不同角度針對(duì)不同對(duì)象進(jìn)行發(fā)文量及被引量的統(tǒng)計(jì)，并借助中科院核心期刊名稱規(guī)范服務(wù)完成收錄、影響因子、核心期刊、分區(qū)等指標(biāo)的計(jì)量。此外還自動(dòng)記錄了成果的瀏覽及下載數(shù)據(jù)，并排除了機(jī)器訪問(wèn)，提供了較為客觀和準(zhǔn)確的使用指標(biāo)數(shù)據(jù)。

3.2 用戶功能實(shí)現(xiàn)

科研評(píng)價(jià)的服務(wù)場(chǎng)景多種多樣，機(jī)構(gòu)的不同部門有著不同的評(píng)價(jià)需求，CSpace系統(tǒng)在具體應(yīng)用中應(yīng)對(duì)用戶需求開(kāi)發(fā)了相應(yīng)的功能，如成果產(chǎn)出統(tǒng)計(jì)、訪問(wèn)統(tǒng)計(jì)、學(xué)科分析、知識(shí)檢索及發(fā)現(xiàn)、查收查引等。成果的產(chǎn)出統(tǒng)計(jì)是機(jī)構(gòu)知識(shí)庫(kù)科研評(píng)價(jià)的基本功能，科研管理部門通過(guò)不同維度的成果產(chǎn)出統(tǒng)計(jì)可以了解機(jī)構(gòu)整體、團(tuán)隊(duì)或科研人員的成果產(chǎn)出情況，包括發(fā)文量、被引量、收錄分布、成果類型分布及趨勢(shì)分析。訪問(wèn)統(tǒng)計(jì)自動(dòng)記錄成果的瀏覽及下載情況，記錄的信息包括訪問(wèn)時(shí)間、訪問(wèn)對(duì)象、來(lái)訪IP、來(lái)訪用戶等數(shù)據(jù)，并在此基礎(chǔ)上開(kāi)發(fā)了訪問(wèn)統(tǒng)計(jì)功能，采用自定義統(tǒng)計(jì)條件的方式，使得用戶可以從各種角度進(jìn)行統(tǒng)計(jì)。在成果、項(xiàng)目、人員、學(xué)科等數(shù)據(jù)都比較完善的情況下，CSpace系統(tǒng)的學(xué)科分析功能使得科研管理部門可以對(duì)機(jī)構(gòu)各個(gè)學(xué)科的學(xué)科隊(duì)伍、教學(xué)成果、科研成果、科研獲獎(jiǎng)及科研項(xiàng)目等方面進(jìn)行分析及統(tǒng)計(jì)，如在學(xué)科隊(duì)伍方面可以統(tǒng)計(jì)科研人員數(shù)量、職稱、學(xué)歷及年齡段分布；在教學(xué)成果方面可以按自定義的成果及獎(jiǎng)勵(lì)類型進(jìn)行統(tǒng)計(jì)；在科研成果方面，可以統(tǒng)計(jì)成果的類型、論文收錄和引用分布以及ESI高被引論文；在科研項(xiàng)目方面，可以按照項(xiàng)目類型或者年度統(tǒng)計(jì)項(xiàng)目數(shù)量及經(jīng)費(fèi)數(shù)據(jù)。系統(tǒng)的知識(shí)檢索及發(fā)現(xiàn)模塊支持對(duì)產(chǎn)出成果進(jìn)行關(guān)鍵詞提取及聚類分析，通過(guò)研究指紋、主題樹(shù)、關(guān)鍵詞云等多種評(píng)價(jià)分析功能，使得科研管理及決策層可以了解機(jī)構(gòu)的研究主題分布以及知識(shí)能力布局。學(xué)術(shù)論文的收錄引證報(bào)告是課題申報(bào)、職稱評(píng)定的重要參考依據(jù)，查收查引也是科研評(píng)價(jià)的重要手段之一。系統(tǒng)的查收查引功能支持生成科研成果列表，包括收錄類別、引用次數(shù)、他引次數(shù)統(tǒng)計(jì)、施引文獻(xiàn)等詳細(xì)信息，支持收錄引證報(bào)告的自動(dòng)生成及信息導(dǎo)出。

3.3 應(yīng)用效果

CSpace系統(tǒng)目前已在120多家科研院所及高校進(jìn)行部署和應(yīng)用，其中的成果產(chǎn)出統(tǒng)計(jì)、訪問(wèn)統(tǒng)計(jì)、學(xué)科分析、知識(shí)檢索及發(fā)現(xiàn)等功能在一定程度上滿足了許多機(jī)構(gòu)的科研評(píng)價(jià)需求，得到了用戶的認(rèn)可。以上?？萍即髮W(xué)為例，在CSpace系統(tǒng)基礎(chǔ)上構(gòu)建的知識(shí)管理系統(tǒng)，作為唯一的機(jī)構(gòu)科研成果數(shù)據(jù)源，支持與校內(nèi)相關(guān)應(yīng)用系統(tǒng)的定制集成和應(yīng)用，無(wú)縫支持學(xué)校教學(xué)科研管理應(yīng)用。在科研評(píng)價(jià)方面支持面向機(jī)構(gòu)各層級(jí)部門提供靈活的知識(shí)分析功能，如為學(xué)院的科研人員年終考核、科研成果統(tǒng)計(jì)報(bào)告提供分析數(shù)據(jù)，為教務(wù)處學(xué)位點(diǎn)業(yè)務(wù)的報(bào)表填制提供分析數(shù)據(jù)，為圖書(shū)館情報(bào)分析服務(wù)的個(gè)人競(jìng)爭(zhēng)力分析、機(jī)構(gòu)對(duì)標(biāo)分析提供分析數(shù)據(jù)等，從而有機(jī)嵌入學(xué)校智能決策過(guò)程，服務(wù)科研發(fā)展[23]。

4 結(jié)語(yǔ)

目前國(guó)內(nèi)機(jī)構(gòu)知識(shí)庫(kù)的科研評(píng)價(jià)功能及服務(wù)尚在起步階段，主要還是對(duì)成果收錄、引用和使用情況的簡(jiǎn)單統(tǒng)計(jì)，相關(guān)技術(shù)也不夠成熟，很多關(guān)鍵問(wèn)題缺乏相應(yīng)的對(duì)策和解決方案。某些文獻(xiàn)計(jì)量學(xué)的指標(biāo)獲取受到限制，如Altmetrics工具都是基于國(guó)外流行的社交網(wǎng)絡(luò)（如Youtube、Slideshare等）計(jì)算和衡量，而國(guó)內(nèi)的用戶很少使用這些平臺(tái)，因此存在“水土不服”的問(wèn)題，這些需要科研管理部門、出版商數(shù)據(jù)庫(kù)、社交網(wǎng)站等多方協(xié)作，建立良好的數(shù)據(jù)開(kāi)放和共享的機(jī)制；隨著DOI、ORCID等唯一標(biāo)識(shí)符的廣泛使用，以及機(jī)構(gòu)知識(shí)庫(kù)存繳和認(rèn)領(lǐng)機(jī)制的完善，數(shù)據(jù)的查重和匹配的正確率將會(huì)大幅提高；評(píng)價(jià)指標(biāo)和方法的選取要因地制宜，根據(jù)不同機(jī)構(gòu)不同需求定制不同的評(píng)價(jià)功能，這就要求機(jī)構(gòu)知識(shí)庫(kù)的科研評(píng)價(jià)功能可擴(kuò)展可定制，在設(shè)計(jì)開(kāi)發(fā)階段就要充分考慮到這一點(diǎn)；目前國(guó)內(nèi)的機(jī)構(gòu)知識(shí)庫(kù)在科研評(píng)價(jià)方面缺乏統(tǒng)一的元數(shù)據(jù)標(biāo)準(zhǔn)和互操作協(xié)議，建議在面對(duì)數(shù)據(jù)集成和共享的應(yīng)用需求時(shí)，盡量參考和借鑒國(guó)外已有標(biāo)準(zhǔn)和協(xié)議，對(duì)評(píng)價(jià)結(jié)果的元數(shù)據(jù)進(jìn)行描述和發(fā)布。