□ 孫 雨 胡蘇望 李國斌
運(yùn)用層次分析法構(gòu)建高校網(wǎng)站評(píng)價(jià)指標(biāo)體系
□ 孫 雨 胡蘇望 李國斌
高校網(wǎng)站種類繁多,水平參差不齊、信息更新頻率低、安全性能差等問題日趨凸顯。為提高網(wǎng)站建設(shè)水平,充分發(fā)揮網(wǎng)站服務(wù)教學(xué)教務(wù)的作用,本文依據(jù)評(píng)價(jià)指標(biāo)體系建設(shè)的系統(tǒng)性、科學(xué)性、發(fā)展性、實(shí)用性和可操作性原則,采取定性與定量相結(jié)合的層次分析法(The analytic hierarchy process,AHP),嘗試從網(wǎng)站建設(shè)、內(nèi)容、功能、安全等方面入手構(gòu)建高校網(wǎng)站評(píng)估體系的指標(biāo),借助Microsoft office Excel工具方便快捷地計(jì)算出各個(gè)指標(biāo)的權(quán)重,并檢驗(yàn)權(quán)重分配的合理性,最終根據(jù)合理的權(quán)重分配結(jié)果構(gòu)建高校網(wǎng)站評(píng)價(jià)指標(biāo)體系。
高校網(wǎng)站;層次分析法;網(wǎng)站評(píng)價(jià);指標(biāo)體系;權(quán)重分配
隨著計(jì)算機(jī)和通信技術(shù)的飛速發(fā)展和廣泛運(yùn)用,高校信息化建設(shè)取得了重大進(jìn)展。高校校園網(wǎng)規(guī)模不斷擴(kuò)大,千兆主干網(wǎng)直接接入校園,高校網(wǎng)站建設(shè)如雨后春筍般蓬勃發(fā)展。高校網(wǎng)站不僅包括提供對(duì)外宣傳的學(xué)校網(wǎng)站,而且還具有教學(xué)、教務(wù)、科研、學(xué)習(xí)等功能。據(jù)教育部2008年對(duì)全國十省市667所高校的調(diào)研,100%的985/211院校建立了電子郵件網(wǎng)站,43.6%的學(xué)校已建設(shè)校園公共數(shù)據(jù)庫或數(shù)據(jù)交換系統(tǒng),37.5%的學(xué)校已建立統(tǒng)一的身份管理與認(rèn)證系統(tǒng),56.3%的學(xué)校已建立集成信息資源的校園信息門戶。高校信息化建設(shè)取得了頗豐的成效,作為信息化標(biāo)志之一的網(wǎng)站為高校的教學(xué)、教務(wù)、科研、學(xué)習(xí)等帶來高效、快捷、方便的服務(wù)。
但長期以來,高校網(wǎng)站建設(shè)存在諸多問題:缺乏規(guī)劃,網(wǎng)站建設(shè)重復(fù)、混亂,不同網(wǎng)站功能交疊,網(wǎng)站版式設(shè)計(jì)五花八門;網(wǎng)站安全性能不高,防御外部干擾能力弱,網(wǎng)站安全預(yù)防措施、應(yīng)急方案缺乏,漏洞掃描不到位,往往網(wǎng)站出現(xiàn)嚴(yán)重問題后才能引起注意;網(wǎng)站更新頻率較低,訪問量小等。
構(gòu)建高校網(wǎng)站建設(shè)及運(yùn)行方面的監(jiān)督、管理方法的評(píng)價(jià)體系,可以在一定程度上解決以上問題。合理、科學(xué)地構(gòu)建評(píng)價(jià)體系的各個(gè)指標(biāo),并利用定性與定量相結(jié)合的層次分析法計(jì)算出各指標(biāo)的權(quán)重分配,是網(wǎng)站評(píng)價(jià)體系構(gòu)建的一項(xiàng)重要工作。
高校網(wǎng)站評(píng)價(jià)指標(biāo)體系是由反映網(wǎng)站評(píng)價(jià)總體要求的若干個(gè)相互聯(lián)系、相互制約的指標(biāo)組成的有機(jī)整體,用來檢查網(wǎng)站的整體情況、網(wǎng)站建設(shè)及網(wǎng)站運(yùn)行維護(hù)的成果。根據(jù)評(píng)價(jià)指標(biāo)體系可對(duì)網(wǎng)站進(jìn)行評(píng)價(jià),分析結(jié)果,找出薄弱環(huán)節(jié),提出改進(jìn)意見,對(duì)網(wǎng)站的建設(shè)和運(yùn)行具有規(guī)范和引導(dǎo)作用。
建立高校網(wǎng)站評(píng)估指標(biāo)體系,采取簡單易行、可用、好用的評(píng)估方法,對(duì)高校網(wǎng)站內(nèi)容信息、管理制度建設(shè)、安全性進(jìn)行科學(xué)合理的評(píng)價(jià),有利于我們認(rèn)識(shí)當(dāng)前運(yùn)行的網(wǎng)站存在的問題,給出合理建議,促進(jìn)高校網(wǎng)站健康有序地運(yùn)行。評(píng)價(jià)指標(biāo)體系的建立是網(wǎng)站評(píng)價(jià)的核心工作,建立完備而科學(xué)的指標(biāo)體系能促進(jìn)高校網(wǎng)站在教學(xué)、科研等方面發(fā)揮更好的作用。
高校網(wǎng)站評(píng)價(jià)體系應(yīng)綜合考慮客觀和主觀兩種因素,以及定性與定量兩個(gè)方面,需要嚴(yán)謹(jǐn)性和科學(xué)性。建設(shè)高校網(wǎng)站評(píng)價(jià)體系,首先要確定評(píng)價(jià)指標(biāo)的設(shè)計(jì)原則,將指標(biāo)選擇納入科學(xué)和規(guī)范的系統(tǒng)軌道。為了全面、客觀、科學(xué)地評(píng)價(jià)高校網(wǎng)站,在研究和設(shè)計(jì)評(píng)價(jià)指標(biāo)體系時(shí)應(yīng)遵循如下原則。
高校網(wǎng)站涉及面廣、復(fù)雜程度高,必須用多個(gè)指標(biāo)來衡量,每個(gè)指標(biāo)相互聯(lián)系、相互制約。評(píng)價(jià)指標(biāo)體系要從不同層面進(jìn)行分析和評(píng)價(jià),細(xì)化多個(gè)單項(xiàng)指標(biāo),全面考慮定量指標(biāo)與定性指標(biāo),不能以偏概全。指標(biāo)體系中每個(gè)指標(biāo)是獨(dú)立的,不能相互包含,要充分考慮評(píng)價(jià)指標(biāo)體系的系統(tǒng)性和層次性。
科學(xué)性體現(xiàn)在理論、方法、指標(biāo)三方面。首先,評(píng)價(jià)指標(biāo)體系的理論基礎(chǔ)要科學(xué),能很好地反映評(píng)價(jià)網(wǎng)站的實(shí)際情況。其次,評(píng)價(jià)方法要科學(xué)合理,充分利用現(xiàn)代計(jì)算機(jī)技術(shù),采用統(tǒng)一標(biāo)準(zhǔn)對(duì)指標(biāo)體系進(jìn)行細(xì)化和定義。最后,每個(gè)指標(biāo)都要有準(zhǔn)確的含義,避免歧義,且相互獨(dú)立,協(xié)調(diào)一致,不重復(fù),無沖突,能夠客觀真實(shí)地從各個(gè)側(cè)面反映網(wǎng)站整體情況。
計(jì)算機(jī)和網(wǎng)絡(luò)技術(shù)是不斷發(fā)展的。高校不斷地將這些新技術(shù)運(yùn)用到網(wǎng)站建設(shè)中。網(wǎng)站無論展現(xiàn)形式還是信息內(nèi)容都具有很強(qiáng)的動(dòng)態(tài)性,所以,網(wǎng)站評(píng)價(jià)指標(biāo)體系也必須是發(fā)展和動(dòng)態(tài)的。網(wǎng)站評(píng)價(jià)指標(biāo)體系只有隨著網(wǎng)站的發(fā)展做出相應(yīng)變化,增強(qiáng)適應(yīng)性,才能真正發(fā)揮作用。
指標(biāo)體系應(yīng)該是符合實(shí)際的,客觀反映評(píng)價(jià)的真實(shí)水平,具有實(shí)用性。評(píng)價(jià)指標(biāo)體系應(yīng)在能夠充分客觀反映網(wǎng)站實(shí)際情況的前提下,盡量簡化,至于指標(biāo)的多少和細(xì)化程度應(yīng)綜合考慮。同時(shí)要考慮不同網(wǎng)站建設(shè)水平和能力存在差異的情況,根據(jù)不同個(gè)體的特點(diǎn),制定出切實(shí)可行的評(píng)價(jià)指標(biāo)體系。
只有具有可操作性的評(píng)價(jià)體系,才是真正有用的。這就要求每個(gè)指標(biāo)的設(shè)置掌握好度,既不可太繁瑣,也不可過于簡單。繁瑣則不利于評(píng)價(jià)工作的推進(jìn),簡單則使評(píng)價(jià)工作形同虛設(shè)。設(shè)計(jì)網(wǎng)站評(píng)價(jià)體系要綜合考慮指標(biāo)量化程度以及數(shù)據(jù)獲取的難易程度和有效性,選擇具有代表性的指標(biāo),使網(wǎng)站評(píng)價(jià)指標(biāo)體系易用、好用、實(shí)用。
依據(jù)高校網(wǎng)站評(píng)價(jià)指標(biāo)體系的設(shè)計(jì)原則,結(jié)合對(duì)高校網(wǎng)站現(xiàn)狀的分析研究,嘗試提出高校網(wǎng)站評(píng)價(jià)指標(biāo)體系。該體系自頂向下劃分為目標(biāo)層、準(zhǔn)則層和指標(biāo)層。詳見圖1。
體系的準(zhǔn)則層由網(wǎng)站建設(shè)、網(wǎng)站內(nèi)容、網(wǎng)站功能、網(wǎng)站安全、網(wǎng)站訪問五個(gè)準(zhǔn)則指標(biāo)構(gòu)成,每個(gè)準(zhǔn)則內(nèi)容又有具體指標(biāo)項(xiàng)。下面詳細(xì)介紹每個(gè)指標(biāo)的含義及評(píng)價(jià)的具體內(nèi)容。
網(wǎng)站建設(shè)的情況直接關(guān)系網(wǎng)站整體質(zhì)量,由四個(gè)指標(biāo)組成:網(wǎng)站標(biāo)識(shí)主要評(píng)價(jià)網(wǎng)站是否是合法網(wǎng)站,是否具有版權(quán)標(biāo)注和有效的ICP備案號(hào)等;頁面布局主要評(píng)價(jià)網(wǎng)站呈現(xiàn)布局是否合理,欄目設(shè)置是否準(zhǔn)確、層次分明等;網(wǎng)站設(shè)計(jì)是否符合高校網(wǎng)站統(tǒng)一風(fēng)格、網(wǎng)站內(nèi)部風(fēng)格是否一致是一個(gè)高校網(wǎng)站與其他單位網(wǎng)站的重要區(qū)別;網(wǎng)站備案主要評(píng)價(jià)網(wǎng)站是否進(jìn)行了相應(yīng)的備案和登記。
網(wǎng)站內(nèi)容是高校網(wǎng)站評(píng)價(jià)的重要方面。高校網(wǎng)站主要對(duì)外宣傳本校、提供本校的新聞信息,其信息的準(zhǔn)確性、時(shí)效性要求較高。網(wǎng)站內(nèi)容由四個(gè)指標(biāo)組成:單位介紹評(píng)價(jià)是否呈現(xiàn)學(xué)校整體情況簡介及其信息是否準(zhǔn)確全面;新聞信息是網(wǎng)站內(nèi)容的核心部分,主要考察網(wǎng)站能否全面、及時(shí)、準(zhǔn)確地發(fā)布各類新聞信息;專題信息主要評(píng)價(jià)網(wǎng)站是否圍繞高校的工作重點(diǎn)、熱點(diǎn)、重大活動(dòng)組織專題欄目,專題專報(bào);內(nèi)容維護(hù)主要評(píng)價(jià)網(wǎng)站是否具有專人負(fù)責(zé)維護(hù)網(wǎng)站信息內(nèi)容,能否及時(shí)清除失效信息和錯(cuò)誤信息。
網(wǎng)站并不僅僅將內(nèi)容信息堆砌在一起,為了更好地呈現(xiàn)給用戶,還要提供更多的人性化的功能,增加網(wǎng)站的易用性、好用性。網(wǎng)站功能由五個(gè)指標(biāo)組成:業(yè)務(wù)辦理主要評(píng)價(jià)網(wǎng)站是否提供網(wǎng)上查詢、表格下載等辦公服務(wù)功能;友情鏈接主要評(píng)價(jià)網(wǎng)站能否提供學(xué)校相關(guān)網(wǎng)站的鏈接,及鏈接是否準(zhǔn)確無誤;互動(dòng)交流評(píng)價(jià)網(wǎng)站能否提供網(wǎng)上調(diào)查、留言板或電子信箱等多種形式的交流互動(dòng)功能;信息檢索評(píng)價(jià)網(wǎng)站是否提供全文和關(guān)鍵字檢索功能;網(wǎng)站導(dǎo)航評(píng)價(jià)網(wǎng)站是否有清晰的導(dǎo)航欄,以及能否提供網(wǎng)站地圖功能。
網(wǎng)站安全是一項(xiàng)常抓工作,不可懈怠,一旦遭病毒或黑客襲擊,后果往往不堪設(shè)想。網(wǎng)站安全由四個(gè)指標(biāo)組成:安全規(guī)范主要評(píng)價(jià)網(wǎng)站是否有信息安全管理措施,是否定期排查不良信息等;安全機(jī)制主要評(píng)價(jià)是否建立網(wǎng)絡(luò)安全制度、安全防護(hù)機(jī)制等安全相關(guān)制度規(guī)范,是否安裝防病毒系統(tǒng)并能不斷完善,是否定時(shí)排查服務(wù)器,掃描各個(gè)網(wǎng)站的漏洞信息并及時(shí)更新;應(yīng)急預(yù)案主要評(píng)價(jià)是否建立網(wǎng)站突發(fā)事件應(yīng)急預(yù)案等;網(wǎng)站穩(wěn)定性主要評(píng)價(jià)網(wǎng)站是否經(jīng)常出現(xiàn)無法打開和打開網(wǎng)頁錯(cuò)誤的情況。
網(wǎng)站訪問由三個(gè)指標(biāo)組成:訪問情況采用公正、客觀的第三方評(píng)估網(wǎng)站Alexa來查看被評(píng)價(jià)網(wǎng)站的日均點(diǎn)擊率、日均訪問的獨(dú)立用戶數(shù)、用戶平均訪問停留時(shí)間等,進(jìn)而判斷網(wǎng)站的整體訪問情況;搜索情況,以被評(píng)價(jià)網(wǎng)站名為關(guān)鍵詞,查看其在常用搜索引擎,如百度、谷歌等的搜索排名情況;響應(yīng)速度利用“中國網(wǎng)站排名網(wǎng)”獲得其頁面的響應(yīng)時(shí)間及速度。
網(wǎng)站評(píng)價(jià)指標(biāo)中權(quán)重系數(shù)的分配量化問題是構(gòu)建評(píng)價(jià)指標(biāo)體系的重要方面。面對(duì)眾多且復(fù)雜的綜合評(píng)價(jià)指標(biāo),要做到完全量化計(jì)算與分析權(quán)重系數(shù)是相當(dāng)有難度的。網(wǎng)站評(píng)價(jià)指標(biāo)的權(quán)重分配采取定性與定量相結(jié)合的層次分析法(The analytic hierarchy process,AHP)。層次分析法由美國運(yùn)籌學(xué)家T.L.saaty于20世紀(jì)70年代提出,它是將決策問題的有關(guān)元素分解成目標(biāo)、準(zhǔn)則、方案等層次,在此基礎(chǔ)上進(jìn)行定性分析和定量分析的一種決策方法。
(1)構(gòu)建判斷矩陣
層次分析法計(jì)算評(píng)價(jià)指標(biāo)的權(quán)重系數(shù)的重點(diǎn)是逐一比較同一層次中兩個(gè)元素之間的重要性,通過構(gòu)建判斷矩陣來對(duì)同一類型元素進(jìn)行判斷,判斷矩陣項(xiàng)aij由指標(biāo)i相對(duì)于指標(biāo)j的重要性來決定,具體賦值根據(jù)T.L.saaty的理論對(duì)其重要性劃分了9個(gè)不同的標(biāo)度,詳見表1。
表1 層次分析法標(biāo)度及含義
本研究邀請(qǐng)信息化相關(guān)專家及網(wǎng)站用戶對(duì)網(wǎng)站評(píng)價(jià)指標(biāo)的重要性進(jìn)行打分,其中專家不僅來自本校各個(gè)不同業(yè)務(wù)部門,而且包括兄弟院校的專家,一般以9位或11位專家為宜;網(wǎng)站用戶則主要由校內(nèi)網(wǎng)站使用者組成,數(shù)量為50人。對(duì)打分情況進(jìn)行匯總,并將其打分加權(quán)平均,然后根據(jù)指標(biāo)的加權(quán)平均值對(duì)每個(gè)指標(biāo)進(jìn)行兩兩比較,根據(jù)各指標(biāo)的重要性以及層次分析法判斷矩陣的標(biāo)度賦值含義,構(gòu)造網(wǎng)站評(píng)價(jià)體系各層的判斷矩陣。
(2)計(jì)算判斷矩陣權(quán)重
可以利用Excel工具計(jì)算各個(gè)判斷矩陣的權(quán)重系數(shù)(表2至表7)。其中,“按行相乘”使用Excel的Product函數(shù),“開n次方”使用excel的Power函數(shù),“權(quán)重Wm,n”為指標(biāo)元素“開n次方”占判斷矩陣中所有指標(biāo)元素的“開n次方”的比例,“AWm,n”為矩陣行與權(quán)重列分別相乘的和,“AWm,n/Wm,n”為“權(quán)重Wm,n”除“AWm,n”的商。
(3)判斷矩陣的一致性檢驗(yàn)
由于高校網(wǎng)站種類繁多,樣式各異,其網(wǎng)站的評(píng)價(jià)各項(xiàng)指標(biāo)具有復(fù)雜性和多樣性,在構(gòu)建判斷矩陣的賦值時(shí)摻入了不少人為因素,雖然是對(duì)各個(gè)專家和網(wǎng)站使用者的廣泛調(diào)研,并加權(quán)平均,仍不可避免地在判斷上存在一些偏差。因此,需要通過對(duì)判斷矩陣進(jìn)行一次性檢驗(yàn)來驗(yàn)證基于AHP算法得出的網(wǎng)站評(píng)價(jià)指標(biāo)體系的權(quán)重分配是否合理。檢驗(yàn)判斷矩陣一致性是通過技術(shù)整合評(píng)價(jià)指標(biāo)體系的各個(gè)判斷矩陣的一致性指標(biāo)CI。其中CI=(λmax-n)/(n-1),其中最大特征根λmax為判斷矩陣中Awm,n/Wm,n的平均值。當(dāng)CI=0時(shí),當(dāng)判斷矩陣具有完全一致性,而λmax-n愈大,CI愈大,矩陣的一致性愈差。
表2 判斷矩陣A及其相對(duì)權(quán)重向量
表3 判斷矩陣B1及其相對(duì)權(quán)重向量
表4 判斷矩陣B2及其相對(duì)權(quán)重向量
表5 判斷矩陣B3及其相對(duì)權(quán)重向量
表6 判斷矩陣B4及其相對(duì)權(quán)重向量
表7 判斷矩陣B5及其相對(duì)權(quán)重向量
但是要求每個(gè)判斷矩陣具有完全一致的形式的可能性不大,只需要求判斷矩陣具有滿意的一致性使AHP法得到的結(jié)果基本合理。為此,需要將CI與平均隨機(jī)一致性指標(biāo)RI進(jìn)行比較,其中CI與RI的比率稱為一致性比率CR,即CR=CI/RI。表8給出了平均隨機(jī)一致性指標(biāo)RI的值。當(dāng)CR<0.1時(shí),則此判斷矩陣具有滿意的一致性,否則就需要對(duì)判斷矩陣進(jìn)行調(diào)整。
表8 隨機(jī)一致性指標(biāo)R I
根據(jù)表8的RI值,計(jì)算出網(wǎng)站評(píng)價(jià)體系各個(gè)判斷矩陣的一致性比率CR值(表9)。由表9可知,所有判斷矩陣的CR值均遠(yuǎn)小于0.1,滿足判斷矩陣整體一致性的要求,表明所構(gòu)建的判斷矩陣中各要素之間的邏輯關(guān)系成立,指標(biāo)權(quán)重向量計(jì)算結(jié)果合理。
表9 判斷矩陣一致性檢驗(yàn)結(jié)果
根據(jù)各個(gè)判斷矩陣的權(quán)重向量,可計(jì)算出每個(gè)指標(biāo)的合成權(quán)重,并根據(jù)評(píng)價(jià)體系使用百分制以便于網(wǎng)站實(shí)際的評(píng)價(jià)工作及適應(yīng)人們的使用習(xí)慣。根據(jù)上述計(jì)算結(jié)果,構(gòu)建出高校網(wǎng)站評(píng)價(jià)體系中的各類指標(biāo)及其權(quán)重指標(biāo),如表10所示。
高校網(wǎng)站評(píng)價(jià)指標(biāo)體系不可一蹴而就,而是一個(gè)不斷發(fā)展和完善的過程。層次分析法作為一種科學(xué)的決策分析方法,在評(píng)價(jià)網(wǎng)站時(shí)能盡可能地客觀、合理,但是其指標(biāo)選取及指標(biāo)之間重要性的比較,都是由人來決定,其主觀因素占主導(dǎo)作用。雖然最后通過合理性一致性驗(yàn)證,但是網(wǎng)站評(píng)價(jià)體系是否好用,是否可以很好地評(píng)價(jià)網(wǎng)站,促使網(wǎng)站良性發(fā)展,還需在實(shí)際的評(píng)價(jià)工作中不斷完善評(píng)價(jià)體系及使用不同的決策分析方法,提高高校網(wǎng)站評(píng)價(jià)體系的科學(xué)性和合理性。
表10 高校網(wǎng)站評(píng)價(jià)指標(biāo)體權(quán)重分配
[1]付鑫金.大學(xué)網(wǎng)站綜合評(píng)價(jià)研究——以山東省為例[D].山東理工大學(xué),2009.
[2]郭向勇,傅國強(qiáng),周玉芬.基于層次分析法的網(wǎng)絡(luò)課程學(xué)習(xí)評(píng)價(jià)模型[J].電化教育研究,2008,(03):75-80.
[3]王云娣.基于層次分析法的圖書館信息服務(wù)能力綜合評(píng)價(jià)[J].浙江高校圖書情報(bào)工作,2007,(06):1-6.
[4]周梅群,吳華.教育網(wǎng)站評(píng)價(jià)指標(biāo)體系設(shè)計(jì)之研究[J].電化教育研究,2004,(08):53-57.
[5]邱建國,劉光.大學(xué)校園網(wǎng)站評(píng)價(jià)指標(biāo)體系構(gòu)建:現(xiàn)狀、依據(jù)及內(nèi)容[J].山西高等學(xué)校社會(huì)科學(xué)學(xué)報(bào),2009,(10):122-125.
[6]汪勇,魏巍.電子商務(wù)網(wǎng)站的層次分析法評(píng)價(jià)模型構(gòu)建[J].湖北大學(xué)學(xué)報(bào)(自然科學(xué)版),2010,(01):50-53.
Constructing an Evaluation Index System for Higher Education Websites Applying Analytic Hierarchy Process
Sun Yu,Hu Suwang and Li Guobin
With the rapid development and wide use of computers and communications technology,on the one hand,use of IT has become more and more popular in higher education institutions,with growing numbers of websites designed and developed,on the other hand,due to lack of unified overall plan,sound decision making and scientific evaluation systems,these websites are seriously underused,with low updating frequency and insecure environment.Aiming to promote a healthy development for these websites,the authors put forward a three-leveled evaluation index system for higher education websites,namely goal,criteria and alternatives.The criteria level includes website design,content,functions,security and access,each containing specific index.Analytic hierarchy process with both qualitative and quantitative methods is used in the study.
higher education websites;analytic hierarchy process;website evaluation;index system;weight distribution
G40-057
A
1009—458x(2011)12—0045—04
2011-06-30
孫雨,助理研究員,碩士;胡蘇望,工程師,學(xué)士;李國斌,副研究員,學(xué)士。中央廣播電視大學(xué)(100031)。
責(zé)任編輯 池 塘