向安玲,沈 陽
從2012年微信公眾號推出發(fā)展至今,短短四年間公號數(shù)量已突破2000萬,用戶數(shù)量突破8億(騰訊,2016年8月17日)。微信公眾號對輿論場的傳播力、覆蓋力、影響力都在逐步增強,作為一種新型媒體形態(tài)拓寬并解構(gòu)著媒介生態(tài)圈,其整體發(fā)展態(tài)勢逐漸成為學(xué)界和業(yè)界的關(guān)注熱點。量化分析微信公眾號的傳播效果對于了解新媒體發(fā)展態(tài)勢、把握輿論場導(dǎo)向、促進(jìn)媒體融合等都有重要意義。
大數(shù)據(jù)技術(shù)為微信公號傳播效果評價奠定了基礎(chǔ),基于海量傳播數(shù)據(jù)可以科學(xué)、客觀地構(gòu)建評估指標(biāo)體系,并根據(jù)數(shù)據(jù)測試對評估體系不斷修正,通過對指標(biāo)項的修正和權(quán)重的調(diào)整實現(xiàn)評估結(jié)果的優(yōu)化升級。基于評估模型的開放性、專業(yè)性和權(quán)威性,本文選取清博大數(shù)據(jù)公司推出的微信傳播力指數(shù)WCI (We-chat Communication Index)為研究對象,根據(jù)數(shù)據(jù)分析對其迭代過程進(jìn)行科學(xué)性論證,并總結(jié)出指標(biāo)體系優(yōu)化的基本思路和方法。
國內(nèi)外有關(guān)新媒體傳播力評價的研究主要集中在評價維度分析、指標(biāo)體系構(gòu)建和評估方法的理論闡述上,定性分析居多。就國內(nèi)研究來看,周莉(2011)基于個人私域、社區(qū)聯(lián)系、經(jīng)濟交往、公共傳播四個不同的社會傳播層次,從有害信息、文化傳承、內(nèi)容創(chuàng)新和價值導(dǎo)向四個維度構(gòu)建新興媒體的評價體系,并對指標(biāo)進(jìn)行細(xì)化區(qū)分,使評價方式更符合傳播實踐。方興東等人(2014)則通過構(gòu)建網(wǎng)絡(luò)輿論場形成要素評價體系,將微信與微博進(jìn)行對比研究,探索微信在新輿論場中的傳播能力。郭順利等人(2016)運用扎根理論,采用質(zhì)性訪談方法,從微信平臺自身特征、用戶、服務(wù)方式及內(nèi)容、傳播效果4 個維度,選取17 項指標(biāo)構(gòu)建傳播力評價指標(biāo)體系進(jìn)行實證研究。李明德、高如(2015)基于媒介傳播力視角,運用層次分析法,構(gòu)建以平臺設(shè)計、內(nèi)容呈現(xiàn)、消息回復(fù)模式、推送頻次、傳播程度為準(zhǔn)則的媒體微信公眾號傳播力評價體系,為挖掘微信平臺信息傳播潛力提供建議。就國外研究而言,Ronald E.Rice(1984)認(rèn)為媒體始終是在特定社會背景下傳播,在對媒體構(gòu)建評價體系時需要考慮到政治、經(jīng)濟、技術(shù)、社會大環(huán)境的影響因素。Graham Williamson(2011)指出傳播力(communication capacity)是傳播者和受眾成功對信息進(jìn)行編碼和解碼的能力(ability),因此在構(gòu)建評價指標(biāo)體系時要更多地考慮受眾因素。Kristene Unsworth和Adam Townes(2012)從透明度、參與性和協(xié)作力三大角度出發(fā),對推特在公民政治參與當(dāng)中起到的傳播交互作用進(jìn)行了評估。總體來看,國內(nèi)外目前對新媒體傳播能力的評價研究多停留在指標(biāo)維度分析和方法探索上,為本研究的評估維度設(shè)計、指標(biāo)因子選取、算法模型計算提供了理論參考。但鮮有研究基于大數(shù)據(jù)等技術(shù)手段,對大規(guī)模樣本進(jìn)行測算評估。本研究在借鑒相關(guān)研究經(jīng)驗和理論模型的基礎(chǔ)上,結(jié)合指標(biāo)獲取的可操作性、客觀性,對萬級樣本進(jìn)行數(shù)據(jù)測算和模型迭代優(yōu)化,旨在探索一種客觀、科學(xué)、標(biāo)準(zhǔn)化的傳播力評估指標(biāo)體系的優(yōu)化方法。
針對評價指標(biāo)體系優(yōu)化方法,國內(nèi)外研究主要集中在指標(biāo)的篩選調(diào)整和權(quán)重的優(yōu)化方法上,涉及的方法包括層次分析法、灰色關(guān)聯(lián)特征值法、問卷調(diào)查等。丁敬達(dá)、邱均平(2010)以其最近3年積累的中國高??萍紕?chuàng)新競爭力評價指標(biāo)數(shù)據(jù)為例,提出對評價指標(biāo)體系尤其是權(quán)重進(jìn)行優(yōu)化的思路和方法,并檢驗其科學(xué)性和合理性,對其他領(lǐng)域評價指標(biāo)體系的優(yōu)化亦有借鑒意義。錢吳永等人(2014)則基于灰色關(guān)聯(lián)特征值法對指標(biāo)體系進(jìn)行優(yōu)化,并利用差異信息驅(qū)動機理確定指標(biāo)權(quán)重,為量化評價指標(biāo)體系提供支撐。劉勐(2012)通過深度訪談和問卷調(diào)查的方式,對評價指標(biāo)體系進(jìn)行修正和調(diào)整,并用實證分析進(jìn)行論證。Ying Ding等人(2011)在分析圖書采購招投標(biāo)的業(yè)務(wù)流程基礎(chǔ)上,研究了圖書采購的結(jié)構(gòu)、內(nèi)容和權(quán)重的評價標(biāo)準(zhǔn),提出用層次分析法來優(yōu)化指標(biāo)評價體系。Guanghua Guan等人(2011)基于常用績效指標(biāo),通過仿真研究對渠道控制系統(tǒng)的績效指標(biāo)進(jìn)行了測算與優(yōu)化。Christina N.Zavalishina(2015)通過問卷調(diào)查對自我評估模型的相關(guān)指標(biāo)進(jìn)行調(diào)整,并基于羅殊模型(Rasch Model)對其科學(xué)性進(jìn)行檢驗。總體而言,本文在研究設(shè)計上主要借鑒了丁敬達(dá)、邱均平對中國高??萍紕?chuàng)新競爭力評估中采取的權(quán)重優(yōu)化思路和方法,也即通過對同一批樣本進(jìn)行連續(xù)數(shù)年的數(shù)據(jù)評價,進(jìn)一步采用各指標(biāo)項平均值,利用最小二乘法、變異系數(shù)法計算各項指標(biāo)的客觀權(quán)重,同時結(jié)合層次分析法計算各項指標(biāo)的主觀賦權(quán),在此基礎(chǔ)上結(jié)合客觀賦權(quán)和主觀賦權(quán)計算綜合賦權(quán),最后對主觀權(quán)重、客觀權(quán)重、綜合權(quán)重得出的評估結(jié)果進(jìn)行分析和比較,從而確定最佳權(quán)重系數(shù)。
微信傳播指數(shù)WCI從2014年10月開發(fā)上線以來,已迭代至12.0版本,目前已有超過兩萬家單位使用指數(shù)算法進(jìn)行新媒體評價?;谇宀┐髷?shù)據(jù)平臺1800多萬個微信公號數(shù)據(jù)和500多萬個日常監(jiān)測數(shù)據(jù),每日采用WCI發(fā)布的發(fā)布榜單已超過2000個,覆蓋了包括各大部委、央企、500強企業(yè)在內(nèi)的政府、媒體和企業(yè)用戶。另外,部分學(xué)者基于WCI模型對各個領(lǐng)域微信公號的內(nèi)容運營策略、傳播推廣效果、行業(yè)整體發(fā)展等展開了研究,近兩年來采用WCI進(jìn)行評價研究的論文已達(dá)十余篇,綜合被引超過三十余次,學(xué)界對模型的科學(xué)性也進(jìn)行了校驗和認(rèn)可??梢哉fWCI已成為業(yè)內(nèi)和學(xué)界進(jìn)行微信公號評價的權(quán)威標(biāo)準(zhǔn),且相關(guān)評價指標(biāo)也有穩(wěn)定的、規(guī)?;?、動態(tài)更新的數(shù)據(jù)支撐。因此,本文針對WCI歷次版本迭代中指標(biāo)維度、權(quán)重設(shè)置、算法的修正路線,利用數(shù)據(jù)庫中的累積評價指標(biāo)數(shù)據(jù),著重對指標(biāo)和權(quán)重優(yōu)化進(jìn)行科學(xué)性驗證,以總結(jié)指標(biāo)體系優(yōu)化的方法和途徑。
WCI模型旨在多維度、全面客觀地反映微信公眾號在一定周期內(nèi)的傳播能力和傳播效果,形象直觀地呈現(xiàn)微信公眾號對輿論場的引導(dǎo)力和影響力,為把握微信公號的整體發(fā)展態(tài)勢、輿論場熱度、熱門話題導(dǎo)向等提供技術(shù)和智力支持?;诹炕u估結(jié)果,對綜合領(lǐng)域和細(xì)分領(lǐng)域的微信公號傳播能力進(jìn)行縱橫對比,發(fā)現(xiàn)優(yōu)勢行業(yè)領(lǐng)域和相關(guān)賬號,為平臺方管理、企業(yè)運營、媒體融合發(fā)展和相關(guān)學(xué)術(shù)研究提供依據(jù)和參考。
從指標(biāo)選取上來看,主要遵循關(guān)聯(lián)性、重要性、全面性、客觀性、可操作性五大原則,采用可量化獲取數(shù)據(jù)指標(biāo)進(jìn)行評估。其中關(guān)聯(lián)性主要衡量評估指標(biāo)與微信公眾號傳播力之間的相關(guān)性,也即相關(guān)指標(biāo)是否會影響公號傳播力,基于關(guān)聯(lián)性原則剔除不相干指標(biāo);重要性主要衡量指標(biāo)對微信公眾號傳播力的影響作用程度,基于重要性原則剔除相關(guān)但影響作用甚微的指標(biāo)因子(如微信公號文章的評論量,因是人工進(jìn)行篩選后發(fā)布,雖然與影響力有一定關(guān)聯(lián)但是不具備重要性,在此不納入指標(biāo)體系);全面性主要衡量評估指標(biāo)因子的豐富程度,盡可能保證在可操作的基礎(chǔ)上從最多視角進(jìn)行傳播力評估;客觀性是指評估因子不受主觀判斷影響,均為客觀數(shù)據(jù),設(shè)置該項原則主要是考慮到對大規(guī)模樣本評估過程中的可操作性和評估結(jié)果的客觀科學(xué)性。在權(quán)重設(shè)置上,側(cè)重于評估公號發(fā)布文章的平均質(zhì)量,旨在鼓勵賬號提高單篇文章質(zhì)量,合理把握推文數(shù)量,多發(fā)原創(chuàng)精品、少發(fā)“垃圾文”。在標(biāo)準(zhǔn)化算法上,主要遵循以下四大原則:(1)各指標(biāo)量級統(tǒng)一:如閱讀和點贊數(shù)存在量級差,對單項指標(biāo)進(jìn)行標(biāo)準(zhǔn)化處理以縮小量級差,保障數(shù)值得分分布合理;(2)去除組間影響:盡量避免對賬號的分組處理,一方面有利于不同類別微信公眾號之間的橫向?qū)Ρ?,另外一方面也能保證評估結(jié)果的分布合理,不出現(xiàn)斷層;(3)去除樣本影響:考慮到樣本范圍的動態(tài)可擴張性,在評估算法上盡量避免基于全樣本數(shù)據(jù)得出評分,如將標(biāo)準(zhǔn)差、均值、極值等引入算法公式中,以避免新增評估樣本對原有樣本評分的影響;(4)避免數(shù)據(jù)斷層:避免采用分段函數(shù)等算法,以保證評估結(jié)果分布平滑合理、數(shù)據(jù)無明顯斷層??傮w上,評估模型力求做到“科學(xué)、合理、客觀、公正”,并通過動態(tài)迭代和優(yōu)化來不斷提升模型的權(quán)威性和專業(yè)性。
根據(jù)以上評估原則,從指標(biāo)選取、權(quán)重設(shè)置、算法確定、數(shù)據(jù)測試四大方面進(jìn)行模型構(gòu)建。首先,基于客觀可獲取數(shù)據(jù)初步擬定閱讀指數(shù)和點贊指數(shù)兩大維度,分別設(shè)置了包括總閱讀/點贊數(shù)、平均閱讀/點贊數(shù)、最大閱讀/點贊數(shù)、頭條閱讀/點贊數(shù)、點贊率等指標(biāo),并根據(jù)專家評估和李克特量表對各項指標(biāo)進(jìn)行篩選,初步構(gòu)建評價指標(biāo)體系;其次,結(jié)合主觀賦權(quán)法和客觀賦權(quán)法計算各項指標(biāo)的權(quán)重,考慮到目前微信公眾號生態(tài)的普遍運行規(guī)律和用戶閱讀點贊行為習(xí)慣,點贊數(shù)主要受限于文章類型(一般雞湯文、情感類文章獲贊量普遍較高,而專業(yè)類文章點贊普遍偏低),且微信文章點贊率普遍不高、點贊數(shù)更容易受人為操作刷量,故在評估過程中總體上保障閱讀指數(shù)重要性大于點贊指數(shù);再次,基于量級統(tǒng)一、組間統(tǒng)一等原則確定各指標(biāo)項的標(biāo)準(zhǔn)化算法和加總算法;最后根據(jù)數(shù)據(jù)測試和調(diào)試結(jié)果不斷修正迭代,得到WCI模型(12.0版)。
一個客觀、科學(xué)的評價指標(biāo)體系應(yīng)具備動態(tài)修正功能,主要包括指標(biāo)的篩選修正和權(quán)重賦值調(diào)整兩方面。就評估指標(biāo)而言,隨著行業(yè)發(fā)展方向的轉(zhuǎn)變和大眾媒介使用行為的變化,部分指標(biāo)的信度和效度會降低,需要剔除或替換;就權(quán)重而言,由于評估側(cè)重點會隨著傳播生態(tài)演化而變化,部分指標(biāo)的權(quán)重需做出相應(yīng)調(diào)整?;谇宀┐髷?shù)據(jù)平臺歷史評價數(shù)據(jù),從指標(biāo)增刪和權(quán)重調(diào)整兩個角度出發(fā),對WCI模型從2014年10月1.0版本上線到2016年2月12.0版本推出的迭代路線進(jìn)行分析,基本思路如下:
(1)確定分析樣本。剔除兩年內(nèi)各版本迭代過程中注銷、新增的部分賬號,從TOP10000中篩選得12個WCI版本共同面向的評價對象共1786個賬號。
(2)提取2014年10月、2015年10月、2016年10月三個時間段(版本迭代的關(guān)鍵時間點)內(nèi)各項原始評價指標(biāo)數(shù)據(jù),對各項數(shù)據(jù)進(jìn)行無量綱化處理,保障其最大得分值均為100分,從而避免各項指標(biāo)量級懸殊差別帶來的影響。在此基礎(chǔ)上,對各項指標(biāo)數(shù)據(jù)進(jìn)行描述統(tǒng)計,計算三個時間段內(nèi)的均值、標(biāo)準(zhǔn)差、變異系數(shù)、偏度、峰度等數(shù)值,為指標(biāo)維度的動態(tài)修正奠定基礎(chǔ)。
(3)基于1786個樣本各項指標(biāo)百分制數(shù)據(jù)的描述統(tǒng)計值,剔除相關(guān)系數(shù)較低、區(qū)分度不強、誤差影響大和重復(fù)性設(shè)置的部分指標(biāo),完成指標(biāo)維度的修正。
(4)基于相關(guān)文獻(xiàn)調(diào)研,權(quán)重計算方法主要分為客觀賦權(quán)、主觀賦權(quán)和綜合賦權(quán)三類。本文參考相關(guān)文獻(xiàn)研究成果,利用最小二乘法和變異系數(shù)法求得客觀權(quán)重,利用層次分析法計算各項指標(biāo)的主觀權(quán)重,在集成客觀權(quán)重和主觀權(quán)重的基礎(chǔ)上,結(jié)合專家賦權(quán)確定綜合集成權(quán)重(也即迭代后的指標(biāo)權(quán)重)。
(5)分別利用客觀權(quán)重(早期版本)、主觀權(quán)重(早期版本)、綜合集成權(quán)重(迭代版本)計算樣本評價結(jié)果并分別進(jìn)行排序,將各版本的序列結(jié)果與預(yù)設(shè)最優(yōu)序列結(jié)果進(jìn)行比較,挑選出最佳權(quán)重系數(shù)集合,完成對權(quán)重設(shè)置的優(yōu)化。
基于全面性、完整性、客觀性原則,WCI早期版本囊括盡可能多的數(shù)據(jù)指標(biāo)項,共包括兩大維度、11項二級指標(biāo)(如表1所示)。在后期迭代過程中,根據(jù)各項指標(biāo)測試數(shù)據(jù)的描述統(tǒng)計與分析,剔除部分指標(biāo),完成指標(biāo)項優(yōu)化。
為了便于指標(biāo)項之間的對比分析,對各指標(biāo)項三個測試時間段的樣本數(shù)據(jù)分別進(jìn)行百分制標(biāo)準(zhǔn)化,之后取均值進(jìn)行描述統(tǒng)計,計算得相關(guān)指標(biāo)如表2所示。
表1 微信傳播力評價指標(biāo)匯總
表2 樣本指標(biāo)三個時間段平均值的表述統(tǒng)計
從各個指標(biāo)項描述數(shù)據(jù)來看,可發(fā)現(xiàn)S11(日均閱讀數(shù))與S14(周期內(nèi)總閱讀數(shù))各項統(tǒng)計值相同,也即兩項指標(biāo)具有重復(fù)性,考慮到長周期評價時數(shù)值量級過大的問題,故決定采用S11(日均閱讀數(shù)),剔除S14(總閱讀數(shù))指標(biāo);同理,點贊指數(shù)計算上也采用S21(日均點贊數(shù)),相應(yīng)地剔除S24(總點贊數(shù))。
從變異系數(shù)來看,S15(平均閱讀數(shù)增量)和S25(平均點贊數(shù)增強)變異系數(shù)最大,對評價對象的區(qū)分度最好,也就是評估對象較容易通過該項指標(biāo)提高綜合得分,形成差異。但考慮到評估對象之間的基礎(chǔ)能力差異,采用S15和S25容易強化單一指標(biāo)的影響度、擴大誤差,尤其是針對頭部賬號和尾部賬號進(jìn)行對比分析時,存在一定的不公平性,故剔除S15和S25。
除S15(平均閱讀數(shù)增量)外,所有指標(biāo)分布均呈現(xiàn)右偏和尖峰分布,也即大部分樣本賬號的指標(biāo)值都低于平均水平,頭部賬號呈現(xiàn)出集中趨勢,長尾現(xiàn)象較為明顯。此外,S26(點贊率)由S11(日均閱讀數(shù))和S21(日均點贊數(shù))共同決定,從分布上來看,S11的離散程度明顯高于S21,且S21變動對評估結(jié)果影響程度更大,也就是說,更容易通過提高點贊數(shù)去提升S26的值,從而影響整個評估結(jié)果;另一方面,由于S11數(shù)值分散,量級差異會對S26的數(shù)值造成較大影響,綜合考慮各方面因素,最終決定剔除S26,盡量減小評估誤差。
經(jīng)過數(shù)據(jù)分析與論證,最終確定兩大維度、6項二級指標(biāo)(如表3所示)。由于部分指標(biāo)在迭代過程中被剔除,其權(quán)重也應(yīng)合理分配到其所對應(yīng)的關(guān)聯(lián)指標(biāo)項中。為保證權(quán)重分配的合理性,我們在更新指標(biāo)維度后重新采用層次分析法和綜合賦權(quán)法對余下各項指標(biāo)重新賦權(quán)。
表3 微信傳播力評價指標(biāo)體系(WCI-12.0)
WCI早期版本因缺乏歷史經(jīng)驗數(shù)據(jù)和反饋數(shù)據(jù),為避免人工賦權(quán)的主觀性和不可控性,主要采用客觀賦權(quán)法,利用最小二乘法和變異系數(shù)法計算各項指標(biāo)的客觀權(quán)重;后因客觀權(quán)重?zé)o法反映出各項指標(biāo)的實際重要程度,改用主觀賦權(quán)法,利用層次分析法計算各項指標(biāo)的權(quán)重,凸顯評估重點;之后又因為只用層次分析法無法實現(xiàn)對權(quán)重系數(shù)的微調(diào),而且在復(fù)雜指標(biāo)項計算上存在一定局限性,最終確定采用綜合賦權(quán)法,結(jié)合層次分析法和專家直接賦權(quán)初步確定指標(biāo)權(quán)重,在此基礎(chǔ)上根據(jù)測試結(jié)果進(jìn)行微調(diào),得到12.0版本權(quán)重賦值(見表3)。
客觀賦權(quán)法計算出來的各項指標(biāo)權(quán)重是由各項指標(biāo)的實際數(shù)據(jù)所反映信息量大小決定的,也即該項指標(biāo)區(qū)分度越高、反映問題越明顯,其所得權(quán)重越大。一般而言包括突出整體差異的最小二乘法賦權(quán),和凸顯局部差異的變異系數(shù)賦權(quán)法。WCI在早期構(gòu)建過程中,分別采用這兩個方法計算各項指標(biāo)的權(quán)重。
表4 各種方法計算所得權(quán)重
采用層次分析法進(jìn)行主觀賦權(quán),首先對各項指標(biāo)的重要性進(jìn)行評估,然后依次建立相關(guān)模糊集、確定模糊評價矩陣,最終計算得S11、S12、S13(也即S21、S22、S23)的特征向量為:W=[0.230,0.648,0.122]T。根據(jù)專家交叉打分確定閱讀指數(shù)和點贊指數(shù)各自權(quán)重為0.8和0.2,最終計算得各項指標(biāo)權(quán)重如表4所示。
另外,亦可通過專家交叉打分直接為各個指標(biāo)賦權(quán),由于微信傳播力的評估側(cè)重點多從行業(yè)實際運營狀況考慮,客觀權(quán)重不能反映實際評估重點,層次分析法計算靈活性不足。基于專業(yè)認(rèn)知和經(jīng)驗數(shù)據(jù)的專家賦權(quán)往往更能反映評估側(cè)重點,對微信公號的傳播力評價起到指導(dǎo)性作用。通過專家交叉打分和業(yè)界綜合反饋,采用加權(quán)匯總的方法計算得專家賦權(quán)如表4所示,專家賦權(quán)也將作為WCI各項指標(biāo)權(quán)重設(shè)置的關(guān)鍵依據(jù)。
為保證指標(biāo)權(quán)重值的科學(xué)合理性,應(yīng)結(jié)合主觀賦權(quán)和客觀賦權(quán),綜合確定各項指標(biāo)的權(quán)重。在實際操作中,以主觀判斷為基礎(chǔ),客觀賦權(quán)作為修正參考,采用加權(quán)匯總方法得到綜合賦權(quán)值。假設(shè)Ai、Bi、Ci、Di分別為最小二乘權(quán)、變異系數(shù)權(quán)、層次分析權(quán)和專家賦權(quán)生成的xi的權(quán)重系數(shù),k1、k2、k3、k4為待定常數(shù),加和為1(分別設(shè)定為0.05、0.05、0.2、0.7),反映了各項權(quán)重系數(shù)在綜合賦權(quán)中的影響作用,則綜合權(quán)重值為wi=k1Ai+k2Bi+k3Ci+k4Di。其中,Di(專家賦權(quán))和Ci(層次分析賦權(quán))作為基礎(chǔ)權(quán)重系數(shù),對匯總權(quán)重進(jìn)行微調(diào)得綜合集成權(quán)(見表4)。
對比表4中各項客觀賦權(quán)、主觀賦權(quán)和綜合賦權(quán)值,可以發(fā)現(xiàn)最小二乘權(quán)和變異系數(shù)權(quán)雖然能突出整體差異,在約束條件之下最大限度反映各評價對象之間的差別,但其并沒有反映相關(guān)指標(biāo)的實際重要程度。例如,S21、S22、S23(點贊指數(shù))的變異系數(shù)權(quán)明顯高于閱讀指標(biāo),不符合業(yè)界對傳播力的實際評判標(biāo)準(zhǔn),參考價值并不高。故在計算綜合集成權(quán)過程中,我們盡量降低客觀賦權(quán)的比重,主要采用層次分析權(quán)和專家賦權(quán)加權(quán)集成。
基于1786個樣本賬號2014年10月、2015年10月、2016年10月各項指標(biāo)的標(biāo)準(zhǔn)化數(shù)據(jù),分別采用最小二乘權(quán)、變異系數(shù)權(quán)、層次分析權(quán)、專家評價權(quán)和綜合集成權(quán)計算傳播力得分(WCI)??紤]到各項權(quán)重系數(shù)的參考價值,選取層次分析權(quán)、專家評價權(quán)及綜合集成權(quán)計算得來的傳播力得分值,計算的平均得分作為理想化評價結(jié)果,并根據(jù)理想化評價結(jié)果得出假定最優(yōu)排序。分別對假定的理想化評價結(jié)果以及各種賦權(quán)法所得評價結(jié)果進(jìn)行排序,在此基礎(chǔ)上計算各類賦權(quán)結(jié)果排序與假定最優(yōu)排序之間的差值,對差值絕對值進(jìn)行加和,所得結(jié)果如表5所示。
表5 各種賦權(quán)計算結(jié)果的序位差絕對值之和
續(xù)表
可以發(fā)現(xiàn),無論是1786個總樣本還是大多數(shù)細(xì)分領(lǐng)域樣本,采用綜合集成權(quán)計算出來的排位結(jié)果是最貼近最優(yōu)排序的,相比之下,客觀賦權(quán)計算結(jié)果明顯偏離最優(yōu)排序。總體來看,各項賦權(quán)系數(shù)的參考價值排序依次為:綜合集成權(quán)>專家評價權(quán)>層次分析權(quán)>變異系數(shù)權(quán)>最小二乘權(quán),故最終確定綜合集成權(quán)作為WCI的最佳賦權(quán)系數(shù),完成對指標(biāo)權(quán)重的修正和優(yōu)化,最終確定的優(yōu)化模型如表3所示(即WCI的12.0版本)。
基于以上分析,對WCI從1.0版本到12.0版本的迭代優(yōu)化過程進(jìn)行路徑梳理,整合各版本的迭代緣由如表6所示。
表6 WCI版本迭代優(yōu)化路徑梳理
續(xù)表
本文以微信傳播力指數(shù)WCI為例,結(jié)合其版本迭代過程中的歷史數(shù)據(jù),對其指標(biāo)修正和權(quán)重優(yōu)化過程進(jìn)行分析,提出了一種指標(biāo)體系優(yōu)化和結(jié)果驗證的方法,并對WCI迭代版本的科學(xué)性和合理性進(jìn)行了論證。在指標(biāo)修正方面,通過提取迭代過程中不同時間段的指標(biāo)數(shù)據(jù),減少了樣本指標(biāo)數(shù)據(jù)隨時間變化起伏對客觀信息獲取的影響,并基于標(biāo)準(zhǔn)化指標(biāo)數(shù)據(jù)的描述統(tǒng)計值,剔除重復(fù)性設(shè)置、關(guān)聯(lián)性不強、區(qū)分度過強且易人工調(diào)控的部分指標(biāo),整個指標(biāo)修正過程基本依據(jù)客觀數(shù)據(jù),降低了主觀判斷的不可控性;在權(quán)重優(yōu)化上,梳理了WCI迭代過程中指標(biāo)賦權(quán)的方法軌跡,對最小二乘權(quán)、變異系數(shù)權(quán)、層次分析權(quán)、專家直接賦權(quán)、綜合集成權(quán)的計算方式,及其各自的優(yōu)勢進(jìn)行了對比分析,并根據(jù)各種賦權(quán)方法計算評價結(jié)果與預(yù)設(shè)理想排序結(jié)果進(jìn)行比對,選擇最貼近理想序列結(jié)果的賦權(quán)方法計算迭代版本的指標(biāo)權(quán)重?;诳陀^數(shù)據(jù)分析和科學(xué)計算方法,最終完成模型的優(yōu)化,得到WCI的12.0版本。
本研究在指標(biāo)修正和權(quán)重優(yōu)化的過程中主要基于樣本數(shù)據(jù)判斷,能較為客觀科學(xué)地反映評價結(jié)果的有效性。但限于純算法結(jié)果與現(xiàn)實情況存在一定背離,不能反映模型預(yù)設(shè)的評估側(cè)重點,在很大程度上依然需要依靠主觀判斷和人工評分去調(diào)整模型。尤其是在權(quán)重修正方面,本研究主要基于專家交叉打分進(jìn)行主觀賦權(quán),將客觀賦權(quán)作為參考性指標(biāo),專家賦權(quán)的標(biāo)準(zhǔn)有待進(jìn)一步細(xì)化和規(guī)范化,人工賦值的科學(xué)合理性也有待進(jìn)一步論證。另外,在選擇最優(yōu)權(quán)重集合的過程中預(yù)設(shè)了一種理想化評分排序,預(yù)設(shè)排序主要基于非客觀賦權(quán)所計算的平均得分,該得分序列是否為最優(yōu)結(jié)果也有待驗證。因此,本研究仍需要提升模型優(yōu)化方法和檢驗方法的客觀性,擴大樣本量和數(shù)據(jù)規(guī)模,全方位對評價結(jié)果的科學(xué)性進(jìn)行驗證,進(jìn)一步將定性判斷和定量分析進(jìn)行融合,實現(xiàn)評價結(jié)果的最優(yōu)化。