中央財經(jīng)大學(xué) 寧小花
元評估概念最早是由美國評價理論專家麥克.斯克里溫(Michael Scriven)在1969年的教育產(chǎn)品報告中首次引入的,當(dāng)時是為了描述一個對教育產(chǎn)品設(shè)計的評價之評價,即對評價進(jìn)行再評價的過程。Scriven 教授將“meta-evaluation”定義為對一項評估活動、評估系統(tǒng)或評估工具的評估。也就是按照一定的標(biāo)準(zhǔn)或原則對評估工作本身進(jìn)行評估的活動,其目的是判斷評估工作的質(zhì)量、規(guī)范與完善評估活動。
1974年,美國的Stufflebeam,D.L.教授給元評估以具體的概念化,將元評估定義為獲取和運用那些評估的實用性、可行性、合理性和準(zhǔn)確性以及其系統(tǒng)本質(zhì)、行為能力、誠信度、受尊重程度和社會責(zé)任感方面的描述性和評估性信息,來引導(dǎo)評估并向公眾報告該評估的價值和缺陷的過程。
社會組織評估是一個發(fā)展與完善的過程,如果能對社會組織評估全過程進(jìn)行有效控制,不但可以提高評估過程的科學(xué)性,而且能夠完善評估體系,最終形成社會組織評估的可持續(xù)提升。
一方面,元評估能夠最大程度對社會組織評估的偏差進(jìn)行控制。社會組織評估是一個非常復(fù)雜的過程,它涉及到評估主體、評估范圍、指標(biāo)設(shè)定、評估方法、評估模式、評估程序等各項工作。因此,社會組織評估的復(fù)雜、高難度性決定了評估偏差產(chǎn)生的不可避免性,這些偏差產(chǎn)生于社會組織評估的整個生命周期過程中。而元評估就具有控制偏差的功能,其不僅可以通過評估偏差識別方法,分析原評估的一些數(shù)據(jù)和流程,檢測原來評估的偏差環(huán)節(jié),還可以對偏差原因進(jìn)行分析,并向原來評估主體反饋偏差和意見,進(jìn)而提出建設(shè)性意見,提高和改進(jìn)評估的整體質(zhì)量。
另一方面,元評估作為社會組織評估的一個重要組成部分,是增強評估信服力,提高社會組織公信力的重要手段。公信力是社會組織的生命線,社會組織能力建設(shè)的核心就是要提升社會公信力。作為社會建設(shè)的一支重要力量,社會組織作用影響日漸顯現(xiàn),社會組織的公信力也備受社會各界關(guān)注,成為當(dāng)前社會組織能力建設(shè)的關(guān)鍵要素。而如何保證這種評估的科學(xué)化、規(guī)范化,如何增加社會組織的透明度,強化社會監(jiān)督,本文認(rèn)為元評估在其中是一個非常重要的環(huán)節(jié),通過來自第三方或上級的元評估,評估原來評估工作的實用性、可行性、合理性、準(zhǔn)確性,并發(fā)布權(quán)威的元評估報告,無疑給公眾打一針強心劑,提高社會組織在公眾心中的公信力。
由于目前國內(nèi)尚未見到社會組織評估中元評估的相關(guān)案例或研究,本文嘗試借鑒國外Scriven.M教授和Stufflebeam,D.L教授研發(fā)的元評估量表,從評估目標(biāo)、評估主體、評估對象、評估標(biāo)準(zhǔn)、評估方法、評估結(jié)果應(yīng)用等方面對社會組織評估的元評估框架進(jìn)行探討,以求逐步優(yōu)化社會組織評估體系。
社會組織元評估的目標(biāo)主要是保證社會組織評估活動的嚴(yán)肅性,對其評估主體、評估活動、評估結(jié)果等關(guān)鍵要素進(jìn)行再評估,并明確指出評估的優(yōu)劣所在,正確有效地引導(dǎo)評估活動,增強社會公眾對社會組織評估的信任度和認(rèn)可度,進(jìn)而樹立公眾對社會組織的信心。
元評估主體更需由政府主導(dǎo)成立專門的評估委員會,完善評估主體結(jié)構(gòu),對社會組織評估的品質(zhì)和公平性進(jìn)行評估,以證明評估結(jié)果的可信賴性。
元評估的對象或客體主要是指原來的評估。這里“原來的評估”不僅僅是指評估結(jié)論,還包括評估目標(biāo)、評估主體結(jié)構(gòu)、評估過程、評估方法、評估結(jié)論在內(nèi)的一整個系統(tǒng),是對評估進(jìn)行全面、系統(tǒng)地再評估,以修正評估結(jié)論,改進(jìn)評估活動的過程。
元評估的關(guān)鍵就是要建立一套科學(xué)、可行、準(zhǔn)確的評估標(biāo)準(zhǔn)。由于元評估就是對評估本身的評估,因此其應(yīng)用范圍更為廣泛,且在美國并沒有把哪個評估標(biāo)準(zhǔn)明確為元評估標(biāo)準(zhǔn),而是在評估標(biāo)準(zhǔn)的某一指標(biāo)強調(diào)進(jìn)行元評估。由此,筆者根據(jù)國外Scriven.M教授和Stufflebeam,D.L教授研發(fā)的元評估量表來嘗試構(gòu)建社會組織元評估的指標(biāo)框架,這一指標(biāo)框架具有雙重作用,可作為一般意義上的評估標(biāo)準(zhǔn),也可作為檢驗評估質(zhì)量的元評估標(biāo)準(zhǔn),可以根據(jù)用途的不同而加以區(qū)別。
元評估采取評估單位自評、評估對象評分、元評估主體考評、審定相結(jié)合,資料審查與實地考察相結(jié)合的方法。資料審查的過程可以審查評估的一些文件、制度,評估過程中的專家打分記錄、會議紀(jì)要、照片、錄像等資料,也可以到評估對象去調(diào)研,考察評估對象對評估整體的滿意程度。
元評估主體在評估后及時向社會公開元評估過程及結(jié)果,對社會組織評估的優(yōu)點和不足之處進(jìn)行分析,呼吁公眾對社會組織及其評估活動進(jìn)行評估,推動著社會組織評估科學(xué)發(fā)展。