“第三方評估”通常包括獨(dú)立第三方評估和委托第三方評估,其實(shí)質(zhì)是區(qū)別于由政策制定者和執(zhí)行者進(jìn)行的評估,是一種外部監(jiān)督制衡方式,其主體具有多樣性,包括行政機(jī)關(guān)委托的高校、專業(yè)評估機(jī)構(gòu)、中介組織、網(wǎng)絡(luò)媒體、社會組織和公眾,特別是利益相關(guān)者參與等多種。本文所說的第三方評估是政府委托社會第三方機(jī)構(gòu)通過電話、互聯(lián)網(wǎng)等方式調(diào)查訪問事業(yè)單位服務(wù)對象、市民等群體,對事業(yè)單位績效進(jìn)行評估的活動。近年來,青島市在對教育、民政、醫(yī)療衛(wèi)生、文廣新等與公眾息息相關(guān)的事業(yè)單位的監(jiān)管和績效評估中,引入了第三方評估機(jī)制,收到了良好成效。
一、青島市開展事業(yè)單位第三方評估的實(shí)踐
(一)以事業(yè)單位公益屬性為評估核心建立第三方評估機(jī)制
以市委辦公廳和市政府辦公廳名義印發(fā)《青島市事業(yè)單位績效考核辦法(試行)》,明確在對事業(yè)單位考核的指標(biāo)中加入“社會評價(jià)”指標(biāo),涵蓋職責(zé)履行、依法行政、文明服務(wù)和服務(wù)質(zhì)量等方面的社會滿意度,并建議通過統(tǒng)計(jì)等部門綜合運(yùn)用問卷調(diào)查、電話訪問等方式進(jìn)行,調(diào)查對象要體現(xiàn)代表性和廣泛性,調(diào)查的有效性樣本一般不少于200個,為開展事業(yè)單位第三方評估工作提供了政策支持。
為推動第三方評估工作制度化、規(guī)范化、程序化,市事業(yè)單位考核委員會辦公室(以下簡稱“市事考辦”)建立完善了第三方評估流程。一是制定評估方案。市事考辦牽頭,教育、民政、衛(wèi)生計(jì)生、文廣新等舉辦單位,根據(jù)所屬公益類事業(yè)單位的中心工作制定年度第三方評估方案,明確評估的目的、對象、內(nèi)容、標(biāo)準(zhǔn)、方法及完成時(shí)限等事項(xiàng),特別在被調(diào)查對象選取上要求堅(jiān)持“知情人評知情事”的原則,確保評估的針對性和準(zhǔn)確性。二是選擇評估機(jī)構(gòu)。以政府采購方式,選取權(quán)威專業(yè)的第三方評估機(jī)構(gòu)開展工作。三是制作調(diào)查問卷。市事考辦、舉辦單位、評估機(jī)構(gòu)的專業(yè)人士聯(lián)合參與到評估問卷設(shè)計(jì)中,制作了科學(xué)合理的調(diào)查問卷。四是開展科學(xué)評估。通過電話問卷、互聯(lián)網(wǎng)等方式全面采集數(shù)據(jù)信息,廣泛收集意見建議,深入了解真實(shí)情況;評估過程中運(yùn)用技術(shù)手段或?qū)H吮O(jiān)督,嚴(yán)格做好信息保密工作。五是運(yùn)用評估結(jié)果。根據(jù)評估結(jié)果撰寫針對性的評估報(bào)告;將評估結(jié)果作為重要分值納入事業(yè)單位績效考核指標(biāo),并將結(jié)果向社會公示,充分發(fā)揮其激勵約束作用。
(二)科學(xué)制定評估方案,為評估工作順利開展打下堅(jiān)實(shí)基礎(chǔ)
市事考辦每年9月下發(fā)關(guān)于做好年度事業(yè)單位績效考核工作的通知,通知中明確重點(diǎn)對事業(yè)單位履行公益服務(wù)職責(zé)等方面的社會滿意度進(jìn)行第三方評估;制作了開展第三方評估的方案模板,包括調(diào)查目的、調(diào)查內(nèi)容、調(diào)查對象、調(diào)查范圍、調(diào)查方式、調(diào)查時(shí)間、調(diào)查實(shí)施單位等內(nèi)容。
方案制定過程中注重匯聚各方力量,市事考辦聯(lián)合舉辦單位通過深入調(diào)研、專家論證等方式,確定評估步驟和標(biāo)準(zhǔn),建立指標(biāo)體系,明確評估方法,并征詢評估對象和評估實(shí)施機(jī)構(gòu)的意見,最終形成評估實(shí)施方案。評估方案經(jīng)審核通過后,由履行政府采購程序后選取的第三方評估機(jī)構(gòu)組織實(shí)施。
(三)科學(xué)合理設(shè)計(jì)調(diào)查問卷,確保了第三方評估的針對性和有效性
市事考辦、舉辦單位注重吸收各有關(guān)行業(yè)和部門的專家、高層次專業(yè)人才參與問卷設(shè)計(jì)。設(shè)計(jì)中,堅(jiān)持針對性、全面性、通俗性、可比較的原則,從事業(yè)單位履職的公眾滿意度出發(fā),涵蓋了硬件設(shè)施建設(shè)、日常管理、主要職責(zé)履行、文明服務(wù)和公眾意見建議等方面,設(shè)置的問題選項(xiàng)便于評價(jià)且易于區(qū)分。具體來說,具有四個特征:一是操作性強(qiáng)。合理確定問卷容量,每份問卷一般5-8分鐘可以完成,避免引起被調(diào)查者厭煩和畏難情緒。二是優(yōu)化度高。指標(biāo)和問題在優(yōu)化精煉的基礎(chǔ)上,盡可能契合調(diào)查主體,涵蓋事業(yè)單位主要職責(zé)。如教育系統(tǒng)滿意度調(diào)查問卷,涵蓋學(xué)校管理、課堂教學(xué)、教師行為、校園安全、德育實(shí)施、學(xué)生身體健康等多個方面;醫(yī)療衛(wèi)生滿意度調(diào)查問卷涵蓋醫(yī)療技術(shù)水平、服務(wù)態(tài)度、廉潔自律、就醫(yī)環(huán)境、群眾就醫(yī)感受、提升醫(yī)療服務(wù)建議等方面,軍休機(jī)構(gòu)滿意度調(diào)查問卷涵蓋待遇落實(shí)、文化活動、服務(wù)水平、工作態(tài)度等方面,基本涵蓋了學(xué)校、醫(yī)院、軍休機(jī)構(gòu)等事業(yè)單位的主要公益服務(wù)職責(zé)。三是問題科學(xué)合理。問題具體表述上措辭嚴(yán)謹(jǐn)親切,文字通俗易懂,提問客觀公正,答案意思明確、界限清楚。四是結(jié)果易于處理。問卷滿意度選項(xiàng)一般設(shè)置“滿意、比較滿意、一般、不太滿意、不滿意”等具體分級,易于量化評估和數(shù)據(jù)處理。
(四)嚴(yán)謹(jǐn)規(guī)范開展調(diào)查評估,精準(zhǔn)把脈事業(yè)單位公益服務(wù)情況
調(diào)查評估過程中,市事考辦、舉辦單位提前向被委托的評估機(jī)構(gòu)提供該年度事業(yè)單位全部服務(wù)對象的聯(lián)系方式,或通過互聯(lián)網(wǎng)建立了針對服務(wù)對象的調(diào)查評估平臺,通過電話訪問、網(wǎng)絡(luò)問卷填寫等多種方式開展調(diào)查評估;注重收集意見建議,特別當(dāng)被調(diào)查對象出現(xiàn)“不滿意”情況時(shí)要求準(zhǔn)確記錄、深入了解真實(shí)情況,確保針對性進(jìn)行工作整改。由于被調(diào)查對象針對性強(qiáng),基礎(chǔ)工作準(zhǔn)備充分,細(xì)節(jié)考慮周全,調(diào)查手段現(xiàn)代化程度高,保證了第三方評估的覆蓋范圍廣、被調(diào)查對象配合度高、調(diào)查評估結(jié)果客觀真實(shí)。
青島市事業(yè)單位績效第三方評估主要采取以下兩種方式:一是通過計(jì)算機(jī)輔助電話調(diào)查系統(tǒng)(CATI系統(tǒng)),以電話訪問形式進(jìn)行調(diào)查。調(diào)查中,由經(jīng)過專業(yè)、系統(tǒng)培訓(xùn)的訪問員坐在計(jì)算機(jī)前,面對屏幕上的問卷,向電話對面的被訪者讀出問題,將受訪者的回答結(jié)果實(shí)時(shí)記錄到計(jì)算機(jī)中;督導(dǎo)人員在另一臺計(jì)算機(jī)前對整個訪問工作進(jìn)行現(xiàn)場監(jiān)控。通過該系統(tǒng),以更短的時(shí)間、更少的費(fèi)用,得到了更加優(yōu)質(zhì)的訪問數(shù)據(jù),所得數(shù)據(jù)可被各種統(tǒng)計(jì)軟件直接使用。該調(diào)查方式具有調(diào)查速度快、樣本覆蓋廣、客觀性強(qiáng)、精確度高、調(diào)查現(xiàn)場集中等優(yōu)勢。目前,民政、衛(wèi)生計(jì)生、文廣新等系統(tǒng)所屬事業(yè)單位的第三方評估基本采用該種方式進(jìn)行。二是以“互聯(lián)網(wǎng)+評估”方式進(jìn)行調(diào)查。教育系統(tǒng)創(chuàng)新打造了“中小學(xué)社會化評價(jià)網(wǎng)絡(luò)平臺”,利用“互聯(lián)網(wǎng)+”現(xiàn)代信息技術(shù)手段,讓家長、學(xué)生及教師在網(wǎng)上參與對學(xué)校教學(xué)質(zhì)量的評估。調(diào)查對象只需通過網(wǎng)絡(luò)登陸平臺,輸入匿名密鑰,即可安全、方便地填寫調(diào)查內(nèi)容。在調(diào)查結(jié)束后,運(yùn)用統(tǒng)計(jì)分析法、綜合評判法對數(shù)據(jù)進(jìn)行科學(xué)分析統(tǒng)計(jì)。分析完所有數(shù)據(jù)后,向每一所學(xué)校下發(fā)細(xì)化到年級的分析表和開放問題統(tǒng)計(jì)表,幫助學(xué)校及時(shí)了解目前存在的問題。該調(diào)查評估方式的調(diào)查對象多樣、填寫問卷便捷、答卷信息私密、統(tǒng)計(jì)結(jié)果準(zhǔn)確,不僅能夠便捷地讓家長、學(xué)生、教師等主體參與到評價(jià)學(xué)校教育質(zhì)量當(dāng)中,更能科學(xué)有效地對評價(jià)結(jié)果數(shù)據(jù)進(jìn)行分析與反饋,幫助評估對象進(jìn)行工作改進(jìn)。
(五)加強(qiáng)評估結(jié)果運(yùn)用,建立了獎優(yōu)罰劣的良好氛圍
現(xiàn)場調(diào)查結(jié)束后,由評估機(jī)構(gòu)匯總、統(tǒng)計(jì)、分析調(diào)查結(jié)果,并出具評估報(bào)告,報(bào)告內(nèi)容主要包括基本情況、評估內(nèi)容、評估方法、評估結(jié)論和意見建議,以及需說明的其他問題;評估機(jī)構(gòu)負(fù)責(zé)人和報(bào)告簽署人對評估報(bào)告的真實(shí)性、客觀性、公正性負(fù)責(zé),并承擔(dān)相應(yīng)的法律責(zé)任。第三方評估結(jié)果和報(bào)告均反饋到各舉辦單位和事業(yè)單位,各舉辦單位督促事業(yè)單位針對具體問題,完善工作措施,加大工作力度,不斷改進(jìn)提升工作質(zhì)量和服務(wù)水平,實(shí)現(xiàn)了事業(yè)單位運(yùn)行“執(zhí)行—評估—改進(jìn)—再評估—再改進(jìn)”的良性循環(huán)。擴(kuò)大評估結(jié)果運(yùn)用范圍,合理確定評估結(jié)果占績效考核指標(biāo)的比重,并實(shí)行考核結(jié)果與干部使用、評先樹優(yōu)、績效工資、機(jī)構(gòu)編制調(diào)整的“四掛鉤”,激勵事業(yè)單位不斷提升自身管理服務(wù)水平和公益屬性。
為建立有效的激勵約束機(jī)制,市事考辦對事業(yè)單位的年度績效考核等次確定中,第三方評估結(jié)果占總分值的15%以上,評估得分較高的單位予以加分。進(jìn)一步加強(qiáng)對考核結(jié)果的運(yùn)用,例如,被評為A級的單位,下年度進(jìn)人用編計(jì)劃由市編委辦予以重點(diǎn)保障,不再列為隨機(jī)抽查對象;評為C級的單位,下年度進(jìn)人用編計(jì)劃暫停辦理,并列為重點(diǎn)抽查對象。市事考辦將考核結(jié)果作為重要的信用信息,通過網(wǎng)絡(luò)等媒介進(jìn)行社會公開,接受各方監(jiān)督,營造了獎優(yōu)罰劣的良好氛圍。
二、第三方評估存在的突出問題
(一)缺乏系統(tǒng)化、專業(yè)化的體制機(jī)制保障
第三方評估作為一項(xiàng)創(chuàng)新工作,目前僅有《青島市事業(yè)單位績效考核辦法(試行)》等文件作出了一些原則性規(guī)定,既缺乏足夠的政策法規(guī)依據(jù),也無一定的現(xiàn)成經(jīng)驗(yàn)可循,各單位開展評估活動隨意較大,經(jīng)常隨著工作重心的轉(zhuǎn)移或領(lǐng)導(dǎo)的更迭而興起或沉寂,缺乏持續(xù)性,有的最終流于形式,影響了評估的力度,降低了評估的效果。評估的結(jié)果應(yīng)用相對乏力,缺乏獎優(yōu)罰劣的有效手段,一些事業(yè)單位缺乏改進(jìn)工作、提升服務(wù)的積極性和主動性。同時(shí),第三方評估工作受財(cái)力等因素制約較大,影響著調(diào)查人員數(shù)量、調(diào)查樣本選定、問卷問題設(shè)置等事項(xiàng)。
(二)第三方評估市場發(fā)展不成熟,評估機(jī)構(gòu)獨(dú)立性、專業(yè)性有待提高
一是第三方評估市場發(fā)展不成熟。第三方評估在我國起步較晚,部分地方政府對評估機(jī)構(gòu)的支持力度不大,真正專業(yè)、獨(dú)立的第三方評估機(jī)構(gòu)數(shù)量較少,且缺乏資金、專業(yè)人才和信息等資源,影響了第三方評估的科學(xué)有效開展。二是第三方評估機(jī)構(gòu)獨(dú)立性難以保證。第三方機(jī)構(gòu)雖然是受政府部門委托開展評估,但問卷指標(biāo)設(shè)定、評價(jià)方法選取等方面受委托機(jī)關(guān)的干預(yù)明顯,第三方評估實(shí)質(zhì)上仍未真正脫離政府機(jī)關(guān)的自評。三是評估機(jī)構(gòu)專業(yè)水平有待進(jìn)一步提高。第三方評估機(jī)構(gòu)的人員目前多由兼職在校大學(xué)生、社會非專業(yè)人士組成,存在人員流動性強(qiáng)、調(diào)查人員不足、部分人員專業(yè)素養(yǎng)不高、培訓(xùn)不到位等問題,且社會上專業(yè)化的教育、培訓(xùn)等尚未發(fā)展完善,難以支撐其高標(biāo)準(zhǔn)、高質(zhì)量地完成評估工作。
(三)調(diào)查問卷設(shè)計(jì)存在不夠科學(xué)合理的問題
高質(zhì)量的調(diào)查問卷是保證評估效果的前提,目前事業(yè)單位績效第三方評估調(diào)查問卷在設(shè)計(jì)中或多或少存在結(jié)構(gòu)不合理、內(nèi)容不規(guī)范、選項(xiàng)不科學(xué)、用語官方化等問題。例如,部分調(diào)查問卷設(shè)置了10個以上問題,可能因占用時(shí)間過多,引起被調(diào)查對象不耐煩;部分單位調(diào)查問卷的最后一個問題為對事業(yè)單位工作質(zhì)量的總體評價(jià)滿意度,而問卷的其他問題已基本涵蓋了事業(yè)單位主要工作,問題設(shè)計(jì)重復(fù),被調(diào)查對象往往會因某一事項(xiàng)的不滿意,全盤否定該單位工作,影響了調(diào)查的準(zhǔn)確性;部分問卷僅統(tǒng)計(jì)滿意度,不記錄分析不滿意原因和意見建議;部分問卷僅設(shè)置“滿意、基本滿意、不滿意”或“有、沒有、不了解”選項(xiàng),導(dǎo)致調(diào)查結(jié)果難以準(zhǔn)確反映真實(shí)情況;調(diào)查問卷在表述中難以避免地使用一些官方化語言,部分問卷在最后缺乏結(jié)束問候語,影響了被調(diào)查對象的感受等。
(四)被調(diào)查對象的“被動參與”影響評估效果
目前,第三方評估的被調(diào)查對象多為“被動參與”的普通市民,最主要的特點(diǎn)是在沒有準(zhǔn)備、極少思考的情況下,被要求在有限的時(shí)間內(nèi)對事業(yè)單位的工作作出選擇性評價(jià)。這樣的參與受市民自身能力素質(zhì)、對被調(diào)查事業(yè)單位職責(zé)等信息的了解度、接受事業(yè)單位服務(wù)覆蓋度等方面制約,在一定程度上造成了評估的盲目性。如在對醫(yī)療衛(wèi)生滿意度調(diào)查問卷中,被調(diào)查對象為在醫(yī)療機(jī)構(gòu)就診的市民自己或者家人,一些市民可能并沒有準(zhǔn)確了解家人就診情況卻回答了問卷,影響了調(diào)查結(jié)果的準(zhǔn)確性。
三、優(yōu)化事業(yè)單位績效第三方評估的思考
中共中央《關(guān)于深化行政管理體制改革的意見》提出,構(gòu)建科學(xué)合理的績效評估機(jī)制,一方面要對績效評估的適用領(lǐng)域具有科學(xué)的認(rèn)知;另一方面,要準(zhǔn)確把握績效評估的價(jià)值導(dǎo)向,完善評估機(jī)制和制度模式,實(shí)現(xiàn)執(zhí)行力與公信力的有機(jī)統(tǒng)一。在完善事業(yè)單位績效第三方評估方面要注重以上兩方面要求,不斷提升第三方評估機(jī)制的完備性,提高第三方評估機(jī)構(gòu)的專業(yè)性和權(quán)威性。
(一)激發(fā)市場活力,培育更多專業(yè)權(quán)威的第三方評估機(jī)構(gòu)
能夠獨(dú)立承擔(dān)民事責(zé)任、具有相對穩(wěn)定的專業(yè)評估人才隊(duì)伍、內(nèi)部管理規(guī)范、社會信譽(yù)良好是專業(yè)、權(quán)威的第三方評估機(jī)構(gòu)應(yīng)具備的基本特征。政府應(yīng)以推進(jìn)“放管服”改革為契機(jī),加大對第三方評估機(jī)構(gòu)的政策扶持力度,出臺相關(guān)配套政策,給予更多資金支持,完善信息公開等制度,激發(fā)市場活力,培育更多專業(yè)、權(quán)威的第三方評估機(jī)構(gòu)。加強(qiáng)評估專業(yè)人才培養(yǎng)和隊(duì)伍建設(shè)力度,做好專業(yè)化的教育培訓(xùn)工作,使專業(yè)人才隊(duì)伍的數(shù)量、結(jié)構(gòu)和素質(zhì)能力能夠適應(yīng)第三方評估工作的需要,更好滿足政府、社會和廣大人民群眾不斷增長的服務(wù)需求。
(二)完善政策法規(guī),確保評估工作有據(jù)可依
第三方評估機(jī)構(gòu)參與事業(yè)單位績效評估需要政策法規(guī)的有力保障。有關(guān)部門應(yīng)在認(rèn)真研究和總結(jié)各地開展事業(yè)單位績效第三方評估的經(jīng)驗(yàn)基礎(chǔ)上,出臺相關(guān)規(guī)范性文件,從制度上明確第三方評估機(jī)構(gòu)的獨(dú)立地位,詳細(xì)規(guī)定第三方評估主體的權(quán)利和義務(wù),使第三方評估成為事業(yè)單位績效評估體系的必要組成部分。在實(shí)際操作過程中,對評估主體評估什么、怎么評估、結(jié)果如何使用、評估應(yīng)注意的問題等方面做出規(guī)定,使評估工作規(guī)范有序、客觀公正。此外,應(yīng)建立第三方評估工作財(cái)政保障機(jī)制,進(jìn)一步擴(kuò)大工作實(shí)施范圍,力爭實(shí)現(xiàn)公益類事業(yè)單位第三方評估全覆蓋。
(三)加強(qiáng)組織領(lǐng)導(dǎo),推進(jìn)評估工作規(guī)范有序?qū)嵤?/p>
有關(guān)部門要統(tǒng)籌規(guī)劃好第三方評估的組織實(shí)施工作。一是在評估工作前,要就事業(yè)單位可能存在的問題、群眾普遍關(guān)心的熱點(diǎn)進(jìn)行分析,科學(xué)制定評估方案;對利益相關(guān)方進(jìn)行梳理,盡量排除實(shí)施過程中的阻力因素;對評估機(jī)構(gòu)實(shí)施公開招標(biāo),遴選出最適合的機(jī)構(gòu)承擔(dān)評估工作,還要對委托合同進(jìn)行細(xì)化,明確第三方評估機(jī)構(gòu)的職責(zé),確保其行為規(guī)范有序。二是在評估工作中,加強(qiáng)對第三方評估機(jī)構(gòu)的監(jiān)督,確保全程都依照有關(guān)要求實(shí)施。三是在評估結(jié)束后,要監(jiān)督事業(yè)單位根據(jù)第三方評估意見,及時(shí)改進(jìn)發(fā)現(xiàn)的問題,確保評估最終目標(biāo)得以實(shí)現(xiàn)。
(四)做好問卷設(shè)計(jì),確保評估的專業(yè)性和針對性
調(diào)查問卷應(yīng)結(jié)合事業(yè)單位行業(yè)特點(diǎn),圍繞年度主要工作、群眾重點(diǎn)關(guān)注等方面設(shè)計(jì)制作。借助高校、專業(yè)機(jī)構(gòu)等單位專家的力量,組建第三方評估團(tuán)隊(duì)參與設(shè)計(jì),盡可能提高問卷的專業(yè)性。推行評估問題公開征集機(jī)制,在問卷設(shè)計(jì)前,通過政府網(wǎng)站、官方微博微信、新聞媒體等途徑及時(shí)、客觀地公開事業(yè)單位的主要宗旨及業(yè)務(wù)范圍、年度工作目標(biāo)、年度工作總結(jié)等信息,將評估問題的選擇權(quán)交給公眾,切實(shí)提高問卷的針對性。
(五)強(qiáng)化評估結(jié)果運(yùn)用,建立評估結(jié)果反饋與使用機(jī)制
完善評估結(jié)果信息公開、內(nèi)部通報(bào)等制度,形成“公眾評估——分析事業(yè)單位服務(wù)與公眾需求的差距——事業(yè)單位減少差距——公眾再評估”的循環(huán)回路,激勵事業(yè)單位“精準(zhǔn)”提升自身管理服務(wù)水平。加強(qiáng)對評估結(jié)果運(yùn)用的研究,合理提高第三方評估結(jié)果占事業(yè)單位績效考核指標(biāo)的比重,并適當(dāng)增大所占分?jǐn)?shù)比重,要避免出現(xiàn)分值區(qū)分度低、拉不開差距的現(xiàn)象;真正實(shí)現(xiàn)考核結(jié)果與干部使用、評先樹優(yōu)、績效工資、機(jī)構(gòu)編制調(diào)整“四掛鉤”,充分發(fā)揮評估的激勵約束作用。
(六)利用“互聯(lián)網(wǎng)+評估”手段,創(chuàng)新推進(jìn)評估工作開展
進(jìn)一步創(chuàng)新工作方式,探索通過“互聯(lián)網(wǎng)+評估”方式,將第三方評估工作移植到網(wǎng)絡(luò)上完成,拓寬公眾參與評估的渠道,降低人為因素對評估過程的干擾;將互聯(lián)網(wǎng)評估結(jié)果與當(dāng)前采取較多的電話問卷調(diào)查模式進(jìn)行橫向?qū)Ρ?,真?shí)了解評估的有關(guān)情況,達(dá)到評估對象覆蓋更全、問卷填寫更加便捷、個人信息更加保密、統(tǒng)計(jì)結(jié)果更加精確的目的。□E:FQJ
關(guān)鍵詞:第三方評估 事業(yè)單位 精準(zhǔn)監(jiān)管