趙東蕾 魏志強(qiáng) 張保學(xué) 張?jiān)篮?晏天 錢飛 李慶超
摘要:為保證海洋調(diào)查觀測監(jiān)測工作質(zhì)量,滿足合法合規(guī)的要求,自然資源管理部門對海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系運(yùn)行情況進(jìn)行定期檢查或評估,確保其能支撐各項(xiàng)海洋任務(wù)得到可信的數(shù)據(jù)結(jié)果。然而,這些評估多采用定性方式,對這些機(jī)構(gòu)的質(zhì)量管理體系運(yùn)行的有效性進(jìn)行系統(tǒng)性量化評價(jià)的科學(xué)方法仍需進(jìn)一步研究。文章以海洋調(diào)查觀測監(jiān)測工作的特殊要求為導(dǎo)向,從資源配置、實(shí)施過程和結(jié)果成效3個(gè)方面,識別人員、設(shè)備、方法及其使用、質(zhì)量控制、成果載體和改進(jìn)6項(xiàng)評價(jià)指標(biāo),并引入機(jī)構(gòu)資質(zhì)合法性、數(shù)據(jù)真實(shí)性和質(zhì)量驗(yàn)收結(jié)果3個(gè)“一票否決”指標(biāo);基于加權(quán)累加法建立評價(jià)模型,使用層次分析法確定各項(xiàng)指標(biāo)的權(quán)重,設(shè)置評價(jià)標(biāo)準(zhǔn)和等級界限;構(gòu)建海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性評價(jià)綜合評價(jià)方法,并給出覆蓋海洋調(diào)查觀測監(jiān)測工作的事前、事中、事后的評價(jià)流程建議;以承擔(dān)海洋生態(tài)預(yù)警監(jiān)測任務(wù)的檢驗(yàn)檢測機(jī)構(gòu)為例進(jìn)行評價(jià)示范,體現(xiàn)該評價(jià)方法具有實(shí)用性。
關(guān)鍵詞:海洋檢驗(yàn)檢測機(jī)構(gòu);質(zhì)量管理體系;綜合評價(jià)方法
中圖分類號:P7??? 文獻(xiàn)標(biāo)志碼:A??? 文章編號:1005-9857(2022)05-0095- 1 1
A Comprehensive Method for Evaluating Running Effectiveness of Quality Management Systems of Ocean Inspection Bodies and Laboratories
ZHAO Donglei,WEI Zhiqiang,ZHANG Baoxue,ZHANG Yuehong,YAN Tian,QIAN Fei,LI Qingchao
(South China Sea Standards and Metrology Centre,SOA,Guangzhou 510300,China)
Abstract:In order to ensure the quality of the results of ocean investigation,observation and moni-toring as well as to ensure their compliance of relative laws,branches of Ministry of Natural Re-sources regularly assessed the running status of the quality management systems of the ocean in-spection bodies and laboratories,which was to confirm their ability of obtaining reliable data and results from the marine tasks. However,these assessments were usually based on qualitative methods;a systematic and quantitative method required further research. The paper focused on the particular requirements of marine tasks,recognized 3 relative aspects:deployment of resources,processes of implementation and effectiveness of results,and divided them into 6 indicators:em-ployees,instruments,methods and their application,quality controlling,carriers of outputs and improvement. Meanwhile,3 “one-vote veto”indicators were distinguished:legitimacy of the or-ganization's qualification,authenticity of the data and result,of the quality acceptance test. On the basis of these,an evaluation model depending on weighted accumulation method was established,the weights were acquired through Analytic Hierarchy Process method,the standards and the rule of grading were set,and an index system to evaluate running effectiveness of quality management systems of ocean inspection bodies and laboratories was constructed. At the end of the paper,an advised procedure to conduct the evaluation method was illustrated,and a demonstration on asses-sing the marine ecology monitoring organizations was given,which showed the practicability of the evaluation method.
Keywords:Ocean inspection bodies and laboratories,Quality management systems,Comprehensive evaluation method
0??? 引言
近年來,隨著我國經(jīng)濟(jì)由高速增長轉(zhuǎn)向高質(zhì)量發(fā)展階段,“質(zhì)量第一”和“質(zhì)量強(qiáng)國”被同時(shí)寫進(jìn)黨的十九大報(bào)告中,海洋開發(fā)與利用領(lǐng)域?qū)|(zhì)量的認(rèn)識也愈發(fā)深刻。自然資源部辦公廳、國家林業(yè)和草原局辦公室發(fā)布《自然資源調(diào)查監(jiān)測質(zhì)量管理導(dǎo)則(試行)》(自然資辦發(fā)〔2021〕49號),要求作業(yè)單位建立并運(yùn)行覆蓋本單位調(diào)查監(jiān)測業(yè)務(wù)的質(zhì)量管理體系。這其中的一項(xiàng)重要工作,便是海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系的建立和健全。
海洋檢驗(yàn)檢測機(jī)構(gòu)是自然資源管理部門履行海洋開發(fā)利用和保護(hù)的監(jiān)督管理職責(zé)、開展海洋調(diào)查觀測監(jiān)測工作的主體,其質(zhì)量管理體系運(yùn)行情況,直接影響海洋調(diào)查觀測監(jiān)測任務(wù)的實(shí)施效果。我國海洋檢驗(yàn)檢測機(jī)構(gòu)包括各海洋觀測預(yù)報(bào)防災(zāi)減災(zāi)、海洋生態(tài)預(yù)警監(jiān)測、近海斷面調(diào)查和遠(yuǎn)洋調(diào)查等任務(wù)承擔(dān)單位和海洋研究所等,其工作內(nèi)容常涉及海洋站(點(diǎn))和調(diào)查船等遠(yuǎn)程或移動的、分散的實(shí)驗(yàn)場所,以及多個(gè)海區(qū)的調(diào)查觀測監(jiān)測數(shù)據(jù)整合,對結(jié)果數(shù)據(jù)質(zhì)量提出嚴(yán)峻挑戰(zhàn)。
為了保證海洋調(diào)查觀測監(jiān)測任務(wù)結(jié)果質(zhì)量,自然資源管理部門對海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系的運(yùn)行情況進(jìn)行定期檢查或評估。然而,這些檢查往往存在關(guān)注點(diǎn)分散、評價(jià)標(biāo)準(zhǔn)不統(tǒng)一、評價(jià)范圍不明確等問題,無法科學(xué)高效地得到客觀、量化的評價(jià)結(jié)論?;谏鲜霈F(xiàn)狀,本研究旨在建立一種以支撐海洋調(diào)查觀測監(jiān)測任務(wù)能力為導(dǎo)向的、相對客觀的、具有可操作性的海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法。
1??? 質(zhì)量管理體系綜合評價(jià)的一般方法
1.1?? ?國內(nèi)外質(zhì)量管理體系綜合評價(jià)研究
綜合評價(jià)方法是海水水質(zhì)評價(jià)、海洋保護(hù)區(qū)生態(tài)風(fēng)險(xiǎn)評價(jià)、海岸整治修復(fù)效果評價(jià)、海島開發(fā)潛力評價(jià)、海洋漁業(yè)產(chǎn)業(yè)競爭力評價(jià)、海洋垃圾狀況評價(jià)、海灘旅游資源質(zhì)量評價(jià)和海洋經(jīng)濟(jì)發(fā)展質(zhì)量評價(jià)等海洋自然資源監(jiān)督管理領(lǐng)域評價(jià)評估常用的研究方法[1-8]。綜合評價(jià)方法的建立一般包括選取評價(jià)指標(biāo)、確定各指標(biāo)權(quán)重、確定各指標(biāo)的評價(jià)標(biāo)準(zhǔn)、建立綜合評價(jià)模型和確定評價(jià)結(jié)果的等級數(shù)量界限等[9]。質(zhì)量管理體系有效性的綜合評價(jià)是指用比較系統(tǒng)的、規(guī)范的方法對于多個(gè)指標(biāo)、多個(gè)機(jī)構(gòu)的質(zhì)量管理體系有效性同時(shí)進(jìn)行評價(jià)。
質(zhì)量管理體系的綜合評價(jià)可分為質(zhì)量管理體系本身的有效性和質(zhì)量管理體系運(yùn)行的有效性評價(jià)。在該領(lǐng)域國內(nèi)外已有較多研究:Saraph等[10]識別了8項(xiàng)企業(yè)質(zhì)量管理體系評價(jià)的關(guān)鍵要素,在424家企業(yè)的參與下,篩選得到具有有效性、可靠性的綜合的評價(jià)指標(biāo)體系,Badri等[11]則加大調(diào)查樣本,證實(shí)了該評價(jià)模型的有效性和可靠性;Flynn 等[12]在Saraph等[10]研究的基礎(chǔ)上,識別了質(zhì)量管理的7個(gè)維度,探討了工廠和車間操作層面的質(zhì)量管理體系有效性評價(jià);韓福榮等[3]從無形資產(chǎn)評估的角度運(yùn)用收益法和成本法對質(zhì)量管理體系的總體價(jià)值進(jìn)行評價(jià);韓福榮等[14]在前期研究的基礎(chǔ)上,通過問卷調(diào)查,由各獲證企業(yè)對其質(zhì)量管理體系運(yùn)行進(jìn)行“優(yōu)、良、中、低、差”的評價(jià),再分別利用模糊綜合法的最大隸屬度原則和灰色關(guān)聯(lián)分析法的關(guān)聯(lián)度分析確定評價(jià)結(jié)果;楊理琴[15]參照波多里奇質(zhì)量獎(jiǎng)和歐洲質(zhì)量獎(jiǎng)評價(jià)模型,根據(jù)ISO 9001:2000標(biāo)準(zhǔn)的過程模式對質(zhì)量管理體系有效性進(jìn)行評價(jià);郭子雪等[16]采用一種基于直覺模糊集的TOPSIS法,通過構(gòu)建直覺模糊評價(jià)矩陣,確定直覺模糊正理想解和負(fù)理想解,計(jì)算每個(gè)參評企業(yè)的直覺模糊評價(jià)值到直覺模糊理想解的距離,得到質(zhì)量管理體系運(yùn)行的評價(jià)結(jié)果;余崇林[17]采用層次分析法確定指標(biāo)權(quán)重,并采用模糊數(shù)學(xué)綜合評價(jià)法,由專家組依據(jù)每項(xiàng)指標(biāo)對機(jī)構(gòu)作出“優(yōu)秀、良好、一般、較差、很差”的評價(jià),通過最大隸屬度原則確定評價(jià)結(jié)果對政府部門ISO 9000質(zhì)量管理體系進(jìn)行有效性評價(jià)等。此外,1951年創(chuàng)辦的日本戴明獎(jiǎng)[17]、1988年創(chuàng)辦的美國波多里奇質(zhì)量獎(jiǎng)[18]、1991年創(chuàng)辦的歐洲質(zhì)量獎(jiǎng)[19],面向制造業(yè)和服務(wù)業(yè)企業(yè)給出了最精煉和具代表性的質(zhì)量管理體系評價(jià)指標(biāo)和評價(jià)準(zhǔn)則,并至今仍具活力。
1.2??? 國內(nèi)外質(zhì)量管理有效性綜合評價(jià)方法
通過對比分析國內(nèi)外質(zhì)量管理有效性綜合評價(jià)方法,可為選取海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性的評價(jià)指標(biāo)、評價(jià)模型以及確定定權(quán)方法等提供參考。
(1)美國波多里奇質(zhì)量獎(jiǎng)評價(jià)體系[Baldrige National Quality Award(最新)][19]。主要評價(jià)指標(biāo)共7個(gè)條目(對應(yīng)19個(gè)款項(xiàng)),包括:領(lǐng)導(dǎo);戰(zhàn)略規(guī)劃;顧客;信息和分析;人力資源;過程管理;經(jīng)營結(jié)果。評價(jià)指標(biāo)選取方式:分析選取。定權(quán)方法:根據(jù)認(rèn)為的影響程度,直接給出各條目和條款的分值。評價(jià)模型:通過設(shè)置評分細(xì)則,由評審委員給出各款項(xiàng)的評分并累加。評價(jià)模型選取方式為直接選定(給出了評分細(xì)則的編制說明)。
(2)歐洲質(zhì)量獎(jiǎng)評價(jià)體系[European Foundation For Quality Management (最新)][20]。主要評價(jià)指標(biāo)共9個(gè)要素,包括:領(lǐng)導(dǎo)力;人員素質(zhì);政策和策略;合作伙伴與資源;過程;人力資源開發(fā);顧客結(jié)果;社會效益;最終核心表現(xiàn)。評價(jià)指標(biāo)選取方式:分析選取。定權(quán)方法:根據(jù)認(rèn)為的影響程度,直接給出各要素的評分占比。評價(jià)模型:通過設(shè)置評分細(xì)則,由評審委員給出各要素的評分并累加。評價(jià)模型選取方式為直接選定(給出了評分細(xì)則的編制說明)。
(3)日本戴明獎(jiǎng)評價(jià)體系[Deming Prize(最新)][18]。主要評價(jià)指標(biāo)共3個(gè)方面(對應(yīng)5個(gè)條款):經(jīng)營目標(biāo)、戰(zhàn)略和最高管理的領(lǐng)導(dǎo)力建立;全面質(zhì)量管理的利用和實(shí)踐;全面質(zhì)量管理的結(jié)果。評價(jià)指標(biāo)選取方式:分析選取。定權(quán)方法:根據(jù)認(rèn)為的影響程度,直接給出各條目和條款的分值。評價(jià)模型:通過設(shè)置評分細(xì)則,由評審委員給出各款項(xiàng)的評分并累加。評價(jià)模型選取方式為直接選定(給出了評分細(xì)則的編制說明)。
(4)Saraph等[10]提出的質(zhì)量管理評價(jià)方法。主要評價(jià)指標(biāo)共8個(gè)關(guān)鍵因素:管理層領(lǐng)導(dǎo)和質(zhì)量政策;質(zhì)量管理部門;培訓(xùn);產(chǎn)品、服務(wù)設(shè)計(jì);供貨方質(zhì)量管理;流程管理;質(zhì)量數(shù)據(jù)和報(bào)告;員工關(guān)系。評價(jià)指標(biāo)選取方式:過預(yù)設(shè)評價(jià)的8個(gè)關(guān)鍵因素,通過信度分析和效度分析的方式,證明選取的8個(gè)指標(biāo)可靠有效。定權(quán)方法:無。評價(jià)模型:通過問卷調(diào)查,由參與者進(jìn)行1至5的打分,表征“強(qiáng)烈同意”到“強(qiáng)烈不同意”的定性結(jié)果。評價(jià)模型選取方式為直接選定。
(5)Flynn等[12]提出的質(zhì)量管理評價(jià)方法。主要評價(jià)指標(biāo)包括7個(gè)方面(對應(yīng)11個(gè)評價(jià)指標(biāo)):最高管理支持;質(zhì)量信息;流程管理;產(chǎn)品設(shè)計(jì);勞動力管理;供應(yīng)商參與;顧客參與。評價(jià)指標(biāo)選取方式:采用文獻(xiàn)分析法,歸納并預(yù)設(shè)14個(gè)指標(biāo),通過信度分析和效度分析的方式對指標(biāo)進(jìn)行篩選,最終得到11個(gè)評價(jià)指標(biāo)。定權(quán)方法:無。評價(jià)模型:通過問卷調(diào)查,由參與者進(jìn)行1至5的打分,表征“強(qiáng)烈同意”到“強(qiáng)烈不同意”的定性結(jié)果。評價(jià)模型選取方式為直接選定。
(6)韓福榮等[14]提出的質(zhì)量管理體系有效性評價(jià)綜合模型。主要評價(jià)指標(biāo)共3個(gè)子目標(biāo)(對應(yīng)9個(gè)屬性指標(biāo)):選取質(zhì)量方針和目標(biāo);產(chǎn)品質(zhì)量穩(wěn)定性;質(zhì)量改進(jìn)與創(chuàng)新。評價(jià)指標(biāo)選取方式為直接選定。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:模糊綜合法和灰色關(guān)聯(lián)分析法。評價(jià)模型選取方式為直接選定。
(7)楊理琴[15]提出的軟件企業(yè)質(zhì)量管理體系有效性評價(jià)方法。主要評價(jià)指標(biāo)共5個(gè)大類指標(biāo)(對應(yīng)24個(gè)屬性指標(biāo)):最高管理者過程;資源管理;產(chǎn)品實(shí)現(xiàn);測量、分析和改進(jìn);運(yùn)行結(jié)果。評價(jià)指標(biāo)選取方式:參照波多里奇質(zhì)量獎(jiǎng)和歐洲質(zhì)量獎(jiǎng)評價(jià)模型,根據(jù)ISO 9001:2000標(biāo)準(zhǔn)的過程模式和質(zhì)量管理體系有效性的要求,分析選取。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:未知測度評價(jià)法。評價(jià)模型選取方式:通過詳列方法的特點(diǎn)和優(yōu)點(diǎn),分析選取。
(8)郭子雪等[16]提出的質(zhì)量管理體系有效性評價(jià)綜合模型。主要評價(jià)指標(biāo)共5個(gè)評價(jià)準(zhǔn)則(對應(yīng)17個(gè)因素):質(zhì)量方針目標(biāo);產(chǎn)品質(zhì)量穩(wěn)定性;質(zhì)量改進(jìn)與創(chuàng)新;資源管理;財(cái)務(wù)運(yùn)行狀況。評價(jià)指標(biāo)選取方式:直接選定。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:采用基于直覺模糊集的TOPSIS法。評價(jià)模型選取方式為直接選定。
(9)余崇林[17]提出的政府部門ISO9000質(zhì)量管理體系有效性評價(jià)方法。主要評價(jià)指標(biāo)共4個(gè)一級指標(biāo)包括(對應(yīng)10個(gè)二級指標(biāo)和23個(gè)三級指標(biāo)):總體管理;服務(wù)實(shí)現(xiàn)管理;持續(xù)改進(jìn);滿意度評價(jià)。評價(jià)指標(biāo)選取方式:通過歸納政府部門1SO9000質(zhì)量管理體系有效性的表征,分析選取。定權(quán)方法:采用基于層次分析法的定權(quán)方法。評價(jià)模型:模糊數(shù)學(xué)綜合評價(jià)法。評價(jià)模型選取方式:通過闡述方法的特點(diǎn)和優(yōu)點(diǎn),分析選取。
2??? 海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性評價(jià)要求
為明確海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法的各個(gè)要素,包括篩選和確定評價(jià)指標(biāo),確定各評價(jià)指標(biāo)權(quán)重,建立單個(gè)指標(biāo)的評價(jià)標(biāo)準(zhǔn),建立綜合評價(jià)模型并劃分評價(jià)結(jié)果的等級數(shù)量界限,必須先明確海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性的評價(jià)要求,以該要求作為各個(gè)要素的選取或確定依據(jù)。本研究歸納海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性評價(jià)的要求如下。
2.1??? 有效性
應(yīng)可以有效地表征機(jī)構(gòu)質(zhì)量管理體系運(yùn)行得以支撐海洋觀測、海洋生態(tài)預(yù)警監(jiān)測、海洋防災(zāi)減災(zāi)和近海斷面調(diào)查等各項(xiàng)海洋調(diào)查觀測監(jiān)測任務(wù)的程度。
2.2??? 客觀性
應(yīng)強(qiáng)調(diào)客觀依據(jù),相對量化地得出評價(jià)結(jié)論,使評價(jià)結(jié)果較少地受到不同評價(jià)主體的主觀判斷的影響。
2.3??? 全面性
應(yīng)識別并考慮機(jī)構(gòu)質(zhì)量管理體系運(yùn)行影響任務(wù)開展的所有關(guān)鍵環(huán)節(jié)。其中,海洋檢驗(yàn)檢測機(jī)構(gòu)作為對社會出具公正數(shù)據(jù)的檢驗(yàn)檢測機(jī)構(gòu),須通過檢驗(yàn)檢測機(jī)構(gòu)資質(zhì)認(rèn)定(CMA),須根據(jù)RB/T 214—2017《檢驗(yàn)檢測機(jī)構(gòu)資質(zhì)認(rèn)定能力評價(jià)檢驗(yàn)檢測機(jī)構(gòu)通用要求》建立質(zhì)量管理體系,RB/T 214—2017對實(shí)驗(yàn)室質(zhì)量管理體系的要求則參照ISO/IEC 17025:2017《檢測和校準(zhǔn)實(shí)驗(yàn)室能力的通用要求》中對檢測實(shí)驗(yàn)室的要求給出,因此,建立的評價(jià)方法應(yīng)對檢測實(shí)驗(yàn)室質(zhì)量管理體系的人、機(jī)、料、法、環(huán)、測的所有環(huán)節(jié)進(jìn)行考慮。而ISO/IEC 17025:2017的質(zhì)量管理體系要求又根據(jù)ISO 9001:2015《質(zhì)量管理體系要求》給出,因此,建立的評價(jià)方法也應(yīng)考慮ISO 9001:2015中給出的質(zhì)量管理的7項(xiàng)原則,包括以顧客為關(guān)注焦點(diǎn)、領(lǐng)導(dǎo)作用、全員積極參與、過程方法、循證決策、改進(jìn)、關(guān)系管理。除此之外,還應(yīng)將海洋調(diào)查觀測監(jiān)測工作的特殊要求進(jìn)行全面的分析和考慮。
2.4??? 系統(tǒng)性
應(yīng)具有嚴(yán)謹(jǐn)有序的規(guī)則系統(tǒng),指標(biāo)層與指標(biāo)層之間、同層級指標(biāo)之間應(yīng)具有清晰的邏輯關(guān)系,系統(tǒng)地反映機(jī)構(gòu)質(zhì)量管理體系運(yùn)行的整體情況。
2.5??? 可行性
應(yīng)切實(shí)可行,具有一定的可操作性,考慮時(shí)間、空間的現(xiàn)實(shí)限制,具有實(shí)際運(yùn)用的基礎(chǔ)。
2.6??? 可比性
應(yīng)既可用于不同機(jī)構(gòu)間的橫向比較,又可用于同一個(gè)機(jī)構(gòu)不同時(shí)間的縱向比較,應(yīng)可服務(wù)于評價(jià)結(jié)果的動態(tài)可視。
2.7??? 高效性
應(yīng)兼顧效率,以海洋調(diào)查監(jiān)測觀測任務(wù)的關(guān)鍵點(diǎn)為導(dǎo)向,對機(jī)構(gòu)接受資質(zhì)認(rèn)定復(fù)查評審或監(jiān)督檢查時(shí)已反復(fù)關(guān)注的一些檢查內(nèi)容作出適當(dāng)精簡;通過建立的評價(jià)方法,評價(jià)主體可直觀、快速、便捷地得出評價(jià)結(jié)論。
2.8??? 實(shí)用性
應(yīng)功能多樣、應(yīng)用廣泛。一方面,可用于把握海洋任務(wù)事前、事中、事后的質(zhì)量表現(xiàn),可從評價(jià)結(jié)論直觀地看出各機(jī)構(gòu)質(zhì)量管理體系運(yùn)行在不同評價(jià)方面、不同環(huán)節(jié)和不同時(shí)間階段的表現(xiàn)情況,以供主管部門給出決策意見;另一方面,還應(yīng)為機(jī)構(gòu)自查形成診斷系統(tǒng),通過每次評價(jià)給出不同指標(biāo)所代表的方面的表現(xiàn)情況和橫縱向?qū)Ρ?,從而提出改進(jìn)的可能性等。
3??? 海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法設(shè)計(jì)
3.1??? 選定評價(jià)指標(biāo)
不同的國內(nèi)外質(zhì)量管理評價(jià)指標(biāo)方法在選取評價(jià)指標(biāo)時(shí),大致可分為3種思路。一是根據(jù)評價(jià)的具體要求等分析選取指標(biāo);二是根據(jù)評價(jià)目的相對直接地選定;三是通過文獻(xiàn)分析等方法先盡量全面地選取能表征質(zhì)量管理表現(xiàn)的所有要素,再通過信度分析和效度分析等對特性不好的指標(biāo)進(jìn)行剔除。海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系有效性的綜合評價(jià)方法采取以下步驟選定評價(jià)指標(biāo)。
3.1.1??? 第一步,明確指標(biāo)選取原則
原則1:堅(jiān)持以海洋調(diào)查觀測監(jiān)測工作的特殊要求為導(dǎo)向,對國家市場監(jiān)管總局的資質(zhì)認(rèn)定復(fù)查換證評審或監(jiān)督檢查已反復(fù)關(guān)注的指標(biāo)進(jìn)行精簡。該原則體現(xiàn)評價(jià)要求中的有效性、高效性、實(shí)用性。
原則2:應(yīng)具有一定代表性,覆蓋“人、機(jī)、料、法、環(huán)、測”等檢驗(yàn)檢測機(jī)構(gòu)運(yùn)行須關(guān)注的重點(diǎn)要素。該原則體現(xiàn)評價(jià)要求中的有效性、全面性。
原則3:應(yīng)體現(xiàn)全面質(zhì)量管理,體現(xiàn)質(zhì)量管理的七大原則。該原則體現(xiàn)評價(jià)要求中的有效性、全面性。
原則4:將觸碰資質(zhì)認(rèn)定罰責(zé)條款、涉及機(jī)構(gòu)執(zhí)行任務(wù)合法性和任務(wù)質(zhì)量驗(yàn)收結(jié)果等直接反映質(zhì)量管理體系運(yùn)行可否滿足海洋任務(wù)要求的指標(biāo),設(shè)置為一旦不滿足便直接輸出“0分”結(jié)果,以便第一時(shí)間引起注意。該原則體現(xiàn)評價(jià)要求中的有效性、全面性、實(shí)用性。
原則5:應(yīng)選取機(jī)構(gòu)在實(shí)際中可被考量、可改變的要素,而不是機(jī)構(gòu)固有的、短期內(nèi)無法改變的要素。該原則體現(xiàn)評價(jià)要求中的可行性。
原則6:應(yīng)選取近年來自然資源管理部門開展海洋檢驗(yàn)檢測機(jī)構(gòu)有關(guān)監(jiān)督檢查時(shí)給予特別關(guān)注的,并已具備一定檢查基礎(chǔ)和經(jīng)驗(yàn)的要素。該原則體現(xiàn)評價(jià)要求中的有效性、可行性。
原則7:應(yīng)選取類似“甲方”為確?!耙曳健本邆渎男兴s定的服務(wù)內(nèi)容的能力所開展的第二方審核時(shí)所應(yīng)考量的要素。該原則體現(xiàn)評價(jià)方法應(yīng)具備的可行性,實(shí)用性。
3.1.2??? 第二步,指標(biāo)分析和篩選
參考國內(nèi)外質(zhì)量管理評價(jià)體系選取的評價(jià)指標(biāo),根據(jù)海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系有效性的綜合評價(jià)指標(biāo)的選取原則進(jìn)行分析和篩選。國內(nèi)外質(zhì)量管理評價(jià)指標(biāo)體系選取頻率最高的7類指標(biāo)如下。
(1)最高管理層相關(guān)指標(biāo):由于該類指標(biāo)為機(jī)構(gòu)固有的、短期內(nèi)無法改變的要素,不滿足指標(biāo)的選取原則5,該類指標(biāo)可排除。
(2)人員相關(guān)指標(biāo):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。
(3)改進(jìn)相關(guān)指標(biāo):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。
(4)質(zhì)量方針(戰(zhàn)略)和目標(biāo)相關(guān)指標(biāo):由于考察的是機(jī)構(gòu)對自身的要求,而不是機(jī)構(gòu)支撐海洋調(diào)查觀測監(jiān)測任務(wù)的能力,不滿足指標(biāo)的選取原則1,該類指標(biāo)可排除。
(5)產(chǎn)品或服務(wù)相關(guān)指標(biāo):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。
(6)顧客參與、反饋或滿意度相關(guān)指標(biāo):由于評價(jià)主體本身即為“顧客”(甲方),不滿足指標(biāo)的選取原則7,該類指標(biāo)可排除。
(7)流程管理相關(guān)指標(biāo)(出現(xiàn)4次):滿足所有指標(biāo)選取原則,該類指標(biāo)應(yīng)納入考慮。
3.1.3??? 第三步,選定評價(jià)指標(biāo)
根據(jù)指標(biāo)的選取原則,選定的評價(jià)指標(biāo)分為一般指標(biāo)和“一票否決”指標(biāo)兩種,見表1。
3.2??? 確定各指標(biāo)權(quán)重
通過對比分析國內(nèi)外質(zhì)量管理有效性綜合評價(jià)方法,不同的國內(nèi)外質(zhì)量管理評價(jià)方法對各評價(jià)指標(biāo)進(jìn)行定權(quán)時(shí),最常采用的是基于層次分析法的定權(quán)方法。層次分析法是Saaty[21]1971—1975年為美國國防部開展應(yīng)急計(jì)劃問題研究時(shí)所提出的決策方法,具有較簡便地將定性問題定量化的優(yōu)點(diǎn),其定權(quán)過程是通過兩兩比較成對指標(biāo)的重要性,建立判斷矩陣,再通過解矩陣的特征值得到每個(gè)指標(biāo)的權(quán)重。
本研究也將采用層次分析法,確定海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系有效性的一般指標(biāo)的權(quán)重(“一票否決”指標(biāo)無須確定權(quán)重)。層次分析法定權(quán)的一般步驟如下。
第一步,構(gòu)造n×n的判斷矩陣。
采用九級評分法,將一個(gè)元素相較于另一個(gè)元素的重要程度,以1~9的標(biāo)度進(jìn)行記錄,形成判斷矩陣。
第二步,求解判斷矩陣。
(1)計(jì)算判斷矩陣中每行元素的幾何平均數(shù):
式中:a為判斷矩陣中每行所有元素。
(2)對所得向量作歸一化處理:
式中:CI為一致性指標(biāo)。
得到權(quán)重向量:ω=(ω,ω,…,ω)。
(3)求最大特征根λ:
式中:A為判斷矩陣(a)。
第三步,進(jìn)行一致性檢驗(yàn)。
式中:CR為一致性比率,當(dāng)CR<0.10時(shí),認(rèn)為判斷矩陣具有一致性;RI為平均隨機(jī)一致性指標(biāo),通過查閱Saatty基于5萬次隨機(jī)試驗(yàn)得到的不同階次矩陣對應(yīng)的平均隨機(jī)一致性指標(biāo)值,可知當(dāng)矩陣階數(shù)為2時(shí)RI=0,階數(shù)為3時(shí)RI=0.52[22]。
根據(jù)以上步驟,得出代表資源配置、實(shí)施過程和任務(wù)成效3個(gè)評價(jià)方面的3個(gè)元素的權(quán)重如表2所示。
同理可得,代表3個(gè)評價(jià)方面對應(yīng)的6個(gè)評價(jià)指標(biāo)的權(quán)重ω分別為:ω=0.25,ω=0.75,ω=0.67,ω=0.33,ω=0.33,ω=0.67。
由W=ω·ω,可得6個(gè)指標(biāo)的組合權(quán)重,見表3。
3.3??? 確定各評價(jià)指標(biāo)的評價(jià)標(biāo)準(zhǔn)
根據(jù)海洋質(zhì)量管理體系運(yùn)行有效性評價(jià)的實(shí)際目的,確定單個(gè)指標(biāo)評價(jià)等級和界限,提出評價(jià)標(biāo)準(zhǔn)的設(shè)置原則如下。
原則1:應(yīng)界限分明,描述細(xì)致、明確、全面,避免不同人對同一機(jī)構(gòu)、同一時(shí)期的表現(xiàn)給出不同的評分。該原則體現(xiàn)評價(jià)要求中的有效性、系統(tǒng)性、客觀性、全面性。
原則2:應(yīng)更注重是否做出了某些特定的質(zhì)量管理動作,而不是就質(zhì)量管理體系的機(jī)制設(shè)置(如機(jī)構(gòu)質(zhì)量管理體系文件的要求)進(jìn)行評判。該原則體現(xiàn)評價(jià)要求中的有效性、可行性、高效性。
原則3:應(yīng)證據(jù)導(dǎo)向,遵循質(zhì)量管理的循證決策原則。該原則體現(xiàn)評價(jià)要求中的客觀性。
原則4:應(yīng)方便、可測,便于通過簡單的證據(jù)判斷是否滿足要求。該原則體現(xiàn)評價(jià)要求中的可行性,高效性。
原則5:應(yīng)支持基于目標(biāo)的診斷分析,構(gòu)筑一個(gè)診斷系統(tǒng),應(yīng)可就每次評價(jià)結(jié)果給出對應(yīng)6個(gè)指標(biāo)的實(shí)現(xiàn)情況和改進(jìn)的可能性。該原則體現(xiàn)評價(jià)要求中的實(shí)用性。
根據(jù)上述原則,設(shè)置單個(gè)指標(biāo)的評價(jià)標(biāo)準(zhǔn)如以下幾個(gè)方面。
3.3.1??? 一般評價(jià)指標(biāo)的評價(jià)標(biāo)準(zhǔn)
(1)資源配置。評價(jià)指標(biāo)包括人員和設(shè)備。
人員滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)參與任務(wù)人員全員具備相應(yīng)資質(zhì)或接受相應(yīng)培訓(xùn),機(jī)構(gòu)對其資質(zhì)或能力進(jìn)行了確認(rèn)等,評價(jià)細(xì)則為好(3分)。人員基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)參與任務(wù)人員少數(shù)不具備相應(yīng)資質(zhì)或接受的培訓(xùn)不充分,或機(jī)構(gòu)對人員的資質(zhì)或能力的確認(rèn)不完備,但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為中(2分)。人員無法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)參與任務(wù)人員普遍不具備相應(yīng)資質(zhì)或未接受相應(yīng)培訓(xùn),或機(jī)構(gòu)未對人員的資質(zhì)或能力進(jìn)行確認(rèn),認(rèn)為會對任務(wù)實(shí)施造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括參與任務(wù)人員資質(zhì)或培訓(xùn)記錄、能力確認(rèn)記錄等。
設(shè)備滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)任務(wù)所用設(shè)備狀態(tài)正常,具備量值溯源方法的測量設(shè)備皆經(jīng)有效溯源,不具備量值溯源方法的設(shè)備經(jīng)比對并由經(jīng)機(jī)構(gòu)確認(rèn)等,通過期間核查和功能檢查等方式確保設(shè)備的穩(wěn)定可靠等,評價(jià)細(xì)則為好(3分)。設(shè)備基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)任務(wù)所用設(shè)備狀態(tài)正常,少數(shù)具備量值溯源方法的測量設(shè)備未采取最合理的溯源方式(如具備檢定規(guī)程但僅進(jìn)行校準(zhǔn)等),但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,或不具備量值溯源方法的設(shè)備的比對方法未經(jīng)機(jī)構(gòu)確認(rèn)等,或未充分通過期間核查和功能檢查等方式確保設(shè)備的穩(wěn)定可靠等,評價(jià)細(xì)則為中(2 分)。設(shè)備無法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)任務(wù)所用設(shè)備狀態(tài)無法支撐任務(wù)實(shí)施,測量設(shè)備未經(jīng)有效量值溯源或比對,認(rèn)為會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,或未實(shí)施任何形式的期間核查和功能檢查等方式確保設(shè)備能持續(xù)支撐任務(wù)實(shí)施等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括任務(wù)用設(shè)備(包括標(biāo)準(zhǔn)物質(zhì))量值溯源報(bào)告、比對報(bào)告、期間核查或功能檢查記錄等。
(2)實(shí)施過程。評價(jià)指標(biāo)包括方法及其使用和質(zhì)量控制。
方法及其使用滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)開展任務(wù)依據(jù)方法皆現(xiàn)行有效,經(jīng)查新發(fā)現(xiàn)的新方法或自制方法皆經(jīng)驗(yàn)證或確認(rèn)可行,相應(yīng)辦理方法變更或擴(kuò)項(xiàng),人員嚴(yán)格依據(jù)方法進(jìn)行抽樣、樣品儲存和運(yùn)輸、實(shí)驗(yàn)操作、數(shù)據(jù)處理、環(huán)境控制、安全防護(hù)等,或?qū)ζx已作出聲明,評價(jià)細(xì)則為好(3分)。方法及其使用基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)開展任務(wù)依據(jù)方法偶見失效,或經(jīng)查新發(fā)現(xiàn)的新方法或自制方法偶見未經(jīng)嚴(yán)格驗(yàn)證或確認(rèn)可行的情況,未及時(shí)辦理方法變更或擴(kuò)項(xiàng),或人員未嚴(yán)格依據(jù)方法進(jìn)行抽樣、樣品儲存和運(yùn)輸、實(shí)驗(yàn)操作、數(shù)據(jù)處理、環(huán)境控制、安全防護(hù)等且未作聲明,但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,評價(jià)細(xì)則為中(2分)。方法及其使用無法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)開展任務(wù)依據(jù)方法未經(jīng)查新,普遍存在失效情況,或新方法或自制方法普遍未經(jīng)驗(yàn)證或確認(rèn)便使用,未辦理方法變更或擴(kuò)項(xiàng)等,或人員未依據(jù)方法進(jìn)行抽樣、樣品儲存和運(yùn)輸、實(shí)驗(yàn)操作、數(shù)據(jù)處理、環(huán)境控制、安全防護(hù)等且未作聲明,認(rèn)為會對任務(wù)實(shí)施造成實(shí)質(zhì)影響等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括任務(wù)依據(jù)方法版本受控狀態(tài)、新方法驗(yàn)證自制方法確認(rèn)情況等。
質(zhì)量控制滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)制定并實(shí)施了有效的內(nèi)部質(zhì)控措施,參加了要求的外部質(zhì)控或能力驗(yàn)證,結(jié)果為滿意等,評價(jià)細(xì)則為好(3分)。質(zhì)控基本滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)制定并實(shí)施了內(nèi)部質(zhì)控措施,未全然有效地支持實(shí)現(xiàn)任務(wù)的質(zhì)量要求,但認(rèn)為不會對任務(wù)實(shí)施造成實(shí)質(zhì)性影響等,或參加了要求的外部質(zhì)控或能力驗(yàn)證,結(jié)果不滿意、整改后達(dá)到要求等,評價(jià)細(xì)則為中(2分)。質(zhì)控?zé)o法滿足機(jī)構(gòu)開展該海洋任務(wù)的要求,如(包括但不限于)未制定或?qū)嵤┵|(zhì)控措施,或制定或?qū)嵤┑馁|(zhì)控措施完全無法支持實(shí)現(xiàn)任務(wù)的質(zhì)量要求,未參加要求的外部質(zhì)控或能力驗(yàn)證,或結(jié)果不滿意、整改后仍無法達(dá)到要求等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括內(nèi)部質(zhì)控記錄、數(shù)據(jù)校驗(yàn)和審核記錄、參加外部質(zhì)控或能力驗(yàn)證記錄等。
(3)任務(wù)成效。評價(jià)指標(biāo)包括成果載體和改進(jìn)。
成果載體滿足機(jī)構(gòu)提交海洋任務(wù)成果的要求,如(包括但不限于)原始記錄、工作日志、各類標(biāo)志、報(bào)告等格式版式受控并滿足成果提交要求,數(shù)據(jù)資料整編和歸檔形式、傳輸形式滿足成果提交要求等,評價(jià)細(xì)則為好(3分)。成果載體基本滿足機(jī)構(gòu)提交海洋任務(wù)成果的要求,但仍有缺陷,如(包括但不限于)原始記錄、工作日志、各類標(biāo)志、報(bào)告等格式版式未嚴(yán)格根據(jù)成果提交的要求受控,數(shù)據(jù)資料整編和歸檔形式、傳輸形式不完全滿足成果提交要求,但認(rèn)為不會對任務(wù)造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為中(2分)。成果載體無法滿足機(jī)構(gòu)提交海洋任務(wù)成果的要求,如(包括但不限于)原始記錄、工作日志、各類標(biāo)志、報(bào)告等格式版式普遍失控,數(shù)據(jù)資料整編和歸檔形式、傳輸形式普遍不滿足成果提交要求等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括任務(wù)原始記錄或報(bào)告格式板式等。
采取的改進(jìn)措施滿足機(jī)構(gòu)更好完成該海洋任務(wù)的要求,如(包括但不限于)有效完成了外部檢查或外部質(zhì)控發(fā)現(xiàn)的問題的整改,通過內(nèi)審或管理評審等形式,對發(fā)現(xiàn)的問題進(jìn)行輸入,對機(jī)構(gòu)能更好承擔(dān)任務(wù)應(yīng)采取的措施作出輸出等,評價(jià)細(xì)則為好(3分)。采取的改進(jìn)措施基本滿足機(jī)構(gòu)更好完成該海洋任務(wù)的要求,但仍有缺陷,如(包括但不限于)對外部檢查或外部質(zhì)控發(fā)現(xiàn)的問題的整改非完全有效,但認(rèn)為未對任務(wù)造成實(shí)質(zhì)性影響,或通過內(nèi)審或管理評審等形式,對發(fā)現(xiàn)的問題的輸入不充分,或?qū)C(jī)構(gòu)能更好承擔(dān)任務(wù)應(yīng)采取的措施的輸出不全然有效,但認(rèn)為不會對任務(wù)造成實(shí)質(zhì)性影響等,評價(jià)細(xì)則為中(2分)。未采取改進(jìn)措施,或采取的改進(jìn)措施無法滿足機(jī)構(gòu)更好完成該海洋任務(wù)的要求,如(包括但不限于)對外部檢查或外部質(zhì)控發(fā)現(xiàn)的問題未有效實(shí)施整改,或未通過內(nèi)審或管理評審等形式對發(fā)現(xiàn)的問題進(jìn)行輸入,或未對機(jī)構(gòu)能更好承擔(dān)任務(wù)應(yīng)采取的措施作出輸出等,評價(jià)細(xì)則為差(1分)。主要佐證材料包括:內(nèi)審和管理評審計(jì)劃;制定和實(shí)施改進(jìn)措施的記錄;外部檢查或外部質(zhì)控發(fā)現(xiàn)問題整改記錄等。
3.3.2??? “一票否決”評價(jià)指標(biāo)的評價(jià)標(biāo)準(zhǔn)
“一票否決”指標(biāo)為如下幾方面。
(1)機(jī)構(gòu)資質(zhì)合法性。評價(jià)細(xì)則Y=1,機(jī)構(gòu)處于資質(zhì)認(rèn)定有效期內(nèi),資質(zhì)范圍達(dá)到任務(wù)需要。評價(jià)細(xì)則Y=0,機(jī)構(gòu)未通過資質(zhì)認(rèn)定,或資質(zhì)已過期,或資質(zhì)范圍無法達(dá)到任務(wù)需要。評價(jià)時(shí)間:事前、事中。
(2)數(shù)據(jù)真實(shí)性。評價(jià)細(xì)則Y=1,機(jī)構(gòu)不存在未經(jīng)檢驗(yàn)檢測或者以篡改數(shù)據(jù)、結(jié)果等方式,出具虛假檢驗(yàn)檢測數(shù)據(jù)、結(jié)果等情況。評價(jià)細(xì)則Y=0,機(jī)構(gòu)涉嫌未經(jīng)檢驗(yàn)檢測或者以篡改數(shù)據(jù)、結(jié)果等方式,出具虛假檢驗(yàn)檢測數(shù)據(jù)、結(jié)果等,如檢查能夠自動保存電子記錄或數(shù)據(jù)的儀器設(shè)備未發(fā)現(xiàn)任務(wù)數(shù)據(jù),或比較紙質(zhì)數(shù)據(jù)與電子存儲記錄發(fā)現(xiàn)偽造痕跡,或檢查電子存儲、紙質(zhì)數(shù)據(jù)和報(bào)告日期發(fā)現(xiàn)倒掛現(xiàn)象等。評價(jià)時(shí)間:事中、事后。
(3)質(zhì)量驗(yàn)收結(jié)果。評價(jià)細(xì)則Y=1,在質(zhì)量驗(yàn)收階段通過外控樣等方式對機(jī)構(gòu)出具的結(jié)果進(jìn)行檢查或抽查,結(jié)果滿足要求。評價(jià)細(xì)則Y=0,在質(zhì)量驗(yàn)收階段通過外控樣等方式對機(jī)構(gòu)出具的結(jié)果進(jìn)行檢查或抽查,結(jié)果不滿足要求。評價(jià)時(shí)間:事后。
3.4??? 確定評價(jià)模型
不同的國內(nèi)外質(zhì)量管理評價(jià)方法通常采用直接選定的方式選取評價(jià)模型。以下對一些主流評價(jià)模型進(jìn)行簡單分析,對其是否可應(yīng)用于海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)方法進(jìn)行考量。
直覺模糊法:該方法通過根據(jù)模糊數(shù)學(xué)的隸屬度理論把定性評價(jià)轉(zhuǎn)化為定量評價(jià),然而需要大量專家的參與,評價(jià)周期較長?;谠u價(jià)要求中的可行性、高效性原則予以排除。
排序比較法(TOPSIS):該方法可通過求得某一評價(jià)結(jié)果與最優(yōu)評價(jià)結(jié)果的接近程度,然而評價(jià)結(jié)果很大程度上取決于每次參與評價(jià)機(jī)構(gòu)的總體表現(xiàn),且無法得到綜合得分?;谠u價(jià)要求中的可比性、實(shí)用性原則予以排除。
灰色關(guān)聯(lián)分析法:通過找出評價(jià)體系中各級指標(biāo)之間的數(shù)值關(guān)系作出評價(jià)。然而,需要對各項(xiàng)指標(biāo)的最優(yōu)值進(jìn)行現(xiàn)行確定,主觀性過強(qiáng),同時(shí)部分指標(biāo)最優(yōu)值難以確定?;谠u價(jià)要求中的客觀性、可行性原則予以排除。
加權(quán)累加法:對各評價(jià)指標(biāo)按其相對重要程度分配權(quán)重,再根據(jù)累加法累計(jì)總分,排出優(yōu)劣順序。當(dāng)評價(jià)標(biāo)準(zhǔn)的界限足夠分明、評價(jià)結(jié)果由小組討論一致得出時(shí),符合評價(jià)要求中的客觀性、可行性、可比性、高效性、實(shí)用性。
其他定性描述的評價(jià):基于評價(jià)要求中的客觀性、可比性原則,予以排除。
根據(jù)本評價(jià)方法的特性要求,本研究擬根據(jù)加權(quán)累加法建立評價(jià)模型。加權(quán)累加法具有計(jì)算簡單易行、過程直觀,評價(jià)重點(diǎn)突出的特點(diǎn),許多決策或評估方法,如著名的Rosenberg-Fishbein態(tài)度量測模型[23],都以該方法為基礎(chǔ)。加權(quán)累加法的基礎(chǔ)表達(dá)式如下:
式中:R為被評價(jià)機(jī)構(gòu)所得總分;S為被評價(jià)機(jī)構(gòu)在第i個(gè)一般指標(biāo)下的得分;W為第i個(gè)指標(biāo)的權(quán)重;m為一般指標(biāo)的總數(shù)。
為了引入“一票否決”指標(biāo),使當(dāng)機(jī)構(gòu)無法滿足資質(zhì)合法性、數(shù)據(jù)真實(shí)性、質(zhì)量驗(yàn)收結(jié)果這些直接表征質(zhì)量管理體系運(yùn)行是否有效支撐海洋任務(wù)要求的指標(biāo)時(shí),直接輸出“0分”結(jié)果,以第一時(shí)間引起上級部門注意,在式(6)中添加連乘系數(shù)Y,如下:
式中:Y為被評價(jià)機(jī)構(gòu)在第i個(gè)“一票否決”指標(biāo)下的得分;n為“一票否決”指標(biāo)的總數(shù)。
由此,便可通過該模型,得出各機(jī)構(gòu)的評價(jià)得分,并依據(jù)得分對各機(jī)構(gòu)質(zhì)量管理體系的有效性進(jìn)行等級的確定。
3.5??? 確定評價(jià)結(jié)果的等級數(shù)量界限
劃分海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系運(yùn)行有效性的綜合評價(jià)結(jié)果等級如表4所示。其中,在“一票否決”指標(biāo)不出現(xiàn)得分為0分的情況下:當(dāng)一般指標(biāo)最多出現(xiàn)2個(gè)得分低至1分,或最多出現(xiàn)4個(gè)得分低至2分時(shí),被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級可達(dá)到“好”;在無法達(dá)到“好”的情況下,當(dāng)一般指標(biāo)最多出現(xiàn)4個(gè)得分低至1分,或全部6個(gè)得分低至2分時(shí),被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級可達(dá)到“中”;在無法達(dá)到“中”的情況下,被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級為“差”,此時(shí)至少有5個(gè)一般指標(biāo)得分低至1分。而當(dāng)任意一個(gè)“一票否決”指標(biāo)得分出現(xiàn)0分時(shí),被評價(jià)海洋檢驗(yàn)檢測機(jī)構(gòu)的評價(jià)等級為“?!?。
4??? 評價(jià)示例
為了體現(xiàn)評價(jià)方法的實(shí)用性,根據(jù)海洋調(diào)查觀測監(jiān)測任務(wù)的一般流程,本研究給出一種使用建立綜合評價(jià)方法進(jìn)行評價(jià)的流程范例(圖1)。根據(jù)該范例,可在海洋調(diào)查觀測監(jiān)測任務(wù)的事前、事中、事后3個(gè)階段對海洋檢驗(yàn)檢測機(jī)構(gòu)進(jìn)行3次評價(jià)。除此之外,該評價(jià)方法為同一機(jī)構(gòu)的經(jīng)年質(zhì)量提升情況、某一評價(jià)指標(biāo)下不同機(jī)構(gòu)的整體表現(xiàn)情況、機(jī)構(gòu)自我診斷等各種評價(jià)情景提供參考。
5??? 結(jié)論與展望
在全面加強(qiáng)自然資源調(diào)查觀測監(jiān)測質(zhì)量管理的大背景下,海洋檢驗(yàn)檢測的數(shù)據(jù)質(zhì)量引起大量關(guān)注,相關(guān)管理制度不斷完善,但對海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系有效支撐海洋調(diào)查觀測監(jiān)測任務(wù)的程度的評價(jià)方法仍存在大量研究空間。本研究以國內(nèi)外質(zhì)量管理體系綜合評價(jià)方法的評價(jià)指標(biāo)、定權(quán)方法和評價(jià)模型為參考,以海洋檢驗(yàn)檢測質(zhì)量管理體系運(yùn)行有效性的評價(jià)要求為評價(jià)指標(biāo)、
評價(jià)模型的選取依據(jù)和評價(jià)標(biāo)準(zhǔn)的確定依據(jù),創(chuàng)新性地引入了“一票否決”指標(biāo),通過層次分析法確定各指標(biāo)權(quán)重,初步構(gòu)建了海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系的綜合評價(jià)方法,并提供了建議的評價(jià)流程。該方法一方面服務(wù)于海洋調(diào)查觀測監(jiān)測任務(wù)的全過程質(zhì)量控制,可供評價(jià)者直觀、客觀地得出各海洋檢驗(yàn)檢測機(jī)構(gòu)的質(zhì)量管理體系運(yùn)行在不同評價(jià)方面和不同時(shí)間階段的表現(xiàn)情況,并分析對比形成決策意見;另一方面注重可操作性和效率,以海洋調(diào)查觀測監(jiān)測任務(wù)的特殊要求為導(dǎo)向,對機(jī)構(gòu)接受資質(zhì)認(rèn)定能力評審的過程中已反復(fù)關(guān)注的一些檢查內(nèi)容作出適當(dāng)精簡,著眼于海洋調(diào)查觀測監(jiān)測任務(wù)的策劃、實(shí)施和驗(yàn)收過程中實(shí)際存在的各類風(fēng)險(xiǎn)點(diǎn)。
綜合評價(jià)方法在建立后,應(yīng)根據(jù)具體實(shí)踐進(jìn)行考察、修改及完善[9]。鑒于在海洋檢驗(yàn)檢測機(jī)構(gòu)質(zhì)量管理體系評價(jià)方面的歷史記錄積累較少,評價(jià)對象較為分散,本研究提出的綜合評價(jià)方法可在更廣泛的應(yīng)用后,更為充分地收集改進(jìn)的數(shù)據(jù),以進(jìn)一步進(jìn)行細(xì)化或優(yōu)化。
參考文獻(xiàn)
[1]李雪,劉長發(fā),朱學(xué)慧,等.基于BP人工神經(jīng)網(wǎng)絡(luò)的海水水質(zhì)綜合評價(jià)[J].海洋通報(bào),2010(2):225-230.
[2]廖國祥,劉夢琪,劉長安,等.海洋保護(hù)區(qū)生態(tài)風(fēng)險(xiǎn)綜合評價(jià)方法初步研究:以濱州貝殼堤島與濕地國家級自然保護(hù)區(qū)為例[J].海洋開發(fā)與管理,2015,32(10):59-65.
[3]張明慧,孫昭晨,梁書秀,等.砂質(zhì)海岸整治修復(fù)效果模糊綜合評價(jià)研究:以營口月亮灣為例[J].海洋通報(bào),2019(6):698-706.
[4]柯麗娜,王權(quán)明,李永化,等.基于可變模糊集理論的海島可持續(xù)發(fā)展評價(jià)模型:以遼寧省長??h為例[J].自然資源學(xué)報(bào),2013,28(5):12.
[5]吳曉祥,張效莉.我國海洋漁業(yè)產(chǎn)業(yè)國際競爭力評價(jià)研究:基于AHP—模糊綜合評價(jià)方法[J].海洋開發(fā)與管理,2019,36(1):98-106.
[6]高磊,張蒙蒙,曹蜻,等.基于PSR框架的中國海洋垃圾狀況綜合評價(jià)方法研究[J].海洋開發(fā)與管理,2016,33(9):70-74.
[7]朱士兵,李志強(qiáng).鄉(xiāng)村海灘旅游資源質(zhì)量評價(jià)的建立:以雷州半島為例[J].海洋通報(bào),2019(5):519-526.
[8]狄乾斌,高群.遼寧省海洋經(jīng)濟(jì)發(fā)展質(zhì)量綜合評價(jià)研究[J].海洋開發(fā)與管理,2015,32(11):74-78.
[9]孫振球,徐勇勇.醫(yī)學(xué)統(tǒng)計(jì)學(xué)(第4版)[M].北京:人民衛(wèi)生出版社,2019.
[10] SARAPH J V,BENSON P G,SCHROEDER R G.An instru-ment for measuring the critical factors of quality management [J].Decision sciences,1989,20(4):810-829.
[11] Badri M A,DAVIS D,DAVIS D,A study of measuring the critical factors of quality management [J]. International Journal of Quality & Reliability Management,1995,12(2):36-53.
[12] FLYNN B B,SCHROEDER R G,SAKAKIBARA S A. framework for quality management research and an associated measurement instrument [J].Journal of Operations manage-ment,1994,11(4):339-366.
[13]韓福榮,蔡溪平,錢雷.質(zhì)量體系有效性評價(jià)理論和方法研究[J].北京工業(yè)大學(xué)學(xué)報(bào),1998,24(S1):21-26.
[14]韓福榮,郝進(jìn).質(zhì)量管理體系有效性綜合評價(jià)模型[J].北京工業(yè)大學(xué)學(xué)報(bào),2000,26(3):120-124.
[15]楊理琴.軟件企業(yè)質(zhì)量管理體系有效性評價(jià)與對策研究[J].成都:成都理工大學(xué),2008.
[16]郭子雪,張強(qiáng).質(zhì)量管理體系運(yùn)行有效性綜合評價(jià)[J].北京理工大學(xué)學(xué)報(bào),2009,29(6):560-564.
[17]余崇林.政府部門ISO9000質(zhì)量管理體系有效性評價(jià)研究[J].濟(jì)南:山東大學(xué),2012.
[18] Deming Prize Committee. Introduce of the Deming Prize,2019.[EB/OL].[2020-04-20].http://www.juse.or.jp/up- load/files/DP_Introduction_of_the_Deming_Prize_ v201901.pdf
[19]Baldrige Performance Excellence Program. The Metrology of OrganizationalPerformance:How Baldrige Standards Have Become the Common Language for Organizational Excellence Around the World [EB/OL].(2015-07-06)[2020-11- 01].https://www.nist.gov/system/files/documents/baldrige/The-Metrology-of-Organizational-Performance-World-Stand- ard-Day-Paper-July-6-2015.pdf
[20]EFQM.The EFQM Model [EB/OL].(2019-11-13)[2020-04-20].https://www.efqm.org/index.php/efqm-model/download-your-free-short-copy-of-the-efqm-model/
[21] SAATY T L.The Analytic Hierarchy Process for Decision in a Complex World [J]. Energy Policy,1980,32(10):1151-1158.
[22] SAATY T L. Relative measurement and its generalization in decision making why pairwise comparisons are centralin mathematics for the measurement of intangible factors the analytic hierarchy/network process[J].Revista De La Real Academia De Ciencias Exactas Fisicas Y Naturales. Serie A. Matematicas,2008,102(2):251-318.
[23] MAZIS M B.AHTOLA O T,EUGENE K R.A comparison of fourmulti-attribute models in the prediction of consumer attitudes[J].Journal of Consumer Research,1975,2(1):38-52.