趙志群 孫鈺林 羅喜娜

關(guān)鍵詞：“1+X”證書;技能考試;真實性評價;行動能力

一、“1+X”證書制度對技能評價技術(shù)的新要求

國務(wù)院頒布實施的《國家職業(yè)教育改革實施方案》（簡稱“職教20條”）提出在職業(yè)院校和應(yīng)用型本科高校啟動“學(xué)歷證書+職業(yè)技能等級證書”（即“1+X”證書）試點工作，這是我國在雙證書基礎(chǔ)上進行職業(yè)證書制度建設(shè)的又一次重要探索。2019年4月教育部會同國家發(fā)展改革委等制定的《關(guān)于在院校實施“學(xué)歷證書+若干職業(yè)技能等級證書”制度試點方案》明確提出“堅持以學(xué)生為中心，深化復(fù)合型技術(shù)技能人才培養(yǎng)培訓(xùn)模式和評價模式改革”的要求，把“1+X”證書制度作為“指導(dǎo)職業(yè)教育教學(xué)改革，提高人才培養(yǎng)質(zhì)量，暢通技術(shù)技能人才成長通道，拓展就業(yè)創(chuàng)業(yè)本領(lǐng)”的重要手段，這賦予了“1+X”證書制度在指導(dǎo)人才培養(yǎng)質(zhì)量提高方面的重大歷史使命。

“1+X”證書制度建設(shè)在給職業(yè)教育發(fā)展帶來機遇的同時，也面臨著諸多挑戰(zhàn)。回顧歷史我們不難發(fā)現(xiàn)，我國雙證書制度之所以沒有取得完全成功的一個重要原因，就是職業(yè)資格證書考試的質(zhì)量問題，即技能評價結(jié)果預(yù)測效度不高，沒有完全反映企業(yè)對技術(shù)技能人才的真實要求，以至于最終沒有被社會所認可。從目前公布的“X”證書試點資料看，業(yè)界對技能證書的內(nèi)容和考試方式理解還很模糊。要想保證“1+X”證書制度成功實施，必須保證“X”技能評價的科學(xué)性，即技能評價要滿足效度、信度、區(qū)分度和客觀性等測評技術(shù)標(biāo)準(zhǔn)的要求。

技能評價是社會組織根據(jù)特定職業(yè)（或崗位）的技能要求，采用一定測量工具對特定人群進行的考試、測量和評估。傳統(tǒng)的技能考試采用“知識+實踐技能”考試方式，其中知識考試一般通過多種方式的筆試進行，實踐技能部分通過對考生現(xiàn)場或模擬操作行為過程和結(jié)果的觀察進行評分。隨著人類工作活動復(fù)雜程度的提高，技能的內(nèi)涵發(fā)生了深刻的變化，這直接影響了考試的方式和方法。一方面，研究發(fā)現(xiàn)，除了簡單動手操作行為（如打字錄入和點鈔等）外，通過觀察法進行的技能考試的結(jié)果信度很低[1]，特別是在對心智技能要求較高的專業(yè)領(lǐng)域，這種行為導(dǎo)向的考試的局限性更大，更無法滿足信息技術(shù)日新月異發(fā)展對專業(yè)考試的質(zhì)量要求。另一方面，“引導(dǎo)行動的知識”的診斷方法也是一個巨大的難題。例如，如何確定究竟是哪些具體的知識片段能夠決定專業(yè)人員是否可以完成工作任務(wù)？如何組合、以及按照什么順序組合多種知識診斷方法，才能有效地判斷出不同類型的知識（如條件知識、因果知識、程序知識和工具知識）等等[2]。解決這些問題，也是利用人工智能技術(shù)實現(xiàn)復(fù)雜生產(chǎn)過程自動化的基礎(chǔ)。

當(dāng)今社會，信息技術(shù)發(fā)展在很大程度上改變了我們的工作和生活，互聯(lián)網(wǎng)和人工智能更是開啟了“工業(yè)4.0”的新時代?；谛畔⑽锢硐到y(tǒng)（CPS）的智能化、產(chǎn)品全生命周期的全制造流程數(shù)字化，催生了高度靈活和個性化生產(chǎn)與服務(wù)模式的建立[3]，這對技術(shù)技能人才的職業(yè)能力和綜合素養(yǎng)提出了新的更高的要求。技術(shù)人員要在最短時間內(nèi)熟悉工作過程和工作環(huán)境，適時對工況進行準(zhǔn)確認知，并做出合理的決策。數(shù)字化工作和學(xué)習(xí)方式擴大了對“人—機協(xié)作”模式和生產(chǎn)組織的設(shè)計空間，技術(shù)人員必須對“可能性世界”進行深入的理解和探索，這需要具備更高的制定計劃、判斷決策和分析復(fù)雜系統(tǒng)的能力，“技術(shù)正被深深地嵌入在社會情境中，并為各種復(fù)雜價值關(guān)系所左右”[4]。這說明，在未來的技能評價過程中，必須用整體化的觀念對待工作和技術(shù)的關(guān)系，在相對弱化簡單和重復(fù)性操作技能的同時，加強對諸如技術(shù)敏感性等高層次實踐能力的評價，從而促進學(xué)習(xí)者的“價值理性”和“事實性評價能力”的發(fā)展，這對技能評價技術(shù)提出了新的要求。

技能評價是人力資源管理的經(jīng)典課題，也是一個世界性的難題[5]，“1+X”制度的技能評價必須反映技術(shù)技能人才的發(fā)展性目標(biāo)和職業(yè)規(guī)范的雙重要求。國際的發(fā)展趨勢是采用表現(xiàn)性評價方式，即采用在具體工作情境中針對復(fù)雜內(nèi)容的開發(fā)性試題[6]。這種基于建構(gòu)主義的考評方式克服了傳統(tǒng)標(biāo)準(zhǔn)化測驗僅能考查書本知識的弊端，但是需要大量的組織和時間投入，這無疑又對教育技術(shù)研究提出了新的挑戰(zhàn)，即：是否有可能開發(fā)針對開放性試題的自動評分系統(tǒng)？當(dāng)前，深度學(xué)習(xí)等人工智能技術(shù)，特別是自然語言處理、復(fù)雜網(wǎng)絡(luò)分析、異常診斷技術(shù)在知識產(chǎn)權(quán)保護、信息檢索等領(lǐng)域已有重要的應(yīng)用[7]，這為未來的技能考試及其自動化評分系統(tǒng)設(shè)計提供了啟發(fā)。

在技能評價領(lǐng)域，技能大（競）賽是一種特殊的考試方式。世界技能大賽（WorldSkills Competition，下文簡稱“世賽”）是全球最具影響力的技能大賽，它在促進全球青年技能工作者（主要是職業(yè)院校學(xué)生）技能提升方面起到了積極作用，被譽為是技能領(lǐng)域的“世界奧林匹克”。對于專業(yè)技術(shù)水平和職業(yè)素質(zhì)的檢驗，“世賽”有一整套更為準(zhǔn)確和全面評價方法[8]，對“世賽”的考試題目設(shè)計開展研究，可以為“1+X”證書制度的建立和發(fā)展提供方法和技術(shù)上的支持。

二、世界技能大賽的題目及評分標(biāo)準(zhǔn)分析

技能競賽是為了解職業(yè)教育培訓(xùn)的成效，利用競爭形式對職業(yè)技能進行評價和激勵的社會活動[9]。與我國目前重要的技能考試，如職業(yè)院校技能大賽和高職院校招生的技能高考相比，“世賽”在競賽目的、賽項設(shè)置、考核環(huán)境、考核內(nèi)容和評分標(biāo)準(zhǔn)等方面有很多獨特做法[10]。限于篇幅，本文討論“世賽”的考核內(nèi)容和評分標(biāo)準(zhǔn)對技能考試設(shè)計的啟發(fā)。

（一）反映典型工作任務(wù)的競賽題目

世界技能大賽賽項涉及信息與通信技術(shù)、制造與工程技術(shù)、創(chuàng)意藝術(shù)與時尚等國民經(jīng)濟的六大主要領(lǐng)域，包括企業(yè)生產(chǎn)和社會生活所需的多數(shù)技能?！笆蕾悺痹囶}設(shè)計的基本理念是：職業(yè)技能無法通過一道考試題來考察和甄別，每個賽項的試題都是由一組內(nèi)容相互關(guān)聯(lián)的題目組成，被稱之為“模塊”。如第44屆“世賽”“商務(wù)軟件解決方案”賽項試題由5個模塊組成，比賽時間共計20小時。其中，模塊一“分析和設(shè)計軟件解決方案（4小時）”要求選手按照給定商業(yè)案例，使用系統(tǒng)建模技術(shù)進行分析、確定軟件功能模塊、繪制核心業(yè)務(wù)流程UML圖、繪制數(shù)據(jù)庫ER圖、設(shè)計數(shù)據(jù)字典并完成數(shù)據(jù)分析與處理;模塊二“開發(fā)軟件解決方案（13小時）”要求對功能進行代碼實現(xiàn)，開發(fā)客戶端服務(wù)器系統(tǒng)、網(wǎng)絡(luò)和移動終端接口;模塊三“測試軟件解決方案（1小時）”對所開發(fā)的系統(tǒng)進行全面測試，編制測試報告;模塊四“編寫軟件解決方案技術(shù)文檔（1小時）”，為日后軟件系統(tǒng)升級維護提供指導(dǎo);模塊五“制作解決方案PPT（1小時）”總結(jié)提煉開發(fā)思路、系統(tǒng)實現(xiàn)的功能?？梢钥闯?，“世賽”題目是一個工作過程結(jié)構(gòu)完整的綜合性工作任務(wù)。

整體上說，“世賽”試題體現(xiàn)了人文主義的技術(shù)觀，它將社會價值融入到技術(shù)的設(shè)計與使用過程中，完整地展現(xiàn)了技術(shù)與社會文化間的互動，體現(xiàn)了技術(shù)的自然屬性和社會屬性的統(tǒng)一[11]。又如“世賽”“網(wǎng)絡(luò)設(shè)計”賽項有四個模塊，分別是“設(shè)計”“布局”“客戶端”和“服務(wù)器端”。其中“客戶端”又分為兩個子模塊，即“客戶端A——拼圖”和“客戶端B——奧林匹克競賽”。前者需要3小時完成，占總分值的14.75%;后者需要2小時完成，占總分值的10.25%，兩項合計占總分值的25%。試題內(nèi)容要點如下表所示。

可以看出，“世賽”試題是按照職業(yè)的“典型工作任務(wù)”（Professional Task，建立在工業(yè)社會學(xué)理論基礎(chǔ)上的職業(yè)教育學(xué)概念）理念設(shè)計的，即“代表著一個職業(yè)的專業(yè)化水平的任務(wù)”。網(wǎng)絡(luò)設(shè)計賽項是編程工程師或程序員職業(yè)的典型工作任務(wù)，它有以下特征：（1）工作過程結(jié)構(gòu)完整，包括獲取信息、制定計劃、決策、實施、檢查控制和評估反思等環(huán)節(jié);（2）涉及所有的工作要素，如工作的對象、工具、材料、工作方法、工作組織形式和工作要求;（3）工作的結(jié)果或工作流程具有一定開放性;（4）能夠促進從業(yè)者職業(yè)能力的發(fā)展[12]。盡管“世賽”試題會提前半年公布，但是最終比賽時具體內(nèi)容和要求仍然會有30%的變化。完成此類任務(wù)需要很強的綜合職業(yè)能力，特別是獲取信息、學(xué)習(xí)新知和解決問題的能力，這對選手的專業(yè)知識、技能和技巧，以及學(xué)習(xí)能力提出了很大挑戰(zhàn)。由于比賽現(xiàn)場有很大的發(fā)揮空間，選手還需要有較強的現(xiàn)場反應(yīng)能力和創(chuàng)新能力。

（二）涉及范圍廣的分析性量規(guī)

為了判斷工作表現(xiàn)和任務(wù)完成情況，技能考試一般會采用兩種不同類型的量規(guī)，即“整體性量規(guī)”和“分析性量規(guī)”?！笆蕾悺辈捎梅治鲂粤恳?guī)，其特點是內(nèi)容精確，對細節(jié)進行詳細的描述。如網(wǎng)絡(luò)設(shè)計賽項滿分100分，分163個評分點，其中最大的評分點3分，最小評分點僅為0.15分。在我們分析的兩個模塊“客戶端A——拼圖”和“客戶端B——奧林匹克競賽”中，最大的評分點為2，最小為0.15。如評分點“應(yīng)用程序中提供的動畫的質(zhì)量（旋轉(zhuǎn)件、提升件、顯示模態(tài)）”賦分0.7分，分4個等級，即“所有事件都沒有動畫”“使用簡單或較差的動畫”“有些動畫很好，有些則很差”和“所有的動畫都很好”，藉此可以準(zhǔn)確評分?？梢钥闯?，“世賽”的評分方式與我國傳統(tǒng)技術(shù)技能考試有較大差別。后者一般采用整體性量規(guī)，綜合考慮多方面要求，概括性強但不夠精細。例如，湖北省的技能高考是我國目前組織較為嚴密，設(shè)計精致的技能高考，代表著我國的高水平技能考試設(shè)計。2019年湖北省計算機類技能高考的“操作”部分共有8個部分考核項目，如電子表格處理、幻燈片制作、計算機網(wǎng)絡(luò)應(yīng)用等，它們都是根據(jù)總體結(jié)果進行評判的。即便在其他一些操作性比較強的專業(yè)如汽車維修，盡管加入了操作安全方面的要求，如“造成人身、設(shè)備重大事故……，立即終止考試，扣8分”等等[13]，但這里采用的仍然是整體性量規(guī)。

分析性量規(guī)不是簡單的操作技能標(biāo)準(zhǔn)，也不是用來考核學(xué)生書本知識的積累水平，而是來源于企業(yè)生產(chǎn)實際或產(chǎn)品質(zhì)量的真實技術(shù)標(biāo)準(zhǔn)，它不僅針對最終作品的完成情況和技術(shù)水平，而且還關(guān)注整個工作過程的質(zhì)量，反映行業(yè)的規(guī)范性要求[14]，這不但為主觀性評分提供了質(zhì)量保障，也為職業(yè)素養(yǎng)的評估提供了可能。

（三）采用真實性評價方式

傳統(tǒng)的技能考試通過行為觀察法和標(biāo)準(zhǔn)化考試衡量考生對專業(yè)知識和技能的掌握程度，而“世賽”通過與現(xiàn)實工作世界類似的真實性任務(wù)，讓選手應(yīng)用專業(yè)知識、技能和策略解決問題，展現(xiàn)其對知識的理解水平和應(yīng)用能力[15]，這反映了“真實性評價策略”，即通過完成與工作情境相似的真實性任務(wù)展示知識技能的應(yīng)用能力[16]。從以上案例可以看出，“世賽”試題反映的基于情境學(xué)習(xí)理論的真實性評價策略的特點是：（1）基于工作實踐中具有完整工作過程的真實工作任務(wù)，不把職業(yè)活動分割成更小的子任務(wù)或操作單元;（2）評價標(biāo)準(zhǔn)包括內(nèi)容標(biāo)準(zhǔn)、過程標(biāo)準(zhǔn)和價值標(biāo)準(zhǔn)等多個維度，按照企業(yè)要求進行全面評估，而不僅僅考核知識技能點的學(xué)習(xí)獲得;（3）評價量規(guī)細致全面，包括評分標(biāo)準(zhǔn)陳述和等級達成度。通過真實性工作任務(wù)考查解決專業(yè)問題的能力，可反映選手對復(fù)雜工作的理解和把握程度以及相關(guān)實踐經(jīng)驗，這克服了傳統(tǒng)標(biāo)準(zhǔn)化考試僅能考察低水平書本知識和孤立操作技能的局限性[17]，體現(xiàn)了職業(yè)的效度。

“世賽”評分標(biāo)準(zhǔn)按照企業(yè)實際工藝標(biāo)準(zhǔn)和產(chǎn)品精度要求制定，這與我國通常做法不同，后者主要圍繞教育主管部門或?qū)W校制定的教學(xué)標(biāo)準(zhǔn)建立標(biāo)準(zhǔn)體系。真實性評價不僅關(guān)注工作結(jié)果，還關(guān)注工作中的技能細節(jié)，其評價的環(huán)境、方式和內(nèi)容均需反映真實工作世界的要求，這體現(xiàn)了建構(gòu)主義學(xué)習(xí)理念，即知識是在具體工作情境中由主體建構(gòu)的。

（四）主觀性評分和客觀評分相互補充

正常情況下，典型工作任務(wù)沒有唯一正確的答案或工藝流程，如軟件開發(fā)和網(wǎng)絡(luò)設(shè)計等，裁判的個人偏好和主觀感受會對評判結(jié)果產(chǎn)生重要影響。為了降低評分的隨意性，提高評分信度和可操作性，“世賽”采用了主觀評分和客觀評分兩部分評分標(biāo)準(zhǔn)。如“路標(biāo)和終點要求”部分有六個客觀分評分點，兩個主觀分評分點。主觀評分標(biāo)準(zhǔn)分四檔，如“道路盡頭奔跑的山丘的動畫質(zhì)量”這個主觀評價指標(biāo)下，“沒有動畫或跑步者直接出現(xiàn)在山頂”得0分，“跑步者在爬山時呈現(xiàn)出非常單一或較差的動畫與相同的跑步動作”得1分，“跑步者爬山呈現(xiàn)出良好的動畫效果”得2分，“跑步者沿著跑道爬山時呈現(xiàn)了一個出色的動畫”得3分。三名裁判同時打分，當(dāng)評分相差大于1時，差異較大的兩名裁判需說明理由并降低分差，以保證評分者間信度。

客觀分有嚴格的評判依據(jù)，也分兩類。一類是“是”“否”判斷，如“游戲打開時會顯示歡迎屏幕”;另一類規(guī)定明確的扣分點，如“在每場比賽中，必須至少有5個障礙物在路上，隨機放置在跑步場”，每錯過一個障礙扣0.10，障礙物位置不隨機扣0.25。與此相比，我國傳統(tǒng)技能考試通常采用主觀評分。例如，同樣是設(shè)計類的技能大賽，全國高職院校服裝設(shè)計與工藝技能大賽評分標(biāo)準(zhǔn)有6個評分項，如“服裝整體效果美觀;規(guī)格準(zhǔn)確，比例協(xié)調(diào);工藝精致，松度平衡”。但什么是“工藝精致，整體效果美觀”？評分標(biāo)準(zhǔn)中未有說明，裁判需根據(jù)經(jīng)驗進行主觀評判[18]?？梢钥闯?，建立主、客觀評分標(biāo)準(zhǔn)相互補充的評分標(biāo)準(zhǔn)，可更好地反映企業(yè)的實際，這不僅有利于考察被試學(xué)生的專業(yè)知識和技能，也有利于綜合職業(yè)能力的評價。

（五）情境性考試題目的開發(fā)

行動能力評價的最大困難是開發(fā)情境性考試題目，即有助于觀察和確立工作能力和態(tài)度的標(biāo)準(zhǔn)化案例性任務(wù)，它既要反映重要的實踐價值，又要能藉此評判被試者的職業(yè)技能的高低。專家智能（Expertise）研究發(fā)現(xiàn)，只有完成典型工作任務(wù)過程中的問題解決方式才可以被抽象化和普世化，并被遷移到類似的工作任務(wù)中，對職業(yè)能力（技能）的全面評價只能在完成典型任務(wù)的過程中進行[37]。教育家格魯施卡（A. Gruschka）在發(fā)展性任務(wù)（Developmental Tasks）理論基礎(chǔ)上定義了情境性考試任務(wù)，即被試在真實工作條件下進行工作，通過對其工作行為、工作成果的觀察和必要時對特殊工作環(huán)節(jié)的解釋，評價其職業(yè)能力發(fā)展水平，通過解決（或未成功解決）問題的方式，揭示實踐問題解決策略，包括職業(yè)學(xué)習(xí)策略、專業(yè)化的工作策略和專業(yè)合作策略等[38]。在情境考試中，考生以規(guī)劃形式制定項目方案并詳細說明理由，做實施準(zhǔn)備，并將計劃付諸實施;在口試中考生展示工作結(jié)果，對工作結(jié)果和過程進行自我評估，對實施結(jié)果偏離計劃的情況進行說明。情境性考試與真實的工作過程聯(lián)系緊密，這不但能對個體的職業(yè)能力進行評價，也為職業(yè)教育的課程和教學(xué)改革提供了重要的啟發(fā)。

在信息化和智能化時代，一個社會組織在履行其管理和生產(chǎn)職能、建立高效的生產(chǎn)、服務(wù)和組織管理模式時，經(jīng)濟技術(shù)指標(biāo)已經(jīng)不是唯一的決策依據(jù)，員工的技能和綜合素養(yǎng)具有重要的影響，包括基本技能、解決問題能力和創(chuàng)新能力，“工作的人性化設(shè)計”[39]具有重要的意義。人性化的工作設(shè)計是智能化發(fā)展的必然要求，也是高素質(zhì)技術(shù)技能人才成長的必要條件，這意味著職業(yè)教育必須實現(xiàn)從“適應(yīng)導(dǎo)向”向“設(shè)計導(dǎo)向”的范式轉(zhuǎn)變，培養(yǎng)的學(xué)生不僅要適應(yīng)技術(shù)和社會的發(fā)展，還要有能力“本著對社會、經(jīng)濟和環(huán)境負責(zé)的態(tài)度，（參與）設(shè)計和塑造未來的技術(shù)和工作世界”[40]。未來的職業(yè)教育人才評估應(yīng)當(dāng)按照“完整的行動模式”（Vollst?ndige Handlung）[41]，將考試題目設(shè)計成為學(xué)生全程參與的包括計劃、實施和評價等步驟的完整的工作過程，避免過分精細的任務(wù)劃分。這樣，不但可以較好地解決促進學(xué)習(xí)者個性發(fā)展的“教育性目標(biāo)”和適應(yīng)企業(yè)崗位要求的“實用性目標(biāo)”之間的矛盾，滿足企業(yè)崗位工作的現(xiàn)實需求，也可以為學(xué)習(xí)者的全面發(fā)展奠定扎實的基礎(chǔ)。從更高一個層次看，這也是我國職業(yè)教育實現(xiàn)立德樹人教育目標(biāo)的要求，即職業(yè)教育培養(yǎng)的不僅是簡單的操作者和實施者，而是具有系統(tǒng)職業(yè)能力和領(lǐng)域特長的、德智體美勞全面發(fā)展的社會主義接班人和勞動者。

“世賽”在組織設(shè)計方面也為“1+X”制度建設(shè)提供了重要的借鑒經(jīng)驗，如建立權(quán)威的“實踐專家”組織，依托行業(yè)部門推薦遴選權(quán)威專家而不僅僅是個別公司組織的專家團隊，通過專家團隊的權(quán)威性保證試題命制的科學(xué)性;完善組織實施過程，包括技術(shù)文件公布、合作企業(yè)遴選、技術(shù)平臺和評判細節(jié)的確定等環(huán)節(jié)，而不僅僅由各“技能評價組織”確定，等等?！笆蕾悺北荣愡^程全程開放觀摩，對推動職業(yè)院校的課程和教學(xué)改革也有重要的示范作用。