三要素表現(xiàn)標(biāo)準(zhǔn)框架的建構(gòu)與驗(yàn)證研究

● 邵朝友

三要素表現(xiàn)標(biāo)準(zhǔn)框架的建構(gòu)與驗(yàn)證研究

● 邵朝友

表現(xiàn)標(biāo)準(zhǔn)是促進(jìn)教—學(xué)—評一致性的重要保障，而構(gòu)建一種合理的框架乃是開發(fā)表現(xiàn)標(biāo)準(zhǔn)的基礎(chǔ)。結(jié)合本國內(nèi)容標(biāo)準(zhǔn)特征，架構(gòu)了包括內(nèi)容要求、表現(xiàn)水平、表現(xiàn)樣例的三要素表現(xiàn)標(biāo)準(zhǔn)框架，并以結(jié)構(gòu)方程模型加以驗(yàn)證。分析結(jié)果表明，模型的各項(xiàng)指標(biāo)具有良好的適配度。三要素之間的高相關(guān)和最終數(shù)據(jù)分析顯示二階模型的存在。在此基礎(chǔ)上，文末審視了研究局限，探討了進(jìn)一步研究方向。

表現(xiàn)標(biāo)準(zhǔn)；表現(xiàn)標(biāo)準(zhǔn)框架；結(jié)構(gòu)方程模型

表現(xiàn)描述符和表現(xiàn)等級構(gòu)成了表現(xiàn)標(biāo)準(zhǔn)基本內(nèi)容，前者乃關(guān)鍵所在。這是因?yàn)楸憩F(xiàn)描述符規(guī)定了表現(xiàn)標(biāo)準(zhǔn)質(zhì)量要求，回答了學(xué)生掌握內(nèi)容標(biāo)準(zhǔn)的程度和證據(jù)。若使不同用戶更好解讀表現(xiàn)標(biāo)準(zhǔn)，進(jìn)而達(dá)成最大共識，還需要在這兩者基礎(chǔ)上增加一些要素，以便為文本解讀提供多個(gè)視角。那么當(dāng)前有哪些表現(xiàn)標(biāo)準(zhǔn)框架、又存在什么問題、基于現(xiàn)狀應(yīng)建構(gòu)一種怎樣的本土化框架，就成為研究者必須直面的現(xiàn)實(shí)課題。

一、研究緣起

伴隨評價(jià)實(shí)踐的深入，人們發(fā)現(xiàn)極需要一種清晰界定學(xué)生學(xué)習(xí)達(dá)成程度的評價(jià)標(biāo)準(zhǔn)。它不僅可以為課堂教學(xué)提供規(guī)范，也為大規(guī)模考試提供標(biāo)尺，進(jìn)而為校內(nèi)外的教學(xué)—評價(jià)—學(xué)習(xí)一致性提供技術(shù)保障。

這種評價(jià)標(biāo)準(zhǔn)就是表現(xiàn)標(biāo)準(zhǔn)。西方國家，特別是美國，早在上世紀(jì)80年代就開展了相關(guān)研究。目前各州基本都開發(fā)了表現(xiàn)標(biāo)準(zhǔn)，建立了綜合評價(jià)體系。在我國，教育部門和學(xué)界也逐漸認(rèn)識到其重要性，開發(fā)學(xué)科質(zhì)量標(biāo)準(zhǔn)（其本質(zhì)是表現(xiàn)標(biāo)準(zhǔn)）已得到共識。但如何基于實(shí)際需要建構(gòu)一種本土化框架乃是將來開發(fā)表現(xiàn)標(biāo)準(zhǔn)的重要議題。就此有必要考察、借鑒西方相關(guān)表現(xiàn)標(biāo)準(zhǔn)框架。

（一）表現(xiàn)標(biāo)準(zhǔn)框架現(xiàn)狀分析

表現(xiàn)水平層級和描述符是構(gòu)成表現(xiàn)標(biāo)準(zhǔn)最基本單位。縱向上，表現(xiàn)水平層級說明不同年級或年段應(yīng)達(dá)成的水平層級，橫向上則描述出同一學(xué)習(xí)主題／內(nèi)容／內(nèi)容標(biāo)準(zhǔn)不同的表現(xiàn)水平層級，如 “高級”、“熟練”、“基本”三種水平。描述符則描述出不同水平的內(nèi)在要求，如1996年美國國家評估管理委員會(National Assessment Governing Board)就規(guī)定了學(xué)生在8年級科學(xué)中獲得“熟練”水平必須達(dá)到的要求[1]：學(xué)生應(yīng)知道和／或能收集基本信息以應(yīng)用于物理、生活、社會環(huán)境。學(xué)生應(yīng)能聯(lián)系簡單的思想來理解匯報(bào)與權(quán)衡。學(xué)生能分析原因與結(jié)果之間的關(guān)系，比如掠食性動(dòng)物／犧牲者、生長／降雨量。學(xué)生應(yīng)能設(shè)計(jì)實(shí)驗(yàn)來回答包含兩個(gè)變量的簡單問題，能控制某個(gè)變量，收集、呈現(xiàn)數(shù)據(jù)，并以此做出結(jié)論。學(xué)生應(yīng)能開始理解各種關(guān)系（如力與運(yùn)動(dòng)、物質(zhì)與能源），并能開始理解作用于生物與非生物上的規(guī)律。

就目前文獻(xiàn)而言，構(gòu)成表現(xiàn)標(biāo)準(zhǔn)框架的主要“變量”還包括認(rèn)知復(fù)雜度、表現(xiàn)性任務(wù)、學(xué)生作品等。這些不同因素和表現(xiàn)水平的組合形成了各種表現(xiàn)標(biāo)準(zhǔn)框架。

1．五種典型表現(xiàn)標(biāo)準(zhǔn)框架

綜合各方文獻(xiàn)，可歸納出5種典型的表現(xiàn)標(biāo)準(zhǔn)框架（見表1）。下面簡要地對表中相關(guān)要素做一說明。

——認(rèn)知復(fù)雜度指內(nèi)容標(biāo)準(zhǔn)分解后各條表現(xiàn)期望的認(rèn)知要求，其中馬扎諾四種認(rèn)知水平包括：提取、理解、分析、知識運(yùn)用。韋伯知識深度包括四種水平，即回憶與再現(xiàn)、應(yīng)用基本技能／概念、策略性思維、擴(kuò)展性思維。

——表現(xiàn)性任務(wù)是表現(xiàn)性評價(jià)的兩大組成要素之一，它對應(yīng)于傳統(tǒng)標(biāo)準(zhǔn)化測試多項(xiàng)選擇題，更注重學(xué)生解決問題能力的形成。

——學(xué)生作品是指學(xué)生完成評價(jià)任務(wù)的作品或表現(xiàn)，評注則是對學(xué)生作品或表現(xiàn)的點(diǎn)評，也包括評價(jià)任務(wù)所涉及相關(guān)表現(xiàn)要求的陳述。

表1 五種典型表現(xiàn)標(biāo)準(zhǔn)框架匯總

2．分析維度與結(jié)果

可從相互一致、基于認(rèn)知、邏輯嚴(yán)密分析表現(xiàn)標(biāo)準(zhǔn)質(zhì)量。一致性指各構(gòu)成要素的相互匹配關(guān)系。如描述符能明確地劃分不同表現(xiàn)水平，同一水平表現(xiàn)能包容不同表現(xiàn)水平的表現(xiàn)；或者表現(xiàn)樣例中的學(xué)生作品本身就與某表現(xiàn)水平相互匹配?；谡J(rèn)知包括兩層意思，一是開發(fā)表現(xiàn)標(biāo)準(zhǔn)過程要以認(rèn)知心理學(xué)為基礎(chǔ)，二是表現(xiàn)標(biāo)準(zhǔn)開發(fā)結(jié)果要基于認(rèn)知來呈現(xiàn)，特別是有關(guān)學(xué)生典型錯(cuò)誤表現(xiàn)的作品。邏輯嚴(yán)密維度主要指向于表現(xiàn)水平。表現(xiàn)水平的設(shè)置需要采取邏輯約定，如對于含有多個(gè)要素的某條內(nèi)容標(biāo)準(zhǔn)，達(dá)到“熟練”水平的規(guī)定為：在絕大多數(shù)要素上達(dá)到“熟練”表現(xiàn)；此外，邏輯嚴(yán)密維度還要求表現(xiàn)標(biāo)準(zhǔn)呈現(xiàn)不同表現(xiàn)水平。三個(gè)維度相互關(guān)聯(lián)、缺一不可，它們整體構(gòu)成了判斷表現(xiàn)標(biāo)準(zhǔn)的分析架構(gòu)。應(yīng)用三個(gè)維度可對表1做如下分析。

——阿拉斯加州科學(xué)學(xué)科表現(xiàn)標(biāo)準(zhǔn)：部分考慮了用表現(xiàn)水平與內(nèi)容標(biāo)準(zhǔn)的一致性；缺乏認(rèn)知復(fù)雜度，不能把表現(xiàn)標(biāo)準(zhǔn)建基于認(rèn)知心理學(xué)基礎(chǔ)上；表現(xiàn)水平層級的缺乏不能讓使用者了解內(nèi)容標(biāo)準(zhǔn)的不同水平表現(xiàn)。

——科羅拉多州框架語文閱讀表現(xiàn)標(biāo)準(zhǔn)：缺乏認(rèn)知復(fù)雜度：從其描述情況來看，表現(xiàn)水平還非常寬泛，在具體和抽象之間沒有平衡，沒有考慮學(xué)情，表現(xiàn)樣例的缺乏也使得教師、學(xué)生失去一個(gè)解讀表現(xiàn)水平的參考點(diǎn)。

——阿拉斯加州歷史學(xué)科表現(xiàn)標(biāo)準(zhǔn)：在內(nèi)容標(biāo)準(zhǔn)—表現(xiàn)標(biāo)準(zhǔn)—認(rèn)知復(fù)雜度上，部分體現(xiàn)了相互一致維度，但沒有具體說明評價(jià)任務(wù)與三者關(guān)系，其結(jié)果是不能很好地為評價(jià)設(shè)計(jì)提供參考；在基于認(rèn)知維度上，沒有呈現(xiàn)學(xué)情，減少了教學(xué)的重要參考點(diǎn)，也使得難以據(jù)此進(jìn)行評價(jià)設(shè)計(jì)；在邏輯嚴(yán)密維度上，沒有考慮如何確定表現(xiàn)水平層級。

——雷斯尼克等學(xué)科表現(xiàn)標(biāo)準(zhǔn)：在相互一致維度上，有表現(xiàn)要求和表現(xiàn)性任務(wù)，但沒有明確表現(xiàn)性任務(wù)的認(rèn)知復(fù)雜度，使得表現(xiàn)標(biāo)準(zhǔn)難以發(fā)揮評價(jià)引導(dǎo)作用，評價(jià)設(shè)計(jì)與內(nèi)容標(biāo)準(zhǔn)失去聯(lián)結(jié)；考慮了學(xué)情，并用評注的方式加以描述，很好地為教師和評價(jià)設(shè)計(jì)者提供參考點(diǎn)，也為學(xué)生提供示范；在邏輯嚴(yán)密維度上，沒有呈現(xiàn)表現(xiàn)水平層級。

——肯德爾等表現(xiàn)標(biāo)準(zhǔn)：規(guī)定了認(rèn)知復(fù)雜度，但試題的四種表現(xiàn)水平不是表現(xiàn)標(biāo)準(zhǔn)的表現(xiàn)水平，前者只是來自試題的評分規(guī)則，后者應(yīng)來自內(nèi)容標(biāo)準(zhǔn)；此外，學(xué)生作品也沒有呈現(xiàn)，不能為每個(gè)水平做具體的參考點(diǎn)。

（二）三要素表現(xiàn)標(biāo)準(zhǔn)框架的提出

1．框架構(gòu)成

為解決上述問題，本文嘗試提出一種三要素表現(xiàn)標(biāo)準(zhǔn)框架，它們分別是內(nèi)容要求（包括表現(xiàn)期望、認(rèn)知復(fù)雜度）、表現(xiàn)水平、表現(xiàn)樣例（包括表現(xiàn)性任務(wù)、學(xué)生作品）。

2．要素說明

——內(nèi)容要求。它包括表現(xiàn)期望和認(rèn)知復(fù)雜度。前者針對我國一些學(xué)科課程標(biāo)準(zhǔn)還不夠具體清晰而提出。換句話說，它是內(nèi)容標(biāo)準(zhǔn)被分解后得到的陳述。但表現(xiàn)期望還沒有回答一個(gè)問題，即需要達(dá)到什么樣的認(rèn)知類型，因此還必須考慮如何在認(rèn)知要求上規(guī)定內(nèi)容標(biāo)準(zhǔn)的掌握程度。本研究借鑒了韋伯的四類知識深度水平理論。

——表現(xiàn)水平。雖然認(rèn)知復(fù)雜度規(guī)定了認(rèn)知復(fù)雜層次，但還是顯得比較籠統(tǒng)。處于同樣的認(rèn)知復(fù)雜水平的不同學(xué)生，其表現(xiàn)亦可能有所不同。例如兩位學(xué)生處于“應(yīng)用基本技能／概念”，但表現(xiàn)未必完全相同，可能體現(xiàn)在熟練程度、細(xì)節(jié)、速度、流暢性上的差異。因此還需要對不同學(xué)生的表現(xiàn)做進(jìn)一步劃分。

——表現(xiàn)樣例。表現(xiàn)樣例包括表現(xiàn)性任務(wù)和學(xué)生作品，二者相伴出現(xiàn)，為用戶提供解讀認(rèn)知復(fù)雜度、表現(xiàn)水平參考點(diǎn)。特別當(dāng)學(xué)生表現(xiàn)處于不同表現(xiàn)水平臨界點(diǎn)時(shí)，表現(xiàn)性任務(wù)和相應(yīng)學(xué)生作品為區(qū)分不同表現(xiàn)水平提供具體參考。同時(shí)，劃定水平時(shí)可能發(fā)現(xiàn)不合理甚至錯(cuò)誤的典型表現(xiàn)，呈現(xiàn)這些表現(xiàn)一方面它代表學(xué)生真實(shí)表現(xiàn)，另一方面它幫助教師把握學(xué)情。

二、研究設(shè)計(jì)

（一）模型及其變量對應(yīng)說明

驗(yàn)證設(shè)計(jì)應(yīng)用了結(jié)構(gòu)方程模型，運(yùn)用了Amos6.0分析軟體。圖1呈現(xiàn)了設(shè)計(jì)的路徑圖。

圖1 三要素表現(xiàn)標(biāo)準(zhǔn)框架假設(shè)模型

表2描述了模型變量對應(yīng)表，具體交代了三個(gè)潛在變量、以及代表觀察變量的6個(gè)問卷題目。

表2 模型變量對應(yīng)說明

（二）調(diào)查對象與數(shù)據(jù)收集

調(diào)查范圍覆蓋浙江、山東、河南三省，相關(guān)信息見下表。數(shù)據(jù)收集乃通過問卷方式，剔除無效問卷，有效問卷共500份。具體調(diào)查時(shí)采取隨機(jī)方式進(jìn)行，如調(diào)查當(dāng)日在校教師，要求被調(diào)查者在20分鐘之內(nèi)完成問卷并上交。

表3 調(diào)查對象基本信息

三、數(shù)據(jù)分析

（一）模型的修正

Amos6.0運(yùn)行后輸出各類數(shù)據(jù)，其中顯著性概率值P=0．002<0.05，表明模型被拒絕，需要修訂。點(diǎn)選修正指標(biāo)項(xiàng)(Modification Indices)，輸出結(jié)果如下。從中可發(fā)現(xiàn)，若是將誤差變量e3、el由固定參數(shù)改為自由參數(shù)，則至少可減少卡方值10.290，因此增加兩者的共變關(guān)系。

表4 修正指標(biāo)信息

Amos6.0重新運(yùn)行后，得到圖2。內(nèi)容要求、表現(xiàn)水平、表現(xiàn)樣例三個(gè)潛在變量之間的標(biāo)準(zhǔn)化后相關(guān)系數(shù)為0.77、0.70、0.84，表明模型總體具有很高一致性。Alpha（=0.6610）>0.6，表明修正模型具有較高內(nèi)部信度。

圖2 標(biāo)準(zhǔn)化后的三要素表現(xiàn)標(biāo)準(zhǔn)框架驗(yàn)證模型

（二）修正模型注解內(nèi)容

模型的自由度為 5（Degrees of freedom=6），適配度卡方值為7.870（Chi-square=7.870），顯著性概率值為 0.164（Probability level=．164），未達(dá) 0.05 的顯著水平，接受虛無假設(shè)，即表明觀察數(shù)據(jù)與假設(shè)模型間可以適配。

（三）模型各項(xiàng)適配度統(tǒng)計(jì)量

Amos 還 輸 出 了 Baseline Comparisons、RMR、GFI、RMSEA、AIC、ECVI、HOELTER 等各項(xiàng)模型適配度指標(biāo)，它們是判斷模型是否成立的關(guān)鍵表征，現(xiàn)以表5統(tǒng)整如下。

（四）二階模型的驗(yàn)證探討

圖2顯示三個(gè)要素之間的路徑系數(shù)較高（0.77、0.84、0.70，皆不小于0.70），表明三個(gè)要素之上還存在一個(gè)更上位概念。從本研究來看，該上位概念就是表現(xiàn)標(biāo)準(zhǔn)。該二階模型構(gòu)造如下。數(shù)據(jù)分析表明，各項(xiàng)適配度指標(biāo)保持不變，進(jìn)一步確證了該二階模型的存在。

表5 “三要素表現(xiàn)標(biāo)準(zhǔn)框架”驗(yàn)證性因素分析的整體模型適配度檢驗(yàn)摘要

圖3 標(biāo)準(zhǔn)化后的二階驗(yàn)證模型

四、研究結(jié)論與展望

（一）研究結(jié)論

數(shù)據(jù)分析表明，三要素表現(xiàn)標(biāo)準(zhǔn)框架模型有較好適配度，是一個(gè)有機(jī)整體，并非“水果拼盤”架構(gòu)，而各個(gè)要素之間的內(nèi)在一致性有利于用戶多渠道解讀表現(xiàn)標(biāo)準(zhǔn)。

（二）研究展望

上述研究更多是指向框架本身是否成立，較少關(guān)注各要素的研究，加上研究樣本本身的限制，因此還需要在以下若干方面做進(jìn)一步探討。

第一，擴(kuò)大樣本數(shù)量與類型。這乃因?yàn)楸狙芯繕颖緮?shù)量只有500例，雖然對于結(jié)構(gòu)方程來說已基本足夠，但如果要做更廣泛外推，還需要更多樣本來驗(yàn)證。同時(shí)由于樣本類型僅局限于某省城比較好的三所學(xué)校，因此還需要在全國范圍選擇更多類型的樣本。

第二，深化認(rèn)知復(fù)雜度研究。本研究采用韋伯知識深度理論，雖然該理論已在美國20多個(gè)州得到廣泛應(yīng)用，但還需要結(jié)合我國具體學(xué)科認(rèn)識知復(fù)雜度分類進(jìn)行驗(yàn)證或調(diào)整。

第三，加強(qiáng)表現(xiàn)水平描述符研究。制訂描述符可能是最難的一個(gè)研究領(lǐng)域，描述符有什么特征、怎樣開發(fā)等等，都需要結(jié)合具體學(xué)科內(nèi)容標(biāo)準(zhǔn)開展實(shí)證研究。

[l]Mills,C.N.,＆Jaeger,R.M.Creating descriptions desired student achievement when setting performance standards[A].in Hansche,L.N.Meeting the requirements of Title I:Handbook for the development of performance standards[M].Washington,DC:U.S.Department of Education,1998:82.

[2][4]Alaska State Board Education&Early Development.Content and Performance Standards for Alaska Students[OB/EL].http://www.eed.state.ak.us/standards/pdf/standards.pdf.2005:119、138.

[3]Hansche,L.N.Meeting the requirements of Title I:Handbook for the development of performance standards.Washington,DC:U.S.Department of Education,1998:26.

[5]美國國家教育經(jīng)濟(jì)中心、匹茲堡大學(xué)著，上海市教育科學(xué)研究院組譯．美國初中學(xué)科能力表現(xiàn)標(biāo)準(zhǔn)[M].北京：人民教育出版社，2004:3-18.

[6]John S.Kendall,Susan E.Ryan,Amy T.Richardson.The systematic Identification ofPerformance Standards[R].http://www.mcrel.org/pdf/Standards/5041TG PerfStnds.pdf.2010-2-9.

[7]Karin K.Hess,Dennis Carlock,Ben Jones,and John R.Walkup.Cognitive Rigor:Blending the Strengths of Bloom’s Taxonomy and Webb’s Depth of knowledge to Enhance Classroom-level Processes[R].Education Resources Information Center publication Ed517804.

邵朝友/華東師范大學(xué)課程與教學(xué)研究所教育學(xué)博士生

（責(zé)任編輯：張 斌）