胡根林　趙夢雷

?

一致性研究：實現(xiàn)基于標準的評價
——2015年語文教育論著評析之四

胡根林趙夢雷

【評議論著】劉晶晶《小學語文閱讀能力標準與學業(yè)評價一致性研究》，華中師范大學博士論文，2015年。

【內容提要】使用美國課程實施調査模式（簡稱SEC）對近年來小學語文閱讀試題的內部結構進行一致性分析，同時從“標準驅動”的國家或地區(qū)語文課程標準與國際評價項目框架的分析中得到啟示，嘗試建構了我國小學語文第三學段閱讀能力表現(xiàn)標準，以探求語文閱讀能力標準和學業(yè)評價的一致性，推動基于語文課程標準的評價。

近年來，“基于標準的教學與評價”成為一種世界趨勢。國內學界以崔允漷先生等為代表，借鑒國際上這個領域的研究，并立足本土實際不斷探索，取得了豐碩的成果。

眾所周知，語文課程標準規(guī)定了語文課程的性質、目標、內容框架，提出教學和評價建議，體現(xiàn)了國家對不同學段的學生在語文知識與技能、過程與方法、情感態(tài)度與價值觀等方面的基本要求，它是語文教材編寫、教學和評價的基本依據(jù)?；跇藴实恼Z文學業(yè)評價，其基本目的是考査學生經(jīng)過一段時間學習后，“應知”“應會”哪些內容，即學生到底掌握了哪些語文課程標準所規(guī)定需要掌握的知識、技能、方法以及掌握的程度到底如何。要實現(xiàn)基于語文課程標準的評價，就要立足于語文課程標準和學業(yè)評價的一致性，也就是兩者匹配程度的研究。一致性是基于標準評價的核心。目前在語文學界，關于這個論題的研究鳳毛麟角，鮮有涉及。本文試圖通過對劉晶晶《小學語文閱讀能力標準與學業(yè)評價一致性研究》一文的評議，對這方面研究作些介紹，以推動語文學科領域更多教師基于課標開展教學與評價。

一、何為“一致性”？

《小學語文閱讀能力標準與學業(yè)評價一致性研究》一文在文獻綜述中提到國際和國內學者關于“一致性”的研究情況，也有專章（第二章）對這個概念進行哲學基礎、心理學基礎等多方面的理論闡釋。

所謂“一致”，指的是“調整一致”，英文文獻里的名詞形式是“alignment”，動詞形式是“align”，本意是指兩個或若干個事物之間的匹配。教育評價領域中的一致性研究始于布盧姆教育目標分類，但是從20世紀80年代開始，隨著評價理念的發(fā)展，人們對一致性進行了更深入的研究，認為一致性的作用應該在于促進學生獲得更高水平的學業(yè)成就，其核心在于：課程標準是教學與評價的依據(jù)；教學與評價是為了實施課程標準；評價的內容就是所教的內容。三者之間相互促進實現(xiàn)高質量的一致性，滿足學生獲得高質量的學業(yè)成就。

1.實現(xiàn)一致性的起點——課程標準

標準是客觀事物所具有何種意義的一種參照物，“標”是技術，即投射器；“準”是效益，是靶心?！皹恕薄皽省焙嫌?，具有行為和結果一致性的內涵。課程標準是課程的嚴謹性和考試難度的質量與卓越的基準。某一學科的課程標準規(guī)定了該學科的課程性質、課程目標、內容目標、實施建議，是教學與評估的指導性文件。課程標準不僅僅包括學習領域，即規(guī)定學生學習后“應知”和“應會”的內容，即內容標準，還應該包括規(guī)定學生在某領域應達到的水平，即表現(xiàn)標準。表現(xiàn)標準是課程標準的內在指標，其作用是提供一個基本的、有意義的關于內容標準與學業(yè)表現(xiàn)是否一致的反饋。也就是說，內容標準是指學生應該知道什么和能做什么，而表現(xiàn)標準指學生掌握內容標準的程度和質量，它需要對學生掌握知識與技能的成就水平進行界定。可以說，表現(xiàn)標準是內容標準的抽象化和具體化，是對內容標準深度的細致描述。如果說內容標準是推動標準與評價一致性的指南針，那么表現(xiàn)標準是丈量標準與評價一致性關系的刻度尺。

2.實現(xiàn)基于一致性的途徑——基于標準的評價

基于標準的評價是學生學業(yè)成就評價與課程標準的一致性的核心。和傳統(tǒng)的評價相比，“基于標準的評價”的評價理念和評價手段都有區(qū)別，這可以從評價理念和評價技術兩個方面反映出來：（1）評價理念。傳統(tǒng)的評價強調的是目標，宗旨是通過對學校實踐教育目標程度的評價來診斷教學中存在的問題，以改善課程與教學，泰勒的“八年研究”的目標評價模式可為代表。而基于標準的評價，其價值取向從“目標”走向了“過程”，它把評價分為“為學習的評價”“對學習的評價”“作為學習的評價”三種類型，特別強調“作為學習的評價”。這種評價通過教師頻繁和持續(xù)提供指導、支持、模型的方式幫助學生調整學習，建立個人學習目標。功能上由側重甄別轉向側重發(fā)展，越來越強調評價是一個學習過程的有機組成，強調評價的真實性和情境性。（2）評價技術?；跇藴实脑u價，要求評價與標準調整一致，技術上要做到：首先，完成試題需要的知識范圍及其認知要求與內容標準的內容范圍及其認知要求一致；其次，完成試題覆蓋的內容領域和內容主題與內容標準的內容領域范圍一致；最后，評價所包含的內容和技能的比例與內容標準和表現(xiàn)標準調整一致。

二、“一致性”分析模式

研制一致性分析模式是國內外近年來基礎教育課程領域的重要課題。研究者們紛紛借助技術分析來保證評價與課程標準的一致性，《小學語文閱讀能力標準與學業(yè)評價一致性研究》對此就國外研究情況作了一些介紹。

1.一致性分析維度

最早開始進行一致性模式分析的是美國課程專家馬扎諾（Marzano），他提出一致性的內容有四個方面：（1）測試的內容是所有學生在各年級需要掌握的嗎？（2）所有學生都會進行標準技能的示范嗎？（3）測試是被分為簡單、中等、難的水平嗎？（4）測試有一套完整的關于深度和廣度的標尺嗎？

1999年，美國著名的課程專家、威斯康星州教育研究中心高級研究科學家諾曼L.韋伯（Norman L.Webb）經(jīng)過多年研究指出“一致性”就是課程期望與評價之間的契合度，并能引領整個課程系統(tǒng)為這個期望服務。在1999年、2002年、2005年、2007年的研究中，從最初12個標準中抽取與內容集中性相關的四個標準作為分析維度，形成了目前標準與評價一致性研究的最常用工具，稱之為韋伯模式。后來又出現(xiàn)了巴羅斯中心研究模式、2061計劃項目、成就公司模式等。雖然不同的機構或學者在分析一致性時所關注的維度存在差異，但一般而言，主要關注四個方面的一致性，即知識種類一致性、知識深度一致性、知識廣度一致性和知識樣本平衡一致性。

2.一致性測量方法

《小學語文閱讀能力標準與學業(yè)評價一致性研究》一文簡要介紹了雙向細目表在一致性測量中的作用，其重點是分析美國學者安德魯·帕特（Amiirew Porter）等人開發(fā)的課程實施調査模式（簡稱SEC模式）的一整套方法及程序。

SEC模式的核心內容涉及三個“一致性分析”。第一是內容一致性分析。該方法強調二維分類，分為內容維度和認知維度。內容分主題內容和亞類主題內容，如英語語言藝術與閱讀主題可分音素意識、注音、詞匯、文本和書寫特點、流暢性、理解、邏輯推理、作者加工技術、寫作過程、口頭和書面表達原理、寫作應用、語言學習、聽和看、口語和表達共14個通用領域，這14個領域又被分為163個亞類主題。第二是深度一致性分析。認知維度是深度一致性分析的重要依據(jù)。認知維度包括五個層次，以英語語言藝術和閱讀為例，分為記憶，回憶，執(zhí)行程序，解釋和創(chuàng)造五個層次。這五個層次根據(jù)學科特點還可分若干亞類層次。第三是平衡一致性分析。就是按二維矩陣的方式對任意兩個文檔（內容標準、評估、課程材料、教學實踐）進行比較。研究者首先給所有文檔編碼，然后將每個目標或測試項目放置到定義了一個或多個亞類主題和認知需求亞類層次維度中，最后將這些數(shù)據(jù)轉換成比例平均數(shù)再進行內容分析。由此產(chǎn)生的矩陣比例可以用來計算一致性指數(shù)：

xi和yi分別代表亞類主題和亞層次所呈現(xiàn)的比例。該指數(shù)的值可以被認為是在兩個共同的文檔內容之間的比例，指數(shù)范圍從0到1，1表示完美對齊（即有100%的內容共同之處）。

研究者用上述測量方法對美國州標準和共同核心州立標準進行一致性分析，提出共同核心州立標準數(shù)學學科的校準度為0.22，英語語言藝術與閱讀學科的校準度為0.27，并分析了兩者在內容維度和認知維度存在的差異。一線教師普遍感覺到，研究者提供的報告使他們更明確本學科哪些內容應該被教授，教授到什么程度，哪些認知需求和水平應該被強調，強調到程度。

表1　PISA、PIRLS、NAEP測評框架中的“概念框架”

三、基于一致性的國際閱讀能力學業(yè)評價基本框架

《小學語文閱讀能力標準與學業(yè)評價一致性研究》一文從國際視野出發(fā)，詳細介紹了國際學生學業(yè)成就評價項目（簡稱PISA）、國際閱讀能力進展研究項目（簡稱PIRLS）、全美教育進展評價（簡稱NAEP）、美國評價聯(lián)盟（簡稱PARCC與SBAC）四種閱讀能力學業(yè)評價框架。這里特別介紹前三種。

PISA、PIRLS、NAEP三個國際閱讀測評項目基本都是從這幾個要素展開的：閱讀的目的、閱讀的情境或環(huán)境、文本類型、認知目標或過程。當然，對這幾個要素的理解又以對閱讀素養(yǎng)概念清晰、明確的理解為基礎。PISA、PIRLS、NAEP三個評價項目都是在對閱讀素養(yǎng)概念進行了條分縷析之后，再對閱讀的目的、閱讀的情境或環(huán)境、文本類型、認知目標或過程這幾個要素展開進一步探究。現(xiàn)將三個“評價框架”中共性的概念框架要素及各個項目對每個要素的理解進行簡單梳理，如表1所示。

用非常明確的語言清晰地表達所觀察或測量的內容，是可靠的評價設計和說明面對的第一個難題。國際評價項目評價框架的設計要能充分反映評價的目的和方式及內容之間的關系。從表1可以看出，上述三個評價項目在閱讀能力學業(yè)評價框架的設計都緊密圍繞閱讀素養(yǎng)即閱讀目的展開，其中包括閱讀文本、閱讀認知過程、閱讀情境三個維度的設計。

四、基于一致性的我國閱讀能力標準及評價方案的設計

《小學語文閱讀能力標準與學業(yè)評價一致性研究》一文，大量介紹了國際上關于一致性研究以及基于一致性的國際閱讀能力學業(yè)評價框架等文獻。頗為難得的是，劉晶晶博士還基于國際閱讀能力學業(yè)評價框架的共性要素和我國語文課程標準的特點，進行了我國閱讀能力標準和評價方案的嘗試性設計。

她根據(jù)《語文課程標準（2011版）》中第三學段的內容標準建構表現(xiàn)標準，并提供學業(yè)測查的閱讀試題及學習情態(tài)考察的參考樣例。她將閱讀能力的表現(xiàn)標準的分類分為閱讀與語言、閱讀與文本、閱讀基本技能、閱讀情志四類。閱讀與語言包括：（1）字與詞（2）句與段（3）篇章；閱讀與文本包括：（1）童話、寓言、故事（2）兒歌、兒童詩（3）詩文（4）記敘文（5）說明文（6）非連續(xù)性文本；閱讀基本技能包括：（1）朗讀（2）默讀（3）略讀（4）標點的使用（5）字典的使用（6）電子工具的使用；閱讀情志包括：（1）閱讀情感（2）閱讀態(tài)度（3）閱讀習慣。按一致性構成要素，將表現(xiàn)標準分為表現(xiàn)水平、表現(xiàn)描述、呈現(xiàn)方式三個部分。閱讀表現(xiàn)水平分為閱讀理解能力、閱讀鑒賞能力、閱讀創(chuàng)造能力，即閱讀的初級水平、中級水平、高級水平；表現(xiàn)描述是根據(jù)閱讀能力分類對《語文課程標準》中第三學段的內容標準部分的進一步詳細解釋；呈現(xiàn)方式是指學生學習結果的展示方式，也是教學中常見的任務方式，如“閱讀與文本”中，設計一份調查問卷以搜集信息。

為了實現(xiàn)閱讀能力學業(yè)評價與標準的一致性，作者根據(jù)閱讀能力框架中認知維度的閱讀理解能力、閱讀欣賞能力、閱讀創(chuàng)造能力設計出閱讀能力學業(yè)評價框架，其中包括測評內容、測評方式、素材來源。除此之外，為了全面考察學生的學習情態(tài)，還設計了閱讀能力情態(tài)評價表，其中包括閱讀情感評價、閱讀態(tài)度評價、閱讀習慣評價。

這里我們姑且不論這個評價框架是否存在缺漏，其嚴謹性和科學性是否經(jīng)得起檢驗，也不論其參考樣例和各種評價表是否真正體現(xiàn)了閱讀和閱讀評價的要義，單從這項工作的創(chuàng)新性上來看，目前還沒有哪一位研究者這樣系統(tǒng)地梳理和解構既有課程標準，綜合并建構形成閱讀能力表現(xiàn)標準以及對應的評價方案。這項工作的開展，不僅對在課程標準理解上形成一致性具有重要意義，而且有助于在學業(yè)測評，包括命題、解題、試題評價過程中貫徹這種一致性要求，甚至引導著語文課堂教學在目標確立上形成與課程標準一致性要求的意識。

五、小結

一致性研究對我國語文學術界而言是個前沿課題。能力發(fā)展的評價問題一直是我國基礎教育改革中的瓶頸問題，如何對學生的語文閱讀能力發(fā)展狀況進行評價，如何結合學生能力與語文閱讀素養(yǎng)進行檢測，如何深化課程與教學評價理論與方法的研究，目前我們明顯缺乏科學有效的理論支撐和技術支持。劉晶晶博士力圖解析語文閱讀能力表現(xiàn)的內在結構，借鑒國際閱讀能力的標準及評價框架，嘗試建構語文閱讀能力表現(xiàn)的分層指標體系，對學生語文閱讀能力表現(xiàn)進行觀察和評價提供了理論支撐與實踐指導。她的這項研究為我們實現(xiàn)語文學業(yè)評價與課程標準一致性探索打開了一扇窗戶，更多的人將從中看到我們語文學科在學業(yè)評價和課程標準方面存在的錯位，知道如何解決這方面的問題，從而走上基于課程標準的評價與教學之途，不斷提高學生的語文學業(yè)質量。

[作者通聯(lián)：胡根林，上海浦東教育發(fā)展研究院；趙夢雷，新疆喀什大學教育科學學院]