王佶旻 郭樹軍 黃理兵 黃偉

中國政府獎(jiǎng)學(xué)金本科來華留學(xué)生預(yù)科教育“基礎(chǔ)漢語考試”試卷設(shè)計(jì)與質(zhì)量分析

王佶旻 郭樹軍 黃理兵 黃偉

1 引言

預(yù)科，就是大學(xué)基礎(chǔ)預(yù)備課程，主要為那些不能滿足直接進(jìn)入大學(xué)本科學(xué)位課程學(xué)習(xí)要求的國際學(xué)生設(shè)置。由于一國的高中教育與另一國的高等教育在教育體系上存在較大的差別，高中畢業(yè)生一般不可直接進(jìn)入另一國的大學(xué)一年級進(jìn)行課程學(xué)習(xí)，因此高中畢業(yè)生通常需要先完成大學(xué)預(yù)備課程并通過考試后方可正式進(jìn)入另一國的大學(xué)一年級進(jìn)行課程學(xué)習(xí)。

為保證中國政府獎(jiǎng)學(xué)金本科來華留學(xué)生教育質(zhì)量、提高獎(jiǎng)學(xué)金使用效益，教育部自2010年9月1日起，對中國政府獎(jiǎng)學(xué)金本科來華留學(xué)生新生在進(jìn)入專業(yè)學(xué)習(xí)前開展預(yù)科教育。在預(yù)科教育中，語言教育是最重要的主干課程。預(yù)科學(xué)生往往是零起點(diǎn)的第二語言學(xué)習(xí)者，在預(yù)科教育中進(jìn)行集中的語言教學(xué)，能夠使他們在短時(shí)間內(nèi)掌握所在國的通用語，使他們能以該語言完成基本的日常生活交際，并且能以該語言開始大學(xué)的課程學(xué)習(xí)。

基礎(chǔ)漢語考試作為來華留學(xué)預(yù)科生結(jié)業(yè)考試的一部分，是一項(xiàng)具有專門用途的考試。預(yù)科結(jié)業(yè)考試以考核為主、選拔為輔。設(shè)計(jì)和實(shí)施預(yù)科結(jié)業(yè)考試的主要目的是檢驗(yàn)預(yù)科教學(xué)工作的成效，即檢驗(yàn)接受了一年預(yù)科教育的來華留學(xué)生是否具備了進(jìn)入中國高等院校相關(guān)專業(yè)進(jìn)行本科階段學(xué)習(xí)的基本條件。在明確了測驗(yàn)?zāi)康呐c目標(biāo)團(tuán)體后，我們設(shè)計(jì)了預(yù)科生基礎(chǔ)漢語考試的試卷結(jié)構(gòu)與題型，編制了試卷，并于2013年6月首次在全國七所預(yù)科學(xué)校進(jìn)行試測。

2 試卷設(shè)計(jì)理念與方案

2.1 設(shè)計(jì)理念

從測量理論的角度講，使用一個(gè)測驗(yàn)，首先要明確的就是測驗(yàn)的目的和目標(biāo)團(tuán)體（考生群體）。測驗(yàn)的有效性和測驗(yàn)的目的和目標(biāo)團(tuán)體緊密相關(guān)，為這個(gè)目的設(shè)計(jì)的測驗(yàn)，用于另一個(gè)目的時(shí)就不一定有效了。同樣，為一定目標(biāo)團(tuán)體設(shè)計(jì)的測驗(yàn)，用于其他目標(biāo)團(tuán)體時(shí)就會出現(xiàn)效度威脅。因此我們要根據(jù)教學(xué)或社會的實(shí)際需要，開發(fā)或使用測驗(yàn)。預(yù)科漢語考試是一種專門用途的語言測驗(yàn)，除了進(jìn)行基礎(chǔ)漢語學(xué)習(xí)外，預(yù)科生還要接受與未來專業(yè)相關(guān)的專業(yè)漢語學(xué)習(xí)。正由于這一點(diǎn)，我們可以在考試設(shè)計(jì)、考試實(shí)施、分?jǐn)?shù)解釋、選拔標(biāo)準(zhǔn)的制定等各項(xiàng)工作環(huán)節(jié)中貫徹預(yù)科教育的理念，體現(xiàn)對結(jié)業(yè)預(yù)科生語言知識和能力的基本要求，可以使預(yù)科綜合考試既體現(xiàn)各種語言水平測試的共同標(biāo)準(zhǔn)，又具有一定的個(gè)性化特征。

在基礎(chǔ)漢語考試的設(shè)計(jì)中，我們采用知識與能力并舉的原則，以分立式測驗(yàn)的方式考查知識，以綜合式測驗(yàn)的方式考查能力。

2.2 設(shè)計(jì)方案

“基礎(chǔ)漢語考試”的試卷結(jié)構(gòu)如圖1所示，共包括聽力與筆答兩部分、8個(gè)題型。試卷共81題（含作文），考試時(shí)間約120分鐘。其中聽力部分約30分鐘，筆答部分90分鐘。

聽力部分考查被試的漢語聽力理解能力，包括理解句子、理解對話和理解短文3種題型。這3個(gè)題型的聽力材料分別是簡單句、單回合對話、多回合對話或短文，文本長度由短到長，筆答部分含綜合閱讀、寫漢字和作文3小部分，其中綜合閱讀部分考查被試的漢語閱讀理解能力，分為理解詞語、完成句子和閱讀短文3種題型。各題型的考查目的和形式如下。

（1）理解句子

考查被試聽懂簡單漢語句子或詞語的能力?？疾閮?nèi)容多涉及被試的日常學(xué)習(xí)、工作和生活情景。

圖1 “基礎(chǔ)漢語考試”試卷結(jié)構(gòu)

考查形式：每道題都會聽到一句話，同時(shí)在試卷上看到A、B、C、D四個(gè)句子。這些句子里只有一個(gè)和聽到的那句話意思差不多，請把它選出來。

例題：

[聽]（女）他會彈鋼琴。

A.他生病了。

B.他正在北京。

C.他喜歡音樂。*①例題中，星號（*）表示正確答案。下同。

D.他是個(gè)學(xué)生。

（2）理解對話

考查被試對簡短漢語對話的聽力理解能力。

考查形式：每道題都會聽到兩個(gè)人的對話，然后另一個(gè)人會問一個(gè)問題。同時(shí)，會在試卷上看到A、B、C、D四個(gè)答案。請根據(jù)對話選擇唯一恰當(dāng)?shù)拇鸢浮?/p>

例題：

[聽]（男）這個(gè)菜真好吃！是你做的嗎？

[聽]（女）是我媽媽做的。

[聽]（問）關(guān)于這個(gè)菜，哪個(gè)說法是正確的？

A.是女士做的

B.味道很不錯(cuò)*

C.還沒有做好

D.男士不會做

（3）理解短文

考查被試以下幾方面的語言能力：判別主題、事件的類別、事件間的因果關(guān)系；判定場合、人物、態(tài)度；獲取關(guān)鍵點(diǎn)和重要細(xì)節(jié)；推定事件發(fā)生的順序及省略了的細(xì)節(jié)等。

考查形式：會聽到幾段短文或兩個(gè)人的對話，每段短文或?qū)υ捴?，還會聽到幾個(gè)問題，同時(shí)在試卷上看到A、B、C、D四個(gè)答案。請根據(jù)聽到的內(nèi)容選擇唯一恰當(dāng)?shù)拇鸢浮?/p>

例題：

[聽]（男）您好，我想取錢。

[聽]（女）請問您想取多少？

[聽]（男）一萬。

[聽]（女）請您輸入密碼。

[聽]（男）我記不清了，可以試試嗎？

[聽]（女）您可以試三次。

[聽]（問）對話發(fā)生在哪里？

A.郵局 B.銀行*

C.公司 D.商店

[聽]（問）男士遇到了什么問題？

A.丟了錢包

B.沒帶手機(jī)

C.找錯(cuò)地方

D.忘了密碼*

（4）理解詞語

考查被試的詞匯量。從預(yù)科教學(xué)詞匯大綱中隨機(jī)抽取擬考查的詞語，并以真實(shí)語句的形式呈現(xiàn)。

考查形式：每個(gè)句子中都有一個(gè)畫線的詞語，下面A、B、C、D四個(gè)答案中只有一個(gè)跟這個(gè)詞語的意思差不多，請把它找出來。

例題：

阿明的父親在學(xué)校教書。

A.爸爸* B.叔叔

C.哥哥 D.弟弟

（5）完成句子

考查學(xué)習(xí)者對漢語基本語法手段（虛詞和語序）的掌握情況。

考查形式：每個(gè)句子都有一個(gè)或兩個(gè)空兒，下面A、B、C、D四個(gè)答案中只有一個(gè)可以正確地完成這個(gè)句子，請把它找出來。

例題：

天熱了。

A.下來 B.過來

C.起來* D.出來

（6）閱讀短文

綜合考查被試的閱讀理解能力，具體包括7個(gè)方面：概括材料的中心思想、段落大意；理解材料各部分之間的篇章關(guān)系（時(shí)間空間和邏輯關(guān)系）、概括文章的結(jié)構(gòu)；了解材料的主要事實(shí)和關(guān)鍵信息；跨越詞匯障礙、查找所需的細(xì)節(jié)；根據(jù)材料進(jìn)行推斷和預(yù)測；領(lǐng)會作者的觀點(diǎn)、意圖和態(tài)度；領(lǐng)悟文章的風(fēng)格和情感基調(diào)。

（7）寫漢字

考查被試根據(jù)漢語拼音、偏旁部首和上下文提示等信息書寫漢字的能力。

考查形式：根據(jù)句子的意思，按照給出的偏旁和拼音，在答題紙上寫出正確的漢字。

例題：

（8）作文

考查書面敘述一件事情或簡單說明一個(gè)問題的能力。作文題目的考查形式有命題作文和看圖作文兩種。命題作文指考生按照給定的題目完成作文?？磮D作文指考生按照試卷上提供的圖畫完成作文，并且在寫作中用上給定的詞語。面向初、中級漢語水平被試的命題作文題目范圍有限，考生容易進(jìn)行充分準(zhǔn)備從而難以達(dá)到考查目的?？磮D作文可以避免此類情況，但是命題難度大、成本高。因此作文部分兩種題型交叉使用，在每次考試時(shí)選取上述兩種形式中的一種進(jìn)行命題。

命題作文的考查形式②看圖作文的考查形式及例題從略。：按照給出的題目在答題方格紙上寫一篇短文。要求：①全部使用漢字，書寫要清楚。答題紙上每個(gè)方格寫一個(gè)漢字，每個(gè)標(biāo)點(diǎn)用一個(gè)方格。②字?jǐn)?shù)不少于60字。③時(shí)間大約15分鐘。

例題從略。

2.3 分?jǐn)?shù)體系

“基礎(chǔ)漢語考試”的成績報(bào)告由兩部分分?jǐn)?shù)組成。

第一部分是原始分，包括上述八個(gè)題型的原始得分、聽力和筆答兩個(gè)分測驗(yàn)的得分，以及測驗(yàn)總分。上述8種題型中，前6種題型（1～70題）為客觀題，按照每題的分值直接評分。第7種即“寫漢字”部分（71～80題）為半客觀題，需要人工判定漢字書寫的準(zhǔn)確性。根據(jù)評分標(biāo)準(zhǔn)判為正確的得1.5分，否則得0分。第8種題型即“作文”題根據(jù)評分標(biāo)準(zhǔn)給分，分?jǐn)?shù)為0～15分，其中0～3分為最低檔（E檔），4～6分為D檔，7～9分為C檔，10～12分為B檔，13～15分為A檔。

第二部分是導(dǎo)出分。與原始分相比，導(dǎo)出分?jǐn)?shù)能夠更加科學(xué)、準(zhǔn)確地解釋分?jǐn)?shù)。導(dǎo)出分?jǐn)?shù)能夠表明考生在團(tuán)體中的相對位置，并且能夠?qū)忌诓煌瑴y驗(yàn)（如漢語課或?qū)I(yè)課）上的成績進(jìn)行比較與合成?！盎A(chǔ)漢語考試”采用了以標(biāo)準(zhǔn)分?jǐn)?shù)（Z分?jǐn)?shù)）為基礎(chǔ)的導(dǎo)出分。關(guān)于導(dǎo)出分?jǐn)?shù)的意義可以理解為：對于每位考生，我們首先計(jì)算出Z分?jǐn)?shù)，然后以Y=80+15Z的線性轉(zhuǎn)換方式得到一個(gè)形式為整數(shù)的導(dǎo)出分?jǐn)?shù)，該導(dǎo)出分?jǐn)?shù)范圍為0～100分。比如某考生原始總分為80分，經(jīng)計(jì)算，他（她）的Z分?jǐn)?shù)為-1.36，導(dǎo)出分?jǐn)?shù)為60分。這個(gè)60分是一個(gè)比原始分更具解釋力的分?jǐn)?shù)，它既反映出考生在本次基礎(chǔ)漢語考試上的表現(xiàn)和相對位置，也能夠與其他課程考試的導(dǎo)出分?jǐn)?shù)進(jìn)行比較或組合。

關(guān)于合格線：根據(jù)本次考試的性質(zhì)與難度，我們建議合格線定為導(dǎo)出分?jǐn)?shù)60分。根據(jù)這條合格線，本次考試中，有89.73%的考生成績合格。

3 試卷質(zhì)量分析

3.1 試卷整體質(zhì)量

2013年6月下旬，7所高校的993名預(yù)科生參加了“基礎(chǔ)漢語考試”。此次考試的試卷質(zhì)量數(shù)據(jù)如表1所示。試卷難度為0.85，說明試卷整體比較容易。這個(gè)難易度符合該考試的特點(diǎn)與性質(zhì)。預(yù)科結(jié)業(yè)考試不是一項(xiàng)選拔性的考試，而是對預(yù)科教育質(zhì)量和學(xué)生學(xué)習(xí)狀況的評估。試卷整體區(qū)分度為0.39，達(dá)到了比較高的水平。以總分120分計(jì)，平均分為100.41分，說明了這份試卷整體上比較容易。這一結(jié)論從偏態(tài)數(shù)據(jù)為-1.47也能夠得出。實(shí)考成績的負(fù)偏態(tài)分布恰好符合先前提到的設(shè)計(jì)初衷。此份試卷的信度系數(shù)（α系數(shù)）為0.97，在語言測驗(yàn)中屬于相當(dāng)高的水平。一般來說，試卷題目數(shù)量越多，信度系數(shù)就越大。然而，此份試卷只有80個(gè)題目，卻也能獲得很高的信度值，說明試卷質(zhì)量非常好。點(diǎn)雙列相關(guān)系數(shù)大于0.20是判定題目合格的一個(gè)常用標(biāo)準(zhǔn)，按此標(biāo)準(zhǔn)，此次“基礎(chǔ)漢語考試”的題目合格率為94%?；谏鲜龇治觯梢哉J(rèn)為，這份“基礎(chǔ)漢語考試”試卷具有非常高的質(zhì)量水平。

3.2 各題型難度與區(qū)分度

圖2呈現(xiàn)了各題型（除作文外）難度的比較情況。從中可以看出，聽力部分的三個(gè)題型，隨著聽力文本長度與復(fù)雜程度的增加，題目難度也在增加；閱讀理解部分，“完成句子”難度最大，考查綜合閱讀能力的“閱讀短文”難度也比較高；“寫漢字”題型，由于題目中給出了字音、形（部分結(jié)構(gòu)）和語境，相對來說比較容易。

各題型區(qū)分度的比較情況如圖3所示?？陀^題部分（前六種題型）的區(qū)分度基本上保持在一個(gè)大致相當(dāng)?shù)乃?，且這個(gè)區(qū)分度水平是相當(dāng)不錯(cuò)的?！皩憹h字”是半主觀題目，不涉及猜測度，因而其區(qū)分度顯得略高。

3.3 作文評分

我們制定了“基礎(chǔ)漢語考試”中作文的評分標(biāo)準(zhǔn)（見表2），共分為5檔。每份作文由2名經(jīng)過訓(xùn)練的評分員進(jìn)行獨(dú)立評分。若兩名評分員評分差異不大于3分，則取兩名評分員的平均分；如果差異大于3分，則由第三名評分員（通常是專家評分員）獨(dú)立給出最終分?jǐn)?shù)。

按照上述評分標(biāo)準(zhǔn)，我們對此次考試的作文進(jìn)行評分的結(jié)果如表3所示，平均分接近12分，主要分?jǐn)?shù)據(jù)分布在第4檔和第5檔，說明考生對于此次考試的作文題目比較熟悉且能夠?qū)懗鲆欢ㄋ降膬?nèi)容。

表1 “基礎(chǔ)漢語考試”試卷質(zhì)量分析

圖2 “基礎(chǔ)漢語考試”各題型難度比較

圖3 “基礎(chǔ)漢語考試”各題型區(qū)分度比較

表2 “基礎(chǔ)漢語考試”作文評分標(biāo)準(zhǔn)

3.4 考生成績分布

根據(jù)評分標(biāo)準(zhǔn)和分?jǐn)?shù)體系，我們計(jì)算了此次“基礎(chǔ)漢語考試”考生成績的分布情況。如表4與圖4所示，考生成績整體上呈負(fù)偏態(tài)分布，平均分為100.41分（原始總分）。以導(dǎo)出分表示，平均分為79.87分。根據(jù)建議的合格線（導(dǎo)出分為60分），此次考試共有89.73%的考生通過了考核。從數(shù)據(jù)與圖中可以看出，位于中高分?jǐn)?shù)段的考生數(shù)量居多，位于低分段考生數(shù)量很少。這再次說明該考試很好地滿足了研發(fā)需求。

4 結(jié)語

無論是從總體上，還是從每個(gè)題型來看，我們研發(fā)和實(shí)施的“基礎(chǔ)漢語考試”較好地滿足了中國政府獎(jiǎng)學(xué)金本科來華留學(xué)預(yù)科教育基礎(chǔ)漢語教學(xué)成果的考核與對學(xué)生漢語水平的評測需求。這一方面得益于有關(guān)部門和領(lǐng)導(dǎo)對此項(xiàng)工作的重視與大力支持，另一方面得益于與相關(guān)高校教學(xué)機(jī)構(gòu)的充分溝通與精誠合作。我們從實(shí)際需求出發(fā)，科學(xué)、高效地完成了“基礎(chǔ)漢語考試”的研發(fā)工作。接下來，我們將開展以下幾個(gè)方面的工作。第一，為各高校和每一名考生提供診斷性評價(jià)報(bào)告。第二，建立本科來華留學(xué)生預(yù)科教育標(biāo)準(zhǔn)體系，在標(biāo)準(zhǔn)框架下研發(fā)教材和考試。第三，開展“基礎(chǔ)漢語考試”等預(yù)科結(jié)業(yè)考試的效度研究，特別是預(yù)測效度研究，從而了解學(xué)生是否能夠適應(yīng)入系學(xué)習(xí)。

表3 “基礎(chǔ)漢語考試”作文成績分布

表4 “基礎(chǔ)漢語考試”考生成績分布

圖4 “基礎(chǔ)漢語考試”考生成績分布

[1]國家對外漢語教學(xué)領(lǐng)導(dǎo)小組辦公室漢語水平考試部.漢語水平詞匯及漢字等級大綱[M].北京：北京語言學(xué)院出版社，1992.

[2]國家對外漢語教學(xué)領(lǐng)導(dǎo)小組辦公室漢語水平考試部.漢語水平等級標(biāo)準(zhǔn)與語法等級大綱[M].北京：高等教育出版社，1996.

[3]Bachman,L.F.&Palmer,A.S.Language Testing in Practice[M].Oxford University Press，1996.

Design and Quality Analysis on Chinese Proficiency Test(Basic)for the Preparatory Education of Undergraduate Foreign Students Founded by the Chinese Government Scholarship

WANG Jimin,GUO Shujun,HUANG Libing and HUANG Wei

As a part of the final exams of international students studying in China taken,Chinese proficiency test（Basic）is an exam specialized in particular function.Chinese proficiency test（basis）simultaneously employs the principle of knowledge and competence,testing the knowledge through discrete-test,and testing the competence through integrative test.This test includes two parts:listening and writing,and 8 kinds of topics.The score report is composed of original score and export score.There are 993 international students from 7 universities taking the exam in 2013.The data analysis demonstrates that this test is of high quality,meeting the need of the achievement evaluation of international students studying in China in preparatory education demanded by the Chinese government scholarship department and the evaluation of students’Chinese level.

Preparatory Education；Chinese Proficiency；Test Reliability

本研究得到國家社科基金青年項(xiàng)目(12CYY028)和北京市哲學(xué)社會科學(xué)規(guī)劃項(xiàng)目（13WYB014）的支持。

王佶旻，女，北京語言大學(xué)漢語考試與教育測量研究所，所長，研究員，博士（北京 100083）

郭樹軍，男，北京語言大學(xué)漢語考試與教育測量研究所，副研究員（北京 100083）

黃理兵，男，北京語言大學(xué)漢語考試與教育測量研究所，副研究員，博士（北京 100083）

黃 偉，男，北京語言大學(xué)漢語考試與教育測量研究所，助理研究員，博士（北京 100083）