中国政府奖学金本科来华留学生预科教育“基础汉语考试”试卷设计与质量分析

王佶旻 郭树军 黄理兵 黄伟

中国政府奖学金本科来华留学生预科教育“基础汉语考试”试卷设计与质量分析

王佶旻 郭树军 黄理兵 黄伟

1 引言

预科，就是大学基础预备课程，主要为那些不能满足直接进入大学本科学位课程学习要求的国际学生设置。由于一国的高中教育与另一国的高等教育在教育体系上存在较大的差别，高中毕业生一般不可直接进入另一国的大学一年级进行课程学习，因此高中毕业生通常需要先完成大学预备课程并通过考试后方可正式进入另一国的大学一年级进行课程学习。

为保证中国政府奖学金本科来华留学生教育质量、提高奖学金使用效益，教育部自2010年9月1日起，对中国政府奖学金本科来华留学生新生在进入专业学习前开展预科教育。在预科教育中，语言教育是最重要的主干课程。预科学生往往是零起点的第二语言学习者，在预科教育中进行集中的语言教学，能够使他们在短时间内掌握所在国的通用语，使他们能以该语言完成基本的日常生活交际，并且能以该语言开始大学的课程学习。

基础汉语考试作为来华留学预科生结业考试的一部分，是一项具有专门用途的考试。预科结业考试以考核为主、选拔为辅。设计和实施预科结业考试的主要目的是检验预科教学工作的成效，即检验接受了一年预科教育的来华留学生是否具备了进入中国高等院校相关专业进行本科阶段学习的基本条件。在明确了测验目的与目标团体后，我们设计了预科生基础汉语考试的试卷结构与题型，编制了试卷，并于2013年6月首次在全国七所预科学校进行试测。

2 试卷设计理念与方案

2.1 设计理念

从测量理论的角度讲，使用一个测验，首先要明确的就是测验的目的和目标团体（考生群体）。测验的有效性和测验的目的和目标团体紧密相关，为这个目的设计的测验，用于另一个目的时就不一定有效了。同样，为一定目标团体设计的测验，用于其他目标团体时就会出现效度威胁。因此我们要根据教学或社会的实际需要，开发或使用测验。预科汉语考试是一种专门用途的语言测验，除了进行基础汉语学习外，预科生还要接受与未来专业相关的专业汉语学习。正由于这一点，我们可以在考试设计、考试实施、分数解释、选拔标准的制定等各项工作环节中贯彻预科教育的理念，体现对结业预科生语言知识和能力的基本要求，可以使预科综合考试既体现各种语言水平测试的共同标准，又具有一定的个性化特征。

在基础汉语考试的设计中，我们采用知识与能力并举的原则，以分立式测验的方式考查知识，以综合式测验的方式考查能力。

2.2 设计方案

“基础汉语考试”的试卷结构如图1所示，共包括听力与笔答两部分、8个题型。试卷共81题（含作文），考试时间约120分钟。其中听力部分约30分钟，笔答部分90分钟。

听力部分考查被试的汉语听力理解能力，包括理解句子、理解对话和理解短文3种题型。这3个题型的听力材料分别是简单句、单回合对话、多回合对话或短文，文本长度由短到长，笔答部分含综合阅读、写汉字和作文3小部分，其中综合阅读部分考查被试的汉语阅读理解能力，分为理解词语、完成句子和阅读短文3种题型。各题型的考查目的和形式如下。

（1）理解句子

考查被试听懂简单汉语句子或词语的能力。考查内容多涉及被试的日常学习、工作和生活情景。

图1 “基础汉语考试”试卷结构

考查形式：每道题都会听到一句话，同时在试卷上看到A、B、C、D四个句子。这些句子里只有一个和听到的那句话意思差不多，请把它选出来。

例题：

[听]（女）他会弹钢琴。

A.他生病了。

B.他正在北京。

C.他喜欢音乐。*①例题中，星号（*）表示正确答案。下同。

D.他是个学生。

（2）理解对话

考查被试对简短汉语对话的听力理解能力。

考查形式：每道题都会听到两个人的对话，然后另一个人会问一个问题。同时，会在试卷上看到A、B、C、D四个答案。请根据对话选择唯一恰当的答案。

例题：

[听]（男）这个菜真好吃！是你做的吗？

[听]（女）是我妈妈做的。

[听]（问）关于这个菜，哪个说法是正确的？

A.是女士做的

B.味道很不错*

C.还没有做好

D.男士不会做

（3）理解短文

考查被试以下几方面的语言能力：判别主题、事件的类别、事件间的因果关系；判定场合、人物、态度；获取关键点和重要细节；推定事件发生的顺序及省略了的细节等。

考查形式：会听到几段短文或两个人的对话，每段短文或对话之后，还会听到几个问题，同时在试卷上看到A、B、C、D四个答案。请根据听到的内容选择唯一恰当的答案。

例题：

[听]（男）您好，我想取钱。

[听]（女）请问您想取多少？

[听]（男）一万。

[听]（女）请您输入密码。

[听]（男）我记不清了，可以试试吗？

[听]（女）您可以试三次。

[听]（问）对话发生在哪里？

A.邮局 B.银行*

C.公司 D.商店

[听]（问）男士遇到了什么问题？

A.丢了钱包

B.没带手机

C.找错地方

D.忘了密码*

（4）理解词语

考查被试的词汇量。从预科教学词汇大纲中随机抽取拟考查的词语，并以真实语句的形式呈现。

考查形式：每个句子中都有一个画线的词语，下面A、B、C、D四个答案中只有一个跟这个词语的意思差不多，请把它找出来。

例题：

阿明的父亲在学校教书。

A.爸爸* B.叔叔

C.哥哥 D.弟弟

（5）完成句子

考查学习者对汉语基本语法手段（虚词和语序）的掌握情况。

考查形式：每个句子都有一个或两个空儿，下面A、B、C、D四个答案中只有一个可以正确地完成这个句子，请把它找出来。

例题：

天热了。

A.下来 B.过来

C.起来* D.出来

（6）阅读短文

综合考查被试的阅读理解能力，具体包括7个方面：概括材料的中心思想、段落大意；理解材料各部分之间的篇章关系（时间空间和逻辑关系）、概括文章的结构；了解材料的主要事实和关键信息；跨越词汇障碍、查找所需的细节；根据材料进行推断和预测；领会作者的观点、意图和态度；领悟文章的风格和情感基调。

（7）写汉字

考查被试根据汉语拼音、偏旁部首和上下文提示等信息书写汉字的能力。

考查形式：根据句子的意思，按照给出的偏旁和拼音，在答题纸上写出正确的汉字。

例题：

（8）作文

考查书面叙述一件事情或简单说明一个问题的能力。作文题目的考查形式有命题作文和看图作文两种。命题作文指考生按照给定的题目完成作文。看图作文指考生按照试卷上提供的图画完成作文，并且在写作中用上给定的词语。面向初、中级汉语水平被试的命题作文题目范围有限，考生容易进行充分准备从而难以达到考查目的。看图作文可以避免此类情况，但是命题难度大、成本高。因此作文部分两种题型交叉使用，在每次考试时选取上述两种形式中的一种进行命题。

命题作文的考查形式②看图作文的考查形式及例题从略。：按照给出的题目在答题方格纸上写一篇短文。要求：①全部使用汉字，书写要清楚。答题纸上每个方格写一个汉字，每个标点用一个方格。②字数不少于60字。③时间大约15分钟。

例题从略。

2.3 分数体系

“基础汉语考试”的成绩报告由两部分分数组成。

第一部分是原始分，包括上述八个题型的原始得分、听力和笔答两个分测验的得分，以及测验总分。上述8种题型中，前6种题型（1～70题）为客观题，按照每题的分值直接评分。第7种即“写汉字”部分（71～80题）为半客观题，需要人工判定汉字书写的准确性。根据评分标准判为正确的得1.5分，否则得0分。第8种题型即“作文”题根据评分标准给分，分数为0～15分，其中0～3分为最低档（E档），4～6分为D档，7～9分为C档，10～12分为B档，13～15分为A档。

第二部分是导出分。与原始分相比，导出分数能够更加科学、准确地解释分数。导出分数能够表明考生在团体中的相对位置，并且能够对考生在不同测验（如汉语课或专业课）上的成绩进行比较与合成。“基础汉语考试”采用了以标准分数（Z分数）为基础的导出分。关于导出分数的意义可以理解为：对于每位考生，我们首先计算出Z分数，然后以Y=80+15Z的线性转换方式得到一个形式为整数的导出分数，该导出分数范围为0～100分。比如某考生原始总分为80分，经计算，他（她）的Z分数为-1.36，导出分数为60分。这个60分是一个比原始分更具解释力的分数，它既反映出考生在本次基础汉语考试上的表现和相对位置，也能够与其他课程考试的导出分数进行比较或组合。

关于合格线：根据本次考试的性质与难度，我们建议合格线定为导出分数60分。根据这条合格线，本次考试中，有89.73%的考生成绩合格。

3 试卷质量分析

3.1 试卷整体质量

2013年6月下旬，7所高校的993名预科生参加了“基础汉语考试”。此次考试的试卷质量数据如表1所示。试卷难度为0.85，说明试卷整体比较容易。这个难易度符合该考试的特点与性质。预科结业考试不是一项选拔性的考试，而是对预科教育质量和学生学习状况的评估。试卷整体区分度为0.39，达到了比较高的水平。以总分120分计，平均分为100.41分，说明了这份试卷整体上比较容易。这一结论从偏态数据为-1.47也能够得出。实考成绩的负偏态分布恰好符合先前提到的设计初衷。此份试卷的信度系数（α系数）为0.97，在语言测验中属于相当高的水平。一般来说，试卷题目数量越多，信度系数就越大。然而，此份试卷只有80个题目，却也能获得很高的信度值，说明试卷质量非常好。点双列相关系数大于0.20是判定题目合格的一个常用标准，按此标准，此次“基础汉语考试”的题目合格率为94%。基于上述分析，可以认为，这份“基础汉语考试”试卷具有非常高的质量水平。

3.2 各题型难度与区分度

图2呈现了各题型（除作文外）难度的比较情况。从中可以看出，听力部分的三个题型，随着听力文本长度与复杂程度的增加，题目难度也在增加；阅读理解部分，“完成句子”难度最大，考查综合阅读能力的“阅读短文”难度也比较高；“写汉字”题型，由于题目中给出了字音、形（部分结构）和语境，相对来说比较容易。

各题型区分度的比较情况如图3所示。客观题部分（前六种题型）的区分度基本上保持在一个大致相当的水平，且这个区分度水平是相当不错的。“写汉字”是半主观题目，不涉及猜测度，因而其区分度显得略高。

3.3 作文评分

我们制定了“基础汉语考试”中作文的评分标准（见表2），共分为5档。每份作文由2名经过训练的评分员进行独立评分。若两名评分员评分差异不大于3分，则取两名评分员的平均分；如果差异大于3分，则由第三名评分员（通常是专家评分员）独立给出最终分数。

按照上述评分标准，我们对此次考试的作文进行评分的结果如表3所示，平均分接近12分，主要分数据分布在第4档和第5档，说明考生对于此次考试的作文题目比较熟悉且能够写出一定水平的内容。

表1 “基础汉语考试”试卷质量分析

图2 “基础汉语考试”各题型难度比较

图3 “基础汉语考试”各题型区分度比较

表2 “基础汉语考试”作文评分标准

3.4 考生成绩分布

根据评分标准和分数体系，我们计算了此次“基础汉语考试”考生成绩的分布情况。如表4与图4所示，考生成绩整体上呈负偏态分布，平均分为100.41分（原始总分）。以导出分表示，平均分为79.87分。根据建议的合格线（导出分为60分），此次考试共有89.73%的考生通过了考核。从数据与图中可以看出，位于中高分数段的考生数量居多，位于低分段考生数量很少。这再次说明该考试很好地满足了研发需求。

4 结语

无论是从总体上，还是从每个题型来看，我们研发和实施的“基础汉语考试”较好地满足了中国政府奖学金本科来华留学预科教育基础汉语教学成果的考核与对学生汉语水平的评测需求。这一方面得益于有关部门和领导对此项工作的重视与大力支持，另一方面得益于与相关高校教学机构的充分沟通与精诚合作。我们从实际需求出发，科学、高效地完成了“基础汉语考试”的研发工作。接下来，我们将开展以下几个方面的工作。第一，为各高校和每一名考生提供诊断性评价报告。第二，建立本科来华留学生预科教育标准体系，在标准框架下研发教材和考试。第三，开展“基础汉语考试”等预科结业考试的效度研究，特别是预测效度研究，从而了解学生是否能够适应入系学习。

表3 “基础汉语考试”作文成绩分布

表4 “基础汉语考试”考生成绩分布

图4 “基础汉语考试”考生成绩分布

[1]国家对外汉语教学领导小组办公室汉语水平考试部.汉语水平词汇及汉字等级大纲[M].北京：北京语言学院出版社，1992.

[2]国家对外汉语教学领导小组办公室汉语水平考试部.汉语水平等级标准与语法等级大纲[M].北京：高等教育出版社，1996.

[3]Bachman,L.F.&Palmer,A.S.Language Testing in Practice[M].Oxford University Press，1996.

Design and Quality Analysis on Chinese Proficiency Test(Basic)for the Preparatory Education of Undergraduate Foreign Students Founded by the Chinese Government Scholarship

WANG Jimin,GUO Shujun,HUANG Libing and HUANG Wei

As a part of the final exams of international students studying in China taken,Chinese proficiency test（Basic）is an exam specialized in particular function.Chinese proficiency test（basis）simultaneously employs the principle of knowledge and competence,testing the knowledge through discrete-test,and testing the competence through integrative test.This test includes two parts:listening and writing,and 8 kinds of topics.The score report is composed of original score and export score.There are 993 international students from 7 universities taking the exam in 2013.The data analysis demonstrates that this test is of high quality,meeting the need of the achievement evaluation of international students studying in China in preparatory education demanded by the Chinese government scholarship department and the evaluation of students’Chinese level.

Preparatory Education；Chinese Proficiency；Test Reliability

本研究得到国家社科基金青年项目(12CYY028)和北京市哲学社会科学规划项目（13WYB014）的支持。

王佶旻，女，北京语言大学汉语考试与教育测量研究所，所长，研究员，博士（北京 100083）

郭树军，男，北京语言大学汉语考试与教育测量研究所，副研究员（北京 100083）

黄理兵，男，北京语言大学汉语考试与教育测量研究所，副研究员，博士（北京 100083）

黄 伟，男，北京语言大学汉语考试与教育测量研究所，助理研究员，博士（北京 100083）