高校英语专业四级考试质量考生问卷调查*

李传益

(湖北科技学院 外国语学院，湖北 咸宁 437100)

高校英语专业四级考试质量考生问卷调查*

李传益

(湖北科技学院 外国语学院，湖北 咸宁 437100)

本文对我校英语专业二至四年级的384名学生进行了一次TEM4质量问卷调查，内容涉及试卷难度、题目数量、区分度、效度以及与TEM4有关的考生自我评价。通过对调查问卷的统计分析，我们认为，考生对TEM4试卷总体和六个分测验的质量评价与我们的期望一致。

高校英语专业四级考试;信度;效度;问卷调查

作为应用语言学的分支，英语教学与学习都离不开科学的测试理念和方法，反过来，测试也会对英语教学与学习产生重要的反拨效应。因为英语测试关系到每位教师、学生以及与测试相关的使用者。从某种意义上来说，测试既是对学生学习程度的检测，也是对教师教学成败的检验。因此，在中国这样一个历来极为重视考试并且以应试教育为主的国家，它在很大程度上在某些地方已经成为整个教、学过程的指挥棒，深刻地影响着教师的教和学生的学，即考什么，就教什么。比如，在有些中小学校，英语口语和听力技能的训练被搁置在一边，整个教学活动围绕着语法和试卷进行，很多学生是通过做试卷来学英语的，高校的英语教学也不容乐观。作为全国唯一的测量英语专业学生基础阶段英语水平的大规模标准化考试，高校英语专业四级考试(TEM4)在评估英语专业学生的基础能力水平中占有不可替代的地位，很多学校将TEM4通过率作为教师评定职称和晋级的标准，很多用人单位也将TEM4证书作为选拔人才的依据，因而学生十分看中TEM4成绩，有些学生在考试中铤而走险，频频作弊，有些甚至不惜重金请人代考。从这个意义上说，TEM4实际上已经成为一项高风险的考试，因此，对其质量的考查就显得尤为重要。一项不科学的考试不但会毁掉一些考生的前途，也会在很大程度上误导教学，一项考试只有具有较高的质量才能真正发挥其作用。

衡量和评价考试质量的最重要的指标是信度和效度，因此，我们的调查问卷选取了与这这两个指标最密切相关的一些内容:试卷难度、区分度、题目数量等，这些调查项目分试卷总体和听写、听力理解、完型填空、语法和词汇、阅读理解以及写作等六个分测验进行。同时，考虑到考生的总体差异，在调查问卷中我们还编制了一些考查考生基本情况的项目，如考生考试次数、考试动机、考生对考试的自我评价以及对考试结果的自我预测等。

一、调查对象

我们选取了我校英语专业二年级以上学生430人参加此次问卷调查，剔除填写不合乎要求的问卷(当考生没做答的题目超过10个时，我们有理由怀疑该考生反应的可靠性)，回收有效问卷384份。

二、问卷编制内容和方法

此项调查问卷由47道题构成，都是多项选择题，每题都采用5级评分制，考生只能选择一个答案。1－7题分别考查考生对TEM4试卷总体和听写、听力理解、完型填空、语法和词汇、阅读理解以及写作等六个分测验难度的评价，选项为:A.非常难，B.比较难，C.一般，D.比较容易，E.非常容易。8－14题分别考查考生对TEM4试卷总体和六个分测验区分度的评价，选项为:A.非常具有区分度，B.比较有区分度，C.一般，D.没有区分度，E.非常没有区分度。15－21题分别考查考生对TEM4试卷总体和六个分测验题目数量的评价，选项为:A.非常多，B.比较多，C.很合适，D.不多，E.非常少。22－28题分别考查考生对TEM4试卷总体和六个分测验效度的评价，选项为:A.能真实考查考生的实际水平，B.基本能考查考生的实际水平，C.不清楚，D.不太能考查考生的实际水平，E.完全不能考查考生的实际水平。29题涉及考生考试次数(A.3次以上，B.3次，C.2次，D.1次，E.没参加过)。30题是关于TEM4对考生英语学习影响力的评价:TEM4能有助于提高你的英语水平吗?选项为:A.帮助非常大，B.帮助比较大，C.说不清楚，D.帮助比较小，E.基本没有帮助。31－34题涉及考生参加TEM4动机的四个维度:检验英语水平，父母或毕业要求，从众心理，找工作。选项为:A.非常赞成，B.赞成，C.不赞成也不反对，D.反对，E.非常反对。35－48题为考生对TEM4总体和六个分测验的自我评价以及对考试结果的自我预测，选项为:A.非常好，B.比较好，C.一般，D.不太好，E.非常不好。

三、调查结果与分析

通过对回收的384份有效问卷进行统计分析，我们发现:

(一)对TEM4难度的评价

题目难度决定某题对某一被试群体是否适用，它也决定该题在某一试卷中的取舍(Henning，2001)。它是分析题目特征的关键因素，也影响考试的信度。如果某题或某次考试对某一被试群体太难，它就失去了意义。

考生对TEM4试卷总体和听写、听力理解、完型填空、语法和词汇、阅读理解以及写作等六个分测验难度的评价从难到易依次为试卷总体(45%)，听写(24.3%)、听力理解(19.5%)、完型填空(16.6%)、阅读理解(14.4%)、写作(13.8%)、语法和词汇(11.4%)。其中，听写、阅读理解、完型填空都有近半数的考生认为偏难，其中尤以听写被认为是所有分测验里最难的。也有超过半数的考生认为写作、语法和词汇两项比较容易。这和我们的实践经验基本一致。平时的教学经验也告诉我们，听写和听力理解过程中的语速、生词(短语或句子)、背景知识以及考生对听写和听力理解的产出等对考生的影响极大，比如，考生听懂了听写和听力理解原文，但写不出来或回答不了问题。而影响完型填空和阅读理解的最大障碍是考生的语篇能力以及考试的时间因素。由于语法和词汇项较少受语篇的影响，而考生又积累了一定的词汇量，因而这部分对考生影响不大。但考生对作文的反应出乎我们的意料。平时，考生的写作并不理想，存在主谓、性数格的不一致，修饰语错位，句子不完整，悬垂修饰语，词语乱用，一个简单句出现多个谓语动词，累赘以及意思表达不连贯等问题。其原因主要是考生还没有意识到自己存在的问题，只要他们认为自己写完了作文规定的字数，就觉得自己的写作能力还不错。

(二)对TEM4区分度的评价

除难度外，区分度是试题的另一个最重要的特征，它能有效地区分被试的能力水平(王孝玲，2004)。

考生对TEM4区分度的评价和对TEM4难度的评价一致。考生对听写、听力理解、完型填空、语法和词汇、阅读理解以及写作等六个分测验区分度的评价从高到低依次为听写(25.4%)、听力理解(18.7%)、完型填空(16.3%)、阅读理解(15.2%)、写作(13.9%)、语法和词汇(11.5%)，对TEM4试卷总体的区分度评价约为53%。

(三)对TEM4题目数量的评价

一般来说，一项考试的题目数量越多，其信度越高，因此，题目数量是影响，也是考查信度的一个重要指标(张凯，2002)。在此次问卷调查中，考生对六个分测验题目数量的评价存在显著差异，他们对语法和词汇题目数量的满意程度最高，近62%的考生选择了“很合适”;近45%的考生认为听力理解和完型填空题目数量“很合适”，但也有约21%的考生认为听力理解和完型填空题目数量“比较多”;考生对阅读理解题有点排斥，因为约43%的考生选择了“比较多”，近11%的考生选择了“非常多”，没有考生选择“很合适”和“非常少”两项，也有很多考生反映他们的阅读理解没有做完;57%的考生认为听写和写作题量“很合适”，也有22%的考生认为这两题“不多”。认为TEM4试卷总题量“很合适”的为36%，认为“非常多”和“比较多”的分别占25%和23%，没有考生选择“非常少”。这表明，考生认为，TEM4题目数量偏多，在此意义上，与其说影响考生答题的重要因素是题目难度，还不如说是速度。其中，阅读理解花费他们的答题时间较长，也最容易让他们疲劳。从考生对TEM4试卷总题量的反应来看，也符合他们平时的学习状况、答题情况和英语水平。

(四)对TEM4效度的评价

效度是衡量考试质量的最重要的指标之一，它指考试是否测出了或在多大程度上测出了它想测的东西(Heaton，2000)。此次问卷中的22－28题分别考查考生对TEM4试卷总体和六个分测验效度的评价。从考生的反应来看，他们对六个分测验效度的评价都是积极态度＞中间态度＞消极态度，对TEM4试卷总体效度的评价则是中间态度＞积极态度＞消极态度。其中，听写和听力理解的效度评价是最高的(22%和 21%)，完型填空(19%)、阅读理解(17%)、写作(13%)、语法和词汇(8%)次之。虽然考生认为听写难度较大，但他们仍然认为这个题目能有效地考查考生的听写水平。其它五个分测验的效度评价符合我们的期望值，因为这些题型相对来说能鼓励猜测，并不能真正代表学生的能力。

(五)考生自身项目评价

1.考生考试动机

关于参加TEM4的动机，“同意”或“非常同意”“找工作”的考生占69%，其次为“检验英语水平”，“父母或毕业要求”和“从众心理”;也有31% 的考生选择了“反对”或“非常反对”“检验英语水平”，这从另一侧面佐证了相当一部分考生学习英语和参加TEM4的目的并不是自发的，而是来自就业的压力，这也从约24%的考生参加了2次以上的TEM4可以反映出来。而且，这一结论与考生对第30题的反应也高度一致:约60%的考生选择了中间和消极选项，即“说不清楚”，“帮助比较小”，和“基本没有帮助”。所以，我们有理由相信，不是积极、主动学习英语的学生，他们对参加TEM4的动机评价和关于TEM4对考生英语学习影响力的评价都持不乐观的态度。

2.考生对自身英语水平的评价

通过考查考生对自身各项英语语言技能的评价和对自己参加TEM4成绩的预测，我们发现，考生选择“一般”的超过半数。在对自身各项英语语言技能的评价中，只有语法和词汇项的“非常好”和“比较好”超过消极选项“不太好”和“非常不好”，而听写、听力理解和完型填空的选项都是消极选项超过积极选项，尤以听写的消极选项最多。考生对自己参加TEM4成绩的预测评价与技能评价一致:只有约19%的考生认为自己的听写成绩“非常好”和“比较好”，选择“不太好”和“非常不好”的达到51%，同样，预测自己语法和词汇成绩“非常好”和“比较好”的最多，达58%。这说明，考生对自己语言技能和TEM4成绩预测的评价与对TEM4各分测验难度的评价一致，多数考生都认为自己的听写技能最薄弱，而语法和词汇技能相对要优秀一些，因而对听写成绩的预测就不太乐观。

四、结 论

通过对 TEM4的考生问卷调查，我们发现，尽管对TEM4的难度、区分度、题目数量、效度等还有不胜满意之处，他们对TEM4试卷总体和各分测验的评价持积极态度的还是占多数，结论如下:

1.考生普遍认为TEM4偏难，其中尤以听写和听力理解最难。但我们对试卷的分析结果发现，学生认为较难的测验，如听力理解和完型填空未必如此，而学生认为较易的测验，如写作等也未必容易。这说明，考生的感觉和试题的实际难度并不完全等价;

2.接近半数的考生认为TEM4题目数量多，特别是阅读理解材料较长，花费他们答题的时间也相对较长，也最容易让他们疲劳，有些学生反映他们的阅读理解没完成，这和考生平时的学习状况、答题情况和英语水平一致;

3.对TEM4区分度和效度的评价，绝大多数考生都持积极态度，认为它能有效区分能力水平不同的考生，并能测出考生的真实水平;

4.考生考试动机越积极(选择“检验英语水平”和“学英语兴趣”越多者)，其成绩预测越乐观，其对TEM4区分度和效度的评价，以及对TEM4对考生英语学习影响力的评价也越积极;

5.平时英语水平高的考生，其自我评价就高，其成绩预测就更乐观，或者说，他们对英语语言技能的自我评价和对自我TEM4成绩预测的评价高度一致;

综上所述，尽管考生个体差异影响他们对TEM4质量的评价，但他们总体上都对TEM4质量持积极态度，基本上能反映TEM4的质量。但考生的反应也给我们反馈了一些问题，值得我们深思。在今后的教学实践中，我们应该充分发挥“以学生为主体”的教学理念，帮助学生树立正确的英语学习观，杜绝他们为了应试而学英语的做法，切实有效地培养他们的语言技能。同时，让全社会真正认识考试的本质，使考试真正指导和服务教学，而不是教学的指挥棒。

［1］Heaton，J.B.(2000)Writing English Language Test［M］.Beijing:Foreign Language Teaching and Research Press.

［2］Henning，G.(2001)A guide to Language Testing:Development，Evaluation and Research［M］.北京:外语教学与研究出版社.

［3］王孝玲.教育测量［M］.上海:华东师范大学出版社，2004.

［4］张凯.语言测验理论与实践［M］.北京:语言文化大学出版社，2002.

G642

A

1006－5342(2012)04－0054－03

2011－12－18

TEM4质量考查研究(2011B036);2012年湖北省教育厅人文社科课题:高校英语专业四级考试质量考查与评价(2012G380)的阶段性成果之一