TEM-8 阅读测试内容效度分析

刘 凌, 易莎莎

(湖北工业大学外国语学院， 湖北 武汉 430068)



TEM-8 阅读测试内容效度分析

刘 凌, 易莎莎

(湖北工业大学外国语学院， 湖北 武汉 430068)

选取2010年到2015年专八真题的阅读理解试题进行内容效度分析，发现其内容效度较高，能够较科学衡量学生的学习水平，但在选材、阅读速度以及阅读能力考察上存在一些问题。结合2016年专八阅读测试的改革对上述问题进行分析，提出完善建议，进一步提高阅读测试的内容效度。

专业英语八级； 阅读理解； 内容效度； 考试大纲

专业英语八级考试旨在全面检查完成英语专业高年级阶段课程的学生是否具备了《高等学校英语专业英语教学大纲》(以下简称《大纲》)所需要掌握的英语语言综合运用能力标准及英语专业知识。《大纲》明确规定专业英语八级考试属于标准型教学检查类考试，即学业测试(achievement test)。考试范围囊括了《大纲》规定的听、说、读、写、译四个方面的能力以及英语专业知识。

学业测试是用于检测学生某一课程学习情况的考试，即一项基于教学大纲的考试 ( syllabus- based)。效度是衡量测试的一个重要指标，而内容效度又是效度的重要组成部分。Kerlinger (1973)提出内容效度(content validity)是“一测量工具内容上(包括材料、题材、题目)的代表性或所选内容样本的充分性”。[1]

对专业英语八级测试中阅读部分的内容效度分析是衡量试题的阅读理解部分是否与考试大纲预期测试意图相一致。专业英语八级考试自1994年开展至今已有20余年，其考试大纲也一再修订。2015年又在2004年新考纲的基础上进行了新的改革，并于2016年开始实施。在2004年至2015年期间，不少研究者对专八真题进行分析，尤其是阅读部分。陈云、李洁在系统功能语法中的语篇分析理论框架下，对专八阅读理解的文本进行分析，为专八考生备考提供参考；[2]胡晓丹，倪蓉通过分析专八试卷与考生的成绩，为专八考试提出意见；[3]唐美华通过自建语料库对专四专八的阅读理解文本内容的难度进行了对比分析，为阅读教和学提出建议；[4]此外还有不少的硕士毕业论文，研究主要集中于专八考试和大学英语四六级[5]和雅思、托福的对比研究[6]，以及对专八阅读测试的内容效度分析[7]。

综上所述，专八阅读测试的内容效度分析研究比较丰富，本文在此基础上进一步研究2010-2015的专八真题阅读理解测试的内容效度，并结合2015年8月专八新改革考纲提出本文的完善建议。

1 选材是否符合大纲

新《考纲》要求专业英语八级阅读理解的选材应符合以下原则：1)题材广泛，包括社会、科技、文化、经济、文学、语言学、人物传记等；2)体裁多样，包括记叙文、描写文、说明文、议论文等；3)阅读材料的语言难度中等偏上。

表1 2010-2015年TEM-8阅读材料题材体裁一览表

表1是对2010年至2015年专八阅读理解文章在题材和体裁两方面的统计。从表1中可看出，专八的阅读理解文章在选材上符合大纲题材广泛的原则，各类题材的文章都渗透在了阅读理解的文章当中，并且囊括了社会的热点问题。就2015年的阅读理解篇章而言，文章的题材包括了网络购物、儿童教育问题中的榜样，一场在西非的滑稽旅行，以及介绍科技的进一步发展。这都说明了2015年的阅读理解文章选题之广和选题之细。广泛的选题也符合《高级英语》教材的特点。

本研究首先统计了阅读材料的体裁(见表1)，议论文和说明文占70%左右；记叙文描写文仅占8.3%。周瑞英曾指出说明文和议论文在《高级英语》教材中所占比例为45%；文学作品的比例为35%。[8]罗长田也提出高级英语的教学原则中应包含“培养文体意识，提高学生文体分析能力和文学鉴赏能力”。[9]相比之下，专八阅读测试中关于文学作品的考查较少，笔者认为，专八阅读在选材上应更加契合高级英语的教学原则。在文章的体裁上适当增加对文学作品的考查，确保测试与高级英语教学目标一致。

2 阅读速度是否达到测试要求

《考纲》对考生阅读速度的要求：阅读材料共计3000个单词左右；阅读速度为每分钟150个单词；考试时间为30分钟。

表2是对2010年至2015年专八阅读材料字数的统计。根据计算，从2010年到2015年平均阅读字数为2734，这与考纲的要求基本符合。总体而言，每年阅读材料的字数差距不大。但2015年的阅读材料的字数比2013、2014多出398个单词，悬殊较大，对2015年的考生有失公平性。

表2 2010-2015年TEM-8阅读材料字数一览表

3 阅读能力的考察是否符合测试要求

《考纲》明确从主旨大意，事实和细节；字面意义和隐含意义；根据所给信息进行判断和推理；总结材料的思想观点、语篇结构、语言特点和修辞手法等方面来考察学生的阅读理解能力。表3对2010年到2015年的阅读理解的试题考点进行统计。

表3 2010-2015年TEM-8阅读理解试题考点一览表

从表3的数据中可以看出试题的分布符合考纲的要求。各类考点均出现在试题当中，但各类考点的比例却不是很均衡。由图中的数据中不难发现，每年考试试题中事实细节题目所占比重都超过了50%，但是关于篇章结构的试题只有2010年和2012年的考试中有所涉及。罗长田概括总结了高级英语的教学原则包括：培养语篇意识，提高学生语篇分析能力；培养文体意识，提高学生文体分析能力和文学鉴赏能力；培养文化意识，提高学生跨跨文化交际能力。[9]根据这些原则，出题人在出题时应该根据这些原则适当增加对篇章结构、文学鉴赏能力和跨文化交际能力的考查。

4 建议和总结

本文对2010年至2015年的专八阅读测试进行了内容效度分析，近6年来专八阅读理解测试内容效度较高，命题科学、严谨、规范，达到考纲的测试要求。阅读理解的难度选择适当，选题题材广泛，涉及考纲中规定的各个方面。体裁丰富，各类主要体裁均出现在阅读材料中。在题型设置方面也符合考纲的规定，从不同的角度考查考生的阅读技能。

但专八的阅读理解测试仍有完善的空间。从2010-2015年的阅读材料的选题而言，可以以高级英语课程的特点和教学目标为出发点进行取舍，使专八阅读篇章的题材和体裁更加贴合学生实际生活和学习中的阅读篇章类型。从阅读速度而言，尽可能保证每年的材料长度相当。不能单一的要求考生达到每分钟150词，还应当考虑到考生做题和填涂答题卡的时间。从阅读能力角度而言，考点的设置上还需要有所改进，使教学中需要培养和提高的能力在阅读理解的题目中都有所考查。

2016年专八《考纲》增加了阅读理解的题型：简答题。Arthur Hughes对于简答题的优势与缺点也做了如下分析：简答题的设置相较于选择题的优势在于猜测因素和作弊因素对阅读能力考查的影响减小；从一定程度上减少了干预信息对阅读能力体现的减少；对于试题题干而言，更易于试题的编写。但简答题也有缺点，例如单位时间内受试者能做出的题目数量少，并且需要受试者通过个人的理解回答问题；对于评分而言，评分的时间增加并且会降低分数的效度和信度。[10]简答题在国内外语考试中的均被应用，如CET4,CET6中偶有涉及，TOEFL中也有类似题型，此次在专八考试中第一次采用简答题的形式，并且对于回答的字数也限制在10个单词以内，这不仅对试卷的出题者和评阅者带来了考验，也给考生带来了压力。对于出题者而言，如何合理设置问题，如何合理编写题干都是应当反复斟酌的问题，对此出题者可以借鉴TOEFL中的出题方法，并以此来编排专八的阅读测试；对于评阅者，在对该部分评分时应该采用何种给分方式给考生一个相对公平的分数也是一个难点问题；测试对于教学具有反拨作用，要求教师在教学中应当更加注重考生在规定字数内回答问题的能力。

本文认为2016年的专八改革弥补了2004年《新考纲》的不足之处，并在专八考试中首次采用了简答题的形式来考试考生的阅读理解能力实属创新之举。究其优点和缺点，在简答题的设置上应该做到扬长避短，提高专八阅读测试的内容效度。

[1] 邹申. 简明英语测试教程[M]. 北京：高等教育出版社, 2013:30-31，43.

[2] 陈云,李洁. 功能语篇分析在TEM-8阅读理解考试中的应用[J]. 新余学院学报. 2012(8):74-76.

[3] 胡晓丹,倪蓉. 英语专业八级试卷分析[J]. 语文学刊·外语教育教学. 2015(7):128-130.

[4] 唐美华. 英语专业等级考试中阅读理解对比分析[J]. 吉林省教育学院学报. 2009(1):75-77 .

[5] 张书琦. 阅读测试在CET、TOEFL、和IELTS中的对比研究[D].南京：东南大学，2006.

[6] 刘希. 专八和雅思考试中阅读理解测试的对比研究[D]. 武汉：华中师范大学，2009.

[7] 陈诗霏. 英语专业八级阅读理解内容效度研究(2009-2013)[D]. 桂林：广西师范大学，2014.

[8] 周瑞英.高级英语课程的要求特点及教学手段探讨[J]. 武汉科技学院学报.2006(12):163-165.

[9] 罗长田. 论高级英语课程目标及教学原则[J].四川外语学院学报.2004(5): 142-145.

[10] Arthur H. Testing for language teachers[M]. Beijing: Foreign Language Teaching and Research Press, 2013:79.

[责任编校： 张岩芳]

An Analysis of Content Validity in the Reading Part of TEM-8

LIU Ling, YI Shasha

(SchoolofForeignLanguages,HubeiUniv.ofTech.,Wuhan430068,China)

Test for English Major Band Eight (short for TEM-8) is an achievement test. This paper analyzes the content validity of the reading comprehension parts selected from 2010 to 2015 TEM-8. The results show that the test has a relatively high content validity and it can scientifically measure the students’ language competence. However, there are still problems in selecting materials and measuring reading speed and ability. In accordance with these problems and the reform of TEM-8 in 2016, the author provides some suggestions to improve the content validity of reading comprehension of TEM-8.

test for English Major Band Eight (TEM-8); reading comprehension; content validity; syllabus

1003-4684(2016)06-0093-03

H310.4

A

2015-03-05

湖北省教育厅项目(13Y039)

刘凌(1974- )，女，湖南邵阳人，文学硕士，湖北工业大学副教授，研究方向为外国语言学及应用语言学

易莎莎(1992- )，女，湖北潜江人，湖北工业大学硕士研究生，外国语言学及应用语言学