基于Bachman考试任务特征理论的TEM4阅读理解测试内容效度研究*
2021-09-15北华大学外国语学院赵耀刘亚男
北华大学外国语学院 赵耀,刘亚男
英语专业四级考试(TEM4)是由国家教育委员会主办的考试,已进行了二十多年,属于参照性标准化考试。其测试结果是衡量英语专业学生英语能力的重要标准。测试的内容效度是保证测试题目的准确性的基本要素。保证试题的质量,明确测量内容,确保考试的科学性与公平性。
一、理论综述
(一)内容效度
Henning(2001:94)将内容效度定义为测试内容是否对测试效度测量具有充足的代表性和全面性。通过一套试卷内容的有效性就可以充分的评价出该套试卷的水平,它是语言测试的基本出发点。
Bachman(1997)认为内容相关性和内容覆盖率是内容效度的两个方面。内容相关性要求所涉及的行为域、任务或测试的规范。它是考试内容与教学大纲或课程规范之间的关联要求。内容覆盖要求测试内容的任务应该符合所讨论的行为领域。
Alderson(2000)的观点是内容效度是指对测试内容与其规范进行比较的判断。规范通常包括教学大纲或考试大纲。
内容效度在测试中具有重要意义,既可以作为衡量测试的重要标准,又对教学有着深入的影响。Wood(2001)认为如果选择的内容不具有代表性或是无效的,则依据测试分数进行的推论将可能是错误的。Hughes(1989)也指出要多方面考虑选择内容,如果内容无效则得出的结果也不准确。还提出,测试会反作用于教学,即考试中不考的内容会自动被教师忽略,从而对教学的引导和提高学生实际语言能力方面具有负面作用。
(二)任务特征框架理论
Bachamn和Palmer(1996)区分了“言使用任务”和“测试任务”。“语言使用任务”意指人们为了达到某种目标或达到某个目的,而去使用语言。“测试任务”是指专门为测试而采用的任务。测试任务应当是日常生活中语言使用任务的典型代表。据此,Bachmam和Palmer(1996:49-50)提出语言使用任务特征框架,共包含五个方面,即场景特征、测试规则特征、语篇输入特征、期望回答的特征、输入与回答的关系。本文将仅考察语篇输入特征和期望回答的特征。语篇输入特征指体裁、题材、文本长度和难度。期望回答的特征指考察的阅读技能。
二、TEM4阅读理解测试内容效度的分析
(一)语篇输入特征
1.体裁和题材
体裁即文本类型,文本类型的差异决定着叙述风格的差异。体裁划分为记叙文、说明文、议论文和应用文四种。
2019年TEM4阅读理解文章体裁进行统计(见表1)。4篇文章中议论文考查2篇,数量最多;说明文和记叙文各1篇;说明以论文是最主要的考查体裁。题材涉及了4种题材,分别为社会、个人感情、科普知识与现代技术以及家庭朋友与周围的人。
表1 TEM4阅读理解文章体裁、题材统计表
由上可见,目前主要考查的体裁是议论文,各种题材均有涉猎,科普知识与现代技术为重点考查题材,从各卷的历史情况看,每一年的试卷都能体现出体裁的多样性,题材熟悉度较高,较为全面的检测了考生的阅读能力。
2.文章长度和易读度
文章长度是指文章的总词数。经过统计(见表2),阅读文本的总长度和平均长度分别为1832词和458词。说明文和记叙文较长,第1篇略短,差距达到近100词。总体符合要求,但内部差异较大。
表2 TEM4阅读理解文章长度、难度统计表
文章难度即文本易于理解的程度。文章的难易程度决定着考生能否读懂文本。太简单或太难的文章都难以达到测试的真正目的。文章难度评估依据主要通过Flesh易读度。经过计算,阅读理解试题文本易读度49.20-78.9之间,均值为70.0。根据Flesh易读度参考量表,是在“较难”和“标准”之间,属于美国7-8年级读者阅读的读物,代表杂志为文摘。而第4篇文章是“较难”级别,属于部分高中读者阅读的读物,代表杂志为质量杂志。
由上可见,本次测试文章长短不一,但总体单词数量均在500词上下,仅一篇略少,需要增加字数。易读度为标准,其中一篇较难,需要调整。
(二)预期回答
Bachman和 Palmer(1996:53)认为,预期回答是指“命题者试图通过书面指示,设计任务或通过所提供的篇章输入来引起语言的使用或者生理反应”。李筱菊(1997)指出,在设置阅读试题时,重点不是语言本身,而是考点在哪里,分析出语言的运用功能,从而把控出质量这个关键点,并明确规定考生应掌握六项技能:(1)理解文章主旨大意;(2)理解文中具体信息;(3)根据上下文推断单词和短语的含义;(4)做出判断和推理;(5)理解文章的基本结构;(6)理解作者的意图、观点和态度。
将TEM4的阅读理解文章考查技能汇总如下表3所示。由表中可见,观点态度类考查6题,占比30%;事实细节和词义猜测类各考查了4题,各比20%;推理判断、主旨大意类各考查了3题,占比15%;篇章结构类没有进行考查。事实细节和推理判断主要考查考生通过阅读全文获取具体信息和逻辑推理的能力。而主旨大意、词义猜测和观点态度主要检测考生通过理解整篇文本,把握语篇的宏观结构和内在联系,对文章的整体把握能力要求更高,属于综合能力考查。
表3 TEM4阅读理解考查技能统计表
由上可见,观点态度、事实细节和词义猜测是最主要的考查技能,说明阅读技能的考查在题量的分布上极为不均衡。考查了4种阅读技能,这4种阅读技能分别为事实细节、推理判断、主旨大意和词义猜测,说明对阅读技能进行了广泛的覆盖。
三、结论
根据以上分析可知,2019年TEM4阅读理解测试部分具有较高的内容效度。语篇输入特征效度较高,题材符合要求,题材范围尚可商榷,文章长度稳定在500词左右,长度合理。文章整体难度适中。由此可以看出难度较为稳定,整体易读度偏向于“标准”级别。
教学中可以重点提高阅读教学强度,扎实语言基础知识。在平时的教学过程中就应注意让学生进行广泛的阅读,扩大阅读量,有意识的阅读稍难的文章,拓展视野。注意讲解猜测词义的方法,总结文章的主旨大意,进而提高学生的语篇理解水平。也要重点关注学生的基础知识。给学生打下坚实的语言知识基础,同时提升阅读教学的强度,增加较难和较长文章的阅读训练。
加强题材阅读教学,拓展知识面。在教学中应拓展语篇话题类型,让学生能够全面接触多方面的知识,也为教师多样的课堂活动提供素材。引导学生进行大量的课外阅读,拓展学生的知识面,开阔学生视野。
针对强化细节判断题,兼顾主旨和猜词题。在教学中使学生学会归纳文章的主旨大意,贯彻一切服从主旨的原则进行解题。词汇是英语教学的基础,更要重视词块的积累与学习。词块共同具有词汇和语法双重特征,词块的内部结构十分稳定,不需要语法规则进行建构。因此,教师运用词块进行阅读理解的教学具有不可比拟的优势。让学生能够根据上下句的内容,推导出生词的含义,真正地做到在语境中理解。