自建校本大学英语期末考试试题库使用分析报告
2019-07-15张元元王东花保山学院
■兰 娟 张元元 王东花/保山学院
一、前言
期末考试是大学英语课程教学过程中不可分割的重要组成部分,教育部2017年发布的《大学英语教学指南》(以下简称《指南》)中明确指出:学校大学英语教学管理部门应根据本校的实际情况,对学生提出切合实际的英语能力要求,开发科学、系统、个性化的大学英语课程评价体系和大学生英语能力测试体系,充分发挥评价和测试对大学英语教学的导向、激励、诊断、改进、鉴定、咨询、决策等多重功能,更好地促进大学英语课程的建设和大学生英语能力的提高。大学英语课程是笔者所在的地方应用型本科院校的一门重要的通识必修课程,涉及面广,影响大,对学生的学业发展和未来就业前景都有较为深远的影响;此外,由于教学对象主要来自于边(边疆)农(农村)贫(贫困)少(少数民族)地区,学生英语基础较弱、英语学习能力较差,现有的大学英语考试试题库大多以水平测试为目的,不能体现与本校大学英语教学大纲以及日常课堂教学的关系,对我校教学对象的适用性并不强。基于这些原因,地方应用型本科院校建设符合其自身特点的大学英语期末考试试题库是必要的。
二、使用分析报告
笔者于2017年-2018年期间根据校本大学英语教学大纲和考试大纲的要求,学校所采用的大学英语教材的结构、教学重点、以及教学对象的特点,在 Wright和Bell在1984年提出的试题库建设基本步骤的指导下,进行了校本大学英语期末考试试题库初步阶段的建设工作,基本完成了大学英语期末考试试题库的初步阶段建设工作,并在2018-2019学年第一学期2017级B级班级的期末考试中投入使用。现将具体使用情况和试卷效度情况分析如下:
(一)期末考试试卷结构分析
根据校本大学英语考试大纲,期末考试的目的在通过考试,客观、公正、准确地检测和评估学生在《大学英语》课程学习中英语综合应用能力的发展情况,检测学生是否能较好地掌握英语语言基础知识和语言技能,并具有一定的听、说、读、写、译能力。根据这一考试目的,大学英语期末考试试卷包含了口语测试、听力理解、词汇、语法和结构、阅读理解、翻译、写作七个部分。基于教材和教学重点,在自建试题库中主要进行了词汇、阅读理解、翻译三个部分的建设,并结合现有的水平测试试题库,共同应用于期末考试中。
(二)试卷卷面成绩分析
在2017级B级班级中进行了期末考试后,笔者随机抽取了两个班级,与2016级同一阶段未使用自建考试题库进行制卷考试的学生考试成绩进行了对比,对比结果显示,在使用试题库制卷进行考试后,学生的期末考试卷面不及格率得到了大幅度的减低,从42.8%降到了17.4%,降幅达到25.4%。从试卷测试结果呈现出来的集中趋势看,考试的平均分从59.7分提高到了69.85分;中数由66分提高为70.5分;众数由69分变为70分。从测试结果呈现出来的离散趋势看,考试卷面最高分由92分略降为90分;考试最低分从25分提高到了40分;相应的,成绩全距由67分缩短为50分。从这些描述统计数据来看,从试题库中抽取试题进行制卷后,测试的整体表现明显优于之前。
(三)测试项目分析
针对测试项目主要进行难易 度(Facility Value) 和 区 分 度(Discrimination Index)两个数据的分析。难易度的计算是由测试平均分除以试卷满分得出一个0-1范围内的数据,计算结果越接近0.5,难易度值越理想,计算结果越大,难度越小。根据Heaton (2000:179)的阐述,试题难度在0.3~0.7范围内都是可以接受的。区分度显示了测试项目区分学得好的学生和学得不太好的学生的能力 (Heaton,2000:179)。测试的区分度计算可以参照公示 DI= 2(Xh-XL)/W,W指的是测试试卷的总分,Xh指的是成绩较好的那一部分学生的平均得分;Xl指的是成绩较差的那一部分学生的平均得分。Henning (2000:180) 指出,项目区分度是一个 +1 和-1之间的数值, 数值越大,项目的区分度就越大。
(四)试卷信度分析
针对从试题库中抽取的试卷的内部信度,笔者拟采用SPSS软件相关分析中的Cronbach’s alpha系数进行分析,分析得出的数值越大,提示条目的内在一致性越强。
表1 Cronbach's alpha系数计算结果
从Cronbach’s alpha系数计算结果来看,试卷所包含的7个部分之间的Cronbach’s alpha系数为 0.671,由此可以说明,测试试卷的各个部分间具有较强的内在一致性。
三、分析结果和建议
针对从自建大学英语期末考试试题库中提取的试卷,经过分析试卷结构、测试卷面成绩、测试项目和试卷内部信度,可以看出,自建校本大学英语期末考试试题库从试题构成和试题量上看都基本能够满足大学英语期末考试的需求;考试成绩的集中趋势、离散趋势、难易度和区分度结果提示,试卷能较试题库建设前更好地反映学生在大学英语课程中的学习情况;从试卷内部信度来看,Cronbach’s alpha系数为0.671,试卷各部分内容具有较好的内部一致性。因此可以得出初步结论,自建校本大学英语期末考试试题库有利于对本校大学英语课程的评价。
但是,基于试题库发展的特点以及本次测试结果的分析,在今后还需要对以下方面进行进一步的探讨。首先,在本分析报告中只分析了试卷的整体情况和各个构成部分的情况,对每一个测试项目并没有进行逐一分析,因此,在以后还需要加强这方面的研究,进一步提高试题库的质量。其次,试题库的建设是一个动态的过程,试题库的完善也还需要长期的努力,目前试题库的题量,特别是自建试题库部分的题量还非常有限,在今后还需不断地进行补充。再次,自建校本大学英语期末考试试题库有一个最大的缺陷在于,自建部分是依据大学英语课程所使用的教材进行建设,一旦教材发生变化,自建部分即刻失效,因此,在今后还需就如何解决这一问题进行深入的研究。