航海英语课程试卷定量分析
2021-11-10李玉伟宋利明
李玉伟 宋利明
(上海海洋大学海洋科学学院,上海201306)
对于高等学校的教学来说,课程的教学质量是一个永恒的主题,这不仅关系着学校本科专业的培养质量,也关系着学生们的学习成效。所以对于教学质量的评估显得非常重要,这对于教学每个环节质量的提升有着本质上的促进和提高,所以对于教学质量的常态化评估始终是提高课程教学质量的一种有效的手段。对于大多数的课程来说,期末考核的方式大多采用闭卷考试的形式,所以对于期末考试的试卷的定量分析能够在课程教学质量的评估上起到非常重要的作用,主要体现在课程教学反馈、教学目标的实现、学生们学习效果的区分和教学质量的再度提升等方面。
航海英语课程是上海海洋大学海洋渔业科学与技术专业的一门选修课程,同时也是该专业一门具有鲜明特色航海类课程。我校开设该门课程的历史非常悠久,为了更好地提高该门课程的教学质量和科学的评估该门课程的教学效果。本文使用了数理统计的方法对2017级和2018级两个年级的航海英语课程期末考试试卷进行定量综合分析。
1 材料和方法
1.1 研究对象
本文选取的研究对象为上海海洋大学海洋科学学院海洋渔业科学与技术系2017级和2018级海洋渔业科学与技术专业选修该门课程的学生们的期末考试试卷和期末考试试卷成绩。
课程选用的教材为上海海洋大学海洋科学学院宋利明教授主编的《航海英语》,该门教材由中国农业出版社出版,自出版以来一直用于航海英语课程的日常教学使用;并且也给出了一系列的参考阅读书目,比如大连海事大学出版社出版的《航海英语》和人民交通出版社出版的《航海英语听力与会话(第四版)》,等等。该门课程的总学时为32个学时,2个学分。
根据课程的实际特点,期末考试试卷的出题严格按照教学大纲和教学日历的要求进行,试卷类型均采用主观题的形式,力求能够体现出教学大纲中的教学知识点和能够覆盖课程的每一章节,也期望能够起到全面测试学生们的综合学习水平的作用,重点考察学生们综合运用航海英语的知识来解决实际海洋渔业生产过程中涉及航海英语方面的综合能力。
试卷类型采取多种形式:试卷满分为100分,考试时间为95分钟。英语单词或者英语缩写翻译成中文题目,8个小题,每个小题2分,共计16分。中文单词翻译成英文单词题目,7个小题,每个小题2分,共计14分。英文词组和英文短句翻译成中文题目,4个小题,2017级试卷各小题分值依次为5分、3分、7分和15分,共计30分;2018级试卷各小题分值依次为6分、5分、3分和9分,共计23分。英文段落翻译成中文,2017级试卷3个小题分值依次为18分、7分和15分,共计40分;2018级试卷4个小题分值依次为19分、8分、11分和9分,共计47分。考试采用闭卷的形式进行,每份试卷均有课程考试标准答案和评分标准,在评阅的时候坚持公平和客观的原则进行。
1.2 研究方法
对于期末考试试卷的分析,首先涉及试卷出卷质量,这是由许多方面的因素共同决定的,其次是学生们答阅试卷的成绩分析,通过成绩分析来识别出试卷的出卷质量和试卷是否能够评估出学生们的真实学习水平。
对于课程试卷定量分析通常采用差异系数、难度、区分度、信度和正态性检验等来进行。将每位学生的每个题型的成绩和试卷总分分别输入R语言中,然后利用R语言进行相关的计算分析。
1.2.1 差异系数
差异系数,即coefficient of variation,缩写为CV。表示某一组数据的标准差与该组数据平均值的百分比,是一种计算某一组数据离散程度的相对的指标。
CV=S/M×100%,式中S表示标准差,M表示平均值。
1.2.2 难度
1.2.3 区分度
试卷中某一题的区分度可使用各人该题的得分与各人总分之间的相关系数来计算,即:
其中D为区分度,N为学生总数,x为每道题目得分,y为每份试卷的总分。D的范围为0~1。
1.2.4 信度
常用的信度计算公式为:
式中,M为各题目的数量,Si为学生们在各个题目得分的标准差。
1.2.5 正态性检验
对于期末成绩的分布应当满足正态性分布的规律。若期末考试成绩的分布符合正态性分布,则说明期末考试试卷的区分度较高;反之则会呈现负偏态或者正偏态的现象。
2 结果和分析
2.1 试卷分值分析
按照课程教学大纲的要求,试卷命题范围要和教学内容相吻合。教学内容主要分为七大模块,第一模块为船员职务和船舶口令,教学学时为8个学时,2017级考试试卷分值为13分,2018级考试试卷分值为11分;第二模块为气象报告,教学学时为4个学时,2017级考试试卷分值为25分,2018级考试试卷分值为21分;第三模块为通讯用语和口语表达,教学学时为3个学时,2017级考试试卷分值为4分,2018级考试试卷分值为8分;第四模块为航海日志,教学学时为2.5个学时,2017级考试试卷分值为6分,2018级考试试卷分值为10分;第五模块为英版航海图书资料,教学学时为6.5学时,2017级考试试卷分值为7分,2018级考试试卷分值为13分;第六模块为业务信函,教学学时为6.5学时,2017级考试试卷分值为30分,2018级考试试卷分值为28分;第七模块为船舶证书和文件清单,教学学时为1.5学时,2017级考试试卷分值为15分,2018级考试试卷分值为9分。从中可以看出,两年的考试试卷分值基本上对应着教学内容的每个模块。
2.2 试卷成绩分析
从两个年级的试卷成绩来看,详见表1。从表1中可知,2017级和2018级的偏态系数分别为0.134和-0.290,按照偏度系数在-1和1范围内的时候,成绩基本上能够符合正态分布,故2017级和2018级的成绩基本上符合正态分布。
表1 航海英语成绩分析表
2.3 试卷质量分析
2.3.1 变异系数
2017级的每个题型的变异系数范围为15.70%~34.41%,差值为18.71%。2018级的每个题型的变异系数范围为14.21%~47.05%,差值为32.84%。说明2018级的考试成绩比较分散。
2.3.2 难度分析
2017级的每个题型的难度系数分别为0.208 3、0.466 7、0.192 8和0.182 1,总的难度系数为0.229 3。2018级的每个题型的难度系数分别为0.354 2、0.410 7、0.346 0和0.134 3,总的难度系数为0.256 9。根据难度系数范围在0和0.25之间,试卷难度较小;0.25和0.75之间,难度适中;0.75和1之间,难度较大。说明2017级的中文单词翻译成英文单词题目难度适中;2018级的中文单词翻译成英文单词题目、英文词组和英文短句翻译成中文题目、英文段落翻译成中文难度适中。2018级的总难度系数大于2017级的总难度系数,可以从2018级的平均分比2017级的低看出。总体而言,2018级的试卷难度适中,2017级的试卷难度较小。
2.3.3 区分度分析
2017级的每个题型的区分度依次为0.703 4、0.678 9、0.892 6和0.882 8。2018级的每个题型的区分度依次为0.893 7、0.808 5、0.943 7和0.966 4。根据区分度范围在0和0.2之间,为劣等试卷,0.2和0.3之间为一般试卷,0.3和0.4之间为良好试卷,大于0.4以上为优秀试卷。这说明2017级的每个题型的区分度和2018级的每个题型的区分度都较好。2017级的试卷区分度为0.789 4,2018级的试卷区分度为0.903 1,这表明两年的试卷均为优秀试卷,能够很好地鉴别出学习成绩好的学生和学习成绩较差的学生。
2.3.4 信度分析
2017级试卷的信度为0.735 8,2018级试卷的信度为0.636 2。由于信度的评价受到许多因素的影响,特别是考试试卷中主观题目较多的时候,很难有较为统一的标准。根据信度范围在0和0.5之间,试卷的稳定性较差;信度范围在0.5和0.8之间,试卷的稳定性较好;信度大于0.8,试卷的稳定性非常好;但是考虑到两年的试卷均为主观题,信度范围大于0.7即可认为试卷的稳定性非常好。按照这一评价标准,2018级试卷的稳定性较好,2017级试卷的稳定性非常好;且2018级的试卷比2017级的试卷信度高。所以两年的考试成绩即可被认为是非常可靠的。
3 总结和讨论
从总的方面来看,2017级和2018级的试卷设计非常合理,能够符合期末测试的要求,命题非常贴合教学内容和教学大纲的要求。2017级和2018级的平均成绩分别为77.07和74.31,说明学生们能够较好地掌握和理解教学中的大部分知识点。2017级和2018级两年的考试试卷成绩均符合正态分布,及格率均在80%以上,这说明试卷能够起到检验教学效果的目的。2017级的考试试卷难度较小,2018级的考试试卷难度适中,2017级的考试试卷和2018级的考试试卷均为优秀试卷,2017级的考试试卷稳定性非常好,2018级的考试试卷稳定性较好,这说明两年的考试试卷区分效果好和考试成绩是可信的。因此,通过这两年的考试,能够达到检验学生们学习效果的目的,也能掌握学生们对于航海英语课程的学校情况。
通过这两年的试卷定量分析,仍然需要进一步的改进,主要体现在学生们对于中文单词翻译成英文单词题目掌握的较差,其余三个类型的题目掌握得较好。这说明学生们对于航海英语的掌握,还是偏重于英语翻译成中文,而对于使用纯英语掌握的较弱。今后,将根据课程的特点,引导学生们能够独立地使用英语进行综合交流和表达,着重提升这方面的能力,以便提高学生们综合运用多方面的知识来解决实际问题的能力。