浅析网络阅卷中阅卷员对评分信度的影响

白玉洁+高淑玲

摘要：基于近年来网络评卷的兴起，本文以六级英语翻译真题网评工作为例，以评分信度为主，分析影响阅卷评分信度的主要人为因素，并从中分析其利弊，寻求解决方案，以期能够提升阅卷评分信度，降低人为因素造成的误差。

关键词：网络阅卷 阅卷员 评分信度

信息时代网上阅卷系统已成为现阶段主要阅卷方式。因为它不但可以实现传统阅卷方式下的所有功能，而且还可方便进行包括各科考试知识点数据的全面分析。信度是检验语言测试质量的最重要因素之一。包括试题信度，考试实施信度，评分信度，其中随着考试特别是阅卷方式的改变，网络阅卷中的阅卷评分信度日益引起学界关注。本文主要探讨大学英语六级网上阅卷过程中阅卷员的信度。

一、网络阅卷优势

网上阅卷具有严格的操作程序。首先要把扫描采集的主观题部分按题切割，通过专用网络将数据传送到阅卷点。考生的答题图像会出现在阅卷员的电脑屏幕上，除此之外看不到与此无关的任何信息，管理工作相对规范。每位考生的答卷至少要由两位老师在不同的电脑屏幕上各自独立评阅一次。评分出现误差时会进入三评甚至四评，或是由评卷系统自动“告知”评卷小组负责人，由其裁定。

可以说，与传统阅卷方式相比，网上阅卷具有以下优点：

1.可将评分误差降低到最小程度；

2.取消了试卷流通的人工管理，计算机自动分发试卷，避免出现漏评现象；

3.大学英语六级网上阅卷采用深圳海云天科技公司的软件，精准度高，科学性强，多年来在各类大型考试中备受欢迎。

总之，实行计算机网上评卷，从客观角度以及数据分析来看，这一方式可以尽可能地保证考卷评分的公平公正和分数的精确。

二、影响评分信度的人为因素

在考试仍然是选拔人才重要手段的今天，对考试结果的评判是否客观、公正将影响到人才选拔的质量。评卷公正性事关各类考试的有效性。网上阅卷自动屏蔽考生信息，确保阅卷过程客观公正的功能就可完全满足这一需要。但其中不乏人为因素的影响。包括评卷教师个人的水平、状态、情绪和评卷结果数据处理的手段等。本文主要以分析人为因素为主。

（一）专业文化背景影响评分信度

在本次英语六级翻译阅卷工作中发现：翻译专业学生对于试卷评阅工作理解程度较弱，分析其原因：一方面是可能是由于自身专业水平不到位；另一方面也有可能是具有专业水平，但对于试卷评阅工作中的分值把握或是定档能力欠缺，从而导致综合系数和各项指标距离大盘指数尚有差距，评卷曲线也会出现较大偏离，造成误差。相比之下，学术型硕士虽没有进行专业的翻译实践活动，对于分值的把握上却要为准确。当然，这一情况主要为研究个例，并不能代表全部数据。但从中我们可以看出由于受到专业文化背景的限制，而导致阅卷过程中不利因素的出现，从而降低评分信度。

（二）个人自身条件影响评分信度

网上阅卷很大程度上减轻个人教师传统阅卷工作的负担，但这类工作仍然需要人为参与，并且占据一定时间，所以对于阅卷人员无论是身体还是心理素质都有必然的要求。同时，个人的性格特点和评分倾向对于阅卷工作也会造成一定影响。

三、从大学英语六级翻译试题网络评阅中看阅卷员因素对评分信度的影响

（一）2016年6月翻译测试试题分析

2016年6月英语六级考试中翻译题试题主要涉及“创新”这一话题。针对这一题目，在本次阅卷过程中学生们常见错误有词汇误拼，词语、语法误用等问题。

（二）阅卷结果分析

阅卷采用总体评分法，阅卷员首先依据学生的译文进行整体档次评定，然后对考生翻译中的语法语用错误进行量化，最终得出考生分数。根据阅卷数据统计报告可以得出如下结论：

第一：阅卷参与对象不同，结果不同。

在本次阅卷过程中，主要参与阅卷的人员可分为三类：英语专业背景下的专业硕士（以英语笔译方向为主），学术硕士（以翻译测试方向为主），以及在美国读书的中国学生。鉴于专业背景不同，导致对阅卷工作的理解方式也大相径庭，从而造成同一份试题，评分结果不同，最终影响评分信度。

第二：阅卷过程中常见问题。

1.專业硕士较之学术硕士评卷指数较低。总体而言对于阅卷标准把握不足，总体系数及各项指标偏低，往往出现脱档现象，相较之学术型硕士表现尚佳。

2.在美国读书的中国学生思维方式与理解能力有所偏差。对于中国所提倡的正确使用语法规范没有很好的理解。

3.个人身体素质较弱者无法长时间进行试卷评阅，导致前后出现误差。心理素质不强者一经组长提醒偶尔会出现平均分过高或过低的情况，脱档现象严重，离散指数较差。

第三：问题解析。

就整体情况而言，在阅卷过程中出现的最多问题即反映在评分曲线偏离标准较多，脱档现象普遍，无法准确定位分值等，这些问题除了必要的人为因素以外，本身软件设计上尚存有一定缺陷，对于评分无规律者无法分析数据，则会出现误评现象。

综合上述：人为因素对于阅卷结果会产生重要影响，尤其会影响到评分信度，最终涉及到阅卷质量问题。

四、结语

在社会快速发展、科技日新月异的信息化时代，网上阅卷可以作为广大教师阅卷工作的最佳助力，把教师从繁重的考试阅卷与统计分析工作中解脱出来，并有效确保阅卷质量。因此，作为阅卷员本身，必须要确保评卷结果准确，尽可能避免不利于评卷质量因素产生的机制。

参考文献：

[1]赵海燕，芮楠.双评作文题网上阅卷评卷教师[J].中国考试，2009，（02）.

[2]朱燕，古珍.口语测试中考官评分倾向性研究[J].教育探讨，2015.

（作者简介：[1]白玉洁，西北大学外语学院硕士生，从事英语笔译研究；[2]高淑玲，博士，西北大学外国语学院教授，主要从事英语语言学，语言哲学，测试学研究。）