研究生招生考试网上评卷精细化管理研究
2020-05-25吴瑞华
摘 要:在分析研究生招生考试评卷现状的基础上,提出研究生招生考试网上评卷优势明显,完全可以克服传统纸质方式评卷的不足。结合研究生招生考试的特点,构建了研究生招生考试网上评卷系统,提出完善的业务流程精细化管理是保证网上评卷质量的重要保障。
关键词:研究生招生考试;传统纸质评卷;网上评卷
中图分类号:G640 文献标志码:A 文章编号:2096-000X(2020)16-0164-04
Abstract: On the basis of analyzing the status quo of the graduate enrollment examination, it is proposed that the online marking of graduate enrollment examination has obvious advantages, which can completely overcome the shortcomings of traditional paper-based marking. Combined with the characteristics of the graduate enrollment examination, the online marking system for graduate enrollment examinations was constructed, and fine management of the perfect business process is an important guarantee for ensuring the quality of online marking.
Keywords: Graduate Enrollment Examination; traditional paper-based marking; online marking
教育部公布的数据显示,2019年全国考研报名人数达到了史无前例的290万人,比2018年增加了52万人,增幅达到了21.8%,研究生报考人数的快速上涨引发了社会的广泛关注。研究生招生考试初试科目一般为4门,除了全国统考科目以外,两门业务课考试多是由招生单位自行命题、自行评卷的。高校研究生招生考试评卷时间大约3-7天,时间短、任务重、要求高等研究生招生评卷工作特点,要求招生单位必须确保评卷工作的严肃性、规范性、客观性和准确性。改革研究生招生考试传统的纸本评卷模式,借鉴高考等标准化考试网上评卷的经验,结合研究生招生考试的特点,探讨研究生招生考试网上评卷是新时期研究生招生改革的重要内容之一。
一、研究生招生考试评卷现状分析
据调查了解,全国大多数高校研究生招生考试评卷采用传统的纸质评卷方式,即评卷教师在纸本答卷上手工完成评卷工作任务。每年元月初,高校研究生招生管理部门收齐来自全国各考点寄回的自命题考试科目答卷后,按照考试科目整理、密封装订全部答卷,选拔并聘任符合研究生招生考试评卷资格的教师,组织评卷教师在规定的时间内、规定的评卷场地、按照研究生招生评卷工作要求和试题标准答案评分细则用红笔在考生答卷上进行评卷。
传统手工评卷的不足在于:1. 无法实现独立评卷不受干扰的客观要求,无法控制评卷误差,评卷质量较低。纸质方式评卷的二次评分时,第二位评卷教师可以看到第一位评卷教师评分痕迹及给分,容易存在依赖心理,难以实现独立评卷不受干扰的客观要求。纸质评卷无法设置多次评卷的误差值,主观题评卷结果的质量控制实施难度大。2. 纸质方式评卷无法实时监控评卷过程、进度及结果,难以杜绝漏评试卷,无法实时统计、分析考试成绩。3. 评卷过程中需要花费大量的人力、物力在记分、统分、登分等事务性工作中,招生管理部门需要组织大量的工作人员反复检查核对初试成绩数据,评卷工作效率低下、评卷成本高。
随着计算机网络技术、扫描图像识别技术和海量图像数据云存储技术的快速发展,网上评卷已经成为国内大规模标准化考试的主流评卷方式。网上评卷主要是指利用计算机网络、高速图像扫描与识别技术、大型分布式数据库、大容量智能化网络存储设备等先进技术,通过电子扫描设备将考生的纸质答卷扫描成电子图片,结合传统的评卷经验,实现客观题自动出分、主观题由评卷老师通过计算机进行网上评卷,评卷系统自动统计合并考生的客观题和主观题成绩的一种评卷方式。
网上评卷不但解决了考试评卷的公正性和准确性难题,而且可以较好的实现教育测量和教学诊断的科学化[1]。其优势具体体现在:1.网上评卷可以实现独立评卷,降低评卷误差,提高评卷质量和评卷效率。网上评卷系统为每位评卷教师设立独立的评卷账号,每位评卷教师各自独立评卷,当两位评卷教师对同一份答卷的评分差异超过预先设定的误差值时,答卷会自动提交给评卷小组长进行三评,特别有异议的,甚至可以提交给评卷大组长进行四评,从而可以大大降低主观题评卷的误差。根据数理统计概率论乘法定理,如果1名教师发生评卷差错的概率为1%,那么1份试卷由两名教师独立评卷都发生差错的概率为1%*1%=1?酃[2]。网上评卷以技术手段保障了多次独立评卷制度的实现,有利于提高评卷的公正性、客观性和准确性,可以有效地保护考生的切身利益。2. 网上评卷系统可以实现监控评卷教师的评分过程、进度及结果,不会出现漏评情况。评卷系统的管理端可以实时进行成绩数据分析,实时对各分数段的成绩进行统计分析,核查得分为“零分”的试卷进行排查分析。3. 网上评卷系统自动保存评卷分值、自动统分,评卷效率高。評卷教师登录系统后,直接在计算机上进行评卷给分,评卷结束后评卷系统自动合并生成考生的成绩,最大限度地避免纸质评卷方式中容易出现的漏登分、记错分、把关不严等问题。
我国扫描网上评卷模式始于20世纪90年代末,应用于高考、英语等级考试等国内标准化、大规模考试的网上评卷模式已经成为主流评卷方式。标准化考试的题型一般分为客观题和主观题,客观题答题卡由考生用2B铅笔填涂回答,主观题答题卡的最大特点是每道题的答题区域在答题卡上是固定的,考生在规定答题区域之外的任何位置答题一律不得分;评卷扫描时可以对答题卡的不同题型评测区域进行标定划分,按照标定划分设置裁切主观题答题图片,评卷教师登录系统后,评卷界面只显示需要评阅的答题内容;评卷时只需要按照标准答案的评分要求给出分值,系统自动将分值附在标定的答题卡评分位置上。
高校研究生招生考试自命题考试具有不同于标准化考试的特点如下:1. 研究生招生考试要求考生将答案书写在标准的答题纸上,没有类似于标准化考试的客观题和主观题的答题卡。研究生招生考试自命题考试科目少则几十个、多则上百个,每个考试科目试题的题型不同、题量不同,部分考试科目设置了选做题目,选做题类型多,有简答题、计算题、判断题、论述题等,不同专业、不同研究方向对考生选做题也有不同的要求,没有标准的答题卡,无法固定每一道主观题的答题区域。2. 研究生招生考试答卷无法按照答题区域裁切主观题答案图片。由于研究生招生考试无法固定考生答题区域,无法按照标定答题区域的方式裁切考生的主观题答案图片,只能按照答卷的页码顺序进行图片裁切。为确保不漏评考生回答的任何内容,评卷教师登录系统后,通过翻阅答卷查找考生的答题位置,在相应答题位置根据评分细则评出分数。相对于标准化考试,评卷教师的评卷步骤比标准化考试多一个步骤,即评卷教师需要先在给分板上评出分数,然后点击考生答卷上的答题区域,这样才能将试题得分与答题区域一一对应,并保留评卷痕迹。
2019年我校研究生招生考试报名人数突破2万,自命题考试科目98门,自命题考试答卷近3万份,网上评卷工作实施顺利,大大节省了评卷环节的人力、物力,更有利于招考管理部门的保密管理、分数统计和数据使用,提高了工作效率,降低了评卷成本,为研究生招生考试网上评卷工作打开了新的思路。
二、研究生招生考试网上评卷系统的构建
研究生网上评卷系统是基于扫描图像存储阶段和网上评卷阶段两大技术的融合,从数据层、服务层和应用层构建研究生招生考试网上评卷系统。
(一)数据层
数据层主要通过扫描评卷数据库,支持服务层和应用层对答卷数据的读取。通过高速扫描设备,将考生纸质答卷扫描成电子图片,扫描评卷数据库分类存储考生基本信息(含考生姓名、考生编号、考试科目代码和名称、考试场次信息、考点信息、考场信息、座位号等)、考卷图像数据、评卷轨迹、评分结果及各类异常检测结果等数据。
(二)服务层
服务层是数据层与应用层之间的逻辑层,主要是为应用层提供核心技术服务,具体包括图文识别服务、图像检测服务、海量图像存储服务等。
(三)应用层
应用层主要实现智能数据采集功能,包括扫描客户端和扫描管理端。目的是实现纸质答卷图像的高效扫描采集,并支持答卷电子图像的数据校验。在纸质答卷的扫描过程中,扫描管理端口可依据扫描客户端的图片裁切标定结果,对扫描图像自动进行版面分析、灰度值分析等,高效、精准地校验扫描数据,自动筛查出空白题、空白答卷、重扫答卷、图像歪斜、图像不清晰、图像折页、重复扫描等异常图像[3]。扫描采集的图像数据与经过图像检测筛查出的异常扫描图像数据,进行差异化处理后作为网上评卷系统的输入数据。
研究生招生考试网上评卷系统应用流程主要分为6个阶段:1. 考生考试基本信息电子化准备,即考生答卷信息条形码生成打印和粘贴阶段;2. 扫描阶段:通过扫描设备,将考生各科目的答卷内容扫描到数据库,并转化成电子图像;按照答卷顺序页码裁切答卷图像;检测出空白卷、空白题、图像不清晰、图像歪斜、图像折页、重复扫描等异常情况,并登记处理异常答卷;3. 由评卷管理人员创建评卷教师账号、设置各科目每一道题的分值和总分分值;4. 评卷教师登录系统,通过浏览器查看考生答卷电子图像,根据评分标准评卷给分;5. 评卷系统自动保存评卷结果,统计汇总考生各科目考试成绩;6. 评卷质检复核和评卷成绩分析,处理评卷异常情况。
三、研究生招生考试网上评卷的精细化管理
除了建立严格的网上评卷管理制度外,完善的业务流程精细化管理是保证网上评卷质量的重要保障。研究生招生考试网上评卷业务流程分为准备、实施和核查三个阶段,每个阶段工作都要有针对性地精细化管理措施。
(一)准备阶段的精细化管理
1. 考生考试基本信息电子化准备
考生基本信息电子化准备主要是考生答卷信息条码生成打印和粘贴,这是研究生招生考试网上评卷的第一步,这一步是确保网上评卷工作准确性的首要环节。首先要生成包含有考生姓名、考生编号、考试科目代码及名称、考点信息、考试场次、考场号和座位号等内容的考生信息条形码,在打印考生考试信息条形码之前,需要根据条码打印要求,反复核查考生信息,防止由于考生信息条形码编排而造成考生考试信息不一致的情况;在条形码打印时,需要反复核对和扫描检测,确保每一考生的条码信息打印清晰,且能够正确无误地被计算机唯一识别。
研究生招生考试考点分布在全国各省市,而研究生招生考试自命题科目网上评卷是高校自愿采用的评卷方式,所以研究生招生考试自命题科目考生信息条形码的粘贴工作无法在考场完成,只能由招生管理部门来完成。在答题纸密封区域粘贴考生信息条形码,必须采用3人工作小组的方式进行,即一个人负责核对考生答卷上的个人信息、一个人负责核对并张贴考生信息条形码、一个人负责登记考生答卷张数和缺考考生信息。3个人相互核对考生编号、姓名、考試科目等关键信息,确保答题纸上的考生信息与考生答卷信息条形码完全一致。各小组统计的考生答卷页数、缺考考生信息汇总后,是网上评卷扫描答卷存储图像数量核对的依据。
2. 考生答卷图像扫描
网上评卷的基础性工作之一是将考试纸本答卷扫描成符合评阅要求的电子图片[4],答卷扫描图像的质量是影响评卷教师的评卷效率、保证评卷质量的重要环节。扫描之前要对扫描设备硬件进行检验与校正,对电子扫描仪器进行调试和检测,重点检验扫描设备机械走纸的稳定性、卡纸与重张的概率;同时对计算机局域网络及存储设备进行检验,确保答卷的电子图像存储符合评卷要求;扫描过程中实时监测答卷扫描图像质量,对不同扫描设备扫描的图像分时段进行抽检,将扫描的图像和考生答卷原图进行比对,主要检查扫描图像正反面是否和原图一致、图像扫描是否清晰、是否有漏扫、答卷页码順序是否有混乱、是否有折叠、是否有歪斜等情况,一旦发现立即重新扫描,确保每科目应扫考生答卷数量与实际扫描存储图像数量完全一致,每名考生每个考试科目的答卷已经扫描标志和实际图像存储完全一致,扫描结束后利用网上评卷系统的图像检测功能,筛查出空白卷、重复卷等异常情况,及时进行处理。
(二)评卷实施阶段的精细化管理
1. 评卷过程轨迹化
标准化考试最大的特点之一是每道题的答题位置在答卷上是固定的,考生在规定答题位置之外的任何位置答题一律不得分;答卷完全可以根据预定的标定划分裁切答卷图片,评卷教师只负责评阅某一道题。而研究生招生考试网上评卷,评卷教师只能通过翻阅答卷查找需评阅的内容,根据评分细则标准评出得分,研究生招生考试网上评卷操作的给分步骤稍显复杂些。实践证明,研究生招生考试网上评卷必须实行“有轨评卷”,有轨评卷符合教育部有关管理规定,而且醒目的评卷痕迹,便于后期的评卷结果核查和评估。评卷结束在征求评卷教师的意见时,大多数评卷教师非常赞同网上评卷的“有轨评卷”方式,网上评卷减轻了登分和统分的工作量,评卷教师可以将更多的时间和精力用于评阅答卷内容,有轨评卷方便评卷教师查看评卷痕迹,独立双评答卷可以更好地保证评卷质量,大大提高了评卷效率,降低了评卷差错率。
2. 问题卷的跟踪处理
问题卷的表现形式主要有考生考试信息条形码无法识别、考生考试信息条形码破损、答卷上没有考生考试信息条形码条码、答卷图像不清晰、答卷页码顺序混乱、答卷重复多页、答卷缺页、答卷折页、答卷歪斜等情况。问题卷的专人负责跟踪处理是确保网上评卷工作顺利进行的关键环节。问题卷的处理主要包括扫描中发现的问题卷、评卷现场提交的问题卷等。所有问题卷的处理应严格按照《问题卷处理流程管理》进行,即发现问题卷,先填写异常卷登记表,明确问题原因后,提出处理意见,每一个处理环节均落实到专人负责,均应有记录,并由相关责任人签字确认,确保数据处理的完整性和准确性。评卷结束后,全面核查问题卷的评卷痕迹和评卷结果,杜绝问题卷评卷错误。
(三)核查阶段的精细化管理
网上评卷数据核查是评卷质量的重要保障,评卷质量核查贯穿于整个评卷过程中[5]。评卷质量核查体现在四个方面:1. 扫描图片存储质量核查,主要包括答卷图像切割情况核查及答卷图像质量核查。2. 评分核查,主要包括评分轨迹核查、各题得分情况核查、双评成绩误差值超范围情况核查、问题卷的重新评定核查等。3. 考生成绩交叉核查,主要是对考生缺考科目一致性核查、考生选做题内各小题得分的相关性核查,实考考生各小题得分为零分核查、实考考生总得分为零分核查、各科目相关性核查(如两门业务课成绩差异大,如一门课高分、一门课低分或缺考)等。4. 成绩合成核查。成绩合成后应针对考生的得分情况,运用概率论“独立重复试验”原理进行人工核查。如随机抽取答卷,人工计算考生的总成绩,与评卷系统给出的成绩进行核查比对。一旦发现人工计算的总成绩与计算机合成的总成绩不一致,必须查找原因,并登记备案,相关负责人签字确认后进行统一修改。
研究生招生考试网上评卷是未来的发展趋势,其整个业务流程与传统纸质评卷方式不同,需要结合网上评卷可能遇到的新问题新挑战,不但完善业务流程精细化管理,从而确保研究生招生考试评卷质量,确实保证每一位考生的切身利益。
本研究感谢科大讯飞股份有限公司武汉启明分公司给予技术支持。
参考文献:
[1]钱建良.教育考试新一代网上评卷系统架构的实践及探索[J].中国考试,2014(7):49-54.
[2]赵建宁,厉浩.以考生为本的高考网上评卷精细化管理研究[J].中国考试,2012(2):28-31.
[3]汪张龙,等.纸笔考试智能网上评卷系统的设计和应用[J].现代教育技术,2018(3):5-11.
[4]蔡武越.网上评卷海量图像数据云存储技术应用探析[J].中国考试,2017(6):48-54.
[5]何屹松,等.新一代智能网上评卷系统的技术实现及在高考网评中的应用实例分析[J].中国考试,2019(1):57-65.
基金项目:本论文为2019年广东省研究生教育创新计划项目“研究生招生考试中考试组织管理机制的探索与研究”(编号:2019JGXM34)阶段性研究成果
作者简介:吴瑞华(1972-),女,汉族,湖北保康人,管理学博士,讲师,研究方向:高等教育政策分析和高等教育管理。