教务管理系统试卷质量量化评价的探讨与实现

周 媛

（福建中医药大学教务处，福建 福州 350122）

课程考试试卷作为对高校学生所学知识和技能的一种考核方式，是学生理解掌握所学知识的原始记录，阶段性和总结性地反映了学生的学习效果。试卷和成绩是在各类教学质量检查和评估中不可或缺的重要材料，通过试卷检查可以发现教学过程中教与学两方面的问题反映，试卷质量真实反映了高校的教学质量水平和质量评价结果，决定了考试质量、成绩的公平和有效性。所以试卷质量评价日渐成为教学质量反馈和评估的核心和重要指标，试卷质量管理也变成高校教学管理的重要组成部分，如何有效地监控和提高试卷质量，可建立考试质量评价系统推动考试质量不断提高[1]。长期以来为了促进试卷命题、评卷和归档的规范化建设，我校多次组织校院两级教学督导组专家，从试卷归档、试卷评阅、试题质量三个方面对全校多个学年学期所有课程进行全覆盖式的抽调性随机检查，检查结果试卷质量方面凸显问题主要集中在试卷格式要求上，说明这种检查方式只能进一步规范试卷形式，却无法对试卷命题质量和内容进行把关和审查。在2016年的审核性评估中共调阅74门课程5737份试卷 ,针对试卷质量问题，各位专家提出了很多宝贵意见和建议，希望进一步提高试卷质量管理工作，采取更有效的措施对考试成绩、试卷、试题进行科学分析，及时发现教学内容和试卷试题中存在的问题，形成长效反馈机制，使教师可以充分了解学生学习情况，自查教学效果和质量，促使其不断总结教学经验、改进出题方法和技巧从而提高试题和试卷质量，确保考试职能的有效发挥。学校教学管理部门也可以根据教学质量评价获取的反馈信息，对整个教学信息进行全方面科学分析，对教学质量和人才培养质量做出价值判断，从而有针对性地调整和改革教学。

一、试卷质量的研究意义和方法

试卷质量可以检验教学质量好坏，考核学生学习水平高低，真实反映学生掌握知识和灵活运用知识的能力，是教学质量评价的核心内容，所以进行试卷质量分析是非常重要的。根据分析结果对试题进行筛选，去粗存精，保留高质量题目，剔除低质量题目，整体提高试卷质量，达到试卷考核的最终目的，体现考试成绩的真实有效和公平性。

试卷质量评价方法一般分为定性和定量两种。定性评价是指对试卷或试题的语言文字的描述是否合理进行分析，如遣词用语是否恰当、题目叙述是否清晰易懂、知识点涵盖是否得当、卷面结构是否合理等一系列语言文字组织的问题的分析；定量评价是指对试卷或试题进行难度、区分度、信度、效度与标准差等定量指标的结算与分析[2]。青海师范大学采取一种利用MATLAB数理统计方法为基础算法的试卷质量分析方法，MATLAB强大的数学运算处理功能，可以大大降低教学管理人员在原先只是简单利用工作软件进行手工计算的工作强度，提高了工作效率和准确性，提高命题质量，为实现教学管理的科学化与规范化提供了一种方便的途径[3]。广东工业大学利用考试质量分折专用软件Examanls，能够迅速、准确地对每一道试题以及整份试卷的总体质量作出科学的比较和评价[4]。东莞理工学院基于知识点的试卷质量分析使评测粒度更加细腻，评价依据更加准确有效，能够真正反映出试卷的实际难度。最后根据评测标准的自身特点，利用OLAP技术对其加以实现，通过实践证明评测标准的有效性[5]。

二、试卷质量量化评价在我校教务管理系统的实现

我校自2014年起引进强智教务管理系统，为了更适应我校的管理模式，有效地提高各岗位工作效率，强智公司派驻技术员为我们进行量身定制开发。试卷质量管理及评价分析模块的研制开发工作，需要岗位工作人员与技术开发人员进行有效沟通，定制合理方案。

1.试卷质量量化指标的算法设计

试卷质量评价通常是利用教育测量学原理和多种统计分析方法，对成绩分布、比较与试卷质量进行分析的结果。通过考核成绩进行试卷质量评价时，首先可采用检验法去验证待测试卷样本量是否满足正态分布，如果随机样本数据不能严格符合正态分布要求，要适当扩大观测样本单位数，使其尽量符合正态分布，在此基础上再对试卷质量进行量化分析。试卷质量量化评价最重要的是要确定试题难度、区分度、试卷信度和效度四项量化指标的算法和要求。

难度是指试题的难易程度，是评价考试的一个非常重要的指标。教师在命制试卷时，务必使整卷试题具有适当的难易度，题目应由易到难，逐步增加，不应太过偏颇，题目太难或太容易，均不利于鉴别出学生的实际水平。一般最常用的难度指标是得分率P,根据试题的客观性和主观性不同，难度指标分别为Pi=ni/N和Pi=Pi=xi/Xmax。客观性试题得分率Pi跟第i道题目通过人数有关，n是该题选择了正确答案的考生数，N是考生总人数；主观性试题得分率Pi跟第i道题目得分平均分有关，xi是第i道题目主观性试题的得分平均分，Xmax是第i道题目的满分得分。难度指标的数值与试题的实标困难程度相反，P值越小，题目越难。P＜0.3为难题；P＞0.8为易题；0.3≤P≤0.8为适中题.

区分度是试题对考生心理特征的区分能力，可以反映学生掌握知识水平高低和能力差异，是筛选试题及评价试题质量的重要指标。区分度高的试卷能将不同水平的考生区分开来，好、中、差三个层次的学生，试卷得分会处在相应的分数段中，学习好的学生得到高分，学习差的学生得到低分；试卷的编制应该要求区分度明显，即应该真实切合学生的真实学习水平，不同层次学生的考试成绩应该处于不同分数段中。区分度的算法一般主观性试题采用极端分组法，客观性试题采用相关法。

信度是指使用同一试卷对考生重复测验时，或两个平行试卷对考生测验时，所得测验分数的一致性和稳定性程度。信度除了要说明成绩的真实性之外，还要说明题目涉及的内容与教学的相关程度。就试卷总体而言，信度高的试题较少受到偶然因素的影响，对任何学生的多次测定，都会产生比较稳定一致的结果。Examanls通过计算内部一致性信度系数间接地估计信度的太小：对客观性试题采用的是目前被认为是最准确的库一理法(Kuder—Richar-sonmethod)的第2O号公式，而对主观性试题采用的则是克龙巴(cr0nbach)的α系数[4]。

效度是指考试有效性或正确性的质量指标，体现考试成绩是否可以准确反映考生掌握知识程度。效度表示题目的得分与试卷总分之间的内在一致性，可以鉴别被试者水平高低，若测试的结果与学生平时学习成绩基本一致，则说明这次考试有较高的效度。试题效度的计算是用该试题得分与总分之间的相关系数表示。

2.试卷质量评价系统的设计

在进行试卷质量系统设计时，要求可以对试卷质量分析相关指标、项目进行加权设定，根据不同试卷要求有效调整信度、效度、区分度、难度在质量分析中的权重比值，通过实际测量值验证评价指标的合理性和科学性。

3.影响试卷质量评价的其他因素

对试卷质量量化指标的分析，实际上是在考试结束后对试卷质量的一种延后性反映，通过试卷成绩高低来判断试卷质量的优劣，就整体提高试卷质量而言，这只是一个方面。根据我校实际情况分析，教师重视考试却轻视试卷分析,试卷分析流于形式，甚至同一科目试卷每次分析结果大致相同，却未真正意义上从试卷分析结果中发现问题，改进试题，提高命题水平。因此，考前做好试卷质量的检验，通过反馈信息，及时发现教和学双方面的薄弱环节和不足之处，有效地改进教学方式，提高教学水平，使教学相长，真正意义上起到检验提高教学质量才是试卷质量分析的目的所在。

三、结语

目前我校教师命题一般都是根据教学大纲和教材内容，以考查学生基本知识和基本理论为主，会出现延用往年试卷，对语言文字等稍作改变，同一理论不同名词单纯反复考试基本概念，作为教师本身没有深入挖掘知识内涵，没有从开发学生综合分析和思维能力的角度去设计题目，知识点较为零散单一，试卷题目整体感觉较为随意和敷衍。为了正确评价试题质量，教师应破除单纯强调知识考核的片面质量观，树立对学生的发展进行全面考核的观念；正确掌握考核依据和范围，以相应的课程大纲为依据，以教材为基本范围，理论联系实际；课程教学内容覆盖要广的前提下突出重点，命题形式多样化，主观题、客观题比例要适当；试卷题目尽量减少机械记忆和简单模仿，适量增加分析、综合、归纳型的题目，以提高学生分析和解决问题的能力，适当引入该门课程目前学科发展的前瞻性内容，理论与实际相结合，以实现课程大纲规定的目标。总之，在对试卷质量量化分析的基础上，要切实重视分析结果，有分析、有解决、有贯彻、有提高。