在线考试系统功能优化需求分析——以某部队在线考试系统为例

■ 宋璇 孟海翠 张炜麟

随着军队教育改革的不断深入，信息化手段越来越成为教育教学工作的重要手段，影响着教学领域的各个阶段。考试工作涉及安全性、保密性和公平性，对于教学管理人员和教育者也提出了更多的要求，所以以往单一的纸质考试在某些方面越来越不适应于目前教育信息化的发展，而市场中出现的在线考试系统在多方面亦不适用于相对封闭的士兵训练机构。本文通过对自开发的在线考试系统进行剖析，使用问卷、访谈、数据统计分析等多种形式，总结目前系统出现的问题，提出新的、更加科学的在线考试系统功能结构。

1 在线考试管理系统功能

在线考试系统包括两大模块：考生考试和管理员模块，前台主要是考生考试，考生登录后可直接进行测试、提交试卷；后台主要是管理员模块，主要是管理员进行试题库、试卷组卷、考场设置、考生成绩处理，由于考试模块功能相对简单，本文主要针对管理员模块进行研究。

1.1 在线考试管理系统功能模块概述

在线考试系统管理员模块包括六大功能，系统结构图如图1 所示。

图1 在线考试管理系统模块结构图

1.1.1 试题库管理功能

试题库管理模块可支持试题库导入导出、规范性检测、备份还原和简单的分类分级。如图2 所示。

图2 试题库管理功能图

1.1.2 组织试卷功能

组织试卷管理模块可通过从相应试题库中抽题或设置组卷模式两种方式灵活组织试卷。

1.1.3 考生管理功能

管理员需选择相应的考试，将考生信息，包括准考证号、姓名、证件号、专业、密码导入系统。

1.1.4 人工判卷功能

人工判卷将主观题单独剥离出来，通过机上阅卷的方式得出成绩。

1.1.5 成绩管理功能

管理员可将每场或多场考试导出数据，系统会自动分析每道题目的正确率。

1.2 在线考试程序流程

与传统纸质试卷考试不同，在线考试节省人力、物力，主要需要管理员按照组卷流程，设置试卷，并导入考生，做好相关准备工作。考试程序流程图如图3 所示。

图3 在线考试程序流程图

2 在线考试系统问题分析

在线考试系统在某士兵训练机构应用半年以来，主要进行士兵共同科目、专业理论考试，笔者采用问卷调查的方式，选择使用过在线考试系统的教育者及教学管理人员发放问卷，共发放35份，回收35 份，回收率100%。

2.1 在线考试系统应用效果

对回收数据进行分析，35 人中，教员占57%，教学管理人员占43%，86%人员更倾向于在线考试，14%人员倾向于笔试。可见，在线考试系统应用以来，在使用过程中的优势是比较突出的，无论对教学管理人员还是教员来说，都是一种更加高效、便捷的考试形式。

2.2 在线考试系统问题分析

2.2.1 在线考试与传统考试等效性分析

虽然大多数教员或教学管理人员倾向于在线考试，但仍有29%人员质疑在线考试与传统考试的等效性，认为机考成绩优于笔试成绩，笔者为验证在线考试与传统考试成绩是否存在显著差异，选择某专业同一班次、相似课程纸质试卷考试成绩与在线考试成绩，使用R 软件“meta”程序包中的meta gen（）函数进行随机效应模型下的效应量合并发现，在随机效应模型下，本研究的20 个样本合并效应量Hedges’s g=0.067。依 据 科 恩（Cohen,1988）提出的效应量分析理论，当效应量在0.2～0.5 时，可认为差异较小；当效应量在0.5～0.8 时，可以认为有中等差异；当效应量大于0.8 时，则认为差异很大。本研究的总体效应量低于0.1，说明在线考试成绩与传统考试成绩相比差异很小。并且合并效应量的95%置信区间均包含零。这表明，从已有研究的元分析结果看，在线考试与传统考试成绩之间不存在显著差异，两者具有等效性。

2.2.2 在线考试系统问题缺陷分析

问题5：对目前使用的在线考试系统，你认为有哪些缺点亟待解决？数据统计见表1。

表1 在线考试系统亟待解决的缺点数据统计表

问题6：您觉得该系统还需添加哪些功能？数据统计见表2。

表2 添加功能数据统计表

在使用过在线考试系统的教员或教学管理人员中，大多数人员认为在线考试管理系统中，试题库的建设尚不体系、完整，分类较为简单，一定程度上未达到分类的效果；带有数字的选项有很大概率在试题中无法显示，为在线考试带来了很多准备工作上的困难，也为正式考试带来了可能会出现错误的风险；组卷模式可选用“从所有试题库中抽题”“从指定试题库中抽题”“按组卷模式抽题”，大多数教员选择“从指定试题库中抽题”，教员们反映，这是一种最方便、快捷的组卷方式，这样抽出的试卷在难度上相同，但获取不同的试题，与我们常见的大学英语等级四、六级考试模式类似，但是否是最公正、公平的组卷模式，有待商榷。这时，需要灵活的组卷模式供教员进行试用，如从试题库中组合多套试卷，形成试卷库等；成绩管理功能只能得出每道试题正确率的信息，整体上的合格率、良好率及优秀率，更多深入的分析数据无法获取，如从整体分析，错误集中出现的位置等，可以给教员提供有迹可循的线索；另外，7 人认为在线考试系统“不要再复杂了”，也能体现出用户需要管理系统操作流程更加简化。综上所述，问题反映集中体现在系统的试题库管理、试题导入、组织试卷、模拟练习、成绩分析、流程简化方面，需要根据用户需求进行优化升级。

3 在线考试系统优化升级

考务工作作为士兵训练机构贯穿全年的大项工作，一直致力于形成一套规范、科学、准确、拒绝冗杂的体系化流程，以往繁琐的出题、组卷、印卷、分发试卷、阅卷、归档流程占据了大量的时间和精力，在线考试系统的使用无疑为军队人员解放双手提供极其重要的助力，因此，在使用过程中根据实际不断优化升级，是一项有重大意义的工作。本文通过阐述功能、分析问题、总结需求，为在线考试系统提供了一种面向用户、面向实践的更加真实、人性化的发展线索，笔者将按照功能需求，对管理系统需要优化的子功能进行具体分析。

3.1 试题库管理

目前的试题库管理只具备添加、修改和删除功能。从课程理论来讲，试题应连接具体的专业、课程和知识点，就目前的试题库而言，缺乏这样的连接。因此，优化升级的题库管理结构图如图4 所示。

图4 题库管理功能结构图

试题库建设依托专业、课程、知识点的层级管理，其中知识点查询包括具体知识点、试题难度系数、试题区分度等。为增加试题类型丰富性，试题添加首先分类为图形型试题和文本型试题，同时，为增加试题保密性，对试题查询进行限制，只限管理员可以查询全部试题信息，普通用户只能添加和修改试题。

3.2 模拟练习功能

随着教育教学信息化的深入，士兵训练机构信息化条件建设日渐完善，在线学习室的设置为信息化教学提供了便利，每个专业都可以在自己的教室进行网上学习，因此在线考试系统增加模拟练习功能是基于现实的、具备操作性的功能。

模拟练习功能让在线考试系统的功能空间延伸至课堂，教员可将该环节加入自己的教学设计当中。该功能应支持教员即时加入新题或调取试题库中任意试题进行当堂练习，具体功能结构如图5 所示。

图5 模拟练习功能结构图

3.3 成绩分析功能

在线考试系统应具备成绩自动分析功能，从教育教学管理的实际需求出发，对成绩管理功能进行设计，具体功能结构图如图6 所示。初步设计使用的在线考试系统虽然能够满足在线考试的基本需求，但在一些功能的使用和处理上仍存在缺陷和问题，本文通过调查研究、数据分析对问题进行分析，从而优化在线考试系统，使其在使用过程中更加有效地获得成绩，优化的功能将在下一步得到具体实现。

图6 成绩分析功能结构图