基于客观结构化临床考试智能考核平台的设计改造和实践
2021-11-30蒋峰孙慧敏
蒋峰,孙慧敏
宁夏回族自治区人民医院 (宁夏银川 750000)
2013年12月31日,原国家卫计委等7部门联合发布的《关于建立住院医师规范化培训制度的指导意见》将住院医师规范化培训上升为国家制度[1]。自此,备受美国、加拿大等国家推崇的客观结构化临床考试(objective structured clinical examination,OSCE)模式在我国医学教育和资格考试领域得到广泛应用[2]。2017年末,我院参照宁夏回族自治区关于《设置住院医师规范化培训结业临床实践技能考核考站实施方案》(宁卫计办发〔2017〕455号)中的指导意见开展了OSCE 考站设计改造与建设,通过借鉴国内临床技能考试方式,设计了可满足现阶段医院OSCE 考核的智能考试系统,历经3年,多场次的考试检验,效果满意[3]。本研究通过对考核平台的不断实践和改造,将适用范围从集中考核扩展到日常培训,有效提高了考站的利用率,节约了医院的教学资源,现作如下介绍。
1 OSCE 系统的设计
按照医院OSCE 智能考核框架的总体设计思路,我院于2018年7月将模拟培训中心4楼连通改造为由12间房及1间中央监控室构成的12站双通道(考生与考官)OSCE 考站,包括考站、候考室、考官室、中央监控室、标准化患者(standardized patients,SP)化妆间及保密室,见图1。
图1 OSCE 考站的弱电平面图
2018年初,我院开始承担省级住院医师规范化培训结业临床实践技能考核OSCE 任务,实现了通过对网络系统、视频监控系统、显示系统、广播系统、对讲系统、管理系统等子系统集成的智能化OSCE 考核,见图2。
图2 OSCE 考站的系统图
2 OSCE 平台的设计
OSCE 的基本思想是“以操作为基础的测验”[4],是一种由SP 或健康志愿者、考官与考生等参加的模拟临床情境的多站式考核方式。统筹、谋划考前、考中、考后3个环节,包含实现信息发布、智能排考、考题编辑、评分设定、智能签到、排队叫号、监控录像、无纸考评及查询分析等7个管理模块,构成了基于客观、有序、有组织,实现知识、技能和态度并重的OSCE 智能考核框架的总体设计思路。(1)OSCE 考站设置模块:支持单站式考核、多站式考核、多站式循环考核及长短站式考核。(2)考核网站管理模块:实现考核通告、公告等信息的添加、发布、删除及查询等,以及提供相关系统和网站的链接。(3)考核信息管理模块:实现对考核资源(考官、考生、SP 或健康志愿者、房间、设备、模型)等系统字典的维护管理,考试房间基础字段包括每个房间的名称、地点、联系人、联系电话、扫码器编号、液晶屏编号及摄像头编号等。(4)角色权限管理模块:实现考务管理员、签到员、考官、考生等相关角色的维护管理和权限设置。(5)人机对话管理模块:实现人机对话试题的维护管理,如临床结果判读、数字化题库建设、组卷设置、试卷编辑及技能评分设置等。(6)考务管理模块:信息管理,签到员、考官可实现考试信息查询和签到,考生可实现个人信息维护、打印准考证及考试查询等;智能排考,通过设置考核时间、考站、考官、考生信息、考生分组、考试模式,实现单站式、多站式队列及多站式轮循、长短站智能排考,同时自动生成排考表和准考证;智能签到,可实现考生通过二维码、身份证等多种验证方式签到,对考试全程进行智能引导;影像记录,可实现考站全景和考生操作的影像记录,不仅可自动存档,且可查询、可追溯;考题推送,可实现考场内显示设备接收及显示考试人员、试题、规则和时间。(7)无纸考评、自动评分、查询分析模块:无纸考评,通过平板电脑、电脑、对讲、监控、单面玻璃等设备设施,实现考官无纸化、零接触监考和评分;自动评分,可实现各类临床结果自动判读,以及客观题自动判分;查询分析,可实现考核结果和操作过程的查询分析,为改进教学提供原始资料。
3 OSCE 平台的应用
3.1 考前考场分配、排考与确认(以5站轮循考核为例)
3.1.1 按照考核时长分配考场
遵循占用考场最多、尽量为长站多分配考场以缩短平均时长的分配原则,分配考场后按照最大平均时长为每站分配时段,分配时段为平均时长的倍数,可实现多种循环(长短站)的智能排考,见表1。
表1 考场分配情况
3.1.2 计算最少分组人数
根据分配时段和分配考场计算最少分组人数,计算公式为:
即200 min 可完成10个考生全部5站的考核,考试时间段尽量选择200 min 的倍数。
3.1.3 按照最少分组人数排考
系统根据考生名单排考,平均分配考生到每个考站,每个考站再将其平均分配至考场,并生成准考证和排考表,见表2。
表2 考生考试考场分配情况
3.2 对考场全景和考生操作的视频全程录制和归档
考核过程中,通过一台数字定焦摄像头和一台数字变焦摄像头分别负责观察、记录考场全景和考生操作,录制的音频和视频将分别储存在硬盘录像机和服务器中,其中硬盘录像机采用24 h 连续监控、循环覆盖模式,最长保持时间为30 d;考官在移动端或监考电脑上确认开考后,通过接口同步向服务器上传视频数据,在确认考核结束或考站设定时间截止后关闭上传,同时数据自动归档,可根据考生、考核时间、考场名称等信息查询和追溯。
3.3 实现无纸化、零接触监考和评分
3.3.1 考官无纸化监考和评分
通过对建立题库、模板、评价单、组题规则及推送规则等实现,考虑到不同学科的专业特性,同时支持多选一、多选多的抽题方式,抽选规则和抽选结果能够实时在考场内大屏中显示,实现了过程的无纸化。
3.3.2 考官零接触的监考和评分
通过对讲系统实现语音交互、双向对讲,以及单面玻璃观察窗监视考场,操纵数字变焦摄像头观察考生局部操作,移动端或电脑端自动加载评分,考场门前显示屏显示考生排号信息,然后通过门前二维码扫描器核实考生身份并准入,实现了全程无接触。
4 OSCE 考核的成效
4.1 OSCE 平台确保了考试客观、有序、有组织
OSCE 考站的实质是临床医学技能考试的工具,目的是为现代三甲医院提供院校教育、毕业后教育和继续教育临床技能的客观、有序、有组织考核方法,实现对考生考核的有效评价。表3是2018—2020年通过OSCE 平台进行的各类考核情况,经3年实践,参考人数不断增加,合格率不断提高,在设计原则、考站架构、考站组成、组织机构管理、资源管理、智能化排课和排考、数据存储分析等功能和OSCE 考核实施方面达到了与国内同行水平相当的成效[5-7]。
表3 2018-2020年通过OSCE 平台进行的各类考核情况汇总
4.2 OSCE 平台实现了考试结果相对公平、公正、客观、可信的目标
以临床实践为基础的评价考核重点内容是临床基本技能、临床规范诊疗能力、临床技能操作能力、临床思维能力、团队合作与人际沟通交流能力、临床教学和科素养[8]。区别于传统平台,我院设计改造的OSCE 平台尤其在应对日常培训和阶段性考核中具有明显的应用优势,因为制约日常培训和阶段性考核的通常是考官的时间,而灵活的考试、考站和考场配置,能够使管理人员更容易组织考核,更加灵活地满足带教师资、住院医师、研究生、进修医师、本科生、护理人员等的考核需求(见图3),获得相对公平、公正、客观、可信的考核结果,且可查询,可追朔。
图3 考场配置例图
4.3 OSCE 平台不断升级是保障考试安全性的基本要求
为了兼顾计算机考试系统和OSCE 的优势,对平台的设计要求包括不断优化考站及计算机系统的安全性、考站的扩展性、系统的多功能性、考试端功能的合理性、界面设计的人性等[9]。总之,维持考核平台的良好运行是一种考验,需要不断对考核平台进行改进,对考核信息进行完善,对新增模块进行扩展集成,对硬件设备进行升级,因此,设计改造符合自身要求的考核平台,并能够自主地根据政策和需求不断改进,对医院培训教学工作具有非常重要的促进意义。