广东省住院医师培养质量第三方评估效果实证研究
2024-10-30甘莉刘智慧易笑
摘要:目的" 选取广东省6家代表性医院进行住院医师培养质量第三方评价体系的实证研究,评估第三方视角下广东省住院医师的培养质量,了解目前住院医师培养存在的问题与不足,为住院医师培训规范化的发展与改进提供理论基础和改进措施。方法 基于前期的评价体系设计和发放调查问卷,收集具有代表性的6家广东省住培基地的797份评价数据,评价其培养质量并验证该评价体系的评价能力,最后运用模糊综合评价法对调查结果进行分析,并提出针对性的策略和建议。结果" 本第三方评价体系的评价结果与广东省卫生健康委员会的综合评价结果的校标关联效度良好(r=0.977,Plt;0.001),表明本评价体系有效。结论 本研究所构建的住院医师培养质量第三方评价指标体系涵盖了师资管理、用人单位以及住培学生三个关键群体以及11个核心评价维度,科学、客观,通过实证研究为该第三方评价指标体系的进一步推广和住院医师培养质量的提高提供参考。
关键词:第三方评估;住院医师;培养质量;评价体系;实证研究
An empirical study on the effect of third‑party assessment on the quality of residency training in Guangdong province
GAN Li1, LIU Zhihui1, YI Xiao2
1School of Health Management, Southern Medical University, Guangzhou 510515, China; 2Department of Obstetrics and Gynecology,Zhujiang Hospital, Southern Medical University, Guangzhou 510280, China
Abstract: Objective Six representative hospitals in Guangdong Province were selected to conduct an empirical study on the third-party evaluation system of the quality of residency training to assess the quality of residency training in Guangdong Province under the third-party perspective, to understand the problems and deficiencies of the current residency training, and to provide a theoretical basis and improvement measures for the development and improvement of the standardization of residency training. Methods Based on the preliminary design of the evaluation system and the distribution of questionnaires, 797 evaluation data were collected from six representative Guangdong Province residency training bases to evaluate the quality of their training and to verify the evaluation ability of the evaluation system, and finally the results of the survey were analyzed using the fuzzy comprehensive evaluation method, and targeted strategies and suggestions were put forward. Results The calibration correlation validity between the evaluation results of this third-party evaluation system and the comprehensive evaluation results of the Guangdong Provincial Health Commission is good (r=0.977, Plt;0.001), indicating that this evaluation system is effective. Conclusion The third-party evaluation index system for the quality of residency training constructed by this study covers three key groups of faculty management, employers, and students as well as 11 core evaluation dimensions, which is scientific and objective, and provides a reference for the further promotion of the third-party evaluation index system and the improvement of the quality of residency training through empirical research.
Keywords: Third-party evaluation; resident; quality of training; Evaluation systems; empirical studies
中国住院医师规范化培训(以下简称住培)制度自2014年开始实施,至今已累计培训了近110万名医师。全国共有1100多个国家级培训基地和11000多个专业培训基地,年均招生约10万人[1] 。住培制度的建立,对于提升临床医师的专业水平和医疗质量起到了重要作用。然而,中国住院医师培养质量的认证仍面临着诸多挑战,如培训质量的地域差异较大,尚未建立统一的评价体系[2];考核方法较为单一,缺乏详尽的实施计划和有效的监管机制[3, 4];考核过程形式化,存在“人情分”等问题仍没有解决[5]。可见开展第三方评价指标体系构建是提升住培教育质量的关键举措。
在国外,住院医师培养质量的研究与实践已取得显著进展,尤其在发达国家,已经建立了各具特色的住培体系和多样化的考核方法[6-8]。当前,我国也高度重视教育质量的第三方评估,政府和教育部门出台了一系列政策文件,推动教育质量的第三方评估,例如《国务院关于印发“十三五”深化医药卫生体制改革规划的通知》引导规范第三方评估和行业自律,以实现教育评价的多元化、专业化和国际化。第三方评价指标体系的构建,可以规避内部评估风险,使评价结果更为客观、真实,增强教育评价的公信力,有助于发现并解决教育过程中的问题,提高教育培养的质量和效果[9]。
本研究在前期研究的基础上[10],通过广东省住培基地实证研究验证住院医师培养质量第三方评价模型,确保评价体系的可行性,同时分析当前广东省住院医师培养质量的现状和存在问题,提出针对性的优化策略,为该第三方评价体系的应用以及住院医师培养质量的提高提供理论基础和证据支持。
1" 资料与方法
1.1" 资料来源
根据迁移学习理论,培训效果的最佳评估时机是在培训结束后 3~12 个月[11],因此本研究选取了2022年结业的住院医师作为研究对象进行实证研究。同时由于广东省的住培基地众多,共计 61 家,考虑到响应率及其他影响因素,采用目的抽样的方法从大学附属医院(这些基地享有生源质量好、病例和病种多样等优势)、非大学附属医院(这些基地在硬件设施和师资力量方面存在显著发展需求)中选取其中具有典型性的6家住培基地开展问卷调查,分别是A医院、B医院、C医院、D医院、E医院和F医院。
本文基于前期研究结果[10]中的住院医师培养质量第三方评价指标体系对住培师资(用人单位)和住培学生设计调查问卷,每套问卷都包括两大部分,第一部分是基本信息,第二部分是指标相关题目,在该部分涉单选和多选题,是问卷的核心部分。通过问卷星平台发放线上问卷,最终回收住培管理师资(用人单位)问卷 261 份,学生问卷 536 份,共计797份。最后对调查结果进行统计分析,验证评估模型。
1.2" 统计分析方法
采用Excel、SPSS 27.0软件对数据进行清洗和分析。使用模糊综合评价法验证住院医师培养质量第三方评价模型,Pearson相关性分析被用来分析关联效度,统计结果均以双尾检验,Plt;0.05为差异具有统计学意义。
模糊综合评价法步骤[12]:
步骤1 确定评判指标集
一级指标集" U={U1,U2,U3,U4},U1代表学习层……U4代表结果层。
二级指标集" U1={U11,U12,U13},U11代表带教师资……U13代表培训后感受,后续指标以此类推。
三级指标集" U11={U111,U112},U111代表指导老师的教学热情,U112代表指导老师的指导水平,后续指标以此类推。
步骤2 确定指标模糊综合评判集
本研究对评判集分别赋值:优秀为95分,良好为85分,一般为75分,合格为65分,待提高为55分,F={95,85,75,65,55},
步骤3 建立模糊关系矩阵
[R=r11…r1j⋮⋱⋮ri1…rij]
[rij]表示对第i个评价指标做出第j级评语的隶属度。
步骤4 确定指标权重
本研究的指标体系权重A=(a1,a2……am)在前期研究结果中已进行验证(见表1)[10]
步骤5 建立综合评价模型B
B=A×R=(a1,a2……am)[r11…r1j⋮⋱⋮ri1…rij]
步骤6 计算综合得分
M=B×F
2" 结果
2.1" 调查对象基本信息描述
本次实证调查中,共调查师资(用人单位)261名,其中A医院27名占比10.34%;B医院88名占比最多(33.72%);其次是C医院43名占比16.48%;D医院40名占比15.33%;E医院38名占比14.56%;F医院最少,25名占比9.57%。大部分来自住培指导医师,有149名占比57.09%;少部分来自教学秘书,有76名占比29.11%。
调查学生536名,B医院188名占比最多(35.07%),后面依次是C医院169(31.53%)、A医院87(16.23%)、E医院41(7.65)、D医院27(5.04)、F医院24(4.48)。其中女生较多285名,占比53.17%;27~29岁年龄段最多258名,占比48.13%;其次是24~26岁,173人占比32.28%;105人≥30岁,占比19.59%。
2.2" 第三方评价的综合得分分析
使用模糊综合评价法计算综合得分,其中A医院和B医院的综合得分较高,分别为89.580分和89.294分。C医院为85.809分,D医院85.751分,E医院81.665分,而F医院的综合得分相对来说偏低,仅有79.285分。。
2.3" 效标关联效度分析
选取广东省卫生健康委员会2022年度住院医师规范化培训基地的综合评价结果作为校标,与本研究第三方评价结果进行效标关联度效度分析,Pearson相关性结果显示,第三方住院医师培养质量评价排名和广东省住培基地综合评价结果在Plt;0.001的显著水平上呈正相关(r=0.977),表明该第三方住院医师培养质量评估体系的校标关联效度良好,具有较强的评价效果。
2.4" 第三方评价的各维度得分分析
从综合得分来看,A医院和B医院的综合得分高,培养质量优秀。A医院在各维度得分均较高,但学员对基地的影响得分最低,需提高招收完成率和推荐意愿。B医院整体培养质量高,学生初始质量和社会声誉得分最高,但学员对基地影响维度需提升。C医院在各维度得分比较平均,需在带教师资、培训方法和培训后感受方面加强。E医院整体培养质量不高,但在学生和管理师资的主观评价、知识技能和病人照护维度得分高,但考核考试和社会声誉维度得分低。F医院培养质量最低,缺乏优质生源和规范管理,但学员对基地影响得分最高,招收完成率和报录比较突出(表2)。
3" 讨论
通过实证研究,基于前期研究构建的住院医师培养质量第三方评价指标体系,本研究证实该第三方住院医师培养质量评估体系与广东省2022年住培评价结果的校标关联效度结果良好,评价效果较好。
从综合得分来看,A医院和B医院的综合得分较高,总体上的培养质量很优秀,而F医院的培养质量得分相对来说偏低。从各个维度的得分来看,A医院在各个维度得分均偏高,这说明该医院住培基地各个维度水平较其他基地良好,培养质量较高,对学生的考核成绩非常重视,注重生源质量和学生培养,但是,学员对基地的影响得分在6家基地中得分最低说明A医院的培养质量虽然较高,但是招收完成率和学员推荐意愿有待提高。B医院整体培养质量较高,其中学生初始质量和住培基地的社会声誉得分最高,说明该基地对生源质量把控严格,重视社会评价,严把入口关和出口关,因此考核考试和用人单位评价水平也相对来说较高,但是在学员对基地影响维度仍需提高。C医院在各维度得分比较平均,该基地大部分维度得分接近平均水平,但在带教师资、培训方法和培训后感受得分方面还有待提高,说明医院在抓学生培养质量的同时也需要增加人文关怀。E医院虽然整体培养质量不高,但是在学生和管理师资的主观评价等维度得分很高。该基地的带教师资、培训方法和培训后感受在6家基地中得分最高,说明学生对该基地的满意度评分较高。不仅如此,该基地学生在知识技能和病人照护维度得分也是最高的,说明C医院对本学生的人文素质教育较好[13]。但是该基地在考核考试和住培基地的社会声誉维度得分最低,这和该基地学生的初始质量较低有关。F医院在6家基地中的培养质量最低,一方面该基地既缺乏优质生源,另一方面又缺乏科学规范的管理制度。但在学员对基地的影响维度得分却最高,说明该基地虽然在其他维度水平有待提高,但是在招收完成率以及学员报录比方面却做的比较突出。
综合以上结果,通过该第三方评估指标体系可以看出不同医院的培养质量在不同维度下的差异较大,尤其是珠三角与粤东西北地区的经济发达地区与经济欠发达地区之间的差异,且影响因素较多,但仍存在一些共性问题可被解决以提高未来的住培质量。
3.1" 缺乏专项经费,培训需求得不到满足
政府应设立专项基金以减少地区间医疗水平的差异,并全面提升医疗服务的整体质量。通过确保住院医师在培训期间的资金需求得到满足,优化财政资源的分配,以减少不同地区和基地之间的医疗服务质量差异[14]。对于广东省内经济相对落后和偏远地区的住院医师培训基地,应提供更多的财政支持,以提高基地的基础设施建设和住院医师的生活水平,从而吸引更多优秀人才,提升培训基地的教育质量[14]。
3.2" 缺乏培训基地的标准化建设,地区间差异较大
鼓励实施互助计划,这些计划旨在帮助那些基础条件较差、培训质量有待提高的基地和地区,通过提供实际的帮助和支持,提高这些地区的培训质量和水平。一个关键措施是建立示范培训基地[15],并鼓励优秀的基地与落后的基地建立互助关系,共同促进培训工作的改进和提升。组织专家团队到需要帮助的基地进行交流,深入分析存在的问题,并提出改进建议,为培训工作的持续改进提供支持,实现从依赖外部支持到自我发展的转变[16]。
3.3" 缺乏严格的师资准入标准,教学质量参差不齐
应加强师资队伍的选拔和培训,促进专业师资队伍的高质量发展[17]。建立师资选拔、培训、聘任、评价、督导[18]、激励和退出机制,将住院医师培训导师的教学工作量等同于临床(科研)工作量,并与职称晋升、绩效分配紧密结合。加强师资队伍建设,建立教师培训和考核档案,将师资培训合格证书作为住院医师培训导师岗位的必要条件,实施统一培训和持证上岗。此外,通过组织核心导师团队[19],根据教学大纲设计骨干师资培训课程,积极探索提高专业师资组织管理、临床教学、教学评估和教学研究能力的教学实践活动,推动专业师资队伍的高质量发展。
参考文献:
[1]" " 齐学进. 我国住院医师规范化培训工作十年回顾与思考[J]. 中国毕业后医学教育, 2024, 8(01): 1-6.
[2]" " 李" 妮, 刘铁梅. 我国住院医师规范化培训的历程、成效及问题分析[J]. 中国医药导报, 2022, 19(09):190-3.
[3]" " 陈皓阳, 穆" 林, 莫雯茜, 等. 我国住培医师规范化培训现状的系统评价[J]. 卫生经济研究, 2022, 39(01): 73-7.
[4]" " 孙加强, 黄凤茜, 申玉杰. 广东省住培医师规范化培训现状调查[J]. 医学与社会, 2016, 29(05): 81-4.
[5]" " 范阳东, 朱艳玲, 张" 青, 等. 广州市住培医师规范化培训存在的问题及对策建议[J]. 中国卫生事业管理, 2020, 37(01): 58-61.
[6]" "OLMBOE E S, SHERBINO E, LONG D M,et al. The role of assessment in competency‑based medical education[J]. Medical Teacher, 2010, 32(8): 676-682.
[7]" " Swing, Susan R . The ACGME outcome project: retrospective and prospective[J]. Medical Teacher, 2009, 29(7):648-654.
[8]" " 王" 禅, 马晓静, 焦庆仕, 等. 住院医师规范化培训中的问题及国际经验启示[J]. 中国医院管理, 2017, 37(09):50-2.
[9]" " 喜" 梅, 陈沛酉.基于职业院校视角的职业教育质量第三方评估探析[J]. 职业技术教育, 2022, 43(19): 55-60.
[10]" 刘智慧, 余" 杨, 韩" 越, 等.住院医师规范化培训质量评价指标体系构建[J]. 中国卫生事业管理, 2024, 41(04): 438-44.
[11]" 杨名钫, 马" 芳. PICC技术规范化培训后迁移行为及其影响因素的纵向研究[J]. 护理学杂志, 2021, 36 (05): 59-61.
[12]" 邓玉琴. 基于模糊层次分析法的医药电商平台服务评价分析[J]. 中国市场, 2024, (22):195-8.
[13]" 杨朝美, 尹" 韬. 住院医师规范化培训档案管理的难题与解决对策[J]. 办公室业务, 2024, (16): 100-102.
[14]" 朱海珊, 王晓曼. 广东省住院医师规范化培训实施现状、问题及对策[J]. 中国卫生政策研究, 2014, 7(8): 73-6.
[15]" 王宝玉, 陈" 钢, 周梦伊, 等." 住院医师规范化培训基地高质量发展实践与探索[J]. 中华医院管理杂志, 2022, 38(8) : 627-30.
[16]" 钟" 敏,王晓鸽. 以团队培训推动学习型组织的建设和领导培养[J]. 继续教育, 2008, (02):23-25.
[17]" 胡慧芳, 都继微. 医疗护理员培训现状的质性研究与思考[J]. 中华现代护理杂志, 2023, 29(33) : 4596-600.
[18]" 张淯枫. 中医住院医师规范化培训院级督导工作若干思考[J]. 中国中医药现代远程教育, 2024, 22(12):199-202.
[19]" 张欣亮, 吴跃东, 李会荣. 澳大利亚教师文化胜任力测评的特色透析[J/OL]. 比较教育学报, 1-18.
(编辑:郎" 朗)
收稿日期:2024-03-13
基金项目:广东省医师协会指令性项目“广东省住院医师规范化培训质量第三方评价体系的构建”( ZP202207)
作者简介:甘" 莉,硕士,E-mail: ligan153@163.com
通讯作者:易" 笑,博士,副教授,E-mail: yixiao9309@163.com