基于CIPP理论的社区护理实践基地教学质量评价指标构建
2022-09-07方晓风周洋王澜曲桂玉程雪兵
方晓风,周洋,王澜,曲桂玉,程雪兵
教学基地是高质量医学人才培养的重要载体[1]。社区护理实践基地作为开展社区护理实践教学的场所,其教学质量直接决定社区护理教学质量。为响应教育部提出的重视和提高社区护理学教育和学科建设的意见[2-3],各地积极开展社区护理学教学建设及改革工作,促进基地建设。目前,社区护理教育仍存在如护理人员数量不足、专业素养和理论知识水平不高[4]、教学物质资源配置不完善、实践基地选择标准不统一等问题[5],导致社区护理实践教学质量难以得到保证。因此,制订科学可行的社区护理实践基地实践教学质量评价指标,是确保社区护理学教育质量的重要措施。CIPP理论是美国学者斯塔弗尔比姆于20世纪60年代在批判泰勒评价模式的基础上提出的基于“过程”和“决策改进”的评价模式,包括背景(Context)评价、投入(Input)评价、过程(Process)评价和成果(Product)评价4个步骤[6]。目前CIPP理论已多次应用于各类实践教学质量评价、指标体系的构建[7-8]。本研究以CIPP理论为指导构建社区护理实践基地教学评价指标,报告如下。
1 资料与方法
1.1确定指标基本框架 成立6名成员组成的专题小组,包括社区中心主任、副教授及护士长各1名,均为本科及以上学历、具有社区护理实践基地教学工作经验;在读护理硕士研究生3名。全体成员已进行CIPP理论学习,并基于该理论框架,搜索社区护理实践基地教学质量评价的研究现状,中文检索关键词:社区护理学,社区护理,社区实践基地;教学质量评价,指标体系。英文关键词:community nursing,community care,community practice base;teaching quality evaluation,indicator system,target system。根据检索结果,确立社区护理实践基地教学质量评价初步指标,包括4项一级指标、13项二级指标、41项三级指标。
1.2实施专家函询
1.2.1遴选函询专家 纳入标准:从事社区护理、护理管理、高校社区护理教育工作10年以上;副高级及以上职称;同意且能够在规定的时间内持续参加函询。最终选取来自山东省、辽宁省、上海市、北京市、河南省、浙江省、四川省的20名专家,年龄37~54(48.46±6.68)岁;本科10名,硕士8名,博士2名;副高级职称14名,正高6名;从事社区护理教育7名,护理管理6名,社区护理临床7名;工作年限10~20年12名,21~年6名,≥30年2名。
1.2.2实施专家函询 函询表内容包括指导语(研究目的,填写要求)、专家基本信息(姓名、学历、专业领域、工作年限等)、专家判断依据、熟悉程度及社区护理实践基地实践教学质量评价指标专家咨询表。指标的重要性应用Likert 5级评分法,“非常重要”为5分,“比较重要”为4分,“一般重要”为3分,“不太重要”为2分,“不重要”为1分。指标筛选原则:重要性赋值均数>4.0分,变异系数(CV)<0.3,满分率>30%[9]。研究小组依据第1轮函询专家意见筛选及修改条目,拟定第2轮问卷。本研究共进行2轮专家函询,于2021年5~7月通过使用E-mail、微信和QQ的方式发放和回收函询问卷。
1.3初步试用 编制《社区护理实践基地教学质量评价试评表》,随机抽取济南市与潍坊市12个社区护理实践基地,选取3名测评人员(社区卫生服务中心主任1名、高校社区护理教研室主任1名,高校教学质量评价督导人员1名)对抽取的12个社区护理实践基地教学质量进行评价。采用Cronbach′s α系数、组内相关系数检验指标体系的一致性与稳定性。
1.4统计学方法 采用SPSS23.0软件进行分析,用问卷的回收率表示专家积极性;用变异系数和肯德尔协调系数表示专家意见协调程度;应用层次分析法[10]确定各级指标的权重,即根据专家重要性赋值的均数差来确定Saaty标度,建立层次结构论模型,指标两两比较判断矩阵,进行指标层次总排序及一致性检验。检验水准α=0.05。
2 结果
2.1专家的积极性 本研究第1、2轮专家函询分别发放问卷数23、20份,回收有效问卷均为20份,问卷有效率86.96%、100.00%。提出意见的专家人数分别为14人(70.00%)和2人(10.00%)。
2.2专家权威程度(Cr) 用专家的判断依据(Ca)和熟悉程度(Cs)计算,即Cr=(Ca+Cs)/2,本研究Ca为0.90,Cs为0.80,Cr为0.85。
2.3专家意见协调程度 第1、2轮指标的CV值分别为0~0.25、0~0.20(均P<0.001)。专家意见的协调系数,见表1。
表1 专家意见的协调系数
2.4修改并确定最终指标体系 第1轮专家函询,20名专家对一、二级指标无异议;对三级指标提出了修改意见,根据专家意见增设3项、删除5项、修订4项三级指标。第2轮函询2名专家对1项三级指标提出措辞修改建议。最终形成包括4项一级指标、13项二级指标、39项三级指标的社区护理实践基地教学质量评价指标,见表2。
表2 社区护理实践基地教学质量评价指标重要性情况得分及权重
2.5赋值方法及试评结果
2.5.1赋值方法 《社区护理实践基地教学质量评价试评表》由三级指标的39个条目组成,用满意度表示每个指标的评分,分别赋予0~10分。将社区护理实践基地教学质量评价的各项指标得分乘以相应的指标权重,累计相加乘以10得到社区护理实践基地教学质量评价总分。
2.5.2试评结果 指标区分度反映被测试者能力。本指标体系的区分度为0.702,大于0.4[11],表示本指标体系区分度较好;3名测评人员评分的组内相关系数ICC为0.977,>0.8,表明评分结果具有较好的一致性;评分结果的 Cronbach′s α系数均>0.7,表明指标信度较高。见表3。
表3 3名测评人员评价的Cronbach′s α系数
3 讨论
3.1CIPP理论与社区护理实践基地教学质量评价指标相契合 CIPP理论评价是一个循序渐进的过程。其中,背景评价是在特定环境中明确目标,并对其合理性与可行性进行判断;投入评价是在背景评价基础上,对保障质量所需条件的评价;过程评价是教学实施过程中进行监督、检查和反馈;成果评价是对教学成果的评价,包括测量、判断、解释评价方案的成就从而为以后的教学质量评价提供参考依据[12]。基于CIPP理论建立实践教学质量评价指标从不同维度反馈教学实施情况,有针对性地预判社区护理实践教学目标,以调控教学投入与过程的资源与策略,从而保证实际教学目标的有效性[13-15]。社区护理实践基地教学内容涵盖实习、见习等方面,除涉及疾病康复护理、预防接种、健康保健等实践内容,还包括对学生综合能力的判定。因此,实践教学质量评价过程的动态性、阶段性契合于CIPP评价理论,既含有硬件软件配置上的诊断性评价,又兼顾教学过程中的形成性评价与监控反馈机制以及反映培养效果的结果性评价,形成“评价-反馈-改进”的良性循环,确保实践教学工作的持续改进与开展[16]。
3.2基于CIPP理论的社区护理实践基地教学质量评价指标的合理性和实用性
目前对于社区护理实践基地实践教学质量评价,仍缺乏统一、精确的评价指标。本研究成立专题讨论小组,查阅文献初步形成社区护理实践基地教学质量评价指标;选取来自7省市的20名护理管理、社区护理以及高校社区护理教育专家,2轮函询问卷的有效回收率分别为86.96%、100.00%,权威系数为0.85,表明专家积极性和权威程度高。2轮肯德尔和谐系数分别为0.133~0.260、0.149~0.301,均P<0.05,表明意见集中程度高、协调程度稳定。本研究编制的社区护理实践基地教学质量评价指标包含教学背景评价、教学投入评价、教学过程评价和教学成果评价4个维度,全面涵盖社区护理实践教育教学目标内容,通过评价可及时发现教学基地存在的薄弱环节,实施改进,促进教学质量的提高。
3.2.1一级指标 4项一级指标中,教学投入评价权重最高。有研究表明,社区护理实践基地仍存在教学物质资源配置不完善、基地带教师资力量不高[17]等问题,导致社区护理实践基地教学质量难以得到保证。因此在实践教学过程中,保障基地人力物资源合理配置尤为重要。教学过程评价权重排第2位,《基础教育课程改革纲要》指出:“要倡导过程性评价,突出评价促进发展的功能”,因而对学生的实践教学过程评价应着眼于整个教学实施过程并加以反馈。这与李圣洁等[18]的观点一致。实践教学背景评价是实践教学活动的出发点和归宿,旨在确定教学发展和教育需求。有学者认为教学背景评价对于教师的“教学”与学生的“学习”的评估极为有效[19]。本研究中,教学背景评价权重排在第3位。教学成果评价区别于传统的考试成绩对学生作终结性评价,较为全面反映学生情况,在本研究中教学成果评价的权重排在第4位。
3.2.2二级指标 13个二级指标中,管理保障、经费投入、培养设计的组合权重赋值排在前3位,分别为0.1790、0.1266、0.0948。随着国家卫生政策以及护理教学模式的不断变革,招生规模扩大,实践教学的快速发展需要合理地管理才能使实践教学质量得到充分保障。实践基地依然存在没有稳定的经费来源、教育经费投入不足或分配不均衡、无相应的财务管理制度,未专款专用的问题[20],严重影响基地的教学质量。因此各基地应按照规定落实投入责任,建立多元化、可持续的经费保障机制和投入的动态调整机制。社区护理人才的培养应立足于各方需求培养新型服务人才。培养设计属于基地对实践教学工作的顶层设计,体现在基地实践教学的各项工作中,因此实践教学工作必须重视培养设计,才能培养出契合实践教学目标的应用型人才。
3.2.3三级指标 39项三级指标中,组合权重最高的指标为考核方案(0.0894),与更多的学者开始注重实践教学方面的研究有关,有学者构建了基于岗位需求的实践教学方案探讨对学生职业能力的培养效果[21],来保障实践教学质量,可见考核方案对实践教学有非常重要的影响,这与本研究结果一致。
4 小结
本研究构建的社区护理实践基地教学质量评价指标可为社区护理人才的培养、考核提供量化标准,有利于基地教学水平的提高。本研究存在一定的局限性,基于基地实际情况原因,实测基地数量较少,只做了信度检验从而未进行因子分析,下一步应扩大样本量并进行因子分析,实施更为科学的实证研究。