APP下载

基于柯克帕特里克评估模型的教学质量评价体系构建

2024-10-14禹偶然

现代职业教育·高职高专 2024年26期

[摘 要] 针对职业学校教师教学质量评估中评估方法的单一性、评估周期的短期性、评估内容的局限性问题,利用柯克帕特里克评估模型开展对职业学校教师教学质量评估体系优化的研究。研究采取参照组和控制组的实证研究方法,结果分析显示,把教师教学质量评估适当延长至学生实习实践,不仅增强了学生的学习效果,而且提升了职业学校教师的教学质量。研究结论不仅丰富了柯克帕特里克评估模型的相关理论基础,而且为职业学校如何优化教师教学质量评估提供了有益的启发和建议。

[关 键 词] 教学质量;评价体系;职业学校;柯克帕特里克评估模型

[中图分类号] G717 [文献标志码] A [文章编号] 2096-0603(2024)26-0053-04

2019年1月,国务院印发的《国家职业教育改革实施方案》奠定了职业教育的发展地位。党的二十大报告中明确指出:“职业教育是与普通教育具有同等重要地位的教育类型,是培养多样化人才、传承技术技能、促进就业创业的重要路径。”这为我国职业教育指明了方向。同时,我们也应该看到,由于我国开展职业教育的时间较短,教师评价方法仍然按照传统高等教育的评价方法进行评价,无法做到真正的产教融合,还存在学、工、产业分离严重、管理分散、知识割裂明显的问题。如何找到一种可操作的,能够充分调动教师、学生积极性的职业学院教师教学质量评价方式是当前职业教育的一个重要命题。

一、问题的提出

在当前职业教育中,考核和评价是一个重要的教学环节,通过考核,发现教学中的不足,不断提升教学质量,一直是教学的重要内容。然而,当前对职业教育教学质量的评估采取的方法比较单一,通常以考试、测验、作业、论文为主,对知识如何应用以及应用后产生的影响等内容考察较少,并且考察的主体主要是校内教学督导部门,考察的范围仅限于校内考核。同时,在学生实习实践中,有时又缺少具体目标,这一方面使学生实习时间缺少目标指引,实习效果不佳,同时也使学校对学生实习实践的考核缺少可以对照的指标与标准,因为无法更好衡量学生实习实践的效果,当然也无法提出更好的改进策略。

新的教育教学理念指出,教学只是学生教育的一个重要环节,教育教学是一个涉及学生学习、知识应用与实践成才的系统理念,这个理念同样适用于我国的职业教育。因此,在保障学生教学质量的前提下,探索更好的知识应用与学生培育是职业教育的重要挑战。

因此,基于上述分析,以具体的课程为研究对象,以把学校与企业联系起来综合评价教学成果为思路,以促进学生全面成长为目的,以优化职业学校教师评价体系、真正实施职业教育教学的高质量发展为本文的研究目的。

二、基础理论

柯克帕特里克四级评估模型是著名学者唐纳德.L.柯克帕特里克(Donald.L.Kirkpatrick)于1959年提出的,是应用非常广泛的评估培训效果的有效工具。其具体内容见表1。

由表1可知,柯克帕特里克四级评估模型从四个方面来评价培训的效果,分别是反应层、学习层、行为层和结果层,这是知识学习到转化应用的一个过程,可以系统、全面地评估一个培训所带来的影响。

柯克帕特里克评估模型应用的可行性分析。职业教育的定位就是培训学生学以致用,“干中学”“学中干”,对知识的掌握和应用是衡量教学成果与成效的重要内容,这与柯克帕特里克评估模型的评估理念是一致的。同时,许多学者也在探索利用柯克帕特里克评估模型对培训效果进行衡量,并取得了很好的效果。因此,本研究拟利用柯克帕特里克评估模型评价信息技术这门课程的教学成果。

选择信息技术这门课,主要基于三个原因:(1)这是学生的必修课,这门课程的学习效果对其他进阶课程的学习非常重要;(2)这门课程也是一门应用性很强的专业课程,在工作中应用范围很广,可以通过学生实习实践来衡量这门课的授课质量;(3)这门课是一学年的课程,这门课结束后,在暑假的时候通过学校的假期实习安排学生对本课程的实习实践,可以系统收集学生在学习该课程后的系列变化,增强研究的可行性。

在变量的选择上,反应层变量选择学生在期末时对教师的考评表,学习层变量选择学生的期末成绩,行为层变量选择在实习阶段学生的行为变化,结果层变量选择在实习结束后学生的可见性的成果展示。

在研究操控上,选择有参照组(2班)和控制组(1班)的前测和后测,通过不同阶段研究数据的对比来检验分析,总结研究结论。

三、研究设计

1.研究对象的选择。本研究选择了学校的数字媒体1班、数字媒体2班,这两个班是平行班,学生学习成绩、学习能力基本相同。同时开信息技术这门课,其中,1班是笔者所带的班,2班是另一位教师所带的班,这位教师的职称以及学校考评结果与笔者是一样的,而且由于同属于一个课程组,所以使用的教材、教案等都相同。

2.研究过程与设计。第一阶段,选择1班、2班作为研究对象,其中,由于笔者开展研究的需要,深刻理解这门课程不仅要学习好计算机相关专业知识,还要有相对应的假期实习实践,因此,1班在课程计划里强调了这门课要通过实习实践才能更好理解,而2班仍然按照正常的教学开展。第二阶段,学习期末后,学校安排考试,两个班考试试卷相同,采取集体阅卷。同时,两个班使用相同的问卷考评教师的教学成果。第三阶段实习,两个班都是随机实习,1班在实习前,就信息技术学习内容,凝练成几个模块形成实习目标。而2班没有做实习的改变。第四阶段,实习结束后,邀请实习单位出具实习生实习证明,并采取访谈的办法,访谈实习单位对1班学生、2班学生的实习情况做分析,包括实习出勤、实习表现、行为、实习结果呈现几个方面。第五阶段,实习结束后,1班、2班学生再次按照第二阶段评价教师教学成果的方法对教师再次评价。

3.研究方法。研究采取问卷调查法收集学生对教师教学成果评价的相关资料,采取访谈法收集实习单位对学生实习表现评价的资料。其中,问卷设计的依据是学生衡量教师教学效果,主要包括教学准备、课堂教学、作业批改、教学应用等。访谈设计的依据是学生在实习期间的行为、表现与绩效展示,具体包括学生出勤、工作行为、与同事关系、工作态度、工作的可见性成果,如承担的工作结果、建议等。

四、研究结论与讨论

1.研究结论。根据前期调查的结果,对收集到的资料进行分析,结果汇总如表2所示。

利用访谈法收集实习单位对实习学生在单位具体表现的评价,因为不知道具体研究开展的情况,因而实习单位领导能够对两个班的学生作出比较客观的评价,具体访谈的结果如表3所示。

注明:这里的受访者是1班和2班学生所在实习单位的负责人,这些负责人熟悉两组学生的表现,因而可以作出具体的分析。

研究结果有效减少了效度的威胁。基于前五个阶段学生的表现,第一个阶段中,1班和2班两个班的学生水平相差不大,教师授课水平相当,第三阶段又是随机分配实习单位。另外,同在一所学校,学校对两个班学生的影响是相同的,因此,这种情况避免了评估中内部效度威胁。第二阶段中对两个班学生的考试和正常的教师教学效果评估都是学校正常的评价,不会使学生产生因为是被研究组而造成的外部效度的威胁。基于上述分析,研究的评价结果具有较好的效度。

2.讨论:

(1)第二阶段的教师教学考核评估中,因为1班强调了要进行相应实习,所以1班的这个维度上的均分要高一些。

(2)第三阶段中,1班按照既定的教学计划安排学生实习,并就信息技术这门课的教学内容分成了数据收集、分析、整理、维护模块分析的实习目标,确保学生深入理解目标内容。

(3)第四阶段的分析中,利用访谈法对两个班学生的实习表现进行分析,结果显示,两个班学生在出勤、工作态度、工作行为、人际关系和工作结果维度上表现出了明显的差异。在工作态度上,1班学生明显更为积极主动、学习态度更为端正;在行为上,1班学生的积极主动性行为更多;在人际关系上,1班学生更愿意为了工作而结交更多公司中的同事,向同事请教工作中的事情,并表现出了更加合群的一面,学习的目的性更强;在工作结果的呈现上,1班学生主要有做好的数据库、好的建议、同事的表扬等。在这些阶段,两个班表现得不同,表明了在前面第一阶段、第二阶段都相同的情况下,学生进步的更大可能要归因于教学目标的明确,即1班学生在实习前实习目标的明确、准确和具体化,使学生在实习期间为了这个实习目标会采取更多积极主动行为,付出更多努力并取得更多成果。

(4)第五阶段的分析中,1班学生对同样的教师评价的分数明显高于2班,也高于第二阶段的分数,这表明经过了实习阶段,1班学生对教师传授的知识、技能和素养有了更深的认识,对教师的教学安排有了反思,有了更深入的理解,因此,教师考评分数提高很多。而2班由于没有做教学目标分解实习目标,对教师的教学安排反思不足,因此分数变化不大。这个阶段的结果表明经过了实习实践阶段,学生已经较好地掌握了教学内容,更加理解教学目标。因此,这个阶段的结果证明了应该把学生的实习实践行为的变化作为评价教师教学质量的一个重要方面。

五、对优化职业学校教师教学质量评价体系的启示

本研究对如何优化职业学校教师教学质量评估提出了一些启发性建议。

1.应该扩展目前对教师教学质量评估的内容。改善原来只依靠学生考试成绩、学生层的教师考评进行的评价,增加学生在知识掌握与应用、应用知识产生的行为以及行为产生的结果衡量等考评内容,更客观、全面地展示学生的学习效果,全面地反映教师的教学效果。

2.应该丰富对教师教学质量考核的方法。传统上对教师教学质量考核采取的方法主要是学生、学院、自评三方面评价,基于职业教育的特性,建议增加用人单位的实习考评,并将其作为衡量教师教学质量评价的一个重要维度。

3.适当延长职业学校教师教学质量评价考评周期。当前对职业学校教师教学质量考评周期多数集中在教学结束后进行的考核,考核的形式大多采用期末考试的形式。本研究的结果显示,职业学校学生对学校所学知识的掌握应用应该成为教师教学质量衡量的一个重要方面,而要更好地考察学生应用知识的情况,就要适当延长教学评估的周期。本研究提出的实习实践是一种衡量教学质量的方式,学校还可以探索更多的方式,如学生竞赛、升学等都可以作为衡量教学质量的指标,而不同的指标可能对应不同的考评时间,因此,应该适当延长职业学校教师教学质量评价的周期。

六、研究创新与不足

1.本研究的创新主要体现在两个方面:(1)理论上的创新,柯克帕特里克四级评估是一种经典的衡量培训效果的方法,更多用在衡量成人培训效果上,现在用于衡量职业学校教师教学质量,是对柯克帕特里克评估方法相关理论基础的丰富。(2)在实践上,当前对教师教学质量的评估更多集中在学生、学院和自评三个方面,评估的范围也集中在校内,评估周期更多是采用课程结束后的评价。本研究的结论显示,对学生学习之后知识技能的社会内应用以及产生的相关结果也应该成为评估教师教学质量的一部分,这些内容对优化职业学校教师教学质量评估具有重要的启发作用。同时,该研究也是对职业学校产学研结合方式的一种创新,以往的产学研研究更多集中在科研成果的应用上。本研究显示,基于教学目标分解而产生的教学实习实践是连接课堂、公司、社会的新时期产学研结合的新形式。

2.研究不足。本研究采取的是有参照组和控制组的研究方法,并把学生实习实践效果的增强归因于教师教学效果方面,由于公司环境的变化,学生的成才所产生的外部效度影响,可能会对研究结论有一定的影响。

参考文献:

[1] 雷蒙德·A·诺伊.雇员培训与开发[M].北京:中国人民大学出版社,2015.

[2] 金宇.基于柯式模型的培训效果评估体系构建[J].人力资源,2023(22):8-9.

[3] 李晨.高职院校有效课堂认证效果评估研究[J].浙江工贸职业技术学院学报,2021,21(1):20-23.

[4] 肖燕,谭志鹏.中小学新进教师培训有效性评价模式的探究[J].汉江师范学院学报,2022,42(6):65-68.

[5] 张莉斌.提升企业培训质量与员工素质的管理建议[J].企业改革与管理,2020(19):111-112.

[6] 彭轶妮.基于“柯氏模型”的企业培训效果影响因素研究[J].成都航空职业技术学院学报,2020,36(2):75-77.

[7] Donald L. Kirkpatrick,James D. Kirkpatrick.如何做好培训评估:柯氏四级评估法(原书第三版)[M].奚卫华,林祝君,译.北京:机械工业出版社,2007.

[8] 黄小漩.有效教学评价在中职教学中的探索[J].卫生职业教育,2018,36(1):38-39.

[9] 吴军其,赵梦琦,周思慧.高校教师培训有效性评价指标体系建构[J].现代教育管理,2020(11):66-72.

[10] 杨苏.简述国内外有效教学研究现状及启示[J].现代职业教育,2016(2):16-17.

编辑 郑晓燕