干部教育培训评估的实践

罗林明 赵亚南 邓一

摘 要：本文着眼于对培训评估形势、国内评估进展情况的分析，气象教育培训评估的实践进行了介绍，以期为进一步推进干部教育培训评估的科学化、制度化、规范化提供一定的实践借鉴。

关键词：气象；培训；评估；评价

中图分类号：G726 文献标识码：A

一、国外培训评估的进展

以美国、英国、法国和加拿大培训评估实践来看，发达国家和地区的培训评估呈现出：1.培训评估制度法制化、制度化趋势，通过制定法律、有关法令及配套的法规和政策，对培训的各个方面做出具体规定，把培训评估建立在“法制”的基础上，使培训评估工作目标明确，易于操作。2.培训评估体系完备、程序严谨。综合体现在训前、训中、训后三个阶段和评估过程和评估结果的反馈应用方面。训前评估以素质测评和需求调研为重点，训中评估以课程质量和学习效果为重点，跟踪评估则以成果转化评估和投资回报评估为重点；同时还特别注重以学员考核和机构选择为重点的评估结果的运用。

另外从美国培训和发展协会（ASTD）2009 年发布的一项研究报告《评估的价值：使培训评估更有效》发现，柯克帕特里克技术和菲利普斯技术是使用最为普遍的评估技术。其中，柯氏评估技术由四层次评估内容组成，菲利普斯评估技术在柯氏四级评估技术的基础上增加了投资收益评估，四/五层评估内容包括反映层评估（第一层），学习层评估（第二层），行为层评估（第三层），结果层评估（第四层）和投资回报率评估（第五层）。

二、气象教育培训评估的实践

柯克帕特里克技术和菲利普斯技术是应用最为广泛的评估技术，气象教育培训评估在具体评估实践中，结合气象业务特点，建立“质量调查——效果评估——效益评价”三级评估业务体系，其中质量调查重点关注学员满意度和学员收获，后效果评估是在质量调查的基础上，重点关注学员受训后能力的提升和对岗位履职能力的促进，效益评价则是在质量调查和后效果评估的基础上重点关注收益与成本间的差异和无形效益。三级之间是由简入深，层层递进，覆盖了包括反映层评估（第一层），学习层评估（第二层），行为层评估（第三层），结果层评估（第四层）和投资回报率评估（第五层）。四/五层评估内容包括反映层评估（第一层），学习层评估（第二层），行为层评估（第三层），结果层评估（第四层）和投资回报率评估（第五层）在实践中取得了很好地效果。

（一）教学质量调查

教学质量调查主要是通过问卷调查、访谈、座谈等了解在校培训期间，学员对培训设计、教学方式方法、课程内容、教师授课水平、教材（讲义）、教学管理、教学保障等的满意度，了解学员对知识和技能的掌握程度，进一步改进和规范在校培训，从而达到监控培训质量的目的。教学质量调查对列入中国气象局年度培训计划的所有培训项目进行全覆盖，并做到班班有调查，班班有分析，班班有反馈。调查对象以学员、班主任、授课教师为主。指标体系主要包括课程内容、教师授课水平、培训设计、教学管理和教学保障五个一级指标，14个2级指标。培训课程内容与教师授课水平是针对每门课程开展调查；培训设计、教学管理、教学保障等是针对整个培训项目开展调查。主要产品是年度（或月度）教学质量评估对当年（当月）实施的培训项目教学质量进行整体评估分析。

（二）培训效果评估

培训效果评估主要是通过问卷调查（学员自评、送培单位评价、服务对象评价）、个人及送培单位访谈、重点对象跟踪等对培训后学员收获情况、回到工作岗位后个人行为的改变情况及其对个人绩效和组织工作绩效改变的程度情况进行评估。培训效果评估主要是针对规模大、具有可持续性的核心培训项目开展，在实施过程中根据实际情况通常会分为试点培训项目后效果评估，即对新开发的培训项目在试点期间应该开展效果评估，以帮助调整教学计划；岗位培训，上岗培训、任职培训等针对固定岗位固定层次人员的培训，因其对学员的学习成果有明确要求，因此需要开展效果评估，以确保培训的效果达到预期。评估对象主要以参加过培训的学员及其所在单位领导为主。指标体系主要以框架指标为主，根据具体情况对其中具体指标及内涵进行相应调整，框架指标主要包括学习收获、行为改变、工作结果3个一级指标，知识、态度、技能、愿望、业务开展和业绩提高6个2级指标，其中学习收获主要是针对培训学院，行为改变和工作结果主要是针对送培单位负责人。

（三）培训效益评价

培训效益评价主要是通过文献调研法、问卷调查法、专家咨询法等，估算培训收益与培训成本之间的比例，进一步估算出培训的投资回报率。培训效益评价主要是针对具有可持续性、系统性，能够较为直观地反映培训的成本以及具有较为直观的收益的培训项目。培训效益评估是继反应层、学习层、行为层、结果层之后更高层次的评估，评估难度更大，评估方法更复杂，也没有现成的经验可以借鉴，以气象雷达培训为例開展了气象培训效益评估的初步探索，其科学性、系统性和全面性还需不断研究和探索。

气象雷达培训效益评价是在前期开展气象雷达培训教学质量调查、气象雷达培训效果评估的基础上，采用波士顿矩阵模型和Phillips的投资回报率理论，探索性地开展了气象雷达培训效益评价，估算出培训的投资回报率。评价对象主要是学员及其所在单位、相关管理管理机构、业务机构及科研机构人员等。指标设计主要是气象培训效益一部分是可以直接计算出的培训成本与效益的比值，另一部分是非直接量化的经济指标，因此，评估指标设计主要围绕影响培训效益发挥的要素展开。根据学员及送培单位的调查，确定相关要素在培训中的贡献度以及发挥影响作用的方式，引入“置信区间”，在评估指标设计上明确各要素在效益发挥上等的重要性程度；各种手段在人员素质提高上的有效性程度，即：培训贡献度=培训在人员素质提高方面的贡献度、人员素质提高在具体业务效益发挥上的贡献度，并在此思路的指导下建立培训效益发挥影响因素指标体系。

参考文献

[1]中共中央组织部干部教育局.干部教育培训工作条例学习辅导[M].北京：党建读物出版社，2015.

[2]中共中央印发.2013-2017年全国干部教育培训规划，2013-9-28.

[3]干部教育培训项目评估的研究和思考[J].继续教育，2016（1）.

[4]干部教育培训质量评估研究[M].北京：科学出版社，2014.

[5]培训效益评估实证分析研究[J].继续教育，2016（4）.