1+X证书制度试点的运行绩效自评体系研究

许婧

［摘           要］  基于1+X证书制度试点背景，以上海行健职业学院1+X证书试点各专业为研究对象，按照试点的目标和绩效标准，采用定性和定量评价相结合的方式，设计绩效自评指标，构建1+X证书制度运行绩效自评体系，对该制度的实施过程、目标完成情况、实施效益等给予评价，指导试点工作的高效推进。

［关    键   词］  1+X证书制度试点；运行绩效；自评体系

［中图分类号］  G717                   ［文献标志码］  A                 ［文章编号］  2096-0603（2023）18-0109-04

2019年2月，教育部发布《国家职业教育改革实施方案》，启动实施中国特色高水平高职院校和专业建设改革。《国家职业教育改革实施方案》强调：“到2022年，职业院校教学条件基本达标，一大批普通本科高等学校向应用型转变，建设50所高水平高等职业学校和150个骨干专业（群）”，并明确提出“在职业院校、应用型本科高校启动‘学历证书+若干职业技能等级证书制度试点（以下简称‘1+X证书制度试点）工作”。通过构建“1”学历证书加“X”若干职业技能等级证书培养模式，实现人才培养和职业能力水平双重认证考评，提升应用型人才培养质量，增强人才培养与产业需求的吻合度，更好地服务于经济建设。然而，1+X证书制度实施效果到底怎样，教育主管部门、培训评价组织和试点高校都比较关注。[1]

2019年11月，教育部办公厅、国家发展改革委办公厅、财政部办公厅发布的《关于推进1+X证书制度试点工作的指导意见》明确要求，“培训评价组织、试点院校积极开展绩效自评，接受省级有关部门及其委托的第三方开展的评价。”可见，对1+X证书制度运行绩效进行自评，已经成为教育部对每所试点院校的明确要求。绩效自评体系的建立和完善，可以有效促进1+X证书制度试点工作规范、有序、高效地开展。此外，目前政府和教育主管部门对于高职院校1+X证书试点的评价已经趋于成熟，高职院校也是高度重视政府和教育主管部门的纵向评价。但高职院校的内涵发展是根本，因此高职院校本身要增强对1+X证书制度试点的质量监控，建立自评制度，让1+X证书试点得到良好推进，而不应该只是应对行政主管部门的监督。[2]高职院校应该依靠本身的自我评价、自我监督、自我管理，通过自评来总结1+X证书试点的经验和教训以改进这项工作。因此，建立规范、科学的1+X证书制度运行自评体系势在必行。

一、1+X证书制度试点运行绩效评价指标设计的基本原则

（一）专业全覆盖

1+X证书制度试点运行绩效评价进行指标设计时是基于所有专业设置的，指标选取的是所有专业共性的指标，具体调研的专业也是全覆盖，包括电子商务专业、环境艺术设计专业、工商企业管理專业、学前教育专业等，因此具有专业个性的指标本文未涉及，后续各专业具体使用时可以自行添加。

（二）评价全过程

1+X证书制度试点运行绩效评价不是只针对结果进行评价，而是对整个1+X从目标设定到人财物投入到过程实施以及成果进行全过程评价，运用的是美国著名教育评价专家斯塔弗尔比姆提出 CIPP 评价模式，该评价模式经过各个领域的充分论证，兼具科学性和合理性。

（三）量化科学性

根据文献资料，目前也有专家学者建立了1+X证书制度实施效果评价指标体系，但定性指标较多，评价主观性较强。但绩效评价应以量化指标为主，避免评价主观性。因此，本文在进行评价指标权重设置的时候采用熵权法进行科学计算，得出的权重分数具有科学性。

（四）政策为指引

本文关于1+X指标的设置不是凭空想象，而是完全以《关于推进1+X证书制度试点工作的指导意见》的政策为指引，将文件中对1+X证书制度试点工作的要求逐一挑选出来，接着转化为指标术语，最后按照CIPP 评价模式的四个模块进行归纳汇总。[3]

二、1+X证书制度运行绩效评价指标体系设计思路

（一）目标导向，将目标达成度作为衡量运行质量的重要依据

评价1+X证书制度开展的效果涉及多个方面，因此，在设计1+X证书制度运行绩效评价指标时，需要从学生、学校、企业以及家长四方面出发，建设更全面的1+X证书制度评价体系，通过对监督学校、考核学生、调查企业、了解家长等方面，对1+X证书制度的实施情况进行全面调查，了解学生、学校、企业以及家长等方面的诉求后，针对问题进行项目分类，以目标为导向，以目标达成度为标准，设计1+X证书制度评价指标的效果评定。在调查过程中发现，部分人群认为职业技能等级证书是否能被行业认定，是1+X证书制度发展的必要条件，也是当今社会认为1+X证书存在的必要条件。评价1+X证书制度实施效果更涉及学校、企业等利益方，为全面、有效、合理地构建绩效评价指标，可通过组织相关人员对1+X证书制度实施效果进行多次调研后，综合各方面意见反复思考和修改，最终形成以目标为导向的1+X证书制度绩效评价指标，包括一级指标、二级指标、三级指标。以上海某高职院校为例，根据不同结构的评价指标体系，采用分层次分析法，确定各层次指标的权重，依照评价指标权重和评价指标数值，采用综合指数法判定评价结果，结果表明，上海某高职院校1+X证书制度实施效果良好，可见1+X证书制度实施整体有效性高，与事实情况基本相符合。[4]

（二）问题导向，将问题的发现与解决作为指标体系设计的重要出发点

1+X证书，即为学历证书+职业技能等级证书，职业技能证书很大程度上决定了高职学生技能水平的高低，也是高职学生用来表明自身技术技能的有效凭证。1+X证书制度直接反映高职学生职业发展生涯中的综合能力。但在高职院校运行1+X证书制度的过程中，为更好评估1+X证书制度的实施情况，需进一步设计评估效果的指标，即“绩效评价指标”，以何指标构建整体评价体系，是高职院校需要思考的问题。在目标导向的基础上，再以问题为导向，将发现问题、解决问题的能力作为评价指标设计的出发点。以问题为导向，以“背景评价”为一级指标，并在“背景评价”中发现“建设目标与学院规划匹配程度”“建设目标与专业规划匹配程度”等问题作为二级指标，为评估上述问题的解决情况，进而又设计了三级指标，包括“1+X证书制度试点的目标与学院发展规划匹配程度”“1+X证书制度试点的目标是否与学院三教改革相适应”“1+X证书制度试点的目标是否与专业定位相匹配”“1+X证书制度试点的目标是否适应人才培养方案中的培养目标与要求”等。以问题为导向，以“输入评价”为一级指标，并在“输入评价”中发现“1+X证书制度实施过程中人力资源的投入”“1+X证书制度实施过程中财力资源的投入”“1+X证书制度实施过程中物力资源的投入”等问题作为二级指标，为评估上述问题的解决情况，进而又设计了三级指标，包括“参加1+X试点教师队伍培训数量”“1+X试点专业经费投入额”“有无完善的 1+X 证书制度书证融通保障的体制机制”等。以问题为导向，以“过程评价”作为一级指标，并在“过程评价”中发现“课程体系”“考核内容和方式”等问题作为二级指标，为评估上述问题的解决情况，进而又设计出了三级指标，包括“是否持续优化职业技能等级证书标准”“证书考核方式是否为岗位沉浸式的”等。以问题为导向，以“成果评价”作为一级指标，并在“成果评价”中发现“雇主满意度”“学生满意度”等问题作为二级指标，为评估上述问题的解决情况，进而又设计出了三级指标，包括“雇主对于1+X证书持有者工作技能满意度”“学生对于1+X证书培训满意度”等。

三、1+X证书制度运行绩效评价指标体系构建研究设计

（一）指标体系构建

二十世纪六七十年代，美国著名教育评价专家斯塔弗尔比姆提出 CIPP 评價模式，并指出评估最重要的目的不在于证明，而在于不断改进。不同于目标评价模式，CIPP 作为一种教育评价模式，一定程度上将诊断性评价、形成性评价以及终结性评价进行整合，并重点突出评价的发展性。该模式主要分为背景、输入、过程、成果四个评价阶段。

背景评价指标是指1+X证书制度试点的目标与学院发展规划、人才培养方案中的培养目标与要求、专业定位等的匹配程度。《关于推进1+X证书制度试点工作的指导意见》中指出面向学生开展的X证书培训，要与推进教师、教材、教法改革结合起来。

输入评价指标是对1+X证书制度试点所需要的人力（试点师资培训数）、物力（设施设备购置）、财力等资源进行评价。制度包括多元主体合作细则、培训质量抽查制度、教师参与1+X证书培训激励制度、证书考核管理制度、职业院校关于培训评价组织选择与退出制度、试点工作动态定期报送制度。《关于推进1+X证书制度试点工作的指导意见》指出鼓励教师积极承担证书培训任务，试点院校可将教师额外承担的职业技能等级证书培训工作量，按一定比例折算成全日制学生培养工作量，纳入绩效工资分配因素范围；在内部绩效工资分配时向承担证书培训任务的一线教师倾斜。[5]

过程评价指标。1+X证书制度试点过程评价主要是对各专业1+X证书制度实施过程中涉及的相关环节的评价，主要包括实施后教师队伍建设、人才培养模式的改革、课程体系建设、校企合作等运行情况的评价。

成果评价指标。成果评价是对1+X证书制度实施最终成果的终结性评价。在此，笔者选取1+X证书建设培训考核点等几个方面来进行评价。学生满意度可以用“学评教”模式和线下座谈会抽查形式。

依据CIPP模型含义，基于1+X证书制度要求建构了1+X自评体系，见图1。

在绩效评价四个维度的基础上，结合第一部分所明确的绩效影响因素，主要依据《关于推进1+X证书制度试点工作的指导意见》文件要求，通过文献研究、调研等方式，确定候选评价指标，再结合专家咨询等方式进行关键指标筛选，设计1+X证书制度运行绩效评价指标体系。

（二）综合评价方法与数据分析

在1+X证书制度运行绩效评价相关元数据采集和标准化基础上，评价的关键一步是进行指标权重的确定。一般来说，确定权重可分为主观赋权和客观赋权两类方法，基于评价结果更加科学可靠的原则，本文选用客观赋权的熵权法，有效避免了人为确定指标权重的主观性。

本文根据指标体系拟定1+X证书试点制度运行情况问卷，调研上海开展1+X证书制度试点的14所职业院校1+X证书制度运行现状，运用熵权法根据问卷结果计算指标权重。

熵权法根据数据间的信息差异进行权重的确定，若指标的信息熵越小，说明此指标无序程度就越高、变化幅度越大，因此对综合评价的影响（即权重）也越大。

熵权法计算步骤如下：

四、1+X证书制度试点运行绩效自评实施

（一）背景方面：建设目标与学院规划相匹配

1+X证书制度试点的建设目标的总引领方向应与学院长期发展规划保持一致。将1+X证书制度试点工作纳入学校发展规划，将试点工作开展情况作为部门年度绩效考核的重要指标，与日常教学科研工作同部署、同检查、同考核、同表彰，确保试点工作与学院发展同向而行。

（二）输入方面：及时反馈改进

取消整体满意度较低的证书，引进符合最新行业能力标准的证书。及时反馈改进的目的是为了实现1+X证书制度试点工作运行的有效性，反馈改进是持续性的过程，评价1+X证书制度试点工作的有效性，能够让试点工作得到更好的发展，对管理体系和过程进行改革，并同等评估绩效评价指标，从而提高1+X证书制度试点工作实施的效率和质量。

（三）过程方面：严格考核管理

教学管理部门进行培训文件抽查、证书题库检查、随机听课、专业教师听课、教学督导抽查等，实现严格考核管理。在实施1+X证书制度试点工作中，帮助试点工作了解工作内容、目标以及价值，通过考核管理所制定的工作目标，能为1+X证书制度试点工作指明具体方向。同时在实施1+X证书制度试点工作过程中，通过严格的考核管理，能就现有试点工作中存在的不足进行分析，从而改进现有的工作绩效。

（四）成果方面：以评促建

1+X证书制度试点内容要融入人才培养方案中，以评促建，从源头上有效实施1+X证书制度。在以评促建方面，认真研究1+X证书制度试点工作运行绩效评价指标体系，能深入领会“以评促建，以评促改，以评促管”，让“评”和“建”相结合，全面优化成果，真正达到以评促建的目的。

参考文献：

［1］张青，谢勇旗，乔文博.1+X证书制度下职业院校专业课程改革的方向与路线［J］.成人教育，2021，41（8）：49-53.

［2］周志刚.职业教育质量评价体系研究［M］.北京：经济科学出版社，2018.

［3］李寿冰.高职院校开展1+X证书制度试点工作的思考［J］.中国职业技术教育，2019（10）：25-28.

［4］王亚盛，赵林.1+X证书制度与书证融通实施方法探索［J］.中国职业技术教育，2020（6）：13-17，64.

［5］林溪.基于1+X证书制度的高职院校增值评价体系构建［J］.教育与职业，2022（2）：29-35.