面向产出的内部评价机制研究与应用——以机械设计制造及其自动化专业为例

杜 劲，衣明东，宋 明

（1.齐鲁工业大学〔山东省科学院〕机械工程学院，山东 济南 250353；2.山东省机械设计研究院，山东 济南 250031）

2016年，中国成为第十八个《华盛顿协议》正式成员，这标志着我国工程教育质量得到了国际认可［1］。开展工程教育专业认证可用于构建我国工程教育的质量监控体系，推进工程教育改革，提高工程教育质量，提高人才培养水平。“产出导向、学生中心、持续改进”是工程教育认证的核心理念，也被称为面向产出的教育（Outcome-based Education,OBE）理念［2］。在参与工程教育认证的专业建设工作中，对于参加认证中期审核的专业，在中期审核报告中必须说明面向产出的内部评价机制的完善与运行情况。

本文基于工程教育专业认证的OBE理念，以齐鲁工业大学机械设计制造及其自动化专业为例，结合认证标准和中期审核要求，从内部评价机制的持续改进到课程目标和毕业要求评价机制持续改进与具体落实进行了阐述与分析。

一、面向产出的内部评价机制的建立

机械设计制造及其自动化专业于2019年6月正式通过工程教育专业认证，有效期为6年。现场考察专家组也对本专业培养目标、毕业要求、教学过程和师资队伍等各环节的持续改进提出了针对性的建议。面向产出是工程认证专业建设的重要导向［3-4］，本专业以由企业、行业、外部专家、毕业学生等为主体的外部评价结果综合分析为依据和达成目标，构建了教学质量管理机制和构架、课程目标达成度评价和毕业要求达成度评价等内部评价机制，并按照机制设计要求运行，取得了较好的效果。

（一）本专业教学管理机制架构

专业实行校、院、系三级教学管理体制，形成了学校层面：分管校长领导、教学指导委员会指导、教务处具体负责、各职能部门协调配合的校级管理体系；学院层面：学院教学指导委员会指导、分管教学副院长全面负责；专业层面：专业负责人和教研室主任分工负责、教学秘书服务支持、全体教师共同参与的教学管理体系。2019年以来，为了全面落实面向产出认证理念，构建了以学生为中心、全员参与的人才培养机制，进一步明确专业负责人的顶层设计责任和管理实施责任，同时设置专业事务专员辅助专业负责人开展专业学生培养和教学管理工作，全面落实专业高素质应用型人才培养目标。

此外，在学院和专业层面建立学生教学信息员机制，每个自然班遴选1名学生教学信息员，充分发挥学生参与教学的作用，定期准确收集、了解教学运行过程和学生工程师培养的自我诉求等重要信息，及时总结教与学状况，为人才培养的持续改进提供依据。校、院和专业在认证通过后在管理构架上的补充完善在图中用星号表示，如图1所示。

图1 认证之后专业教学质量管理机制架构

（二）面向产出的人才培养质量要求与评价制度

本专业认证以来，学校出台了《关于实施教师本科教学质量评价的指导意见》《本科教学督导工作细则》等文件，从质量标准层面进行体制机制完善，确保政策落实可操作。其中，学校于2020年制定了《人才培养质量达成情况评价管理办法（试行）》，从制度上确保了工程教育认证专业建设的规范性，明确了建设实施的主体与责任，规定了面向产出的学生培养质量内部评价规范和评价方法。2021年，学院制定和完善了基于面向产出的《课程目标评价及毕业要求达成度评价工作实施办法》《关于进一步落实OBE理念的课程改革指导意见》与《关于深化OBE理念的工作方案》等机制文件，进一步完善了面向产出的人才培养及内部评价机制。

（三）面向产出的本科教学内部评价机制

专业的内部评价主要包含“课程目标达成情况评价”和“毕业要求达成情况评价”两个部分。本专业面向产出的内部评价的目的是以课程目标和毕业要求为指标，以可测量的人才培养产出成果为评价依据，评价课程目标达成情况，并以此对学生毕业要求达成情况进行评价并最终对人才培养情况是否达成面向产出的设计要求进行衡量。综合分析利用两种内部评价结果，对课程教学、学生培养、毕业要求、培养目标等进行评估，评估结果作为提出相应改进措施的依据。

本专业的内部评价主要由内部评价小组主持开展，该评价小组的职责为：负责讨论并制定适用于学院已通过工程教育专业认证专业及计划申请工程教育专业认证专业的面向产出内部评价机制；按照内部评价机制要求，组织开展“课程目标达成度评价”和“毕业要求达成度评价”；针对内部评价的结果，提出面向产出持续改进的相关意见和建议并监督执行。

二、课程目标达成情况评价机制建立与运行

（一）课程目标达成情况评价机制的建立

课程目标达成评价主要采取成绩法考核，主要数据源自考核课程的考核成绩。考核成绩依据为平时作业、课堂测试、讨论环节、实践环节、期中和期末测试环节。考核责任人为课程负责人和任课教师。根据学校相关文件要求，任课教师严格执行命题制卷、成绩评定、阅卷规范、试卷装订归档和成绩录入的流程及规范要求。

具体的“课程目标达成评价”流程包括：（1）课程负责人组织平时评价和期末考核内容，并收集相关评价资料；（2）课程负责人汇总考核数据，计算课程目标达成度评价值并进行分析与总结；（3）课程负责人提出切实可行的持续改进措施；（4）专业事务专员汇总分析各课程评估数据，整理专业所有课程目标达成情况评价结果；（5）专业负责人审核课程目标达成度情况分析。对于审核通过的课程，要求课程负责人在下一轮教学中按照持续改进措施开展教学活动。

针对某些课程目标达成度不理想的课程，学院组织课程团队及学院督导组对相关课程进行督导，切实履行持续改进措施，帮助教师改善教学方式方法，加强教学质量，实现课程目标达成度达到预期效果。具体的流程：（1）各课程团队将课程目标达成度低于0.65的课程检出，并通知课程负责人，认真分析原因，提出改进措施。（2）各课程团队根据课程负责人提出的改进措施，进行团队研讨并将修改后的课程改进措施提交学院教学督导组审核。（3）学院教学督导组根据提交的课程改进措施文档，召开会议进行评审，并提出修改意见。（4）课程负责人根据教学督导组修改意见，优化课程改进措施，并将相关措施在后续教学中严格执行。（5）教学督导组在教学过程中督导课程负责人严格执行改进措施，并将督导结果反馈课程负责人。

（二）课程目标达成情况评价机制的运行

本专业于2021年9月对2019—2020学年及2020—2021学年的所有核心课程和主要实践类课程进行了课程目标达成度评价。对于所评价的专业核心课程和主要实践课程而言，课程目标达成评价值大部分超过了目标值0.7，即实现了预期课程目标的达成要求。

在课程目标达成度评价运行的过程中，专业按照相关机制的要求，以课程目标达成度数据为依据，针对课程存在问题和不足进行了分析，并提出改进措施。例如，2018级“材料力学”课程负责人对课程目标达成情况进行了分析，总结了存在的问题：学生对以组合变形为代表的复杂问题的分析能力不足。课程负责人提出了改进措施：（1）课程中适度增加复杂问题比例；（2）尝试部分开展混合式教学实验。学院督导组对提交的课程改进措施文档行进审核并提出修改意见：注意开展混合式教学时的课程资源建设工作。学院督导组审核文档并提出修改意见：改善学生对混合式教学的适应性，精细设计教学流程，完善线下课教学项目。课程负责人根据学院教学督导组修改意见，将相关措施在2020级学生教学中严格执行。

三、毕业要求达成情况评价机制的建立和运行

（一）毕业要求达成情况评价机制的建立

为实现专业培养目标，本专业制定了12条毕业要求，又进一步细分为33项指标点。每门理论课程或每项实践教学环节都分别对毕业要求指标点中的1项或者多项进行支撑。根据课程目标达成情况评价结果，具体的“毕业要求达成评价”流程包括：（1）根据毕业要求与课程能力对应矩阵，收集整理课程目标达成数据；（2）抽取数据样本，根据毕业要求达成计算方法，计算毕业要求达成度；（3）以年级为单位形成学生“毕业要求达成内部评价”分析报告。

“毕业要求达成内部评价”周期为两年，即每隔两年对近两年毕业生的毕业能力进行一次内部评价。对“毕业要求达成”情况进行分析的基础上，形成分析报告，并对教学各环节进行反思，持续改进。

（二）毕业要求达成情况评价机制的运行

基于“课程教学目标达成度评价表”的评价结果，计算课程所支撑指标点的实际达成度，进而对本专业2019届和2020届毕业生进行了12项毕业要求达成度的分析和评价工作。经过统计分析，评价结果分别为0.72和0.73，基本持平，稳中有升。该结果说明，2020届毕业生的许多专业课程、生产实习和毕业设计等环节保持了稳中有升的良好趋势，可见本专业面向产出的内部评价机制完善对该专业人才培养质量的稳定性和可靠性发挥了较好的作用。

通过对比发现2020届毕业生的毕业要求3：设计或开发解决方案；毕业要求9：个人和团队；毕业要求11：项目管理。这3项毕业要求达成度提高均超过5%，分别为9.1%、7.7%、8.3%。该结果主要由于相关课程负责人按照工程教育认证的理念推行教学内容、教学手段和考核环节等方面的教学改革，有效提升了学生设计、开发解决方案的能力，通过扎实的课程训练，有效提升了学生的团队意识和项目管理经验。

但是，2020届毕业生的毕业要求5：使用现代工具（能够针对机电产品和轻工装备设计、制造中复杂工程问题，选择与使用现代计算、设计、测试、制造和仿真分析等软硬件工具）的分析评定结果出现下降。经过专家组针对该毕业要求相关的课程达成度进行分析，认为下降是由于支撑毕业要求5的“大学计算机基础”等课程能力指标点的达成情况不理想造成的。课程负责人对该课程目标的达成情况进行了分析，认为学生对课程知识的掌握和运用能力偏弱，大班教学师生互动相对较少，学生听课效果较差。后期将针对该问题加强线上学习、讨论和交流环节。同时增加一些综合题和工程应用题，弥补课堂教学学时短和师生互动条件的不足。学院督导组认为上述改进措施切实可行，督促将在后续教学中严格执行改进措施，提高学生使用现代工具的能力。

结语

面向产出的内部评价机制的持续改进是工程教育专业认证工作的核心和建设难点之一，更是专业建设的重点工作，是确保人才培养质量不断提升的关键。本文以齐鲁工业大学机械设计制造及其自动化专业为例，结合认证标准和中期审核要求，从内部评价机制的持续改进到课程目标和毕业要求评价机制持续改进与具体落实进行了阐述与分析，提供了具体的评价流程，对工科专业的工程教育认证工作或专业建设具有较好的指导作用。