公共管理类专业研究生教学效果评价体系研究

劳林捷 罗海元

摘 要：公共管理类专业是管理学学科体系的重要组成部分，目前我校共设置了5个公共管理学科硕士授权点和公共管理硕士（MPA）专业学位授权点，虽然在教学评价方面已取得了一定的经验，但是在教学效果评价的价值导向、具体做法和实际成效等方面仍存在一些问题或误区。文章在借鉴科学管理理论方法和总结已有成功经验的基础上，采用问卷调查的方法，围绕如何提高公共管理专业研究生教学效果评价工作科学化水平的问题展开研究，为完善我校课程教学评价体系和制度提供参考。

關键词：公共管理类研究生；教学效果；评价体系

中图分类号：G642 文献标志码：A 文章编号：2096-000X（2018）14-0144-03

Abstract： Public Management is an important part of the discipline system of Management. At present， there are 5 authorized Master's Degree progamme of Public Administration and authorized MPA professional degree programme. Although some experience has been gained in teaching evaluation， there are still some problems or misunderstandings in the value orientation， concrete practice and actual effect of teaching effect evaluation. Based on the theory of scientific management methods and successful experiences， the article adopts questionnaire survey method to study how to improve the scientific level of the evaluation of teaching effectiveness among postgraduates majoring in public management， so as to improve the evaluation system of the course teaching.

Keywords： postgraduate student in public management； teaching effect； evaluation system

一、研究背景与问题提出

公共管理类专业是管理学学科体系的重要组成部分，主要包括行政管理、公共事业管理、教育经济与管理、城市规划与管理、公共部门人力资源管理、土地资源管理、社会医学与卫生事业管理等二级学科门类。教学效果评价是根据一定的教育目标，运用定量或定性的科学手段，对教育活动的成效进行分析并做出价值判断，为教育决策提供依据的过程。它是教育活动不可或缺的一个重要环节，对于提升教育工作质量和调动教学双方的积极性具有重要意义。为顺应我国政府改革的历史潮流以及经济社会发展对公共管理人才的需求，中央财经大学于2006年7月组建了政府管理学院，在全国公共管理学科领域的竞争中赢得了先机，目前该校共设置了5个公共管理学科硕士授权点和公共管理硕士（MPA）专业学位授权点，在研究生教学科研工作中坚持理论教育和案例教学相结合，突出公共战略和公共政策特色。虽然我校通过本科教学实践和教学管理制度建设已积累了一定的经验。但是，在教学效果评价的价值导向、具体做法和实际成效等方面仍存在一些问题或误区。例如，学生在评价教师教学效果时普遍存在宽大化、集中化等倾向，对不同教师的评价结果基本一致；学生在评价过程中容易受个人偏见、动机、喜好等主观因素的影响，使评价结果失准；教师有意无意的漏题行为能够帮助其获得学生的积极评价等。

目前我校公共管理硕士教学评价制度文本主要是《任课教师遴选与考核制度》和《课堂教学评估表》，在教学评价内容上主要评价课堂教学的教学态度（关注学生需求，备课充分；遵守教学纪律，按时上下课，不无故调、停课）、教学内容（架构清晰，案例使用得当；内容充实，授课条理清晰，重点、难点突出；理论联系实际，能启发思维；对提高研究生的学习能力、研究能力和创新能力有帮助）和教学方法（教学节奏控制有序；方法灵活、互动性强，有利课程内容掌握），设置了8个评估指标；在教学评价主体上主要采取学生网络匿名评教（占测评总分的60%）和教学督导评教（占测评总分的40%）相结合的方式；在教学评价周期上学生评价采用随堂评价，教学督导评价采用随机评价；在教学评价方法上主要采用行为观察量表法，根据单项评分合成评价结果；评价结果划分为优秀、良好、一般、差共四个等级，是下学年取得任课资格的重要依据。

虽然目前我校公共管理硕士教学评价方案目的明确、内容简约、操作方便，但科学性仍有待加强。评价内容还较为粗放且一些影响教学效果的重要因素未能纳入其中；评价主体来源较少，可适当扩展；评价周期单一，未能将平时考核和周期性考核结合起来，存在评价结果受随机因素干扰的可能；评价方法较为简单，尤其是行为类指标在评价标准上未能细化，可能导致评价主体受主观因素影响出现评价误差；评价结果的应用范围较小，反馈和激励机制不完善。因此，本文在借鉴科学管理理论方法和总结已有成功经验的基础上，围绕如何提高公共管理专业研究生教学效果评价工作科学化水平的问题展开研究，为完善我校课程教学评价体系和制度提供参考。

二、教学评价研究现状

教学评价是高等教育学的重要研究领域之一，相关研究主要涉及教学评价的两个方面，即对教师教的评价和对学生学的评价。目前，学术界相关研究主要集中在以下三个方面：（1）对高校教师教学效果评价的研究，这类研究不区分本科教学和研究生教学的层次性，也不针对特定课程或教学方法，仅就教师教学质量和教学水平进行分析。通常涉及教学效果评价的作用、问题、改进对策和建议，或评价内容、维度、标准、方法等。（2）教学效果评价方法的创新性研究，主要是运用统计手段将定量方法运用于教学效果评价的实证研究，多用于评价指标体系的设计。常见的方法包括层次分析法（孙玉荣，2010[1]）、灰色关联评价法、模糊综合评价法、位置度量法（宋雅杰，2009[2]）、质量圈循环管理等。（3）针对特定课程或教学方法的教学效果评价研究，主要是根据某些类型课程或教学方法的独特性设计与之相匹配的教学效果评价体系，但目前的研究较少考虑教学层次和对象的差异性。如刘彦文等（2008）通过结合主成分分析和AHP法，进行聚类和降维，构建针对工商管理教学（MBA）的案例教学效果评价指标体系[3]。

但是从研究文献来看，针对公共管理类专业研究生教学效果评价方面的专题性研究基本处于空白状态，但也有一些学者已将研究视角投向公共管理专业或课程的教学研究上，目前主要是探讨以案例教学为主的教学方法、影响教学质量的因素等方面。区晶莹等（2013[4]）以华南农业大学公共管理学院“办公自动化应用”实验课程为例，运用因子分析法对公共管理类实验教学效果的影响因素进行实证分析。文华（2014）则是从学生评价视角对公共管理类专业课堂教学质量评价进行系统性实证研究。[5]以研究生教学层次为对象的研究在近年也不断涌现，主要聚焦于研究生教学模式、研究生教学质量等方面的问题。李红颜等（2007）研制了研究生用教学质量评估量表（GSEEQ），并初步评价量表的技术性能。[6]郑冬梅（2009）根据研究生课程教学目标培养研究生知识创新能力这一总体指导思想，建立了教师评学、学生网上评教和教学督导组与专家评教相结合的评估方法。[7]

三、公共管理类专业研究生教学效果评价现状分析与评价体系设计

（一）公共管理类专业研究生教学效果评价现状分析

为掌握我校公共管理类专业研究生教学效果评价现状和设计教学效果评价体系，针对相关情况和制度文本，本文采用问卷调查的方法进行研究。

1. 被试。以我院教师、2012级和2013级学术型硕士研究生和公共管理硕士（MPA）为调查对象，共发放问卷200份，回收有效问卷145份，回收率为72.5%。根据问卷回收情况，教师占样本量的6.9%，学术型研究生占27.6%，公共管理硕士（MPA）占65.5%。2. 研究工具。基于文献研究和对公共管理专业类专业研究生教学特点和影响要素分析，开发了《公共管理类研究生教学效果评价调查问卷》。问卷共4个部分：教学效果评价现状、教学效果评价内容、教学效果评价过程和个人基本资料。其中教学效果评价现状的条目为18个，教学效果评价内容的条目为34个，条目顺序按随机方法排列，均采用5级Likert标度法。3. 调查与统计方法。采用现场调查和邮件调查相结合的方法，调查对象以不记名、自行填表方式填写问卷。采用Combach'α系数评价问卷的内部一致性信度；对人口统计学变量、教学效果评价现状和评价过程进行频次分析或统计描述性变量；对教学效果评价内容进行探索性因子分析。数据分析用SPSS20.0软件处理。4. 调查结果。教学效果评价现状14个题项的Combach'α信度系数为0.962，属于高水平信度，调查数据反映的内容具有很高的一致性和可靠性。根据描述性统计，调查对象对现行教学效果评价工作的认可度均值区间为[3.61，3.94]，处于认可度一般和比较认可之间，为中等水平。

（二）公共管理类专业研究生教学效果评价体系设计

根据教育测量与评估原理，建立公共管理类专业研究生教学效果评价体系的关键任务是设计评价指标、选择评价主体、确定评价周期和选择评价方法。在此，结合数据分析结果，分别阐述相应内容。

1. 评价指标设计

（1）指标的选择。通过对大量文献的查阅、对MPA学员的调查、对MPA中心工作人员的咨询及MPA任课教师的咨询， 本研究初步选择了34个适合对公共管理类专业研究生教学效果进行评价的指标，并根据这34个指标进行探索性因子分析。

（2）因子分析。

Step1：指标数据标准化。本研究问卷采用5级Likert标度法，指标数据的标准化处理由SPSS 统计软件自动完成。

Step2：因子分析适用性检验。通过SPSS软件统计分析，可得到本研究KMO值为0.921，符合使用因子分析的标准。同时，Bartlett的球形度检验统计量的近似卡方值为4342.862，相应的概率P值接近于0，达到显著水平，变量总体的相关矩阵间有共同因子存在，适合进行因子分析。

Step3：确定因子个数。进行因子分析，提取出各个变量之间的共同因子后，对重复载荷和载荷值低于0.6的因子进行删除。

Step4：因子命名。采用正交旋转最大变异法提取因子，得出方差最大旋转矩阵，从旋转后各因子结构及因子负荷值找出各个主因子包含的变量。对提取出的5 个因子分别进行内部一致性检验，5个因子的Combach'α信度系数均比较高，信度水平较高，内部一致性较好，基本反映了同一内容，可以对每个因子进行独立命名。主因子1包括6个变量，主要反映的是教师在教学纪律、衣着举止、完成任务和教学考核方面的专业形象和行为，故命名为“教师自我管理”；主因子2包括5个变量，主要反映的是教师对教学内容的安排和教学方法的选用，故命名为“教学内容与方法”；主因子3包括6个变量，主要反映的是教师对学生的支持和辅导以及教学资源和环境方面的支持，故命名为“教学指导与支持”；主因子4包括2个变量，主要反映的是最终体现出来的教学成果，故命名为“教学成果”；主因子5包括2个变量，主要反映的是教学内容与教学目的匹配性，故命名为“教学目的”。因此，通过主成分分析的公共管理类专业研究生教学效果评价指标体系包括5个维度和21个评价指标。

2. 评价主体选择

恰当的评价主体应该是熟悉被评价者的职位职责且能够观察和了解被评价者工作状况的人员。根据评价主体的人员类型不同，评价主体通常包括领导评价、学生评价、同事评价、校际同行评价和自我评价。本研究结果表明，按照评价主体重要性程度排序，对于学术型研究生教学效果评价而言，排序情况是“学生评价>自我评价>同事评价>校际同行评价>领导评价”；对于MPA教学效果评价而言，排序情况是“学生評价>校际同行评价>同事评价>领导评价>自我评价”。

3. 评价周期决策

评价周期决策主要是确定多长时间开展一次教学效果评价。目前，我院针对学术型研究生教学效果评价主要是以学期为单位由学生通过网络评教，MPA教学效果评价主要是由学生随堂通过纸质评估表进行评价。调查表明，在以月度、季度、学期、学年为周期的评价周期选项中，54.5%的被调查者认为以学期为单位开展公共管理类专业研究生教学效果评价是最佳决策。

4. 评价方法选用

评价方法是指评价主体按照一定的评价指标和标准对被评价者的实际工作表现作出价值判断的方式。主要包括量表评价法、访谈评价法、委员会集体评议、学生署名书面评价和随机课堂观察评价。目前我院主要采用行为观察量表法，通过书面评价和网络评价相结合的方式进行教学效果评价。调查表明：无论是针对学术型研究生还是MPA的教学效果评价，在评价方法选择上被调查对象都倾向于随机课堂观察评价、量表评价法和访谈评价，而委员会集体评价（即通常的小组评议）最不受欢迎的评价方式。

四、公共管理类专业研究生教学效果评价体系的应用方案探讨

有关现行教学评价制度实施状况调查结果表明，以下五个方面的工作应该着重加以改善：

（一）明确教学效果评价目的和评价原则

开展教学效果评价工作的目的不仅是教师选聘和奖惩，更要充分发挥教育评价的调节、激励、改进功能，确立衡量教师的合理标准。通过评价过程的反馈作用，调动广大教师的工作积极性，促使每个教师不断总结、提高自己的教学水平和业务能力，同时也促进校院两级不断加强对教师整体队伍的管理和建设，达到全面提高学校教育教学质量的目的。以此为目的开展教学效果评价就应当遵循客观准确和公平公正的评价原则，确保教学评价结果能够客观反映一线教学工作的真实情况，準确衡量教师的教学成绩和不足，公平对待每一位接受评价的教师，公正地开展每一次教学评估工作。

（二）完善教学效果评价标准和工作程序

调查显示，49.6%的被试认为评价过程和评价结果应该公开、公平、公正。保证教学效果评价过程和结果客观公正性的关键控制点在于完善教学效果评价的标准体系和建立规范透明的评价工作程序。在后续的研究或者应用方案开发中，可将公共管理类专业研究生教学效果评价指标进行行为等级划分和等级描述，形成可操作的评价标准。在总结经验基础上，针对不同职称层次的教师建立起分级评价标准体系，以提高评价的针对性和保证评价的公平性。在应用方案开发过程中，要加强对教学效果评价流程分析，明确全流程的控制节点及其衔接方式，确保评价工作运作顺畅、落到实处。

（三）加强教学效果评价的组织工作

调查显示，52.0%的被试认为评价内容（指标、标准）和程序规则的制订应该广泛征求师生意见。这说明程序公平相对于内容公平一点也不逊色，是提高师生对教学效果评价体系认可度和支持度的基本要求。从这个角度来看，教学管理部门应当加强教学效果评价的组织工作，深入分析每一个方案和流程以提高其科学性，仔细筹划每一个目标和任务以提高其实效性。在组织实施过程中，应当建立起明确的工作责任机制，避免将教学效果评估的领导权和评估权混为一谈。

（四）健全教学效果评价结果反馈机制

调查显示，53.8%的被试认为教学效果改进应该落到实处。而教学效果改进的关键在于通过评价结果分析和诊断，找寻教学过程中存在的问题及原因，并制定切实有效的改进行动计划。如果教学评价结果不能及时准确地得到反馈，教师的教学能力就难以得到提升，教学过程中存在的问题也会被忽视或掩盖。因此要强化教学效果评价的沟通和反馈机制，明确结果反馈的主体、时间、内容、方式和具体责任，使其成为改进教学效果的长效机制。

（五）强化教学效果评价结果的应用

评价工作的受重视程度和对教学工作的推动力，取决于评价结果如何运用。通常，评价结果可以应用于教师选聘、岗位津贴、晋职晋级、派出进修、申报课题等方面。调查表明，73.8%的被试主张将教学效果评价结果运用于优化教学方案和改进教学质量。由此可见，在公共管理类专业研究生教学效果评价中，应该降低奖惩性评价的主导地位，而应该以教师的全面发展为主，以提高教师的教学质量为最终目的，从而满足高等教育培养人才的需要。

参考文献：

[1]孙玉荣，等.基于AHP的课程教学效果评价指标体系研究[J].湖南工业大学学报，2010（5）：86-88.

[2]宋雅杰.基于位置度量法的高校教学效果评价模型[J].中国电力教育，2009（6）：43-44.

[3]刘彦文，等.案例教学效果评价指标体系的实证研究[J].管理案例研究与评论，2008（4）：69-75.

[4]区晶莹，等.公共管理类实验教学效果影响因素实证分析[J].实验室研究与探索，2013（8）：403-406.

[5]文华.新建本科院校公共管理类专业课堂教学质量评价实证研究——学生本位视角[J].职业技术教育，2014（17）：38-42.

[6]李红颜，等.《研究生用教学质量评估量表》研制初报[J].南方医科大学学报，2007（6）：853-856.

[7]郑冬梅，等.研究生课程教学质量评估体系的探索与实践[J].北京航空航天大学学报（社会科学版），2009（9）：13-16.