研究生教育自我评估指标体系权重研究

柴媛媛 翟小蒙 巩丽萍

[摘 要]该研究分析了研究生教育自我评估指标体系建立的原则和相关的指标要素，设计了对应分级指标体系，形成研究生教育自我评估体系一级指标5项、二级指标19项，通过征求25位研究生教育专家意见，运用层次分析法建立AHP-模糊评价分析模型，对指标体系进行权重分配，构建适用于研究生教育自我评估的指标体系。

[关键词]研究生教育质量；自我评估；指标体系；权重

[中图分类号] G643 [文献标识码] A [文章编号] 2095-3437（2018）08-0172-04

一、构建研究生教育自我评估指标体系的背景

教育部、国家发展改革委员会、财政部联合印发的《关于深化研究生教育改革的意见》（教研〔2013〕1号）中明确指出：“要强化培养单位质量保证的主体作用，定期开展自我评估。建立自我评估制度。”《国务院学位委员会、教育部关于加强学位与研究生教育质量保证和监督体系建设的意见》学位〔2014〕3号重申：“学位授予单位要建立研究生教育质量自我评估制度，组织专家定期对本单位学位授权点和研究生培养质量进行诊断式评估，发现问题，改进学科建设和人才培养工作，不断提高研究生教育质量。”

研究生教育自我评估和外部评估是研究生教育质量管理的两个方面。研究生教育质量提升的关键在于是否能建立起一个外部与内部、他律与自律相结合的质量保障体系。在该体系中，自我评估既体现高校自律、资质内涵，又能够作为外部评估的基本依据。培养单位作为核心评估主体，具有主观能动性，有质量保障的意识，可以发现自身存在的问题，并积极采取措施进行修正和改善。在以学位点合格评估为基准，学科评估、专业认证、社会排名等外部评估方式并存的环境下，构建自我评估为主线的研究生教育内部评估体系是决定高校质量提升和持续发展的关键。

二、研究生教育自我评估指标体系的建立

（一）指标体系建立的原则

自我评估指标体系建立的过程，就是对评估对象进行深入分析和认识的过程，是对评估对象的总体性认识转化为对某些局部方面的认识过程。

第一，客观性原则。评估指标体系必须对评估对象做出客观衡量，评估指标要有可测性，尽量量化。如有难以量化的指标时，要注意参评人员的客观性与代表性，使得评估过程的人为因素最小化。

第二，科学性与实用性原则。评价指标设计应从科学的角度系统而准确地把握研究生教育的实质，而且评价指标的内涵和外延要清晰，数据来源要准确，计算方法要科学实用有可行性。

第三，导向性原则。整个指标体系要引导学校提高学位建设的水平，突出特色，发现现存问题并给予整改意见和要求，起到指导未来培养和教育方向的作用，做到在客观反映现实状况的同时具有学科导向性和前瞻性。

第四，定量为主、定性为辅原则。评价指标总体上应以定量指标为主，对于一些较难量化的指标采用定性分析，实行定量分析与定性分析相结合，这样的评价结果会更全面和科学。

第五，系统性与层次性原则。評价指标体系必须全面反映研究生教育的各个方面，具有系统性，同时应在不同层次上有不同的指标，这样有利于管理者在不同层次进行有效的优化和调控。

（二）指标要素分析

评估指标体系，是一套能够全面反映所评估系统的总体目标和特征，并且具有内在联系、起互补作用的指标的集合。通常一个评估指标体系有若干项，为了清晰地确定评估指标体系，评估指标一般分成若干个不同的层次如第一级指标、第二级指标等。从横向来看，分为规模指标和质量指标。规模指标反映被评对象的规模水平、覆盖面和该单位的研究生培养能力。质量指标反映被评对象的能力水平、成果水平等。从纵向看，分为目标指标、过程指标、条件指标。目标指标反映评估对象水平与质量本质特征。过程指标反映达到评价目标的工作实现程度，用来检查和评价研究生培养过程。条件指标反映实现评估目标所必需的物质基础，用来检查和评价培养条件。

研究生教育质量由诸多要素组成，我们针对各个组成要素进行分析，充分考虑其结构性、完整性、客观性、导向性，抓住主要因素，忽略次要因素。

第一，导师因素和研究生自身因素。导师是研究生培养的主要责任人，良好的导师团队可以为研究生的成长提供最重要的软件条件。研究生自身的因素主要表现在生源质量、学习动机、学习能力三个方面，这些因素直接关系到研究生学习的整个阶段。

第二，科学研究情况。科学研究情况是衡量研究生教育结果的一个重要维度，它可以客观地反映研究生的科研水平。

第三，培养环境与条件因素。优良的培养环境与条件有利于提升研究生的科学研究能力，充分发挥各位导师的专业优势，促进信息资源共享，更好地促进科学研究出成果，营造整个学科的良好学术氛围的同时提升整个学科的办学水平。

第四，人才培养过程中的各个因素。人才培养过程是从学生入校开始到毕业后就业的整个过程，主要包括课程教学、学术训练与实践训练、国际交流、论文质量、就业发展情况反馈与分析。

第五，教育管理制度。健全的教育管理制度为整个研究生的教育阶段提供各项规范，从根本上保证各项教育活动的正常高效运行。

综上分析，可以看出在构建指标体系的时候我们既要有以绝对数字衡量的规模性质的质量指标（如导师数、科研团队的科研成果数目和等级），也要有以比例数等呈现的人均指标（如拥有博士学位的教师比例、教师人均发表论文数、科研团队人均科研经费数），还要有主观性的指标（可以通过调查表的形式来统计专家、教师和学生对学科建设水平的反映和用人单位对毕业生质量的反馈）。

（三）自我评估指标体系

在分析了自我评估指标体系的构建原则和影响因素后，我们还参照了2014年国务院学位委员会发布的学位授权点合格评估的抽评要素以及2016年教育部学位与发展中心第四轮学科评估指标体系，设计了研究生教育自我评估体系。整个指标体系在逻辑上划分为5个目标层，每个目标层对应3-6个准则层，每个准则层又划分为几个具体的指标层，其中一级指标5项、二级指标19项。

三、研究生教育自我评估指标体系各指标的权重确定

（一）确定权重的方法

在研究生教育自我评估体系指标权重的确定上，我们采用层次分析法。层次分析法（AHP）是美国运筹学家T.L.Satty等人在20世纪70年代提出的一种定性与定量分析相结合的、系统化、层次化的决策方法。这种方法的特点是在对复杂决策问题的本质、影响因素、内在关系等进行深层次的分析以后，构建层次结构模型，利用较少的定量信息，把决策思维的过程数学化，从而为复杂的问题提供简便的决策方法。具体地说，它是把决策问题的有关元素分解成目标、准则、方案等层次，用一定的标度对人的主观判断进行客观量化，然后进行定性分析和定量分析的决策、方法、步骤。

（二）具体操作

1.问卷设计

本问卷发放对象为研究生教育的专家，旨在了解研究生教育各项指标的权重，以指标的重要程度为调查内容。将每个指标按照自我评估的重要程度分为5个等级即不太重要、一般重要、重要、显著重要、极端重要。请专家对每个指标的重要程度进行评价，而且每个指标只能评价一次。

2.专家调查问卷数据分析

我们共发放25份专家调查问卷，对象有研究生的各学院院长、分管研究生副院长、学位评定委员会委员、研究生教学指导委员会委员、研究生教育管理人员等。回收25份，回收率100%。专家职称构成：教授8人，副教授6人，讲师5人，管理人员6人。年龄构成：30岁以下2人，30-45岁17人，45-55岁6人。从事研究生教育管理的时间与人数：3年以下9人，3-5年6人，6-8年5人，9年以上2人。从事研究生教学的时间与人数：3年以下4人，3-5年4人，6-8年2人，9年以上9人。

在统计问卷时，我们给每个指标的重要程度赋值：不太重要1分，一般重要3分，重要5分，显著重要7分，极端重要9分。根据专家的评价数值，对评估指标进行两两比较计算，列出各项指标的权重系数。

第三步，计算一致性比例[C.R.=C.I.R.I.]，并进行判断

当[C.R.=0]时，认为判别矩阵具有完全一致性；

当[C.R.<0.1]时，认为判别矩阵的一致性是可以接受的；

当[C.R.>0.1]时，认为判别矩阵不符合一致性要求，需要对该判别矩阵进行重新构造，加以修正。

根据调查问卷结果计算可得判断矩阵的最大特征值[λmax]为5.04，因而一致性指标CR=0.01<0.1，即我们的判断矩阵具有较为满意的一致性。我们的研究表明，在研究生的培养质量衡量指标中，师资队伍（0.24）和教学与人才培养（0.22）是最为重要的两个指标。

运用同样方法计算二级指标权重，则各指标权重均已明确，见表4。

现将各级指标权重总结如下，如表4所示。从表中的数据不难判断，就A1（师资队伍）而言，3个二级指标（学术带头人与学术骨干的作用、导师队伍责任心、教学与科研团队）权重分布较为均匀；在A2（科学研究）中，科研成果和科研项目这两个二级指标较为重要；A3（教学与人才培养）指标中，最为重要的是论文质量，其次是学术训练与实践训练，就业发展处于相对次要位置；A4（培养环境与条件）指标中，经费投入最为重要；A5（教育管理制度）指标中，学术道德和学风教育与管理服务制度同等重要。

四、结语

研究生教育自我评估工作既是研究生教育理论研究的热点，也是各培养单位的工作重点。构建完善的自我评估体系，并明确各个指标体系的权重，不仅可以使培养单位掌握自身研究生教育的质量，也可以作为提升其研究生教育质量的导向。本文在研究当下研究生教育各项评估指标以及借鉴他人研究成果的基础上建立相对通用的研究生教育自我评估指标体系，并确定了各指标的权重，可为各培养单位研究生教育自我评估提供参考。但研究生教育有其不同的发展阶段，各培养单位也有其不同的学科特点，自我评估指标体系也会有其时代性和差异性，需要不断完善和修改，才能更好为提升研究生教育质量服务。

[ 参 考 文 献 ]

[1] 梁辰，贾方芳，张哲，等.研究生教育质量自我评估指标体系构建初探：以上海交通大学公共卫生学院为例[J].中国社会医学杂志，2015（1）：23-25.

[2] 蒋昕昱.高校专业学位研究生教育自我评估指标体系构建研究[D].保定：河北大学，2015.

[3] 孙福田，孙立群，吴昌友，等.学位与研究生教育质量评估指标体系及權重的确定[J].东北农业大学学报（社会科学版），2011（3）：31-33.

[4] 赵嵩.常态化研究生教育自我评估机制研究[J].学位与研究生教育，2015（7）：12-15.

[5] 崔春义，曹文利，王忠涛，等. AHP-模糊评价法在全日制专业学位硕士培养质量评估中的应用[J].航海教育研究，2015（3）：33-37.

[6] 朱明，杨晓江. 试论硕士点质量评估体系的构建[J].学位与研究生教育，2015（6）：55-60.

[7] 王琼. 高校决策支持系统中发展评估模型研究[D].哈尔滨：黑龙江大学，2005.

[责任编辑 庞丹丹]