浙江省高校科研项目绩效评价指标体系研究1

杨莲芬、唐韵

（1浙江工业大学之江学院、2浙江工业大学经贸学院，浙江 杭州 310024）

浙江省高校科研项目绩效评价指标体系研究1

杨莲芬1、唐韵2

（1浙江工业大学之江学院、2浙江工业大学经贸学院，浙江 杭州 310024）

根据科研项目绩效评价的四大原则，建立了浙江省高校科研项目绩效评价指标体系，并应用层次分析法（AHP）对指标体系进行主观赋权，采用曲线参数标定法确定指标隶属度，进而采用熵权法确定各指标客观权重，最终计算组合权重。该体系为评价高校科研项目提供了方法和途径，但样本需要进一步扩大与完善、评价方法的实际应用有待进一步验证。

高校科研项目；隶属度；AHP；熵权法

一、引 言

在科学技术迅猛发展的形势下，如何建立行之有效的科研项目绩效评价体系，已成亟待研究的热点课题。

本文重点研究绩效评价体系各指标的计算值与评价值之间的转换、主客观权重以及组合权重的计算，并为后续研究提供理论支持。根据科研项目绩效评价的时限性、可衡量性、可获取性和特定性四大原则，文中的评价体系设有项目执行情况、项目人员情况等7个一级指标和21项二级指标。2各层级指标的具体内容详见表1指标层相关内容。

二、浙江省高校科研项目绩效评价体系评价方法

（一）AHP层次分析法确定指标主观权重

1.建立两两比较判断矩阵

对指标体系自上而下将各层因素相对上一层因素的重要性，采用Satty提出的1-9比率标度法构造两两比较的判断矩阵。假设一级指标层E中的指标Ek与二级指标层F中各元素F1，F2，F3…Fn有重要性的关联，则构造F层元素相互间两两比较的判断矩阵。fij表示对于Ek而言Fi对于Fj的相对重要性，通常fij取1－9以及他们的倒数，标度的含义：1为Fi比Fj同样重要；3为Fi比Fj稍重要；5为Fi比Fj重要；7为Fi比Fj强烈重要；9为Fi比Fj极端重要；2、4、6、8表示Fi比Fj的影响介于上述两个相邻等级之间；1/2，1/3，…，1/9表示Fi比Fj的影响为上述各标度互反数。

2.计算权重

对通过一致性检验的目标数据计算判断矩阵的每一行乘积，假设W为本层次单排序过程中各因素的权重，则计算步骤如下：，再计算，然后对向量归一化，即，对于多级指标的AHP组合权重，最低层次的指标权重为各对应层指标权重相乘之积。

3.AHP主观权重

邀请领域专家对各标度进行客观打分。本研究邀请了来自浙江大学、天津大学、上海交大、华中科技大学、华北电力大学、河海大学、浙江工业大学等省内外知名高校的教授学者以及科技部门的领域专家，回收专家打分问卷调查74份，通过AHP一致性检验的有49份，通过率为76.56%，其中人文社科类专家打分调查表为22份，自然科学类专家打分调查表为27份。AHP层次分析法确定的指标权重如表1。

表1 主观权重

（二）熵值法确定指标客观权重

1.熵权法的原理

熵权理论认为，对于某一指标的样本观测值，数据差别越大则该指标对系统的比较作用就越大，即该项指标包含和传递的信息越多，赋予较高的权重。

2.指标隶属度的确定-曲线参数标定法

熵权法需要对部分指标数据处理为评价数据。浙江省高校科研项目绩效评价指标的计算采用两种方法：第一，通过鉴定标准评定打分获得二级指标的评价值，包括项目进展情况、项目主要技术经济指标完成情况等12个二级指标；第二，通过统计指标的加权求和获得二级指标的计算值，包括参研人员学历、论文著作等9项二级指标。2Lian-fen YANG，Yun TANG. Performance Evaluation of Scientific Research Program in Zhejiang Colleges Based on Uncertainty Analysis. The Springer book series on “Computational Risk Management”. ISSN: 2191-1436。采用第一种方法时，评价指标的评价值直接参与指标加权求和计算；而采用第二种方法，所得的计算值不仅量纲不同，值域也不同，需要通过对这9项指标进行隶属度的设计将指标的计算值转化为指标评价值。

采用曲线参数标定法对指标隶属度进行确定。首先需要确定一条曲线，该曲线必须满足：（1）单调性。（2）收敛性。隶属度曲线的值域应 [0-10]，当曲线的自变量（计算值）趋于无穷大时，因变量（指标评价值）趋近于10；自变量趋于0，因变量也趋近于0；（3）待定系数应尽量少，便于参数的标定。基于这三点的考虑，该指标的隶属度曲线选择了形如的曲线。并将（，5）定义为指标i的计算值的均值相当于评价指标隶属度的中间值，由此可以确定待定系数A的值。

3.熵权法客观赋权的步骤

设ej为第j个评价指标的熵值，根据熵值的计算公式，其中为第j个指标在第i个系统中的特征比重，xij为第i各系统中第j项指标的观测数据为第j项指标的所有系统观测数据之和。设为第j个评价指标的熵权，根据熵权计算公式由此计算的熵权即该指标的权重。

4.熵权确定的客观权重

回收省内外高校科研项目评价问卷79份，获得客观的项目评价数据作为确定客观权重的样本。其中浙江省211院校浙江大学5份，省外211院校14份。浙江工业大学、宁波理工大学、浙江外国语学院、省委党校等省内一般院校60份。按学科分自然科学类项目评价问卷38份，人文社科41份。按上述计算步骤及方法，对各个指标客观赋权。熵值法确定的评价指标权重如表2所示。

（三）基于组合赋权的高校科研项目绩效评价模型的建立

设w为组合权重，w**为AHP确定的指标权重，w*为熵权法确定的权重，建立三者的线性组合，设主观偏好系数权重占组合权重比例为线性组合为（1），以两者偏差平方和最小建立函数。将（1）式代人函数，解得＝0.5，该值不失一般性。因此，各指标的组合权重分别为，则组合权重如下表3所示，由此，建立了浙江省高校科研项目绩效评价指标体系。

（四）实证结果的具体应用

考虑到浙江省各高校基础实力、承担科研项目的能力和研究侧重点各有不同，因此将浙江省高校分为211重点院校与一般院校进行研究。此外，自然科学类科研项目和人文社科类项目在绩效评价上也各有侧重，本研究也对不同的学科类型进行分类研究。例如，从各指标间的横向比较看，省内人文社科类的科研项目在直接经济效益赋予的权重为0，而自然科学类则为0.153718，两者悬殊较大。项目产出成果、间接社会影响、人才培养在不同的学科间赋予权重的差别不明显，且都被赋予了较高的权重。

从构建的指标体系来看：第一，浙江省一般院校自然科学类科研项目指标按重要性程度依次是：项目产出成果、人才培养、直接经济效益、项目执行情况、项目人员情况、项目经费情况、间接社会影响；第二，浙江省一般院校人文社科类科研项目指标按重要性程度依次是：间接社会影响、人才培养、项目产出成果、项目执行情况、项目经费情况、项目人员情况、直接经济效益；第三，浙江省211院校自然科学类科研项目按指标重要性程度依次是：间接社会影响、人才培养、项目产出成果、项目人员情况、项目执行情况、直接经济效益、项目经费情况。

表2 客观权重

表3 组合权重

三、需进一步研究的内容

（一）样本需要进一步扩大与完善

从已收集到的样本数据结构来看，浙江省211重点院校自然科学类和人文社科类的数据样本较一般院校明显偏少，使绩效评价体系缺乏全面性。而作为省外参照组的省外211重点院校，也缺乏自然科学类科研项目的相关数据，给评价带来一定的难度。因此，在已收集数据的基础上，应进一步分发回收省内外各院校各学科的科研项目问卷，特别需要收集浙江省211院校与省外211院校的相关数据，进一步扩大本研究的样本容量，完善科研项目绩效评价体系。

（二）评价方法的实际应用有待进一步验证

基于AHP层次分析法和熵值法相结合的赋权法，既尊重领域专家给予的意见，又站在客观数据的角度给出各指标的权重。该指标体系的组合权重是进一步研究的基础，在后续的研究中可得出相应的分值。浙江省高校科研项目绩效评价体系是一个动态的体系，对不同地区、不同类型的高校、不同学科的科研项目进行绩效评价，验证该体系的可行性，并为提高科研项目的效益与效率提供理论依据。

10.3969/j.issn.1674-8905.2011.03.007

注：1本文是浙江省科技厅软科学项目“基于绩效评价的浙江高校科研项目资助模式研究（2009C25018)”研究成果。

（责任编辑：张巧燕）