基于层次分析法的信息技术类高校科研绩效评价

王晓甜， 田小平， 贾　勇

(西安邮电大学 科技处， 陕西 西安 710121)



基于层次分析法的信息技术类高校科研绩效评价

王晓甜， 田小平， 贾勇

(西安邮电大学 科技处， 陕西 西安 710121)

针对信息技术类高校科研成果转化需求旺盛的特点，制定一套适合信息技术类高校科研成本与效益的评价指标体系。应用层次分析法确定各个指标的权重，建立信息技术类高校科研绩效的评价模型。利用该模型对某信息技术类高校2013-2015年的科研绩效进行量化评估，验证了该模型的有效性。

科研绩效评价；指标体系；层次分析法

在高校科研管理中引入绩效评价体系可以客观、准确、及时地对学校的科研绩效进行评价。目前，国内对于科研绩效评价的研究主要集中在以下三方面：一是对科研绩效评价方法的应用研究，文献[1]构建了一个综合评估模型并利用此模型计算得到了17个行业的经济绩效排序结果。文献[2]对国内外已有的科技实力的评价方法进行了归纳总结。二是对科研绩效评价体系构建的研究。文献[3]从科研投入、产出数量、产出效益3个方面，提出了一套高校人文社会科学科研绩效评价指标体系。文献[4]建立了研究所科研绩效评价三级指标体系。三是对科研绩效评价的应用研究。文献[5]提出了如何提高科技投入和产出绩效的相关建议。文献[6]在分析科技投入和产出状况的基础上，进行科研绩效分析。目前，科研绩效评价的研究主要针对企业和科研院所等单位，而对高校尤其是信息技术类高校的科研绩效评价的研究尚未深入开展。信息技术类高校学科应用特色鲜明，与企业联系密切，科研成果转化需求旺盛，与企业和科研院所的科研特点有着显著的不同。此外，信息技术类高校的科研与经济之间的关系复杂，作用机制不明确，目前还没有建立较为完善的评价模型，因此针对信息技术类高校科研绩效评价模型的研究显得尤为迫切。本文拟设计一个信息技术类高校科研绩效评价模型。首先，建立信息技术类高校科研绩效评价指标体系；然后，通过问卷调查法获得各指标之间的相对重要性数据，建立判断矩阵；最后，用层次分析法计算出各指标的相对权重。在此基础上，利用该模型对某信息技术类高校2013-2015年的科研绩效进行量化评估。

1　信息技术类高校科研绩效评价模型

1.1指标体系的建立

发放调查问卷，向20多位校内外专家调查影响信息技术类高校科研绩效的主要因素。按科研效益、经济效益和社会效益3个一级指标，建立信息技术类高校科研绩效核心评价指标体系(见图1)。

图1　信息技术类高校科研绩效评价指标体系

1.2层次分析法

层次分析法(Analytic Hierarchy Process, AHP)作为规划、决策和评价工具[7-8]，已在绩效评估、方案选择和重要性判断等领域广泛应用[9]。利用层次分析法计算信息技术类高校科研绩效评价指标体系中各指标权重步骤如下。

步骤1构造判断矩阵。

构造判断矩阵A=(aij)n×n(i,j=1,2,…，n)。判断矩阵中的aij是要素i与要素j的重要性比较结果，即相对权重。一级指标、二级指标、三级指标各建立一个判断矩阵。

步骤2计算权重向量。

利用方根法计算各个指标相对上一级指标的权重系数。

(1)计算判断矩阵每一行元素乘积

(2)计算Mi的n次方根得到权重

(3)将权重归一化得到归一化权重Wi，即每个指标占上一级指标的百分比

(4)构成归一化权重向量

W=(W1,W2,…,Wn)T。

(5)计算最大特征值

其中(AW)i表示向量AW的第i个分量。

步骤3一致性检验。

对判断矩阵进行一致性检验是确保其合理性的一个重要手段。一致性检验判别式为

如果C.I.≤0.1,就可以认为建立的判断矩阵是合理的，前面所计算的权重也就是合理的。

1.3指标权重的计算

为确定信息技术类高校科研绩效评价各指标的权重,请相关专家根据判断尺度的定义给各指标进行打分；对各分数取平均值,建立各级指标的判断矩阵；利用层次分析法分别计算出各级指标的权重，并进行一致性检验，保证计算结果合理。

(1)计算一级指标的权重

根据一级指标的打分取平均值,建立判断矩阵，采用层次分析法计算各指标权重，进行一致性检验，得

一致性检验指标C.I.小于0.1,满足一致性要求，各指标权重合理。一级指标权重的计算结果如表1所示。由其可见，一级指标权重分别为科研效益为0.230,经济效益为0.648,社会效益为0.122。

表1　一级指标科研项目绩效总体评价的权重

(2)计算二级、三级指标权重

计算二级、三级指标的权重的过程与计算一级指标权重的过程相同,二级指标权重及一致性检验结果分别如表2、表3和表4所示, 三级指标权重及一致性检验结果指标分别如表5和表6所示。计算完各级指标的权重以后,各级指标的综合权重需要进行修正,各级指标综合权重修正的结果如表7所示。

表2　二级指标科研效益的权重计算及一致性检验结果

表3　二级指标经济效益的权重计算及一致性检验结果

表4　二级指标社会效益的权重计算及一致性检验结果

表5　三级指标科研论著产出率的权重计算及一致性检验结果

表6　三级指标获奖成果产出率的权重计算及一致性检验结果

表7　指标综合权重及修正值

2　案例分析

某信息技术类高校科共有科研人员500人，2013-2015年完成的主要科研指标如表8所示。以指标综合权重修正值乘以1 000分为各级权重满分值。根据各级权重满分标准计算某信息技术类高校2013-2015年科研的各绩效评价核心指标的实际分值,见表9(计算到二级指标)。

由表9可见，2013-2015年该校科研的各绩效评价核心指标的实际得分总和值分别为530、562、587分,该校科研投入绩效逐年得到提高。这是由于，学校制定了合理的科研成果产出和转化奖励办法，使得该校的科研投入绩效逐年提高。其具体表现有：一是提高了科研成果产出率，科研论著、人均论文获奖成果、专利产品数量逐年提升；二是科研成果转让收入和科研成果转化率逐年提高；三是学校注重人才培养,人才培养率逐年提高。

表8　某信息技术类高校2013-2015年完成的主要科研指标(二级指标)

表9　某信息技术类高校2013-2015年科研的各绩效评价核心指标的实际得分总和

3　结语

设计了一套适合信息技术类高校科研成本与效益的评价指标体系，给出了各级指标的判断矩阵，应用层次分析法计算确定了各个指标的权重，建立了信息技术类高校科研绩效的评价模型。并且，利用该模型对某信息技术类高校2013-2015年的科研绩效进行实例验证，证明了该模型的有效性。

[1]王海峰.基于DEA/PCA模型的高新技术产业经济绩效评价[J/OL].统计与决策2012(7):62-64[2016-07-20].http://www.cnki.com.cn/Article/CJFDTotal-TJJC201207018.htm.

[2]吴强,解金玲.基于模糊数学方法的区域科技实力DEA评价[J/OL].科技管理研究,2005(11):46-49[2016-07-20]. http://dx.chinadoi.cn/10.3969/j.issn.1000-7695.2005.11.017.

[3]郑德俊,高风华.高校人文社会科学科研绩效评价指标体系构建 [J/OL]. 科技进步与对策,2009,26(7):150-153[2016-07-20].http://www.cnki.com.cn/Article/CJFDTotal-KJJB200907042.htm.

[4]袁海霞,万辉,王小乐,李育超.科研绩效评价指标体系的初步探讨[J/OL]. 海军军事医学,2013,34(2):157-160[2016-07-20].http://www.cnki.com.cn/Article/CJFDTotal-HJYX200702035.htm.

[5]石忆邵,汪伟.上海市科技投入和产出绩效分析对策建议[J/OL].同济大学学报(社会科学版),2006,17(2):105-111[2016-07-20].http://www.cnki.com.cn/Article/CJFDTotal-TJDS200602017.htm.

[6]丁永,彭涛.新疆科技投入产出绩效分析及对策建议[J/OL].科技创业,2007,20(4):1-10[2016-07-20].http://www.cnki.com.cn/Article/CJFDTotal-KJCK200704002.htm.

[7]HOMAS L S． Decision making for leaders: the analytical hierarchyprocess for decisions in a complex world [M]． Belmont，California:Wadsworth，1982:

[8]OMAS L S，JOYCE A． Conflict resolution: the analytic hierarchyprocess [D]． New York: Praeger，1989: 17

[9]OMAS L S，LUIS G V． Boston models，methods，concepts & ap-plications of the analytic hierarchy process [M]． Boston: Kluwer Academic，2001:

[责任编辑:杨洵]

Research performance evaluation of information technology universities based on AHP

WANG Xiaotian,TIAN Xiaoping,JIA Yong

(Science and Technology Department, Xi’an University of Posts and Telecommunications, Xi’an 710121, China)

According to the characteristics of the demand for the transformation of scientific research achievements in information technology universities, a set of evaluation index system suitable for the scientific research cost and benefit of information technology universities is established. The method of analytic hierarchy process is applied to determine the weight of each index, and the evaluation model of the performance of information technology universities is set up. The model is used to evaluate the scientific research performance of 2013-2015 years in a certain information technology university, and its validity is verified by the results.

scientific research projects performance evaluation, index system, AHP

10.13682/j.issn.2095-6533.2016.05.023

2016-08-05

陕西省教育厅科学研究计划专项项目(14JK1683)

王晓甜(1983-)，女，硕士，从事科研绩效管理研究。E-mail: wangxt@xupt.edu.cn

田小平(1963-)，男，教授，从事信号与信息处理技术研究。E-mail:xptian@xupt.edu.cn

G472.5

A

2095-6533(2016)05-0122-05