高校科研绩效评价方法研究综述
2015-03-20鞠卫平
鞠卫平
(南京农业大学 工学院科研处,江苏 南京 210031)
科研绩效评价是一种学术活动,更是高校科研管理部门的重要工作.高校的科研绩效评价可以为高校的人才激励制度、薪酬福利制度建设等方案提供有效的参考依据,然而由于各高校的学科结构存在差异性和复杂性,不同学科不同专业的科研成果都对高校的科研绩效评价方法提出了很高的要求.如何科学合理的综合使用现有各种科研评价方法,对于高校科研管理具有重要的现实意义.
1 高校科研绩效评价的复杂性分析
1.1 高校学科设置与发展的多样性
当前,许多综合性研究型高校都是文理科兼备,这些高校的科研项目和科研成果既有自然科学,又有人文社会科学,高校在在设计科研绩效评价体系时,不仅需要考虑自然科学与人文社会科学等的差别,还要考虑基础研究与应用研究差别,这就决定了高校科研评价体系很难用一个单一的评价系统来考核和评价所有学科的科研成果.
1.2 高校科研成果的多样性
随着我国科研不断发展,高校对于科研成果的表现形式已经从传统的论文、专著、专利、软件著作等发展到了成果转化、人才培养、社会经济贡献率等领域.上述科研成果,像论文和获奖成果,学术界有一套对应的相对有效的评价方法.而像专著、软件著作权等科技成果的评价就难以通过简单的等级来甄别.因此,综合性研究型高校的科研成果评价的多样性与复杂性决定了高校科研绩效评价的复杂性.
1.3 高校科研绩效评价成本与产出的均衡性
科研绩效评价作为高校科研管理的一项基础性工作,对于一个综合性的高等院校若是不计成本的对各类科研成果进行相对精确的评价和认定,不是难题,但为此付出的人力和财力与实际需要的结果之间会出现严重失衡.因此,在科研绩效评价体系的设计上,对于不同学科、不同科研成果的评价成本与产出的均衡性、经济性,也决定了高校科研绩效评价的复杂性.
1.4 高校科研成果涉及对象的多样性
目前,综合性研究型高校的科研成果的绩效评价,不仅有对专职教师、科研人员、科研项目的绩效评价,还有针对科研团队、二级学院、科研所的绩效评价.由于涉及评价对象的主要工作内容不同,对于相应的科研绩效评价体系就不能采用“一刀切”的方式.这需要高校科研绩效评价方法存在多样性,使科研绩效评价保持相对的公平和公正.
2 科研绩效评价方法分析
2.1 同行评议法
同行评议法是通过邀请相同或相近领域的研究专家来评定某项科研成果的学术水平或科研项目的可行性,现已被广泛应用在项目评审论证、成果评奖、期刊论文评审、课题结项、工程项目规划设计等多个领域,是学术界公认且常用的学术评价方法.这种方法的局限性主要是在评议过程中,不仅会受专家自身的学术水平的影响,还会受人际关系的影响,具有一定的片面性和主观性.
2.2 文献计量法分析
文献计量法一般是采用数理统计的方法,通过对科技文献的分布及数量增长的情况进行定量分析,从而掌握文献的数量与时间的关系、文献之间的相互引用情况等.在目前的科研绩效评价领域常用文献计量法对评价对象的文献成果进行计量统计,通常包括:专著、公开发表论文、各类专利、软件著作权、各类级别奖项等.由于文献计量法的统计数据一般来源于权威统计机构,所以该方法的评价结果具有相对的公正性和客观性.
2.3 德尔菲法分析
德尔菲法在高校科研绩效评价中主要应用于评价指标体系构建,是在初步构建评价指标体系的基础上,通过对专家反复循环征求各项评价指标设置的重要性,进而对每次收集到的各匿名专家意见进行处理,直到各专家形成大致一致的意见,从而确定各指标的排序.德尔菲法通过多次反复征询专家意见,在最大程度上减少专家的主观因素影响,同时让专家对其他专家的观点和意见充分表达自己的看法.德尔菲法的不足是周期长,工作量大.
2.4 层次分析法
层次分析法是将一个复杂的总目标决策问题分解为多目标,进而将多目标进行分解若干层次指标,通过专家咨询,对指标进行排序并对定性指标模糊量化,进而算出各层次指标的权重.国内不少高校科研绩效评价体系是采用这一方法来构建评价体系.这种方法采用定性与定量相结合,在评定过程中能够客观的检验和判断思维一致性,得出的结论相对比较可靠.
2.5 模糊综合评价法
模糊综合评价法是应用模糊数学原理,将科研绩效评价中不易量化且边界不清的多个变量因素所隶属等级状况进行综合性评价的一种方法.根据综合评判对评判对象的全体所具备的条件,赋予每个对象一个最终评判指标,再据此排序择优,做出最终的评价结论.科研绩效评价过程中主要分为两步:第一步邀请专家先对科研绩效中每个因素单独评判,第二步再按所有因素综合评判.模糊综合评价法给科研绩效评价中某些复杂的、难以用数学精确描述的问题带来了方便而又简单的解决方法.
2.6 灰关联法
灰关联法是依据灰色系统理论,以部分信息已知,部分信息未知的小样本、贫信息、不确定性系统为研究对象,主要通过对部分已知信息的生成开发,提取有价值的信息,实现对系统运行行为、演化规律的正确描述和有效监控.在科研绩效评价时,灰关联法将科研管理中大量难以描述的量作为灰色量来处理,弱化随机因素的干扰,且考虑了科技指标在科技活动中作用的大小,引入了指标权重的概念,建立模型来认识和估计科研活动主要指标变化发展规律,从而揭示高校科研活动变化发展规律.灰关联法对样本量的多少没有要求,计算量小,用尽可能少的原始数据反映了尽可能多的状态信息,这在系统数据资料较少和条件不满足统计要求的情况下具有实用性.
2.7 数据包络分析法
数据包络分析法主要处理具有多个输入和多个输出的多目标决策问题,以相对效率概念为基础,用于评价具有相同类型的多投入、多产出的决策单元是否有效.一般来说,数据包络分析法能够很好地处理多输入多输出的决策单元评价问题,而且其模型处理的简捷便利特点在处理具有多指标的高校绩效评价方面具有非常大的优势.国内很多学者运用这一方法构建评价模型来评价不同区域高校或高校内部院系的科研状况.
3 结论
上述各种评价方法在高校科研绩效评价领域发挥着各自重要的作用:同行评议法在项目评审、职称评审领域具有一定权威性,而且方便快捷;文献计量法对被评价对象的科研成果具有较好的原始计量作用,且具有一定权威性;而模糊综合评价法、灰关联法和DEA数据包络分析法所构建的模型在评价科研绩效时一般是科研投入与产出之间的评价,而且更多应用于宏观领域科研绩效评价.
但从高校科研微观管理视角,前面几种评价方法都存在一定的局限性.同行评议法在高校内部使用不可避免的会出现各种关系的干扰,使评价有失公允,而邀请校外专家评议又会增加科研管理的成本.文献计量法,由于高校科研项绩效评价项目内容较多,通常显得相对简单,使评价结果会出现偏误.其他几种方法构建的理论模型,都需要被评价对象提供相对繁琐的数据,会给高校科研人员带来额外的工作量.因此,高校内部科研绩效评价可以选择层次分析法,结合德尔菲法来设计指标和确定各级指标的权重,进而构建高校内部的科研绩效评价体系.
〔1〕丁晶晶,毕功兵,梁樑.并联系统资源和目标配置双准则DEA 模型[J].管理科学学报,2013(01).
〔2〕王俊.我国高校投入产出效率评价研究[J].特区经济,2012(12).
〔3〕林崇建,毛丰付.财政投入与城市治理绩效分析——以江浙城市群比较为例[J].财贸经济,2012(12).
〔4〕侯俊明,刘俊昌,陈文汇.浅析社保资金绩效评价的指标体系与评价方法设计[J].中国财政,2012(23).
〔5〕杨雪,冯晖.基于主成分分析的高校投入产出绩效评价[J].上海管理科学,2012(05).
〔6〕尹伟华.三大执行主体视角下的区域R&D 投入绩效评价研究[J].科学学与科学技术管理,2012(10).
〔7〕程远.我国高等教育财政支出现状分析[J].决策探索(下半月),2012(07).
〔8〕关晓斌,张豫.高校R&D 投入产出绩效分析——以北京地区高校为例[J].中国人民大学教育学刊,2012(02).
〔9〕王海燕,于荣,郑继媛,唐润.DEA-Gini 准则在城市公共交通企业绩效评价中的应用[J].系统工程理论与实践,2012(05).
〔10〕张男星,孙继红.投入产出法在高校绩效评价中的运用[J].高教发展与评估,2012(02).
〔11〕 李敏.高校科研绩效评价体系的建立[J].岱宗学刊,2009,13(3):91-92.
〔12〕戚涌,李千目.科学研究绩效评价的理论与方法[M].北京:科学出版社,2009.11.
〔13〕曹阳.高校科研项目综合定量绩效评价方法研究[J].文教资料,2011(20).
〔14〕曹惠民.第三方政府绩效评价情境下的政府行为重塑[J].社会科学家,2011(06).
〔15〕原明亭,丁军航.高校自然科学类论文绩效评价模型研究[J].科技管理研究,2011(12).
〔16〕刘长义,温海骏.基于模糊熵权的企业知识链管理绩效评价[J].安徽工程大学学报,2011(02).
〔17〕乔元路,赵金先,阚洪生.基于AHP 与熵法的建筑施工安全灰色评价[J].青岛理工大学学报,2011(03).
〔18〕杨文举.基于Malmquist TFP 指数的中国高校科研生产绩效评价[J].高教发展与评估,2011(03).
〔19〕俞志红.Entropy-Fuzzy 在公路项目绩效评价中的应用[J].公路与汽运.2011(03).
〔20〕赵立新,程国平.现代科技社团绩效评价体系研究[J].当代经济,2011(10).
〔21〕安敏,曾旸,于晓斐.高校教师科研业绩评价研究述评[J].中国高等教育评估,2011(02).
〔22〕杨淇蘥,李健.基于模糊综合评价法的贵州省科研机构创新绩效评价指标体系[J].科技情报开发与经济,2011(13).