APP下载

科研项目评估方法研究综述

2014-11-24胡余平蔡兰张园园

企业文化·中旬刊 2014年11期
关键词:评估方法文献综述

胡余平?蔡兰?张园园

摘 要:根据科学研究项目的特点,分析现阶段国内外科学研究项目的评估现状,介绍了科研项目评估中的层次分析法、数据包络分析法、群决策方法、同行评议法以及Fisher判别分析法五种方法的应用研究,最后针时我国科研项目评估现状和特点提出了一些建议。

关键词:科研项目评估;评估方法;文献综述

目前,国外对科研投入评价的方法主要有:回溯方法,定量方法,成本-效益分析和文献计量学方法、定性方法、专家评议法等。我国对科研计划、项目的评估工作起步较晚。目前对科研项目评估方法的研究主要有层次分析法、数据包络分析法、群决策方法、同行评议法以及Fisher判别分析法。

一、国内外研究现状

层次分析法。层次分析法(analytic hierarchy process, AHP)是在对复杂决策问题的本质、影响因素以及内在关系等进行深入分析之后,构建一个层次结构模型,然后利用较少的定量信息,把决策的思维过程数学化,从而为求解多目标、多准则或无结构特性的复杂决策问题,提供一种简便的决策方法。

林建衡(2004)用四个指标( 经济效益、学术水平、人才培养、社会效益) 来评价大学的科研项目并对假设的四个科研项目进行了评估,经过计算,经济效益、学术水平、人才培养和社会效益权重分别为0.457, 0.300, 0.138, 0.105。因此经济效益的权重约为学术水平的1.5倍,约为人才培养的3.3倍, 约为社会效益的4.3倍。

刘长颖(2011)对我国科研项评估中的指标进行筛选后,选择了五个一级评审指标,分别为选题的必要性、技术的先进性、条件的可能性、经费的合理性和成果的可行性。对一级指标进行赋权重后得出的判断矩阵具有一致性。最终的研究结果表明选题的必要性、技术的先进性、经费的合理性和成果的可行性的权重都是一致的,而条件的可能性所占的权重最大,为其他四个指标权重的两倍。

数据包络分析法。数据包络分析法(data envelopment analysis, DEA)是著名运筹学家Charnes和Copper等学者以“相对效率”概念为基础,根据多指标投入和多指标产出对相同类型的单位(部门)进行相对有效性或效益评价的一种新的系统分析方法。它应用数学规划模型计算比较决策单元之间的相对效率,对评价对象做出评价,是处理多目标觉得问题的有效方法。

张继将(2013)根据科研项目的评价需求构建了评价的指标体系,以投入和产出作为一级指标。人员、研制时间和经费三个指标为投入的二级指标;而产出的二级指标包括任务完成情况、项目的学术影响以及项目效益。基于科研项目评估的多输入多输出问题,采用CRR模型进行计算。通过CCR模型与超效率模型相结合的方法,DEA方法可以得出科研项目之间的效率排名以及各决策单元调整投入的幅度,扩大产出的可能方向和程度。

群决策方法。国外学者Hwang在1987年对群决策研究进行了分析和总结后,给出一个群决策的定义,即群决策是把不同成员的关于方案集合中方案的偏好按照某种规则集结为决策群体的一致或妥协的群体偏好序。

程岩、解帆(2003)认为在科研项目评估过程中,决策者往往不能提供精确的评估信息,从而使得一些评估方法并不能有效识别一些有争议的科研项目。因而提出了一种根据不精确信息进行项目评估的群决策模型,利用该模型可以有效地识别具有争议的科研项目,并帮助决策群达成一致的决策方案。

同行评议法。同行评议法的雏形真正成为科技期刊出版的基石是在二战后的20世纪中叶。同行评议法常常被科学界用来判断工作程序的正确性,确认结果的可靠性以及对有限资源分配,如杂志版面,研究资助经费的公认性和特殊荣誉。它可以定义为“由从事该领域或接近该领域的专家来评定一项研究工作的学术水平或重要性的一种方法”。

程际明(2005)认为同行评议一般的评议规则包括:科研项目是否具有内在价值;项目研究是否具有实用性;对相关领域和科学事业是否具有长远影响;科研项目是否具有发展前景;项目申请人是否具有研究能力。而除一般评议规则之外,对科研项目评估的同行评议还包括权威的影响、匿名制的影响和是对评议人的评议问题三个潜规则。作者提出应通过评议公开化、建立合理的意见反馈机制及二级评审制度、建立同行专家数据库等途径完善同行评议方法。

Fisher判别分析法。判别分析是用于判别个体所属群体的一种统计方法。判别分析的特点是根据已掌握的、历史上每个类别的若干样本的数据信息,总结出客观事物分类的规律性,建立判别公式和判别准则。Fisher判别分析方法是一种线性判别的方法。它的工作思路是对原数据系统进行坐标变换,寻求能将总体尽可能分开的方向,也即采用方差分析的思想。

胡涛、王威(2005)等人基于核函数和线性Fisher判别分析方法构建了针对科研项目评估中的多总体非线性分类问题的核Fisher判别分析方法。通过确定训练集、选取核函数、确定特征空间的投影向量和确定判别函数和判别规则四个步骤构建了科研项目评估体系。该体系中,将项目属性作为系统输入,该项目所属类别作为输出。实证结果表明核Fisher判别分析法对测试样本的判别能力明显优于Fisher判别分析方法对测试样本的判别能力。

二、提高我国科研项目评估水平的意见建议

强调市场需求。对科研项目评估系统的制订, 面对的不仅是国内市场, 而应是立足国内市场考虑、评价新技术应用对未来国内、国际市场需求所造成的影响和即将带来的变化。要求所研究的新技术必须达到增加国家社会财富的目标。

突出新技术应用可行性。一是考察新技术被市场和社会所认知的可能性、认知程度及范围, 从而确定该技术未来应用的价值和可能性高低。二是根据市场现状预测对新技术发展需求的份额。三是通过用户参与时间早晚, 进一步考证生产上对开展这项新技术研究需求的迫切程度。

参考文献:

[1] 林建衡.层次分析法在高校科研项目评估中的应用[J].科研管理,2004(02):39-41.

[2] 刘长颖.层次分析法与高校科研项目评估指标权重的确定[J].辽宁师范大学学报(自然科学版),2011,03(34):30-33.

猜你喜欢

评估方法文献综述
品牌资产评估方法对比与分析
城市规模经济文献综述
马克思创新思想研究综述