铁路运输企业科研项目评价体系研究

郭尽朝+常晓东+张凯鹏

【摘 要】不同的行业科研项目存在一定的差异，本文从所参与的课题出发，理论上阐述了铁路运输企业科研项目的特点和评价体系的关键点，构建铁路运输企业科研项目评价体系。提出将层次分析法（Analytic Hierarchy Process ， AHP）和德尔菲法（Delphi）相结合的评价体系，并根据与神朔铁路合作的经验，初步构建了包括经济效益、技术效益、管理效益、人才培养价值等的铁路运输企业科研项目评价体系。

【关键词】铁路运输；科研项目；评价体系；层次分析

一、引言

科学技术是第一生产力，在经济高速发展的今天，企业想要进一步的发展，依靠的是科学技术的创新，而这些创新很大程度上来自于企业科研的投入。根据国家统计局统计数据，2013年科研项目经费的投入占GDP的2.09%，2012年投入强度为1.98%，而2011年为1.84%，科研项目经费总投入逐年增加，但科研项目经费投入增长速度逐年减缓。同时，与国外相比，国内科研项目上的投入仍然属于较低水平。图1显示了2004年-2013年研究与开发经费（R&D， Research and Development）与GDP的关系。

图1也表明迫切的需要找到科学合理的科研项目评价方法，对科研项目进行监督和评价，以提高科研项目的实际应用价值。然而，科研项目评价是人类面临的一个难题，已有的研究给出了多种评价方法，主要包括层次分析（Analytic Hierarchy Process，AHP），数据包络分析（Data Envelopment Analysis， DEA），模糊评价法和综合评判法，随着计算机技术的发展，模式识别，神经网络等方法也开始运用于科研项目评价。但是科研项目某些方面的评价仍然是人类研究的难点，比如：社会效益、管理效益、技术进步效益等的评价。

从企业角度来说，科研项目评价是一个现实的管理问题，急需要找到科学、适用的评价体系。同时评价体系还需要方便快捷，这就需要结合计算机技术开发相应的评价软件和测量方法。

二、文献综述

针对科研项目评价方法的研究，是一项集评价理论、评价方法与具体操作系统为一体的综合性研究项目。科研项目评价是科研管理体系中的重要环节，它既是管理过程的出发点，又是管理过程的归宿，对于加强科技项目的管理，提高科技资源配置的有效性和投资效益有着重要的作用。

1.国外科研项目评价相关研究概况

自从20 世纪50年代以来，世界各国与地区对科研项目评价方法的研究，在理论和实际应用方面都取得了可喜的成绩，项目评价与决策已经成了一门综合性学科。澳大利亚、韩国、美国、日本、英国以及欧盟等都在重大科研项目的开发及管理中引入了相应的评价方法。

指标评价、同行评议法、经济分析法和过程评价法是各国普遍采用的评价方法，如美国、日本、英国、欧盟、澳大利亚及韩国等国。各国在应用这些方法时各具有特色。如在澳大利亚各科研机构中，每年都根据其科技计划周期，定期组织专门评价委员会对进行中的科技计划进行评价。评价的依据是根据计划在立项时所确定的研究目的、目标、实际研究结果以及对社会的实际影响等诸方面开展评价。在英国的基础研究主要在大学和政府部门支持的研究所里进行，英国政府在评价重大科技项目阿尔维计划的评价时大多采取聘请独立的专业评估单位进行评价的方法，主要涵盖了项目的立项，中期和结题以及成果的推广各个方面。层次分析法、面访与问卷调查也是一些国家采用的评价方法，如澳大利亚、美国、英国等国。

从各国的评价方法应用中可以看出，国外科技项目评价方法有定量评价和定性评价，评价活动中主要有以下特点：（1）评价活动既是制度化的工作行为，又是专业性很强、技术含量很高的研究活动；（2）为决策服务是评价活动的基本宗旨，客观性是评价活动的首要原则；（3）评价活动的明确化是确保评价质量的关键因素；（4）坚持科学性与可操作性相结合是开展项目评价行之有效的做法；（5）坚持决策导向与重视评价理论方法的创新。

2.国内科研项目评价相关研究概况

就国内而言，在开展科研项目后评估的初期，多采用单一的方法，如同行评议法、层次分析法、德尔菲法、文献计量法等，后来逐步发展为定性和定量两种或多种方法联合使用的评估方法。例如，周虹等人提出将文献计量法与专家评议法进行结合；2006年宓众在科学计量法的基础上运用BP 神经网络的思想，同时结合专家评议法进行基金项目的结题评价，对基金项目给出有效评价结果；张利华等（2011）以海淀区科技项目为例，使用DEA进行评价，并对科研项目的不足进行了分析；2008年于成刚等人采用了基于层次分析法的模糊综合评价模型建立了科技项目后评价的指标体系；张素娟等（2010）用AHP 和DEA相结合的方法，先构建层次化评价体系，利用AHP获得指标权重，再利用DEA获得科研项目绩效排序；而王增辉（2012）则采用模糊综合评价法结合层次灰色评价法、专家评议法的结合的方法对山东省的软科学研究成果综合评价进行了研究。平衡计分卡应用相对较少，郑春美等（2014）对平衡积分卡进行扩展，对高新技术公司企业绩效进行了评价。关于铁路行业绩效评价的研究集中于铁路建设项目的评价，王燕燕（2013）使用关键绩效指标（KPI）构建评价体系，对兰青二线建设项目进行实证研究。而其他关于铁路运输企业科研项目评价的研究比较匮乏。

这一系列研究都还是从理论上展开论文，或涉及政府投入的科技基金项目等，很少有结合企业实际，在实践的基础上开发评价体系的科研项目，科研成果应用于企业实践的案例鲜有出现。

三、铁路运输企业科研项目特点

铁路运输作为中国主要的运输方式，在国民经济中占很大的比重。特别是铁道部改革以来，对铁路运输行业的要求逐渐提高，各大铁路企业加大了科研力度，一大批新科技成果的成功运用，为铁路运输行业综合能力提升提供了技术保障。铁路运输企业科研项目主要有以下特点：endprint

1.运输效率是关键：铁路运输企业科研项目首要的目的是能够提高铁路运输的效率和能力，达到铁路运输的“多拉快跑”目标。所以，首先应该关注科研项目在提高运输效率方面的效益。

2.专业性强：科研项目涉及的范围广，在不同的方面都需要专业的队伍，成员分工明确，专业性强。这就需要企业关注人才培养和人才库建设。

3.安全性高：科研项目成果必须要保证运输的准确性和安全性，企业需要严格的管理和控制。

当然还有一些其他的特点，投入资金相对较高，注重实际应用，对准确性要求高等，这些特点决定了铁路运输企业科研项目评价的特殊性。

四、铁路运输企业科研项目评价体系构建

基于以上的特点，利用德尔菲（Delphi）法和层次分析法（Analytic Hierarchy Process， AHP）进行铁路运输企业科研项目评价体系的构建。

1.铁路运输企业科研项目评价方法论述

德尔菲（Delphi）法：德尔菲法作为一种主观、定性的方法，可以广泛应用于各种评价指标体系的建立和具体指标的确定过程。通过多次的问卷调查征询专家的意见，不断的修正，最终使专家小组的意见趋于统一。在本研究中关于指标的选择使用的是德尔菲法，涉及到的专家包括神朔铁路科研处高级工程师，科研项目主管，科研处处长以及北京科技大学经管学院相关教授，通过与神朔铁路相关科研人员以及科研评价专家的反复征询，最终确定最能代表铁路运输行业的指标。

层次分析法（AHP）：考虑到不同项目类型的特殊性，选取定性与定量结合的层次分析法，它是一种将决策者对复杂系统的决策思维过程模型化、数量化的过程。通过将复杂问题分解为若干层次和若干因素，在各因素之间进行简单地比较和计算，确定不同指标的权重。

AHP决策分析的基本原理，可以用如下的简单事例分析来说明。假设有N个物体A1、A2……An，它们的重量分别记为W1、W2……Wn，现将每个物体的重量两两进行比较，如下表所示。若以矩阵形式来表示物体的这种相互重量关系，则为：

该实例表明，如果有一物体，需要知道它们的重量，而又没有衡器，那么就可以通过两两比较它们的相互重量，得出每一对物体重量比的判断，从而构成判断矩阵；然后通过求解判断矩阵的最大特征值和它所对应的向量，就可以得到这一组物体的相对重量。

正是基于上述思路，在研究复杂问题时，对于一些无法度量的因素，只要引入合理度量标度，通过构造判断矩阵就可以用这种方法来度量各因素之间的相对重要性，从而为有关决策提供依据，即AHP分析方法的基本原理。层次分析法（AHP）首先将复杂的决策问题层次化，然后对关联因素的重要性程度逐层次比较建立判断矩阵，最终通过一套定量计算的方法为决策提供依据。具体步骤如图2所示：

本研究使用层次分析法来确定各个评价指标的权重，四个一级指标权重和为1。

2.评价指标体系构建

通过德尔菲法和层次分析法，构建的评价体系包括经济效益，技术效益，管理效益和人才培养效益四个一级指标和15个二级指标。

（1）经济效益：对于科技项目资金投入最终完成结题验收，产生实际经济成果后，公司重点关注的是此科技项目研究成果是否达到国内外、行业内的领先水平，是否对科技发展和科技创新能力提升起到了巨大的作用，这项项目的得分情况可以根据具体类型进行一定的调整。如果一项科研成果在某一领域取得重大突破，则对企业内部、行业和社会的发展贡献则是巨大的，而这些贡献有可能是无法用财务数字来评价的。

因此有必要针对科技项目成果的经济绩效，考虑构建直接经济绩效和间接经济绩效两个方面的评价指标来展开具体经济效益的评估工作，建立如下表2的评价指标体系。

（2）技术效益：主要包括：技术先进性和创新性、难度和复杂性、可靠性和实用性、市场价值及应用推广前景、项目参与人员发表或出版的与成果有关的论著、获得的各级各类科技成果奖励以及知识产权状况等。建立如下表3的评价指标体系。

（3）管理效益：主要反映科技项目管理制度建设与落实对科技项目的影响。评估和分析科技项目管理制度建设和落实与科技项目各种产出关系的关联度，从立项科学性、目标合理性、技术研究可行性、人员资源配备与保障评价科技项目立项严谨度；从科技项目实施过程管理水平评价对科技项目结果的贡献关系。

（4）人才培养：主要反映科技项目反映在科技项目实施过程中人才培养情况。通过对项目负责人和项目参与人员的技术水平、学历、年龄结构的评价，分析科技项目实施对人员技术水平、学术水平提高、人才储备的贡献情况，充分体现了“科技以人为本”的基本理念和人才战略思想。具体指标如下表所示。

以上所构建的指标体系能够对神朔铁路的科研项目进行初步评估，也得到了相关专家的认可。为了达到实际应用的效果，我们在所构建的评价体系的基础上，结合数据库技术，开发了“铁路运输行业科研项目绩效评价软件”，尚处于实际实验调试阶段。

五、结论

铁路运输行业的快速发展，对科研项目的投入进一步加大，这就需要我们找到合理科学的科研项目评价方法，来进行项目评价和优化。不同的行业科研项目具有不同的特点，本文在已有研究的基础上，通过分析铁路运输企业科研项目的特点，结合与神朔铁路合作的经验，构建了铁路运输企业科研项目评价体系，并开发了相应的评价软件，能够初步对神朔铁路科研项目进行评价，其评价结果也得到了相关专家的认可，具有很高的可行性。由于神朔铁路科研项目具有很多的类型，不同类型的评价指标有所不同，本文给出的权重仅适合与管理咨询类项目，具有一定的局限性，可在实际的应用当中结合实际情况进行调整，对不同的科研项目进行有效的评价。

参考文献：

[1]周虹，许飞月.自然科学基金申请项目综合评审方法[J].广东科技，1997（04）：1-3.

[2]宓众.科技项目社会经济效益后评估研究 [D].武汉理工大学，2006

[3]张利华，肖健.基于DEA的科技项目绩效评价研究——以海淀区科技计划项目为例[J].中国高新技术企业，2011（33）：1-5.

[4]于成刚，梅姝娥.科技项目后评价方法及指标体系研究 [J]. 科技经济市场，2008（06）：84-85.

[5]张素娟，黄晓燕，邢少璟.基于AHP和DEA的科研项目绩效评价方法研究[J].湖北师范学院学报（自然科学版）， 2012（02）： 6- 11.

[6]王增辉.山东省软科学研究项目后评价研究 [D].山东大学，2009

[7]郑春美，陈志军，许玲玲.我国高新技术上市公司绩效评价体系研究[J]. 武汉理工大学学报（社会科学版），2014（01）：42-47.

[8]王燕燕.铁路建设项目绩效评价理论研究及应用[D].兰州交通大学，2013

作者简介：

郭尽朝（1971-），男，高级工程师，从事机车车辆工程、铁路运输管理研究；常晓东（1983-），男，工程师，研究方向为机务科技创新项目策划及管理；张凯鹏（1992-），男，汉族，河南平顶山人，硕士研究生，从事财务管理与科研项目评估研究。endprint