卫生科研课题立项评审指标的建立及应用

*基金项目：上海市卫生和计划生育委员会面上项目（20134271）

**通信作者：刘薇群。E-mail：lwqzcz@aliyun.com

摘 要 科研项目的立项评估是保证筛选高质量课题的首要工作，科研项目立项评审指标体系是科研项目立项评审的主要工具，我国的医学科研评价研究已广泛采用了评价指标体系，本文就科研立项的评价指标及应用进行综述。

文献标识码：A

文章编号：1006-1533（2015）20-0017-05

Establishment and application of the evaluation index for the health research project

WANG Xiaqing 1, CHENG Lushan 2, NIU Yuhong 3, LIU Weiqun 4**

(1. Shanghai Pudong Health Development Institute, Shanghai 200129, China; 2. Shanghai East Hospital, Shanghai 200120, China; 3. Shanghai Information Institute of Medical Science and Technology, Shanghai1 200031, China; 4. Zhoupu Hospital of Pudong New District, Shanghai 201318, China)

ABSTRACT The evaluation of the research project is the primary work for selecting the projects with the high quality, and its index system is a major tool of the evaluation of the research project. In our country, this evaluation index system has been widely applied in the medical scientific evaluation research. This article summarizes the evaluation index of the scientific research project and its application.

KEY WORDS scientific research evaluation; index; index system; scientific research project evaluation

随着科学技术事业的快速发展，科研项目评估已成为科研管理工作的重要组成部分。在科研项目管理中，按科研项目实施阶段可分为立项评估、执行评估、绩效评估等 [1]。科研项目的立项评估是保证筛选高质量课题的首要工作。欧美国家中，科研项目评价开展较为成熟，世界卫生组织及其他基金组织均需依靠专业的评价机构参与各种卫生服务项目的评价和运行 [2-3]。我国科研评价起步于20世纪80年代，评价早期以定性为主 [4]，随着对评价方法研究的深入，研究者逐步采用模型和指标体系进行定量评价，目前我国的医学科研评价研究已广泛采用评价指标体系 [5]。

1　国内相关医学科研立项评价指标体系的建立

1.1　国家自然科学基金委科研评审指标

国家自然科学基金委员会“申请项目同行评议表”是国内较早的科研立项评审指标 [6]，该指标体系共包括3大类16项。三类分别是项目的意义和立项依据，项目的研究内容和预期目标、完成项目的条件和能力。

项目的意义和立项依据共4项：科学意义、学术思想、立项依据、对国内、外研究现状的了解。②项目的研究内容和预期目标共5项，拟解决的关键问题、采用的研究方法（研究手段）、设计的技术路线（实验方案）、项目的研究对象（实验材料）、预期目标实现的可能性和明确性。③完成项目的条件和能力共7项，申请者以往从事的工作与本次申请内容的联系、申请者近3年来已发表的有关主要文章、申请者已具备的实验室条件和设备条件、项目组成员构成、此次申请与申请者以往研究项目的联系、项目的学术水平程度、与其它学科的交叉情况。以上16项评估指标，每个指标均划分为四个等级，可进行量化计分。

·社区卫生管理·

继自然科学基金评价指标建立之后，相当多的科研项目评审依据此指标进行，随着科研工作的进一步发展，国内其他学者在国家自然科学基金同行评议表的基础上对其进行了修改和完善。

齐松仁

刘兴太

1）科学意义：包括4个二级指标，分别为立题依据、科学意义、课题设计、起点水平。

2）先进性：包括3个二级指标①学术思想；②指标与方法，即为研究评价的指标是否先进，有创新性和革新性。③预期研究成果，其评估论文发表期刊的影响力和是否获得科技成果。

3）可行性：包括3个二级指标①研究人员的科研能力，包括其学术水平、课题组人员结构等。②工作基础与条件，主要为前期研究基础和实验条件等。③经费预算是否合理等。

刘兴太

评价指标体系是由各级各项评价指标及其相应的指标权重和评价标准所构成的有机整体

1.2　中医药卫生项目专科评价指标体系

科研项目的申报分为不同的学科和专业领域，不同学科和专业的研究存在一定的特殊性和差异性。为此，有研究者对专业性较强的研究项目设计了专门的立项评审标准。林端宜

该研究中5个要素层分别为：①研究实力：包括课题组成员人数、平均年龄、学科组合。②研究基础：主要包括已有课题状况、已有课题与本课题相关度、已有成果获奖状况。③研究条件：实验室条件、设备投入比例、自筹资金比例。④科学性：与标书指南相符度、方法与技术路线可行性、创新点与国、内外比较。⑤预期效益：研究成果状态、社会效益

1.3　医学科研项目全程评价指标体系

国内李俊勇

1.3.1　项目的必要性

包括针对国家或地区当前急需解决的实际问题、针对学术领域急待解决的关键问题、预期结果具有可推广性或应用前景等3个三级指标。项目必要性的权重指标为0.2551，其3个三级指标权重基本一致，均大于0.3，而国家或地区急需解决的实际问题，权重最高，为0.3524

1.3.2　科学性

包括立题依据充分、研究目标明确、准确选择拟解决的关键问题等3个三级指标。科学性的权重指标为0.2538，3个三级指标中，研究目标明确项指标权重较大，为0.3442

1.3.3　创新性

包括学术思想新颖、研究方法创新等2个三级指标。创新性的指标权重系数为0.241 4

·社区卫生管理·

1.3.4　可行性

包括技术路线、技术指标、研究周期、经费预算、实验条件和设备能满足项目要求、合作各方优势互补、申请者以往从事的研究工作、申请者既往承担项目完成情况、申请者已完成项目的成果水平、项目组主要成员职称结构、项目组主要成员年龄结构、项目组成员学历构成等12个三级指标。可行性指标权重为0.249 7

从对以上科研立项评价指标体系的分析可以看出，大部分的研究将立项评价指标划分为一级指标和相应的二、三级指标。一级指标基本为科学性、先进性、可行性和效益评价四类。其下属又分为不同的二级指标。当前研究中，科研立项评价指标体系的建立较为明确和成熟。同时有研究者指出

2　项目立项评价指标体系在科研立项申报中的应用

立项评价指标体系的建立，为科研立项提供了评审标准，成为科研管理部门和项目研究者的工具。国内蒋宁 [5]指出，项目指标体系对科研项目有导向功能、鉴别优选以及诊断功能。这些功能可为项目管理部门服务，评选出合适及可行的项目立项。科研项目指标建立之后，得到科研机构和相关科研工作者的关注，应用的主体包括科研管理和评审机构、医疗卫生机构的科研管理部门以及科研申报人员。

2.1　科研项目管理机构

评价指标体系建立后，为各级科研管理机构所采用。对于项目管理机构来说，指标体系是课题立项的主要参考标准和工具，科研管理部门根据不同项目的特点和国家政策要求，选择适合的评价指标体系和权重值，确保对申报的科研项目进行科学、客观的评价和筛选。研究高校指标体系应用的学者 [13]指出，指标选取体现被评价对象的性质特点及指标体系设计的指导原则，指标权重则可以反映出当前科研工作的重点与导向。

科研基金管理部门选取指标体系后，进而采用适合的立项评审流程和方法，对申报课题进行筛选评估，鉴别创新性及可行性强的课题，把经费投入到社会急需、效益较好的项目中，保证科研基金的合理分配 [9]。

2.2　医院科研管理部门

在项目申报之前，科研管理较为规范的医疗卫生机构会对申报项目进行初审，其目的一是筛选出符合各基金资助指导原则、目的明确并可操作实现的项目；二是对申报项目进行评估，指出问题，进一步指导申报 [9]。

医院科研项目管理中根据不同类别的项目，以同行专家评审方式进行：对于有申报数量限制的项目，采取函审的形式，聘请数位院外专家，对所有项目进行评分，并提出修改意见 [1]，专家评审的主要依据即为卫生类科研立项评价指标。有的医疗科研管理部门主要以专家评审方式，通过对组织申报课题进行申报答辩。学术委员会专家使用评分体系对课题进行打分排序，再确定向各级基金项目的申报 [14]。

2.3　课题项目申报者

立项评价指标标准作为项目评审的主要工具，对于项目申报者来说，在课题申报方面具备重要的参考和指导作用 [15]。立项评审指标在申报课题项目中的指导作用首先是引导申报者选题，申报者在选题时必须紧扣课题申报指南及评审要求，结合自身的研究领域拟定具体项目，使课题遵循紧扣指南的原则 [16]。其次，立项评审指标还是申报者课题论证的标准 [17]，申报者通过项目申报书，把课题项目的整体设计和研究思路以清晰的逻辑表达出来，力求完全达到评审各项指标的要求。

科研立项评价指标对课题申报的作用不容忽视，冯莉 [18]分析了课题申报失败的项目，在这些项目中，出现的问题包括立题依据不充分、科研设计不合理、研究方法落后、预期目标不明确、前期工作薄弱等，这些均为立项评价指标体系中的内容。

3　立项评价指标体系的应用方法和形式

目前对科研项目进行立项评价采用的方法主要包括同行评议法，模糊层次评价法 [19]，还有逼近理想解排序法、网络分析法以及计算机规则关联法等。各类方法均是以立项评审指标为基础，根据专业特点和项目需求的不同而采取不同的项目立项评审方法和形式。

3.1　同行专家评议法

同行评议法为某一或若干领域的专家采用同一种评议标准，共同对涉及相关领域的某一事项进行评价的活动 [20-21]，医学科研立项评价也较多地应用同行专家评议法。医院科

·社区卫生管理·

研管理机构邀请院内有经验的专家或院外专家对预申报课题进行初步评审和筛选

同行评议是世界各国在做评价工作时应用最多的方法之一，在科研评价中有着不可代替的作用。但有研究者认为，同行专家评议法是以专家意见为主，存在一定的主观性和片面性，若应用不够规范，则可能影响评审的客观性和公平性

3.2　层次分析法

层次分析法（Analytic Hierarchy Process，AHP）是指通过一定的计算方法，基于判断矩阵设定各个指标权重。在不同的科研项目中，不同因素的权重不同

3.3　逼近理想解排序法

逼近理想解排序法（Technique for Order Preference by Similarity to Ideal Solution, TOPSIS）是近年来开始采用的一种项目立项筛选方法，该方法是在科研项目立项评价指标体系与指标权重值已定的情况下，根据特定的设计，建立评价模型，对各决策方案进行排序比较，利用标准化后的数据矩阵，找出有限方案中的最优方案，从而对科研项目进行立项和选优的筛选工作

3.4　网络分析法

网络分析法（Analytical Network Process，ANP），其基本思想是将系统内各元素的关系用类似的网络结构表示。其理论的核心是充分考虑各层次之间以及同一层各元素之间的相互作用关系，对各方案进行综合评价并得出最佳决策

3.5　计算机信息关联规则技术的应用

关联规则分析是数据挖掘技术中一项重要的功能，何炜

除了以上常用方法，项目评审还包括集对分析法、综合指数法

立项指标的建立是科研过程中，科学共同体对科研课题的标准达成的共识。在此基础上，研究者不断的修改完善科研的立项评审指标，形成具体量化的分级评分指标，体现着科研要求的提升和细化。立项评审指标能够为科研工作者的工作带来指导作用，在未来的研究中，科研申报指标应向着更为客观和系统的方面发展，便于在今后的课题申报中，使科研项目工作者的研究和申报方向更为明确，筛选出更多有价值有意义的科研项目。