中医药科技项目绩效评估模型研究
2016-01-20王洋洋李慧
王洋洋 李慧
广东省中医院,广州中医药大学第二附属医院,广州,510120
中医药科技项目绩效评估模型研究
王洋洋李慧
广东省中医院,广州中医药大学第二附属医院,广州,510120
摘要目前,在中医药科研管理领域,科技项目绩效评估多侧重于项目的事后评估(成果评估),而忽视了项目事前、事中的绩效评估,这在一定程度上影响了中医药科技项目产出更多高质量、高水平的研究成果。因此,有必要从项目指南制定、项目立项、中期评估、结题验收4个阶段对中医药科技项目实施全过程的绩效评估,推动中医药科技项目的高质量完成。
关键词中医药;科技项目;绩效评估
绩效评估作为科技项目评估的常用方法,是政府机构调节科技项目、调整科技投入比重、保证财政资金使用效率的重要手段,也是政府加强科研经费支出管理,促进科学研究不断进步的重要措施[1]。在中医药科研管理领域,科技项目绩效评估实施时多侧重于项目的事后评估(成果评估),而忽视了项目事前、事中的绩效评估[2]。因此,有必要分阶段对中医药科技项目开展系统、整体的绩效评估研究。
1 科技项目绩效评估的概念
科技项目绩效评估,是指科技管理机构依据相关的原则、标准及程序,采用合理、规范、科学的方法,对财政支持的科技项目的科研经费使用管理、科研经费投入产生的效益及科技项目目标实现程度等进行的综合评价考核[3-4]。对中医药科技计划项目实施绩效评估,可为政府机构制定中医药科技计划提供科学依据,有利于政府部门设置出更为科学、合理的科技项目资助结构。
2 中医药科技项目不同阶段绩效评估研究
国家科学技术部颁布的《科技评估管理暂行办法》明确规定:科技评估按照科技活动的管理过程,一般可分为事先评估、事中评估、事后评估及跟踪评估4类。基于此,本研究将中医药科技项目全过程绩效评估划分为项目指南制定、项目立项、中期评估、结题验收4个阶段,并以此4个阶段为研究对象探索建立中医药科技项目实施不同阶段绩效评估模型。见图1。对于项目立项、中期评估、结题验收阶段绩效评估模型的建立,首先,在中国知网、维普、万方数据库检索相关文献,根据不同阶段绩效评估的侧重点梳理文献,并初步确立绩效评估指标;其次,依据初步确立的绩效评估指标,征求专家意见(专家情况见表1),修订绩效评估指标体系;最后,将上述4个阶段的指标体系转化为问卷实施现场调查,结合调查的反馈意见完善并最终确立绩效评估指标体系。
图1中医药科技项目不同阶段绩效评估模型
表1 专家基本情况
2.1 项目申请指南制定阶段绩效评估理论模型
中医药科技项目申请指南简单概括了中医药领域需要探索的具有前瞻性、战略性的科学技术问题,指导着中医药科技项目的申请、评审和立项。中医药科技项目指南制定阶段的绩效水平影响着项目立项、实施的绩效水平。为更好地评价指南制定阶段的绩效,可从评估项目指南风险角度去衡量指南制定阶段绩效水平的高低。若项目指南的风险小,则说明项目指南制定阶段的绩效水平高,反之,则绩效水平低。因此,风险评估可作为间接衡量项目申请指南制定阶段绩效评估的方法。
风险评估是对风险发生的概率及可能造成的损失进行的估计、预测,分析风险的可能影响,并对风险状况进行的综合评判。由于项目风险发生的概率及其可能造成的损失难以准确地用量化的形式展现,因此可考虑采用德尔菲法评估项目指南的风险水平。实施步骤具体如下:①针对项目申请指南可能产生的风险,征询中医药领域相关专家的意见;②统计、整理分析、归纳专家意见,对大量难以进行量化的风险性因素做出合理评估;③多轮意见的征询、反馈及调整后,得出项目指南的风险水平,侧面反映项目申请指南制定阶段的绩效水平。
2.2 项目立项阶段绩效评估理论模型
项目立项评估是科技项目立项工作科学化与规范化的关键环节,是科技项目管理活动的重要内容,也是提出科研计划、确定科研项目的首要步骤,对科技项目立项方向的准确性、立项决策的科学性具有重要意义,对项目后续的组织实施也起着重要的指导作用[5]。
中医药科技项目立项阶段绩效评估侧重考察项目的重要性(必要性、迫切性)、创新性(思路、方法创新)、可行性(方案、研究基础条件成熟,预算、进度安排合理)及效益性,结合专家咨询及问卷调查,确立项目立项绩效评估指标体系。见表2。
2.3 项目中期阶段绩效评估理论模型
项目中期绩效评估是指项目立项以后,在项目执行过程中审核项目活动有无依照预期的目标、方案运行,并对项目阶段性投入与产出情况进行评估。
表2 中医药科技项目立项绩效评估指标体系
其主要目的在于检查项目实施情况,发现项目执行过程中存在的问题,为项目后续的管理及决策提供信息支撑[6]。中医药科技项目中期阶段绩效评估主要包括以下3个方面。①对中医药科技项目执行完成情况评估。侧重于审核项目执行是否按计划实施,项目阶段性完成情况是否达到项目计划书预期目标。对中期项目执行完成情况实施绩效评估有利于监督项目的实施,及早发现项目执行中存在的问题,提高项目的研究效率。②对支撑条件评估。科技资源(人、财、物等)投入、单位支持及合作单位间的良好协作对于项目的有效执行起着重要的支撑作用。在项目执行过程中,缺少上述要素中任何一项要素的支持,都有可能导致项目无法达到预期研究目标。③对中医药科技项目研究变动情况评估。基于科技计划项目周期滚动变化的特点,中医药科技项目立项报告中制定的研究目标、内容可能会随着项目实施过程中主客观因素的影响而发生变化。因此,对既定的研究目标、内容实施再评估是中医药科技项目中期绩效评估中的一项重要内容。
基于中医药科技项目中期阶段绩效评估的重点内容,结合专家咨询及问卷调查,确立中医药科技项目中期阶段绩效评估指标体系。见表3。此阶段重在进行项目研究进度等方面的阶段评估,成果方面可作为参考。
表3 中医药科技项目中期绩效评估指标体系
2.4 项目结题阶段绩效评估理论模型
根据中医药科技项目评估特点,项目结题阶段绩效评估目的主要包含3个方面:一是分析项目任务书中所述目标的实现情况,差异是否存在及导致差异出现的原因;二是评估项目研究所产生的效益及影响;三是分析是否有必要对项目后续研究工作继续给予支持。依据中医药科技项目结题绩效评价目的,其评估内容主要包括以下2个方面。①项目投入。立项后项目投入经费总和、除项目投入经费外项目研究过程中产生的人力投入和物力投入,以客观评估为主。②项目产出。主要分析项目目标内容的完成情况、经费是否按计划合理使用、项目成果转化的直接和间接经济效益(如技术转让、专利转让等)、项目成果转化的社会价值(如提高临床疗效、解决重大医疗问题、人才培养、论文论著发表等情况)、未来一定时期项目取得其他成果的可行性和研究意义。
依据中医药科技项目结题绩效评估内容,结合专家咨询及问卷调查,确立了中医药科技项目结题绩效评估指标体系。见表4。
表4 中医药科技项目结题绩效评估指标体系
注:直接投入:立项后项目投入研究经费的总和。间接投入:除项目投入经费外项目研究过程中产生的人力投入(项目组成员的劳动价值投入,以工作时间和平均工资水平的乘积计算人力成本)和物力投入(项目实施过程中仪器设备、办公耗材的购置和折旧费用)。
3 结论
本研究通过对中医药科技项目不同阶段绩效评估的研究,建立中医药科技项目绩效评估的初步理论框架,明确项目不同阶段绩效评估的侧重点,有利于中医药科技项目高质量的完成。同时,依据不同阶段项目的绩效评估结果对中医药科技项目实施有针对性的监管,有利于科研主管部门对科技经费进行追踪,提高中医药科技经费的使用效率,也有利于引导中医药科技界把努力提高中医药科研工作质量放在重要位置。
需要注意的是,上述不同阶段的绩效评估指标体系可单独评估使用,也可以汇总成为整体评估反映项目研究的整体工作情况。实际应用中考虑到操作的可行性应对各级指标进行量化。根据项目的特点,可通过专家评价、德尔菲法、问卷(指标体系形成的现场调查问卷)调查后统计处理(因子分析)等方法对指标赋予权重、分值等。同时,评估指标体系只能反映项目大部分的情况,此外一些原则性问题(如研究的真实性、是否剽窃他人成果等)不能量化处理,应适当采用定性与定量相结合的评估方法。
参考文献
[1]赵晖,常暖,高凡珠,等.中医药科技项目绩效评估现状与对策[J].中医药管理杂志,2013(5):435-438.
[2]杜海萍,闵晓俊.医学科研绩效评估系统的建立与运用[J].中医药管理杂志,2007(9):667-668.
[3]孙瑞华,齐松仁.我国医学科研绩效评估的现状[J]. 中华医学科研管理杂志,1999(2):62-64.
[4]朱衍强,郑方辉.公共项目绩效评价[M].北京:中国经济出版社,2009.
[5]高金武,刘亚民,史晓峰. 浅析科技评估机制在医学科研工作中的作用[J]. 医学情报工作,2005(4):246-247.
[6]高金武,刘亚民,史晓峰.浅析科技评估机制在医学科研工作中的作用[J].医学情报工作,2005(4):246-247.
Research on the Performance Evaluation Model on Science and Technology Project of Traditional Chinese Medicine
Wang Yangyang et al
GuangdongProvincialHospitalofTraditionalChineseMedicine,Guangzhou510120
AbstractTo ensure the efficient allocation of resources in Traditional Chinese Medicine(TCM) technology, improve the efficiency of project management and scientific research, and bring about more high-level, high-quality output and technological achievements of TCM, TCM technology project performance evaluation become an inherent requirement of TCM sustainable development. Now, in the field of science and technology projects management of TCM, performance evaluation of science and technology project is lack of overall project performance evaluation system. It pays more attention on the outcomes evaluation of the project, ignoring theevaluation of project before and in the performance. Therefore, it is necessary to implement performance evaluation from 4 stages of project guide formulating, project approval, project mid-stage assessment and project concluding acceptance, in order to promote the TCM science and technology projects completed with high quality.
Key WordsTraditional Chinese Medicine; Science and Technology Project; Performance Evaluation
收稿日期(2015-08-05;编辑张晓莉)
通讯作者:李慧,lihuitcm@126.com。
基金项目:国家软科学研究计划项目,编号为2013GXS4B096;广东省科技厅——广东省中医药科学院联合科研专项,编号为2011B032200018。
中图分类号R19-0
文献标识码ADOI:10.13723/j.yxysh.2015.12.005