艺术类科研项目绩效评价体系研究
2022-05-30韩雪梅
田 婕,韩雪梅
(1.河北北方学院 财务处,河北 张家口 075000;2.张家口市公路管理处 财务科,河北 张家口 075000)
近年来,党中央、国务院对全面实施预算绩效管理作出了重大战略部署,开展科研项目绩效评价是对国家相关法律法规及政策的积极响应。艺术类科研项目绩效评价体系的建立不仅有利于国家完善艺术类科研项目多元投入机制,还能向艺术类科研人员传递更加清晰的政策和绩效导向,助推国家优秀艺术作品的传播。
一、艺术类科研项目的经费来源
根据经费来源可将科研项目划分为两大类:一类是纵向科研项目,主要是指国家、部委和省、市各级政府机构设立的专项项目,纵向科研项目是纳入财政计划的项目,承担纵向科研项目的经费来源主要是财政拨款;另一类是横向科研项目,主要承担企业为了解决工作中遇到的技术难题,通过技术合作等形式设立的研究项目,横向科研项目由企业委托实施,项目经费来源于企业。该文研究的艺术类科研项目主要是指纵向科研项目,项目经费来源于财政资金。
中国艺术类科研项目中的纵向项目主要包括国家艺术基金项目、国家社科基金艺术学项目、文化和旅游部科教司下的艺术生产创作性项目以及各级地方财政资金资助项目中的艺术类单列项目。自2013年12月30日国家艺术基金项目设立以来,各级艺术类科研项目蓬勃发展。国家艺术基金项目经费主要由中央财政资金支持,从2014年至2018年,国家艺术基金资助项目共立项4 013个,资助金额33.4亿元。2019年,国家艺术基金资助项目立项1 100项,最低资助金额10万元。2020年,受新冠肺炎疫情影响,国家艺术基金资助项目顺延至2021年。2021年,国家艺术基金资助项目共立项221项,其中重点项目17项,每项资助金额为35万元;一般项目151项,青年项目29项,西部项目24项,每项资助金额均为20万元。艺术类科研项目的纵向项目虽不是很多,但资金投入量比较大。
二、艺术类科研项目绩效评价体系的构建
大量的财政资金用于艺术类科研项目资助,为使资助经费花得精准到位和用得安全合理,就需要对项目经费进行客观有效的评价。绩效评价体系的建立有利于各项目绩效评价的客观与公正。
(一)构建艺术类科研项目绩效评价体系的必要性
绩效评价是对艺术类科研项目资金使用过程的评价,旨在提高财政资源配置的效率和效果。现有的绩效评价主要是绩效自评,根据国家、省和市专项资金管理办法及财政资金绩效自评通知等,由项目承担人和项目承担单位对财政专项资金的使用进行自查和评价,并形成自评报告。绩效自评过程受主观人为因素的影响较大,且自评缺乏科学完善的绩效评价体系,所以绩效自评报告不能完全客观地反映资金的绩效情况。2019年,文化和旅游部财务司对2013-2017年的国家艺术基金进行了绩效评价,这次绩效评价是从项目管理者的角度出发,对国家艺术基金项目总体进行的评价。评价指标体系主要包括决策、管理、产出和效果4个方面,所占分值分别为20分、30分、30分和20分,总分为100分。将项目的决策和管理与项目的产出和效果设置相同的权重,是希望通过改善组织和管理来提高项目预期的产出和效果。从项目承担者角度出发,对艺术类科研项目个体进行评价,可使项目产出的数量和质量以及项目的效果及影响力更具有引领示范作用。对艺术类科研项目绩效评价进行研究有利于国家完善艺术类科研项目多元投入机制,助推国家优秀艺术作品的传播,并培养具有创新能力的艺术人才。
(二)构建绩效评价体系的思路和方法
要建立艺术类科研项目绩效评价体系,为项目个体提供客观、明确和全面的绩效评价标准,就要明晰评价思路和评价方法。评价体系要突出绩效特色,设置符合专业特点的量化和细化评价指标。根据绩效评价的基本原理、原则和项目特点,结合绩效目标,由评价小组按照逻辑分析法设计科学的指标体系,包括项目管理和项目绩效两方面,主要围绕资金使用、资源配置与项目管理等客观分析项目产出和效果。要创新评价方法,定量评价与定性评价相结合,对艺术类科研项目经费使用的效率性和效益性进行评价[1]。
(三)绩效评价的主体
在绩效评价体系的建立过程中,首先要明确绩效评价的主体,也就是由谁来进行评价。艺术类科研项目绩效评价的主体比较广泛,可以是项目承担单位、归口管理单位和各级科技管理单位,还可以是民间组织与社会公众,也可引入第三方进行绩效评价。
(四)绩效评价的内容
绩效评价的内容包括绩效目标的实现程度和财政资金使用情况。科研项目在立项时要设置项目绩效目标,在验收时对绩效目标的完成情况进行考核。因此,该文的绩效评价主要是对艺术类科研项目资金在投入与使用过程中管理的规范性以及操作的合理性进行评价,关注资金从申请到审批再到拨付的合理性和合规性。同时,对项目的产出和效果进行评价,关注项目的经济效益、社会效益及满意度情况。绩效评价涉及项目事前、事中和事后的全过程[2]。
(五)绩效评价体系的重点
绩效评价体系的重点是设置评价指标。艺术类科研项目形式多样,有艺术展演、美术创作、人才培养、理论研究、传统文化传承与创新等,这些研究项目具有一定的经济效益,但更重要的还是社会效益。因此,指标设置要综合考量。在大量调研艺术类科研项目的实施内容后,从项目投入、过程、产出及效果环节进行评价,从项目制度建设、资金使用、进展情况及取得的成效等方面进行指标设置。指标设置要科学、合理且全面,体现出多样性和灵活性。量化指标要具有可操作性,不能过多过细。指标评价标准要客观、公正和清晰。
(六)绩效评价体系的难点
确定绩效评价指标权重是构建绩效评价体系的难点。由于缺乏权威标准,因此分配指标权重的过程具有一定的主观性。但权重的设计建立在广泛调研、模型设置和专家论证的基础之上,且在绩效评价过程中不断地被修正完善。应用三阶段DEA分析方法和层次分析法等对调研结果及专家评议结果进行分析测算,形成各指标的权重。
(七)层次分析法(AHP)
层次分析法一种层次权重决策分析方法,由美国运筹学家萨蒂于20世纪70年代初提出。该方法首先将与研究对象总是有关的元素分解成不同的层次,在分层的基础上对同一层次的元素进行两两比较,通过定性和定量分析确定该层次元素对上一层次的重要性,以求得元素的优先权重。层次分析法中定性分析较多,定量数据较少,主要体现的是评价者的思维方式。
(八)三阶段DEA模型
数据包络分析法(简称为DEA模型)在科技投入绩效评价中应用较多。DEA方法及其模型由美国著名运筹学家A.Charnes和W.W.Cooper在1978年首次提出。该模型广泛应用于不同的部门或行业,与其他分析方法相比,其在处理多指标投入和多指标产出方面具有一定的优势。传统的DEA是一个线性规划模型,其基本原理是对一个特定单位的效率和一组提供相同服务的类似单位的绩效进行比较,它试图使服务单位的效率最大化。在此过程中,获得100%效率的决策单元被称为相对有效率单元,而效率评分低于100%的决策单元被称为无效率单元。1999-2002年,Fried发表多篇论文,指出传统DEA模型没有考虑环境因素和随机噪音对决策单元效率的影响,并提出三阶段DEA模型的关键是在第二阶段剔除环境因素和随机噪音的影响。第一阶段,使用传统DEA模型分析初始效率;第二阶段,借助SFA回归,剔除环境因素和随机噪音;第三阶段,用第二阶段调整后的各投入数据代替原始投人数据,再次进行计算,这时所得到的即为排除了外部环境因素和随机误差影响后的技术效率值[3]。
(九)绩效评价结果的应用
通过使用绩效评价体系最终得出艺术类科研项目的评价结果,对绩效评价结果的应用十分重要。评价结果应该与项目的预期效果或存在的问题相对应,体现出指标体系的导向性。要形成“项目完成有评价,评价结果有反馈,反馈结果有应用”的闭环管理模式。
三、艺术类科研项目绩效评价指标体系的确立
将上述构建艺术类科研项目绩效评价体系的思路及调研数据进行整合,通过投入、过程、产出和效果4个维度组成了一个完整的绩效评价体系。
(一)确定指标
对调研数据进行汇总整理,通过运用三阶段DEA模型分析方法对指标进行分析,在指标选取过程中,为了更准确地测算艺术类科研项目的投入产出,不仅选取了投入产出指标,还充分考虑了经济发展、科研水平以及管理机制等方面的环境变量,梳理出存在的问题,通过分析问题找出原因,指出未来研究发展的重点和难点,形成艺术类科研项目绩效评价指标体系。该体系包含一级指标、二级指标和三级指标3个层次。一级指标4个,分为投入、过程、产出和效益,这也是一般科研项目绩效评价的4个方向。二级指标11个,具有一定的艺术类科研项目的特色。三级指标21个,是针对艺术类科研项目特点设置的绩效评价指标[4]。
(二)确定权重
各指标确定后,利用层次分析法确定每层指标的权重。评价指标分为3个层级,对每个层级各要素进行相互对比。在对比过程中,邀请12位专家对各要素进行综合考量并打分,并对专家打分进行分析计算,最终求得各要素的权重(表1)[5]。
对表1中各级指标权重进行观察,一级指标中产出与效益指标所占比重达65%,由此说明大部分评价专家认为产出和效益在艺术类科研项目绩效评价中占有重要地位,能够对艺术类资金的投入起到引导和示范作用;绩效目标在投入指标中占比最高,这说明应该重视绩效目标的设置,绩效目标是艺术类科研项目要明确实现的目标,为项目提供了行动指南;在过程指标中资金管理指标占比最高,资金管理中资金使用合规性指标占比达50%,这说明应该对项目经费专款专用并规范管理,以确保资金安全。产出指标中数量指标的比重高于质量指标,这说明艺术类科研项目首先要创作出完整的作品并完成巡演或巡展,在巡演或巡展的过程中发现问题和解决问题,这样才能进一步提高创作质量;效益指标中经济效益略低于社会效益,这说明专家在注重艺术类科研项目经济效益的同时更注重其社会效益,要引导艺术类科研项目成果走进基层,为人民带来美好的精神享受。
表1 艺术类科研经费绩效评价指标权重
表1(续)
(三)确定艺术类科研项目绩效评价指标体系
绩效评价体系的总分为100分,评价分为5个等级:A级(≥90分)、B级(90>B≥80)、C级(80>C≥70)、D级(70>D≥60)和E级(<60分)(表2)。
表2 艺术类科研经费绩效评价体系
表2(续)
(四)评价结果的应用
在实际使用中,将相关数据及信息与绩效评价体系中的指标进行对比并打分,汇总后的总分为评价总分,可与绩效评价体系中的评分等级相对应。不同项目之间可以按评价等级进行比较,等级高者优。管理部门根据绩效评价结果,结合资金计划,视情况对绩效评价等级优良者给与重点关注和支持;绩效评价等级差的要及时进行整改,以提高项目管理水平。尤其要重视绩效评价中的失分项,对失分原因进行深入分析可以有针对性地予以改进,提高整改效率和效果。总之,通过分析绩效评价结果,项目承担单位可以改进艺术类科研项目的组织和管理水平,提高资金的使用效益;项目管理部门可以进一步完善艺术类科研项目的投入政策,提高资金的配置效益[6]。
综上所述,艺术类科研项目绩效评价体系是绩效理念的实际表现形式,由于艺术类科研项目展现形式非常丰富,明显与其他财政科技支出项目的绩效评价指标不同,因此建立艺术类科研项目绩效评价体系有益于项目绩效评价的公正性、客观性和可比性。绩效评价结果的有效应用具有导向作用,能够助推财政资金效益的提升和艺术类科研项目管理的规范。