新市镇PPP项目运营期绩效评价指标体系的构建
2023-02-19吴梦郭晓明江苏财经职业技术学院
文/吴梦 郭晓明 (江苏财经职业技术学院)
一、新市镇PPP项目运营期绩效评价
(一)运营期绩效评价内涵
PPP项目绩效评价内涵在于行为与结果的一致性。新市镇PPP项目运营期绩效评价,政府要充当管理者和评价者的角色,在运营过程中,以制定的绩效目标为标准,通过建立合理的指标体系,并采用科学的评价模型,对项目的实际运营效果进行公正客观的评价,并根据评价结果判断PPP项目的实际运行状况。
(二)运营绩效评价范围
根据“绩效评价5E原则”,新市镇PPP项目运营期的评价范围在于经济性、环境性、效率性、效果性及公平性。其中,经济性衡量社会资本的合理收益,环境性评价项目的可持续发展能力,效率性评价项目的投入产出情况,效果性指项目取得的进展与成效,公平性明确各利益相关者的责任与义务,并衡量项目的社会影响。
二、新市镇PPP项目运营期绩效评价指标体系构建
(一)构建原则
在构建绩效指标评价体系时,除了考虑新市镇项目的基本特征,还要考虑PPP项目绩效评价指标选取的共性原则。通过查阅相关文献,将其归纳为以下4个原则:一是全面性,即根据项目特点及周期有针对性的设计评价指标,保证指标的完整性;二是独立性,各个指标要保持内部的独立性,保证内涵无重叠现象;三是可衡量性,为保证后续绩效评价模型的构建更具信服力,每个指标需要被赋值,有些无法量化的指标也要考虑其定性特点;四是动态性,指标体系的设计并不是一成不变的,要根据绩效目标的变化适时调整。
(二)初步构建
本文采用BSC法进行绩效评价指标体系的构建。PPP项目是政府与社会资本的合作项目,因此要注重“平衡”思想,考虑短期与长期目标、成本与收益等多种关系。因此,本文基于平衡计分卡原则,充分考虑新市镇PPP项目的特点,将一级维度确定为:①财务能力;②内部流程;③可持续发展;④利益相关者满意度。并以准则层11项指标为第二维度,指标层33项为第三维度,初步建立指标体系。
其中,①财务能力下包含二级指标财务抗风险能力(三级指标资产负债率、流动比率、资本积累率、利息保障倍数)、融资能力(信用评级、融资利率)、商业营运能力(净资产收益率、总资产周转率、总资产报酬率、VFM);
②内部流程下包含风险管理(风险转移能力、风险规避能力、分配比例)、质量管理(城镇建设用地空间变化、设施设备维护、旅游资源维护)、项目管理(征地拆迁、公共基础设施建设、特色小镇规划);
③可持续发展包含环境效益(绿化植被覆盖、垃圾排放控制、资源合理分配利用、环境可持续发展能力)、社会效益(良好的社会形象、居民生活质量提高);
④利益相关者满意度包含政府部门满意度(社会效益、项目质量、公私合作、风险分配满意度)、社会公众满意度(产品服务、服务质量、环境效益、新增就业满意度)。
(三)进一步筛选及最终确定评价指标体系
为使各个指标更具针对性,相互作用更加有效,本文以指标层指标间互斥性,以及指标层指标相对准则层的重要程度为筛选依据,确立最终的指标体系。筛选通过问卷调查的形式进行,参与本次调查的专家有:高校及研究院专家、政府部门PPP项目专家、社会资本方项目专家,共计40人,主要通过微信平台、电子邮箱等路径发放问卷。问卷发放40份,回收40份,且全部为有效问卷。根据问卷调查的结果,汇总专家对各指标的选择结果,计算各评语的比例,表中数值为该评价专家的选择人数占总人数的比例,筛选结果如表1所示。
表1 筛选结果统计
根据表1的统计结果,剔除“非常重要”比例小于80的指标,如“风险分配满意度”,以及弱互斥性大于50的指标,如“产品服务满意度”。为便于后续指标权重确定,按层级编号各指标,目标层编号Ci,准则层编号Cij,指标层编号Cijk,最终构建出绩效评价指标体系,如表2所示。
表2 新市镇PPP项目运营期绩效考核指标体系
三、新市镇PPP项目绩效评价指标权重的确定
(一)权重方法的选择
指标权重的选择方法包括德尔菲法、判断矩阵法、层次分析法(AHP)等,根据新市镇项目特点,本文选取AHP法进行指标权重的确定。层次分析法由美国运筹学家Satty提出,评判依据来源于专家打分,它将定性与定量分析相结合,将指标分解成三个层次,依次为目标层、准则层与指标层,适用于多准则问题的决策。具体步骤如下:
1.构造层次分析结构
构造层次分析结构是AHP法中最重要的一步,它将复杂的项目进行层次划分。本文将项目分为三层,其中目标层是财务能力、内部流程等4个指标,准则层包含项目管理等11个指标,指标层则包含27个具体指标。
2.构造判断矩阵
构造出层次分析结构后,继续构造判断矩阵。判断矩阵将元素两两比较,指本层因素相对上一层因素的重要程度,主要通过专家打分法完成。对n个因素来讲,两两比较判断矩阵为C=(Cij)n×n,其中Cij指因素i和j相对于目标因素的重要值。评判标准参照判断矩阵1-9标度法法则。
3.层次单排序及一致性检验
层次单排序指本层元素相对上层元素的相对权重,计算步骤如下:
(1)将判断矩阵的每一列进行归一化处理:
(2)将列元素归一化的判断矩阵按行相加:
(3)将wi归一化:
可以得到向量w=(w1,w2……wn)T,该向量即表示相对于上一层因素的权重值。
(4)计算判断矩阵最大特征向量:
(5)一致性检验:判断矩阵数据来源于专家打分,由于主观性太强,难免出现判断失误,故要对其进行一致性检验。计算公式为:
当CI=0时,矩阵具有完全的一致性;当CI≠0时,越靠近0,表明一致性越高;相反,一致性越低。由表3可以看出,当n<3时,CI均为0,说明此时矩阵具有完全的一致性;当n>3时,矩阵一致性受专家打分的影响很大,为使结果更精确,引入随机一致性指标RI,并在此基础上计算一致性比率CR(CI/RI)。RI的数值如表3所示。
表3 随机一致性指标
当CR<0.1时,表明判断矩阵的一致性在可接受范围内,若CR>0.1,表明一致性不被接受,这个时候要将CR值调整到0.1以下,使之具有满意的一致性。
(二)新市镇PPP项目指标权重计算
根据以上的操作步骤,再次对专家进行问卷调查,通过收集与分析问卷数据,计算各专家每项打分的平均值,对问卷各层次指标判断矩阵进行分析,得出相应权重值。首先对构造目标层指标判断矩阵,如表4所示。
表4 绩效评价目标层判断矩阵E
(1)将矩阵D进行归一化处理,得到矩阵D’:
(2)将元素归一化的矩阵D’按行相加,得到矩阵:
(3)然后继续归一化处理E’,可得到权重向量为W=(0.094 0.294 0.479 0.133)T,由此,可得到一级指标中4个目标因素的百分比权重,即财务能力为9.4,内部业务流程为29.4,可持续发展为47.9,利益相关者满意度为13.3。
(4)计算判断矩阵的最大特征向量λmax:
将EW相乘,得到EW=(0.378 1.215 1.975 0.508), 由 此 计 算λmax:
(5)进行一致性检验
再计算一致性比率CR,查看RI表,当n=4时,RI=0.9,=0.023,小于0.1,一致性检验通过。
基于以上相同的方法和思路,运用软件YAAHP计算得到11个准则层指标和27个指标层指标的权重,并且全部通过了一致性检验。
四、小结
本文介绍了新市镇PPP项目运营期绩效评价指标体系建立的原则、方法与权重确立。在大量研究的基础上,立足项目运营期的特点,根据平衡计分卡原理,设置了财务能力、内务流程、可持续发展、利益相关者满意度四个维度,初步构建了绩效指标体系,再根据专家打分法筛选确定出最终指标,最后利用层次分析法对各个指标进行赋权,最终建立出新市镇PPP项目运营期绩效评价指标体系。