地方科技平台绩效评价支持系统开发研究＊

张 龙，肖琬蓉，施韶亭，杨生举，曾硕勋

（甘肃省科学技术情报研究所，甘肃 兰州 730000）

地方科技平台绩效评价支持系统开发研究＊

张 龙，肖琬蓉△，施韶亭，杨生举，曾硕勋

（甘肃省科学技术情报研究所，甘肃 兰州 730000）

针对传统绩效评价模式在考核管理工作中的局限与不足，在对科技平台评价主体、评价客体、评价指标、评价方法分析研究的基础上，提出基于B/S模式的地方科技平台绩效评价解决方案。利用可视化控制、管理方法，构建集考评信息采集、考评指标定义、专家用户评议、考评分值计算、考评结果统计查询于一体的综合绩效评价系统，并充分考虑科技平台未来演变与发展需求，建立评价指标体系的动态定义管理，以增强系统的灵活性与通用性。应用结果表明：该系统规范了科技平台绩效考核流程，提升了考评管理工作效率，提高了考核结果的精准性，为科技平台的科学评价与管理决策提供了有益支撑。

科技平台，绩效评价，支持管理系统

2004年科技部、财政部、发改委、教育部联合颁布了 《2004～2010年国家科技基础条件平台建设纲要》，启动实施了一批国家科技基础条件平台建设计划。根据《纲要》精神，各省市为提升地方科技资源的有效利用，解决行业共性技术需求，结合自身经济和社会发展实际，也陆续建立了一批地方科技创新服务平台[1]。目前，这些科技平台已逐渐从资源建设转向运行服务阶段。为加强科技平台的监督管理，建立科学有效的激励机制，推进科技资源的共享利用，科技平台的绩效评价工作在国家与各省市相继展开，并成为当前科技平台建设发展过程中一项十分重要和必要的工作。

科技平台的绩效评价是通过绩效评价指标体系的构建，对科技平台的资源整合力度、共享服务成效、科技创新能力作出客观、公正和准确的综合评价，以此建立激励机制，充分调动平台参建各方的积极性，促进科技资源的开放共享与有效利用。同时，为国家或地方政府进一步的支持投入和制定科技政策提供决策依据，以推进科技平台持续健康发展。考虑到科技平台涉及的资源类型复杂、覆盖面广，参建部门多，其资源整合方式、组织管理模式、共享服务机制等方面的差异性较大等因素，为规范科技平台绩效考核流程、提升科技平台考评工作效率、提高考核结果的精准性，提出基于B/S（Browser/Server，浏览器/服务器）模式的地方科技平台绩效评价解决方案。

1 系统设计

1.1 系统总体构架

通过对地方科技平台评价主体、评价客体、评价指标、评价方法的分析研究，设计开发了集考评信息采集、指标动态定义、专家用户评议、考评分值计算、结果统计查询于一体的综合绩效评价支持系统[2]。该系统采用基于B/S三层体系结构将系统划分为表示层、应用层和数据层[3]。表示层是Web客户端，即系统管理员、授权用户、平台用户、专家用户和服务对象等各级授权用户的登录接口；应用层是系统的可视化管理模块，由考核信息管理、考核配置管理、考核评价管理与考核结果管理等四大应用模块构成，是本系统的核心；数据层是各类文件、系统数据及资源数据的存储系统。考虑到科技平台类型的差异与未来发展需求，其指标体系采用动态定义管理模式，以便于日后的修订与完善，系统总体构架如图1所示。

1.2 系统功能结构

1.2.1 系统应用功能

根据科技平台考评工作流程，系统功能设计采用可视化管理模式，来提升系统的易用性。整个系统由四大功能模块构成，即考核信息管理、考核配置管理、考核评价管理、考核结果管理[4]。其中，考核信息管理模块包括：自评信息填报、填报信息审核、填报信息查看、填报信息维护等功能；考核配置管理模块包括：系统权限管理、考核指标管理、指标权重管理、考核模型管理等功能，系统管理员具有该模块唯一管理权限；考核评价管理包括：服务对象评价、专家评价、定性数据管理、定量数据管理、考核分数计算、考核等级评价；考核结果管理模块包括：考核结果查询、考核结果统计。系统应用功能结构如图2所示。

图1 系统总体构架

图2 系统功能结构

1.2.2 系统用例设计

用例（Use Case）是UML中非常重要的概念，是贯穿整个系统开发的一条主线，它通过用例图以一种可视化的方式形象的描述了系统功能需求，即：角色、用例以及它们之间的关系，展示了一个外部用户能够观察到的系统功能模型图[5]。本系统用例图：采用分级权限管理机制，将用户角色分为五类，即系统管理员、授权用户、平台用户、服务对象和专家用户等，角色在系统操作中的用例主要有权限管理、指标管理、考核模型管理、平台信息填报、填报信息修改、填报信息管理、填报信息查看、填报信息审核、定性与定量数据管理、考核分值计算、考核等级评价、考核结果查询、考核结果统计等，不同角色用户具有不同的操作权限。其中，系统用户主要负责用户权限、评价指标、指标权重、考核模型等的管理；授权用户负责填报信息审核、定性与定量数据管理、考核分值计算、考核等级评价，并具有填报信息查看、考核结果查询、统计等权限；平台用户负责自评信息填报、服务对象授权，同时具有填报信息维护、考评结果查询等功能；服务对象负责对接受服务的平台做出满意度评价；专家用户通过对各平台自评信息的查阅，进行平台定性考核指标的评价。系统用例如图3所示。

图3 系统用例图

1.3 评价体系设计

1.3.1 指标体系

参考国家科技平台绩效评价总体框架[6]，结合地方科技平台功能定位、类型差异，认真分析研究区域科技平台考核范围、评价内容[7]，遵循客观、公正、科学、规范的原则，采用定性和定量相结合的方法，分别从运行管理、共享服务、服务成效、创新能力四个方面制定了四个一级指标、11个二级指标和26个三级指标（见表1）。在指标权重比重设定上将针对平台类型的不同有所侧重，科技基础条件平台主要侧重科技资源整合利用情况及科技服务范围与社会效益，行业创新服务平台则侧重研发创新能力、技术服务成效及经济效益。考虑到未来的发展，在该系统功能设计中，指标与权重采用动态定义管理模式，这样便于日后指标与权重的修订与完善，提升考评工作的灵活性，并增强系统的通用性。

表1 地方科技平台指标体系

1.3.2 评价模型

根据考核内容的不同，构建不同的考核模型[8]，即定性评价模型、定量评价模型与混合评价模型。首先，分别应用定性评价模型、定量评价模型完成定性与定量指标的计算，然后应用混合评价模型对科技平台的定性、定量评价结果进行综合评议。由于不同平台的同一指标存在不同质的问题，因此在定量评价之前需要对相关指标进行无量纲化处理。

各评价模型与无量纲化处理方法如下：

1）定性评价模型：

其中，A——定性评价绩效；

m——末级定性指标个数；

n——评议专家（或用户）数量；

Fj——末级指标权重；

Mi——评议专家（或用户）评分分值；

Mmax——评议专家 （或用户）中评分最高的分值；

Mmin——评议专家 （或用户）中评分最低的分值；

2）定量评价模型：

其中，A——定量评价绩效；

n——末级定量指标个数；

Fj——末级定量指标权重；

Mj——末级定量指标分值。

3）混合评价模型：

其中，A——综合绩效；

k——此次考核包含定性与定量模型的个数；

Aj——某个模型得分。

4）无量纲化处理方法：

其中，M——定量指标分值；

P——该平台定量指标值；

2 系统实现

2.1 系统开发运行环境

1）服务器端

系统运行平台：MS Windows Server 2008。

Web服务器：Apache HTTP Server 2.2.8。

开发工具：采用PHP-5.0开发语言及Zend Stu-dio9.0.4集成开发环境。

建模工具：Sybase PowerDesigner 9。

数据库：Microsoft SQL Server 2008。

通信协议：TCP/IP协议 。

2）客户端

系统运行平台：Windows XP/7/8。

浏览器：Microsoft Information Explorer（IE）8.0以上版本

2.2 考核信息管理模块

根据考评工作需求，考评信息管理模块是实现各被考核科技平台考评信息采集、审核、查阅等的操作，即包括自评信息填报、填报信息审核、填报信息查看、填报信息打印与填报信息维护等功能。其中，自评信息填报是各科技平台填报信息的入口，各科技平台承担单位根据所属科技平台类型，填报考核自评信息，其内容包括自评表填写、自评总结与相关附件清单上传等功能；填报信息审核是对各科技平台所填报的考核自评信息的规范性进行审核（由授权用户进行审核），未通过审核的自评信息将退回相应科技平台承担单位重新修改填报，通过审核的自评信息将作为考核评价的参考依据提交考评组，不能再做修改；填报信息查看主要是为平台用户、考评专家、授权用户提供考评信息的查阅，授权用户与考评专家可查看所有被考评平台的填报信息，平台用户仅能查看自填信息；填报信息下载打印功能主要是为被考核平台提交纸质自评报告设计的，该功能对平台用户与授权用户可用。

2.3 考核配置管理模块

考核配置管理模块是系统权限管理与评价体系管理的功能模块。为推进科技平台考评工作的科学化，评价指标体系应在稳定性和发展性的平衡中不断进行优化。考虑到考核对象自身的发展及评判价值观的演变，本系统评价指标设置、指标权重赋值、考核模型选定采用了自定义方式[9]，以增强系统的灵活性。系统评价指标管理界面如图4所示。

图4 评价指标管理界面

考核配置管理模块主要包括考核指标管理、指标权重赋值、考核模型管理和系统权限管理四部分。其中，系统权限管理是用于用户权限的管理模块，系统管理员具有该模块所有功能的管理权限，由系统管理员为授权用户、评审专家、平台用户授权，平台用户可对其服务对象授权；考核指标管理（包括指标权重管理）可按树状结构灵活构建与管理指标树，其定义内容有指标名称、指标类型、指标说明、指标权重等(如图5所示)；考核模型管理是根据考核对象的不同，选择不同的考核模型，如定性评价模型、定量评价模型、混合评价模型等。

图5 评价指标及权重自定义界面

2.4 考核评价管理模块

考核评价管理模块是考评工作的核心，功能包括：服务对象评价、专家评价、定性数据管理、定量数据管理、考核分数计算、考核等级评价等。其中，服务对象评价是用户对平台的评价，服务对象通过登录系统，提取用户评价指标，对平台服务情况进行评价打分；专家评价则是专家对平台的评价，专家通过登录系统，阅读各平台自评报告，分别提取相应平台定性评价指标，对其进行评价打分(如图6所示)；定性数据管理功能将对通过专家与用户评价的指标数据的规范化进行审核，未通过审核的数据将退回专家或用户重新修改，通过审核的数据将作为绩效评价的最终数据，提交考核评价指标库中；定量数据管理功能是通过直接提取各平台填报的定量指标数据，对其真实性、规范性进行进一步审核，未通过审核的数据将退回相应平台重新修改，通过审核的数据经无量纲化处理后，提交到考核评价指标库中；考核分数计算功能是根据定性、定量评价指标的不同，选择相应评价模型，提取相应指标数据（定性或定量指标），进行分值计算，包括各定量指标的平均值计算，定性、定量及综合绩效分值计算，各顶级指标的计算及排序；考核等级评价功能则是根据各平台顶级指标计算与排序结果以及综合考评分值，填写考评分析说明与考评意见，最终生成考评报告。

图6 专家评审界面

2.5 考核评结果管理模块

考核结果管理模块包括考核结果查询与考核结果统计功能，其中，考核结果查询按年度提供平台的考核结果查询，包括各平台定量指标分值、定性评价分值、综合绩效分值、考评意见等（如图7所示）。系统用户与授权用户具有上述所有功能查询权限，平台用户仅能查询各自平台的绩效分值与考评意见；考核结果统计提供所有科技平台的考核结果统计，可选择按科技平台类型进行统计，统计内容包括：经费投入、经济效益（分别统计直接与间接效益）、承担项目（分别统计国家与省部级）、完成成果、获奖及取得知识产权数量等统计。

图7 考核结果查询界面

3 结语

科技平台绩效评价支持系统是根据地方科技平台绩效考核管理需求设计开发的，该系统是一个集考评信息采集、专家与用户评议、考评分值计算、考评结果统计查询为一体的综合性评价管理支持系统，目前已应用于甘肃省科技创新平台的绩效考评管理中，甘肃省科技厅利用该系统已完成了2012年与2013年两年甘肃省的科技基础条件平台与行业技术服务平台的考评工作。该系统的开发研究对甘肃省科技创新平台的科学评价与管理决策提供了有益支撑。同时，系统在评价指标体系的应用中采用了自定义模式，不仅提高了系统的灵活性，而且也增强了系统的通用性，为进一步推广应用奠定了基础。

[1] 申屠俊捷，兰文燕.公共科技创新服务平台绩效评估指标体系研究[J].2009，(7)：90-93.

[2] 钟久隆，周琪云，朱隆尹.基于B／S结构的银行绩效考核系统的设计方案[J].计算机与现代化，2007，(7)：73-77.

[3] 邓良松，刘海岩，陆丽娜.软件工程[M].西安：西安电子科技大学出版社，2004.

[4] 张华波，郝平，金永夫，等.基于DM的科技计划项目绩效评价系统的设计[J].控制工程，2009，16(9)：114-116.

[5] M.L.Liu.分布式计算原理与应用[M].北京：清华大学出版社，2004.

[6] 胡永健.基于多属性决策的国家科技基础条件平台运行服务绩效评估研究[J].中国科技论坛，2009，(12)：3-7.

[7] 陈丹青，温琴娜，周艳，等.基于AHP的区域创新科技服务平台绩效评价指标体系研究[J].消费导刊，2009，(2)：206-207.

[8] 刘生建，洪洲.绩效考核系统的产品化设计及实现[J].中国科技信息，2011，(14)：145-146，151.

[9] 孙健英，王霞.基于科研机构的绩效考核系统设计[J].科技促进发展，2012，(10)：16-165.

TP311

本文系甘肃省技术研究与开发专项计划项目“甘肃省科技创新服务平台绩效考核指标体系构建与评价支持系统开发研究”(1205TCYA040)研究成果之一。

△ 通讯作者：肖琬蓉，甘肃省科学技术情报研究所。