科研院所科研外协项目评价方法探索
2013-07-19代瑛杨高潮周卫国张战
代瑛 杨高潮 周卫国 张战
中国航空工业第一飞机设计研究院,陕西 西安 710089
引言
在提升科研院所内部“核心竞争力”这一思想的主导下,科研外协项目已成为各科研院所所科研项目实施中不可或缺的重要角色,科研外协项目的顺利实施是完成其各项指令性任务、实现各科研院所发展战略目标的保证。随着各科研院所科研任务的不断增加,外协的规模也在逐年增多,外协项目的立项评价在科研外协项目管理中已成为一个非常重要的环节,处于项目管理的“龙头”地位,外协项目立项评价的合理与否将直接或间接地影响单位项目的研制进度或周期,同时,合理的科研外协评价可以促进主体项目的成功,提高科研院所内部技术的进步和储备,反之,不合理的外协可拖延主体项目的进度,甚至造成企事业单位的人力、物力和财力的浪费。
在某些科研院所内部,并未建立适合的外协立项评价机制,只是运用依赖工程经验的专家评判方法,评价主体的素质直接影响评价结果,使得评价结论具有很大的局限性、片面性、随机性。这里采用层次分析法和模糊隶属度相结合的综合评价方法对科研外协项目立项进行评价,确保突出重点和有限目标。
1 科研外协项目评价的意义
对科研外协项目进行合理评价,旨在促进工程研制目标实现和技术能力发展的前提下,保证资金节约与合理利用、平衡年度经费指标、避免重复工作与资源浪费、提高研制质量的同时缩短项目研制周期。
科研外协立项评价过程中,应着重注意以下几点:a)外协项目立项评价遵循公平、公正、客观、科学的原则;b)外协项目评价与改进工作相结合,提升科研外协项目的效力;c)综合考虑所属总项目的标准规范、研制方案、项目计划及经费预算等;d)以外协项目技术方案为核心,以项目开展可能取得的效益为重点,综合考虑各项目之间是否有重复。
2 构建评价指标体系的原则
指标体系的设计是科研外协项目评价过程中的重要环节。科学适用的评价指标体系是有效开展评价工作、取得可靠评价结果的基础。构建科研外协评价指标体系时应考虑如下原则[1][2]:
(1)指标体系应尽量少而精,并便于操作,科研外协立项评价体系应列出主要的和必不可少的指标,各指标之间应尽可能相对独立,不交叉,以便评价过程的操作。
(2)以可操作性为前提,从不同的侧面选择若干重要指标,同时主要方面不能有遗漏,以保证评价内容的完整性。
(3)选择的指标应易于量化,不能直接量化的性能指标内涵应清楚明确。
(4)广泛征询专家意见,对各指标反复研究,认真予以审定。
3 科研外协评价指标体系与指标评价标准的确定
评价指标体系是从多个视角和层次反映特定评价对象数量规模与数量水平的,它是一个“具体- 抽象- 具体”的辩证逻辑思维过程。这里以构建科研外协项目评价指标体系的基本原则为指导,在多指标综合评价逻辑思路的主导思想下,以型号工程及项目研制类外协的评价标准为例,形成了两级指标的科研外协评价体系,如图1所示。
图1 科研外协评价指标体系
在确定了评价指标体系后,还需要确定指标体系中各评价指标的评价标准。按照科学性、合理性以及符合专家评判的逻辑思维习惯的原则,将评价标准分为5 个等级[3]:非常必要0.9,很必要0.7,必要0.5,一般0.3,不太必要的0.1,如表1 所示。
4 科研外协评价指标权重的确定
相对于某种评价目的来说,评价指标相对重要性是不同的,并通过其权重来体现,指标权重确定的是否合理,关系到评价结果的可信度。本文采用层次分析法来确定科研外协项目评价指标权重,将专家的判断进行量化。经过专家调查,对于科研外协项目构造的各级判断矩阵如下:
4.1 构造判断矩阵并进行一致性检验
本文对各项指标的重要性进行比较,构建B、C 层两两判断矩阵,见表2 所示。在科研外协立项评价之前,应组织有关专家对构建好的判断矩阵进行讨论,确保各项指标之间的比较符合科学性和合理性。
表1 科研外协项目评价指标评价标准
表2 B 层判断矩阵
表3 C 层判断矩阵(a)
表4 C 层判断矩阵(b)
表5 C 层判断矩阵(c)
其中,C 层中指标C7 和C8 的判断矩阵与C6 的相同,均见表5。
4.2 计算最底层指标相对于目标的合成权重wij
w11= W1·W11=0.423×0.540=0.228
w12= W1·W12=0.423×0.163=0.069
w13= W1·W13=0.423×0.297=0.125
w21= W2·W21=0.256×0.667=0.171
w22= W2·W22=0.256×0.333=0.085
w31= W3·W31=0.136×1=0.136
w41= W4·W11=0.115×1=0.115
w51= W5·W11=0.071×1=0.071
5 科研外协项目的排序
基于已确定的评价指标、指标权重和评价尺度,采用模糊隶属度的方式[4],度量评价分析对象,计算出科研外协立项评价顺序的有关信息,并对多个科研外协项目进行排序。
依据科研外协项目立项评价指标体系和项目A 自身情况,假定有8 名专家,参照评价标准对A 的C 层各要素进行打分,并将8名专家对项目A的C层指标做出各级评价的人数统计如表6 所示。
表6 8名专家对项目A1 打分统计表
根据表6 可以得到项目A 的隶属度矩阵R 如下:
其中,权重向量w=(0.228 0.069 0.125 0.171 0.085 0.136 0.115 0.071)
评价尺度向量 E=(0.9 0.7 0.5 0.4 0.3 0.1)T
项目A 的优先度NA为:
同理可以求出其他科研外协项目的优先度,并对其进行排序。
6 结束语
在科研外协评价过程中,在明确了构建科研外协项目评价指标体系原则的基础上,沿纵向构建三层科研外协评价体系,并采用层次分析法和模糊隶属度结合起来的评价方法,具有赋值合理并且较为简便的特点,降低了加权过程中人为因素的影响,从而使评价结果更为客观、可靠。
值得关注的是,1)科研外协种类较多,在核心技术研究领域的某些技术攻关中,如研制进度许可,应尽可能让本单位内部人员进行研究,避免“花自己的钱,提升别人的能力”的这一现象,在节省资金的情况下,提升单位整体研究水平与能力。2)对已开展的外协项目,应加强外协管理,尤其是应积累试验/试验件加工/其他研究过程中可能产生的经验数据:周期,费用,人力等,为后续外协项目的评价提供经验参考。
[1]王炎坤, 钟书华等. 科技奖励论[M].武汉:华中科技大学出版社,2001:127-129.
[2]王玉英,姚友雷,雷源忠.基金项目成果的评价系统初探[J].系统工程与电子技术,1996(12):2-4.
[3]沈建明.国防高科技项目管理概论[M].机械工业出版社,2004:328-331.
[4]司守奎,孙玺菁. 数学建模算法与应用[M ].国防工业出版社,2011:189-191。