效能评估研究热点分析

郑 涛，李自力，曾 利，郝烺超

（国防科技大学信息系统与管理学院，长沙 410073）

效能评估研究热点分析

郑 涛，李自力，曾 利，郝烺超

（国防科技大学信息系统与管理学院，长沙 410073）

采用计量学方法，以CNKI、SCI数据库中的文献为数据源，运用CitespaceⅡ、Excel软件对效能评估中文、英文相关文献进行分析，通过对比方式，得出国内外效能评估研究热点的相关结论，并将主要关键词以时间轴的顺序区分归类，对效能评估的研究具有一定的参考价值

CitespaceⅡ、Excel；效能评估；研究热点

引言

效能评估指对某种事物或系统执行某一项任务结果或者进程的质量好坏、作用大小、自身状态等效率指标的量化计算或结论性评价，广泛用于军事、科研、制造行业，也可用于评估某种计划、工程。在实践过程中发现，效能评估不仅能够找出制约影响事物效能发挥的主要因素，而且还能够为提高事物本身效能提供科学依据，基于该内容的重要程度，本文采用文献计量学方法，对国内效能评估研究状况进行分析，区分国内研究时间节点，细化各项指标，可视化当前效能评估研究的热点问题。

1 数据来源与处理

截止2013年5月10日，以CNKI、SCI数据库中的文献为数据源，按“题名”检索，分别找到与“效能评估”相关的文献1 745篇、306篇。

1.1 国家发表文献分析

图1 国家发表文献分析

如图1所示，就目前而言，在效能评估领域内，各国研究程度层次差异较大，中国、美国发表文献数量较多，研究水平相对较高，并列第1位，意大利、英国分列排行榜第2位、第3位，其余国家研究层次水平相当，没有明显差距。

1.2 文献发表年度分析

从下页图2可以看出，国外对于效能评估的研究时间较早，为1963年，国内为1989年，相差26年，但国内后期发展迅速，可以看出在2000年前后，曲线增长幅度明显，逐步成为热门领域。

图2 文献发表年度分析

1.3 高被引文献分析

表1列出了作战效能领域被引频次前10的文献，可以看出除《作战飞机的空-地攻击效能评估》发表于1999年之外，其余引频次高的文献都发表于2000年以后，这与图2曲线图发展趋势吻合，进一步说明国内对“效能评估”的研究在2000年以后质量明显提升。第1篇文献哈尔滨工业大学航天学院关成启等（2000）［1］综合分析了目前使用的效能评估方法和模型,分析了它们使用范围和存在的问题,并针对导弹武器系统提出了一种新的评估方法—概率矩阵法。第2篇海军大连舰艇学院张克等（2002）［2］阐述了针对雷达系统指标的相对性、模糊性,运用模糊数学方法建立模糊综合评价模型。对雷达系统效能评估问题,提出了一种基于模糊层次分析法评估效能的模型。第3篇哈尔滨工业大学航天学院张克等（2002）［3］阐述了通过论述导弹武器系统作战效能的基本概念和基本评估方法,探讨了效能评估方法论意义,从而提出军事系统效能评估的软算法的思想方法,并从方法论的角度提出效能评估软度量的几个基本技术。第4篇北京航空航天大学自动化学院赵超等（2001）［4］阐述了武器系统的作战效能评估以及现有效能分析方法的不足之处,分析了作战系统、综合效能的概念等几个关键问题,并提出了初步的研究方法。第5篇中国航天机电集团公司二院二部万自明（2000）等［5］阐述了从完备、科学和实用的角度出发,提出了从使命效能和潜在效能两方面度量武器系统效能的效能评估模式。通过引入使命系统和理想系统的概念,详细讨论了武器系统使命效能和潜在效能的度量方法。这些文献主要介绍了效能评估的基本概念，探讨了评估方法，构建出武器系统效能评估的数学模型，最后经过实例验证其可行性，具有很高的借鉴价值。

表1 高被引文献分析

在分析国内文献的基础上，运用Citespace软件，得到相应的国外效能评估关键文献，如图3所示，图中4篇文献中心度及引频次相对较高，对于国外研究效能评估起着非常重要桥梁作用，按照年代逐一对文献进行分析。第1篇文献美国运筹学家托马斯·塞蒂（T.L.Saaty）提出的层次分析法（The analytic hierarchy process）简称AHP。它是一种定性和定量相结合的、系统化、层次化的分析方法。由于它在处理复杂的决策问题上的实用性和有效性，很快在世界范围得到重视。它的应用已遍及各个领域，是效能评估应用方法之一。第2、4本专著《卫生保健项目经济学评估方法》（Methods for the Economic Evaluation of Health Care Programmes），该书由著名的英国约克大学卫生经济研究中心教授、主任Michael F.Drummond等人编写，全面系统地介绍了经济学评价的原理、概念、方法、应用等内容，该书1987年第1次出版，2005年第3次出版，新出版的内容在理论和实践方面有了更新的进展，在卫生保健经济学评估研究方面，是一个重要的贡献。第3本专著《健康和药品成本效益》（Cost-effectiveness in health and medicine），该书由美国公共卫生服务Marthe R.Gold等人编写，该书阐述的是通过成本效益分析，可为医疗卫生领域提供辅助决策。这些文献引频次很高，都与效能评估领域密切相关，借鉴价值很高，对于效能评估领域的发展起着关键性的作用。

图3 共引文献图谱

1.4 文献来源分析

国内期刊载文排名：第1为《火力指挥控制》载文数量165篇，占载文总数9.5%，第2为《舰船电子工程》载文量119篇，占载文总数6.8%，第3为《兵工自动化》载文数量74篇，占载文总数4.2%。在列举的期刊中，中文核心期刊7种，说明期刊来源水平较高。国外期刊载文排名：第1为《VALUE IN HEALTH载文数量20篇，占文献总量的6.5%，其次为《ADVANCED MATERIALS RESEARCH》载文数量5篇，占文献总量的1.6%，第3为《ISTM 2007 7TH INTERNATIONAL SYMPOSIUM ON TEST AND MEASUREMENT VOLS 17 CONFERENCE PROCEEDINGS》载文数量4篇，占文献总量的1.3%。国内期刊主要倾向于装备评估等方面，国外期刊主要倾向于医学类、材料试验、空气污染、计算机科学、能源工程类等领域。

1.5 学科对比分析

图4 文献来源分析

图5 学科对比分析

图5主要列举了“效能评估”相关领域学科分类，国内学科主要集中在武器工业与军事技术、电信技术、军事、航空航天科学与工程、计算机软件及计算机应用、非线性科学与系统科学。国外学科主要集中在工程、计算机科学、商业经济、卫生保健科学服务、自动化控制系统、运筹学管理科学、公共环境职业健康、通信学、肿瘤学、仪器仪表、生态环境科学、药理学药房等学科。

1.6 机构分析

如图6所示，左图显示，国内院校是研究效能评估的活跃机构，在选取的前15名高校当中，军队院校比例占86.7%，地方院校占13.3%，排名前3位的分别是空军工程大学、国防科学技术大学、西北工业大学。右图显示，排名前3位的分别是中国空军工程大学、北京理工大学、哈佛大学。此外还有中国西北工业大学、国防科学技术大学、石家庄机械工程学院。世界前20机构当中，国内机构占25%。

图6 机构分析

2 国内外效能评估研究热点

运用citespace软件，分别得出国内与国外效能评估的可视化网络图。如图7所示，整体分析：国外效能评估新领域成果丰富，而国内近几年发表的相关文献相对较少；局部分析：国内研究热点主要集中于武器系统效能评估领域，而国外研究热点主要集中于经济效益、医疗等领域。为便于深入分析国内外研究热点，运用citespace软件得出国内外效能评估领域关键词列表。（如下页表2所示，由于篇幅过长，本文只列举了部分内容）

依据文献发表时间顺序，将关键词逐一分类，归纳总结，寻求国内外效能评估领域的研究热点状况。通过分析，具体划分为4类：第1类研究对象，具体区分人、物、内容、组织、环境；第2类为应用领域，具体区分为军事、研发、管理、卫生保健；第3类为方法手段，具体区分为理论、方法、模型、工具；第4类为评价指标，具体区分为效益、效率、效果等内容。如表3所示（由于篇幅过长，本文只摘选效能评估应用领域部分，表内数字为引频次，黑色字体代表国内文献关键词，黑色加粗字体代表国外文献关键词）。

图7 国内外效能评估研究热点图谱

表2 “效能评估”关键词列表

表3 效能评估研究热点时间区分

研究对象按人、物、内容、组织等区分。与人相关的概念包括儿童、HIV感染者、二甲双胍治疗的患者等，这些关键词均出自国外文献且与医学相关度较大，这与前文的来源和领域分析结果相一致，从侧面说明国外效能评估多应用于医学卫生领域。与物相关的概念，可分为武器装备和医学两大类，武器装备类包括导弹、预警机、战斗机、潜艇、武装直升机、核电站、系统、体系等，医学类包括药物、病毒等；考察这一类别的关键词分布情况可知。时间上，国内对效能评估的研究要早于国外，之后两者发展的时间差别不大，对象上，国内主要将武器装备作为效能评估的研究对象，国外则聚焦于医学卫生领域方面。与内容相关的概念包括指导方针、决策规则、问题、知识等，与组织相关的概念包括纺织企业和制造工厂等。

应用领域按军事、研发、管理和卫生保健等区分，其中军事领域主要包括指挥、作战、编队、组网、模拟、仿真对抗、干扰等方面；研发领域包括实验、评估、检索、分析、测试等方面；管理领域则包含控制、分配、物流、开发、跟进、干预等方面；卫生保健领域则包括预防、关心、保健、手术、治疗、流行等方面；总的来看，国内主要将效能评估应用于军事和研发领域，国外则集中应用于医学领域和部分的研发领域。

方法手段按理论、方法、模型区分，其中理论包括排队论、图论、效用论、系统动力学等；方法主要包括模糊、神经网络、分析、评估、决策、熵等大类方法；模型包括数学模型、效能评估模型、效能模型、评估模型、ADC模型、高层体系结构等。

评价指标主要包括指标、效能、性能、效益、效率、效果、质量、标准、安全、概率、可用性、可用度、规模、能力等概念，其中国内主要采用指标、效能、概率、可用性、可用度、能力等，国外则注重从性能、效益、效率、效果、质量、安全等方面进行评估，这也说明了国内外效能评估侧重点的不同。

3 研究结论

本文从计量学的角度出发，对效能评估国内外文献进行分析,得到以下结论：从1963年至1989年，关键词空白，说明这一期间，国外对于效能评估的研究成果不够明显，而对于国内的研究，相对国外起步较晚，从1989年后，逐步开始发展，2000年后发展速度迅猛，从出版文献的数量和机构来分析，高等院校是研究作战效能的活跃领域，高等院校当中军队院校比重占据较大。整体而言，对于效能评估的研究，国外明显优势就是在于医学领域方面，这与国内研究领域形成互补，也是国内下步需要重视和发展的方向。总之，对于效能评估的研究热点还有一些问题没能涉及到，还需后期进一步探讨与完善。

［1］关成启，杨 涤，关世义.导弹武器系统效能评估方法研究［J］.系统工程与电子技术，2000，22（7）：24-27.

［2］郑孝勇,姚景顺.基于模糊层次分析法的雷达效能评估方法［J］.现代雷达，2002，24（2）：12-17.

［3］张 克，刘永才，关世义.关于导弹武器系统作战效能评估问题的探讨［J］.宇航学报，2002，23（2）：53-57.

［4］赵 超，文传源.作战系统综合效能评估方法探索［J］.电光与控制，2001，32（1）：15-19.

［5］万自明，廖良才，陈英武.武器系统效能评估模式研究［J］.系统工程与电子技术，2000，22（3）：94-97.

［6］付 东，方 程，王震雷.作战能力与作战效能评估方法研究［J］.军事运筹与系统工程，2006，20（4）：83-86.

［7］周 颖，王雪松，徐振海，等.雷达电子战效果及效能评估的一般性思考［J］.系统工程与电子技术，2004，26（5）：121-123.

［8］杨 峰.面向效能评估的平台级体系对抗仿真跨层次建模方法研究［D］.长沙：国防科学技术大学，2003.

［9］孙华付.指挥信息系统效能评估方法［J］.四川兵工学报，2012，33（5）：96-98.

［10］黄 俊，武 哲.作战飞机的空-地攻击效能评估［J］.航空学报，1999，35（1）：13-17.

［11］李宗吉，王树宗.武器装备系统效能评估的几种方法［J］.海军工程大学学报，2000，24（1）：72-76.

Effectiveness Evaluation Study Hotspot Analysis

ZHENG Tao，LI Zi-li，ZENG Li，HAO Lang-chao
（School of Information System and Management，National University of Defense Technology，Changsha 410073，China）

The metrology method,using CNKI，SCI database literature as the data source，using CitespaceⅡ，Excel software analysis Chinese，English literature on the effectiveness evaluation，by contrast，to evaluate the effectiveness of the hot research conclusion，and the main key words in order of time axis of sorting，has a certain reference value for the study of effectiveness evaluation.

Citespace II、Excel，effectiveness evaluation，research hot topics

E911；N945.12

A

1002-0640（2014）09-0082-05

2013-06-05

2013-09-07

郑 涛（1978- ），男，甘肃甘谷人，硕士研究生。研究方向：效能评估。