F5000论文遴选方法与过程解析
2016-03-24中国科技论文统计与分析课题组
■中国科技论文统计与分析课题组
中国科学技术信息研究所,北京市海淀区复兴路15号 100038
1 引言
自2000年始,国家科技部先后立项“中国精品科技期刊战略研究”和“中国精品科技期刊服务与保障系统”课题,中信所于2008年、2011年和2014年公布了三届“中国精品科技期刊”的评选结果,为加强优秀学术期刊质量和影响力,进而带动我国科技期刊整体水平进步起到了显著的积极作用。
为了进一步提升“中国精品科技期刊”品牌价值,巩固精品期刊学术影响力,构建展示精品期刊最高学术水准的舞台,促进学术交流和知识传播,中国科学技术信息研究所(以下简称:中信所)开展了“中国精品科技期刊顶尖论文平台——领跑者5000”项目(F5000)的研究,一方面创建一个顶尖学术论文的论文库(F5000论文),另一方面建设一种新型的分析评价平台(F5000平台,网址为http://f5000.istic.ac.cn)。之后,通过与国际相关机构合作,将国内优秀的科研成果和研究人员推向世界。
F5000的总体目标是充分利用精品科技期刊评价结果,形成面向宏观科技期刊管理和科研评价工作者,具有一定社会显示度和国际国内影响的新型论文库(F5000论文)。同时在评价的基础上,进一步引领我国科技期刊事业向高水平发展和成长。F5000平台通过集中展示我国精品期刊上发表的最高端的学术研究成果,将成为开展科技评价工作的有利工具,同时在广泛国际合作的基础上,将助力我国优秀科研成果走向世界。
自2012年开展项目以来,中信所每年都会在“中国科技论文统计结果发布会”上,公布当年的F5000提名论文名单,同时向前一年经提名后再评审最终入选 F5000论文的学者,颁发“领跑者5000——中国精品科技期刊顶尖学术论文”入选证书。F5000论文的评价,本质上是针对单篇论文的评价,在期刊的学术质量基础上,重点关注论文本身的学术水平、学术创新、学术价值等。这一点正契合中国科学技术协会、教育部、国家新闻出版广电总局、中国科学院、中国工程院等在2015年11月发布的“关于准确把握科技期刊在学术评价中作用的若干意见”中“建立健全公正合理的学术评价体系”中的要求:“重视科研成果的创新意义和应用价值,弱化学术评价中的功利色彩,从重视期刊论文的数量向重视科研成果的质量转变,从看重所发表论文的期刊国别、影响因子和期刊等级向看重论文本身的创新性和社会价值转变。”
F5000论文为科研管理人员评价研究人员的学术水平提供了一种新的数据源,同时通过F5000平台上论文在Web of Science数据库和万方数据库中的被引次数链接,发现相关研究在国内外研究工作中的应用、发展和影响。此外,结合F5000平台上的评论跟踪,可以采用“替代计量学(Altmetrics)”中的指标实时测度学术成果的影响力。
当前,不少研究人员认识到F5000论文的重要价值,不过对其遴选方式不是很清楚[1]。为此,武夷山研究员曾在2015年1月就“F5000论文是怎么评选的?”做过说明[2]。本文在剖析最新2015年度F5000论文遴选方法的基础上,以《稀有金属》为例,详细例证了F5000提名论文的遴选以及最终F5000提名论文再评后成为F5000论文的过程。
2 F5000论文的遴选方法
F5000论文的遴选主要包括4个步骤,分别是“中国精品科技期刊”评选、F5000提名论文抽取、F5000提名论文的学术内容完善和F5000提名论文再评审。F5000论文的遴选流程,详见图1。
图1 F5000论文的遴选流程[3-5]
2.1 “中国精品科技期刊”评选
在中信所开发的《中国科技论文与引文数据库(CSTPCD)》的基础上,主要采用定量指标分析的方法,对我国科技期刊的质量和影响力进行科学评价,这也就是中信所每年发布的《中国科技期刊引证报告(核心版)》所采用的方法。
在最新的《2015年版中国科技期刊引证报告(核心版)》中,为了全面、准确、公正、客观地评价和利用期刊,中信所借鉴国际通用的评价体系,并在此基础上,结合中国期刊的实际情况,设计了“中国科技期刊综合评价指标体系”[6],计算了24项学术计量指标,基本涵盖和描述了期刊的各个方面[7]。这些指标分为三类:期刊被引用计量指标、期刊来源计量指标和学科分类内期刊计量指标排序。
在期刊被引用计量指标方面,中信所使用了核心总被引频次、核心影响因子、核心即年指标、核心他引率、核心引用刊数、核心开放因子、核心扩散因子、核心权威因子和核心被引半衰期;在期刊来源计量指标方面,包括来源文献量、文献选出率、AR论文量、平均引文数、平均作者数、地区分布数、机构分布数、海外论文比、基金论文比和引用半衰期。在学科分类内期刊计量指标排序方面,主要是综合评价总分、学科扩散指标、学科影响指标、核心总被引频次的离均差率和核心影响因子的离均差率[7]。
《2015年版中国科技期刊引证报告(核心版)》根据每个期刊刊载论文的主要分布领域,将覆盖多学科和跨学科内容的期刊复分归入2个或3个学科分类。依据《学科分类与代码(国家标准 GB/T 13745—2009)》和《中国图书资料分类法(第四版)》的学科分类原则,同时考虑我国科技期刊的实际分布情况,将1989种自然科学领域中国科技核心期刊归入113个学科类别中[7]。
结合学科类别中期刊的数量以及期刊在所属学科类别中的综合评价总分,中信所择优选择这个学科类别的“中国精品科技期刊”。
“中国精品科技期刊”每3年评选1次,首次评选始于2008年,当前最新1期是在2014年评选出来的315种精品期刊(具体期刊列表见 http://f5000.istic.ac.cn),其有效期是2014—2016年。
2.2 F5000提名论文抽取
F5000提名论文的选取方法包括两种:定量方法和定性方法。
2.2.1 2015年F5000提名论文抽取——基于定量方法
在2.1节基于定量方法(文献计量)遴选出的精品科技期刊基础上,中信所从每种精品期刊中择优选取了2010—2014年期间发表的被引频次最高的20篇学术论文作为2015年F5000的提名论文。
具体择优选取方法为:
——以《中国科技论文与引文数据库(CSTPCD)》为基础,计算发表在2010—2014年的每篇论文到2015年这个时间窗口内累计被引用的次数;
——根据论文发表时间的不同和论文所在学科的差异,分别进行归类,并且对论文按照累计被引用次数降序排列;
——对各个学科类别每个年度发表的论文,分别计算前1%高被引论文的基准线;
——在各个学科领域各年度基准线以上的论文中,遴选为各个精品期刊的提名论文。如果一个期刊在基准线以上的论文数量超过20篇,则根据累计被引用次数相对基准线的情况,择优选取其中20篇作为提名论文;如果一个核心期刊在基准线以上的论文不足20篇,则只有过线论文作为提名论文。
根据统计,2010—2014年累计被引用次数达到其所在学科领域和发表年度基准线及以上的,且属于精品期刊的提名论文共有2223篇。
2.2.2 2015年F5000提名论文推荐——基于定性方法(专家评估)
精品科技期刊编辑部通过同行评议的方式推荐2篇2015年度发表的学术水平较高的研究论文,作为提名论文。
提名论文需要满足如下的要求:
(1)推荐论文是在2015年期刊上发表的学术论文,增刊的论文不列入遴选范围;
(2)论文内容科学、严谨,报道原创性的科学发现和技术创新成果,能够反映期刊所在学科领域的最高学术水平。
2.3 F5000提名论文的内容完善
中信所依托各家精品科技期刊编辑部的支持和协作,联系和组织提名论文作者,补充提名论文的详细完整资料(包括1000余字的中英文长摘要、其他合著作者的信息、论文图表及其题注、编委会评价和推荐意见等),提交到中信所F5000项目组。
2.3.1 中英文长摘要
中英文长摘要着重反映原文的创新、独特之处,且中文字数尽量在1000字左右,而英文摘要则是对应中文摘要的翻译,最好包括目的、方法、结果、结论等信息。其中,目的是原文研究、研制、调查等的前提、目标和任务;方法是文章所采用的原理、理论、条件、对象、材料、工艺、结构、手段、装备、程序等;结果是文章实验或研究得到的数据、被确定的关系、观察的结果、得到的效果、提升的性能等;结论则是文章结果的分析、研究、比较、评价、应用,以及之后进一步研究的建议、预测等。
2.3.2 其他合著作者的信息
为了更好地体现科研论文作者的分工协作关系,体现科研成果的真实贡献,F5000项目组要求精品期刊编辑部按照原文作者顺序提交F5000提名论文的中英文作者姓名、中英文作者所属机构等信息。
2.3.3 论文图表及其题注
在学术论文中,为了描述某些分析结果,常常要采用图、表等形式表达论文内容。其中,附图因其形象、直观、简明地表达优势,在科技论文中的使用率越来越高。根据统计,在现代科技期刊中每1000字就伴有1幅插图,被SCI收录的论文每篇平均有2~6幅插图[8]。而表格是实验数据和统计结果的一种常用表达方式,相比文字更加简洁易懂。
故而,中信所要求精品期刊编辑部提交F5000提名论文的插图与附表,并采用原文中图或表的标题进行命名,从而尽可能完整的体现原文的主要学术思想和研究内容。
2.3.4 编委会评价或推荐意见
为了便于读者快速高效的领会F5000论文,精品期刊编辑部会提交F5000提名论文的本刊编委会评价意见或者推荐意见,重点是对研究内容的创新性、研究方法的新颖性、研究结论的准确性、研究结果的价值性等进行点评。
2.4 F5000提名论文再评审
在编辑部提交了完善内容的F5000提名论文后,中信所会进行综合评价,根据定量分析数据和同行评议结果,从信息完整的提名论文中评定出2015年度F5000论文,在下一年度的中国科技论文统计结果发布会上,颁发“领跑者5000——中国精品科技期刊顶尖学术论文”入选证书,并收录入F5000平台。
3 2015年F5000论文遴选——以《稀有金属》为例
CSTPCD统计源期刊一共有21种类别为“金属材料”的期刊,分别是:ACTA METALLURGICA SINICA、TRANSACTIONS OF NONFERROUS METALSSOCIETYOF CHINA、《钢铁》《钢铁钒钛》《钢铁研究》《钢铁研究学报》《贵金属》《黄金》《金属功能材料》《金属学报》《上海金属》《钛工业进展》《稀有金属》《稀有金属材料与工程》《硬质合金》《有色金属工程》《有色金属科学与工程》《中国锰业》《中国钼业》《中国钨业》和《中国有色金属学报》。
《金属学报》《中国有色金属学报》《稀有金属》和TRANSACTIONS OF NONFERROUS METALS SOCIETYOF CHINA的综合评价总分在《中国科技期刊引证报告(核心版)》中位列前4位,故被遴选为金属材料类“中国精品科技期刊”。
3.1 2015年F5000提名论文抽取
3.1.1 2015年《稀有金属》F5000提名论文抽取——基于定量方法
《稀有金属》主要报道稀有金属、贵金属、稀土金属及镍、钴等有色金属在材料研制、合金加工、选矿、冶炼、理化分析测试等方面的最新科研成果及应用,同时还报道超导材料、半导体材料、复合材料、陶瓷材料、纳米材料、磁性材料等新材料的研究开发及应用[9]。
2015年《稀有金属》上刊载的论文,主要可以划分到“材料科学”和“冶金、金属学”领域。在材料科学方面,2010年到2014年发表的论文,其被引次数分别需要不低于10次、8次、7次、4次和2次,才能成为F5000提名论文;而在冶金、金属学方面,2010年到2014年发表的论文,其被引次数分别需要不低于10次、8次、6次、4次和2次,方可成为F5000提名论文(见表1)。
表1 2010-2014年《稀有金属》所在领域1%高被引论文基准线
通过CSTPCD的计算,《稀有金属》一共有5篇论文满足条件,见表2。
3.1.2 2015年《稀有金属》F5000提名论文抽取——基于定性方法
经过《稀有金属》编委会推荐,最终有2篇论文进入F5000提名论文,见表3。
表2 《稀有金属》2015年的F5000提名论文列表(定量)
表3 《稀有金属》2015年的F5000提名论文列表(定性)
3.2 2015年F5000提名论文的内容完善
《稀有金属》编辑部联系F5000提名论文的作者补充中英文长摘要、其他合著作者的信息、论文图表及其题注、编委会评价或推荐意见等信息。
这里以邵宗科等人在《稀有金属》上2012年撰写的《TC4钛合金负角度零件超塑成形及性能研究》 为例(http://f5000.istic.ac.cn/f5000/paper?code=M 029201204001)。经过联系和沟通,邵宗科最终提交了中文长摘要和论文附图及题注(见图2)。
图2 《稀有金属》上某篇F5000提名论文的中文长摘要及其附图信息
在“编委会评价或推荐意见”方面,编辑部介绍了这篇论文的主要研究内容:“这篇F5000提名论文利用MARC软件对TC4负角度零件进行了超塑成形仿真,然后根据仿真结果进行了超塑成形实验,并对成形后零件行了壁厚分析、微观组织分力学性能分析。结果表明实际零件型腔底端壁厚分布与仿真结果趋势相同;零件最小壁厚在负角度过渡圆角处;负角度壁壁厚标准差为0.186 mm,说明此部位壁厚分布比较均匀;成形后材料的晶粒尺寸长大明显,而室温屈服强度、抗拉强度、延伸率从原始材料的 951 MPa,1045 MPa,13.9%下降至 853 MPa,955 MPa,10.8%,说明经过超塑成形后,材料由于晶粒长大而导致力学性能下降。”
此外,编辑部还强调了这项研究的价值:“作者在有限元分析的基础上研究了钛合金负角度零件超塑成形过程,利用修正的压力-时间曲线进行了超塑成形实验,并对成形结果进行了分析,为航空航天领域钛合金成形应用提供了一定的参考和借鉴。”
3.3 2015年部分F5000提名论文的再评审
在此基础上,中信所组织专家进一步进行了评审,主要是从提名论文信息完整性和内容创新性2个角度展开。
同样以上面《TC4钛合金负角度零件超塑成形及性能研究》为例,专家评审后,得出结论:论文表述清晰,论证严密,结果可信;同时内容新颖,具有创新性。该工作具有重要的理论和实际应用价值。
4 F5000项目的影响及效果
F5000项目自立项以来,就得到权威媒体[10]、大众网站、专业平台、学术社团等各类媒体的广泛关注。
此外,F5000项目也得到了期刊出版社和高校科研管理部门广泛报道,如:《中国管理科学》[11]、《软件学报》[12]、《计算机研究与发展》[13]、《自然资源学报》[14]等期刊出版单位,中国矿业大学[15]、武汉大学[16]、东北石油大学[17]、北京林业大学[18]等高校。
另外,中信所与国内外的信息出版商、信息服务商等展开合作,合力提升F5000的国内外影响力。在国内,F5000项目组与中国科学技术协会的《中国学术期刊文摘》开展合作,后者自2015年起,分学科刊登“F5000项目”入选论文。在国际上,F5000项目与汤森路透集团开展合作,后者提供F5000论文在Web of Science中被引情况,及其引用链接,未来将F5000收入Incites平台,成为国际学术评价工具。F5000项目与爱思唯尔开展合作,双方合作打造“F5000——Mendely中国顶尖学者俱乐部”;F5000与W iley出版集团合作,将F5000作者推荐为期刊编委和审稿人。
5 讨 论
在精品科技期刊的基础上,借鉴汤森路透ESI论文的计算方法,F5000提名论文的定量评价方法主要是基于被引频次。针对论文被引频次的诸多影响因素[19],以及零被引论文可能的潜在价值[20,21],本项目组将进一步研究单篇论文的定量评价方法,同时中信所与汤森路透联合设立的ISTICTHOMSON REUTERS科学计量学联合实验室将进一步资助研究人员深入研究“单篇学术论文创新力评价”[22]。
最终,F5000项目组力争将F5000论文打造为一种新型的高学术水平的论文库,同时打造F5000平台成为开展国际科技合作的有力工具。通过与国际主流数据出版商广泛合作,F5000将推动我国中文科技期刊走向国际,增进国外研究人员深入了解我国的优秀研究成果。
[1] 方锦清.一篇论文两个年度蝉联顶尖5000领跑者[EB/OL].[2016-06-23].http://blog.sciencenet.cn/blog-266190-861104.htm l.
[2] 武夷山.F5000论文是怎么评选的?[EB/OL].[2016-06-23].http://blog.sciencenet.cn/blog-1557-861184.htm l.
[3] 中国科学技术信息研究所.中国科技论文统计结果(2015年)之五:领跑者5000——中国精品科技期刊顶尖学术论文[R].北京:中国科学技术信息研究所,2015.
[4] 中国科学技术信息研究所.中国科技论文统计结果(2014年)之五:领跑者5000——中国精品科技期刊顶尖学术论文[R].北京:中国科学技术信息研究所,2014.
[5] 中国科学技术信息研究所.中国科技论文统计结果(2013年)之五:领跑者5000——中国精品科技期刊顶尖学术论文[R].北京:中国科学技术信息研究所,2013.
[6] 马峥,张玉华,潘云涛.“中国科技期刊综合评价总分”的定义与应用[J].编辑学报, 2015,27(6):519-521.
[7] 中国科学技术信息研究所.2015年版中国科技期刊引证报告(核心版)[M].北京:科学技术文献出版社,2015.
[8] 陈国剑.论学术论文中的资料性内容的要求[J].湖北民族学院学报(哲学社会科学版), 2005,23(6):134-136.
[9] 稀有金属.《稀有金属》简介[EB/OL].[2016-05-27].http://www.rmet-journal.com/WKD/WebPublication/index.aspx?m id=zxjs.
[10] 李大庆.中信所推出精品科技期刊顶尖学术论文平台[N].科技日报,2013-09-28.
[11] 中国管理科学.领跑5000——中国精品科技期顶尖学术论文获奖名单[EB/OL].[2016-05-27].http://www.zgglkx.com/CN/column/item110.shtm l.
[12] 软件学报.《软件学报》20篇文章入选“领跑者5000——中国精品期刊顶尖学术论文(F5000)”[EB/OL].[2016-05-27].http://www.jos.org.cn/ch/reader/view_news.aspx? id=20121212122859001.
[13] 计算机研究与发展.F5000中国精品科技期刊顶尖学术论文[EB/OL].[2016-05-27].http://crad.ict.ac.cn/CN/column/item126.shtm l.
[14] 自然资源学报.《自然资源学报》入选2012年 F5000项目的论文[EB/OL].[2016-05-27].http://www.jnr.ac.cn/CN/column/item93.shtm l.
[15] 中国矿业大学.我校张国华教授的论文被评为 F5000论文[EB/OL].[2016-05-27].http://www.usth.edu.cn/info/1085/2833.htm.
[16] 武汉大学.李建成院士一篇论文入选“领跑者5000—中国精品科技期刊顶尖学术论文平台”[EB/OL].[2016-05-27].http://main.sgg.whu.edu.cn/new s/2137.htm l.
[17] 东北石油大学.吕延防论文入选 F5000[EB/OL].[2016-05-27].http://news.nepu.edu.cn/news/138291987154717357.htm l.
[18] 北京林业大学.环境学院两篇论文入选“领跑者F5000”提名论文[EB/OL].[2016-05-27].http://hjxy.bjfu.edu.cn/xyxw/195773.htm.
[19] 高继平,潘云涛,武夷山.零被引论文的形成因素分析——以光谱学领域零被引论文的国家、机构和主题分布为例[J].科技导报, 2015,33(8):112-119.
[20] Liang L, Rousseau R, Zhong Z.Uncited papers, uncited authors and uncited topics:A case study in library and information science[J].Journal of Informetrics, 2015,9(1):50-58.
[21] Yamashita Y, Yoshinaga D.Influence of researchers’internationalmobilities on publication:a comparison of highly cited and uncited papers[J].Scientometrics, 2014,101(2):1475-1489.
[22] 中国科学技术信息研究所.2014 年 ISTIC-THOMSON REUTERS联合实验室开放基金申请指南[EB/OL].[2015-01-01].http://www.istic.ac.cn/EducationDetail/tabid/654/Default.aspx?ArticleID=96151.