CiteScore与影响因子评价对比研究——基于2016年SCI收录的美国眼科学期刊

■盛丽娜

1)新乡医学院期刊社《眼科新进展》编辑部，河南省新乡市金穗大道601号 453003 2)河南省科技期刊研究中心，河南省新乡市金穗大道601号 453003

2016年12月8日，荷兰著名学术出版集团Elsevier推出了一个新的期刊评价指标——CiteScore，该指标一经问世，立即引起学术界的广泛关注[1-2]。影响因子是《期刊引证报告》(JCR)的核心评价指标[3]，也是现今使用最广泛、认可度最高的期刊评价指标之一。CiteScore使用了类似影响因子的计算方法[4]，但又略有不同:(1)CiteScore的引证时间窗口为3年，而影响因子的引证时间窗口为2年；(2)计算CiteScore值时，分母使用了所有文献量，而计算影响因子时，分母为可被引文献量(研究论文和综述论文[5])；(3)CiteScore是基于Scopus数据库的指标，而影响因子是基于Web of Science的指标。由于Scopus数据库收录的期刊数量远远大于JCR[6]，这就为一部分没有进入JCR但被Scopus数据库收录的期刊提供了一种类似影响因子的期刊评价指标[7]。此外，Scopus数据库内所有数据均为免费获取，故较多学者对其发展前景持乐观态度[8-9]。

CiteScore是新提出的指标，国内外相关研究都很少。国内叶艳等[10]基于引文分析，通过知识扩散因子和他引率2个期刊影响力评价指标，比较经济管理领域期刊的影响因子和CiteScore的优劣，结果表明该领域期刊的影响因子排名要比CiteScore排名更具有说服力；刘雪立等[11]以JCR收录的380种期刊为研究对象，分析得出影响因子与CiteScore高度相关，且多数多学科和综合性医学期刊的影响因子大于CiteScore；肖仙桃等[12]对2016年版CiteScore 及2015年版JCR 收录的期刊进行了对比，并分析了中国科技期刊在2个评价体系中的表现。国外da Silva等[6]分析了期刊影响因子和CiteScore的异同；Poljak等[8]认为CiteScore是很好的期刊评价指标。目前，国内外学者公认的期刊评价“金标准”为同行评议[13-14]，认为期刊文献计量学指标与同行评议结果的一致程度可以反映某一指标对期刊的评价效力。笔者查阅文献后发现，国内外均未有研究对比影响因子、CiteScore与同行评议结果之间的异同。因此，本研究以SCI收录的美国眼科学期刊为例，以问卷调查结果[15]为基础，分析CiteScore与影响因子对期刊评价的异同。为了进一步对比分析，本研究同时计算了JCR收录期刊的3年引证时间窗口的影响因子(IF3)，并且按照CiteScore的计算方式，获得了以所有文献数量为分母的3年引证时间窗口的影响因子(IF3T)。

1 数据获取与方法

1.1 研究对象

在对SCI 收录的30种美国眼科学期刊进行问卷调查的基础上(问卷调查方法及评分细则见文献[15])，选择其中同时被2016年版JCR收录且在Scopus数据库内可以查到CiteScore值的期刊为研究对象。

1.2 数据获取

(1) 进入Web of Science数据库，按学科检索2016年眼科学(Ophthalmology)SCI收录的期刊，记录各期刊的影响因子(引证时间窗口为2年，以下简称为“IF2”)。(2)按照文献[15]的方法计算各期刊的IF3和IF3T，具体计算公式为

(2)

式中：IIF3和IIF3T分别为不同计算方法下引证时间窗口为3年的期刊影响因子；y为统计当年；Cy-1为某期刊第y-1年的文献在第y年的被引频次，以此类推；DAR(y-1)为某期刊第y-1年的研究论文和综述论文的数量，以此类推；Dy-1为某期刊第y-1年的所有文献数量，其他以此类推。(3)进入Scopus数据库，查找各期刊的CiteScore。

1.3 统计学处理

采用SPSS 23.0软件进行统计学分析，CiteScore值与影响因子的比较采用非参数检验中的Wilcoxon检验，各指标间的相关性使用Pearson相关性分析。

2 结果

2.1 一般资料

问卷调查的30种SCI收录的美国眼科学期刊均同时被2016年版JCR收录，其中29种可在Scopus数据库中获得CiteScore值，将其选为本研究的研究对象，各期刊的主要指标数值见表1。由表1可知，各期刊的IF3均大于IF3T，这是由其计算公式决定的，IF3和IF3T的分子相同，但由于各期刊均有研究论文和综述论文之外的文献，计算时IF3T的分母均大于IF3的分母，故IF3均大于IF3T。CiteScore与IF2相比，20种期刊CiteScore值小于IF2，占68.97%，9种期刊的CiteScore值大于IF2，占31.03%，Wilcoxon检验结果显示，Z=-2.973，P=0.003，说明样本期刊的CiteScore值小于IF2，差异有统计学意义。CiteScore与IF3相比，21种期刊CiteScore值小于IF3，占72.41%，8种期刊的CiteScore值大于IF3，占27.59%，Wilcoxon检验结果显示，Z=-2.908，P=0.004，说明样本期刊的CiteScore值小于IF3，差异有统计学意义。CiteScore与IF3T相比，4种期刊的CiteScore值小于IF3T，分别为VisualNeuroscience、JournalofCataractandRefractiveSurgery、JournalofVision和OphthalmicSurgeryLasers&ImagingRetina，25种期刊的CiteScore值大于IF3T，占86.21%，Wilcoxon检验结果显示，Z=-3.341，P=0.001，说明样本期刊的CiteScore值大于IF3T，差异有统计学意义。

2.2 统计学特征对比

各文献计量学指标的统计学特征见表2，其中峰度描述的是数据分布形态陡缓程度，偏度描述的是数据分布对称性。由表2可知，CiteScore的均值和中位数均小于IF2和IF3，但大于IF3T，说明样本期刊的CiteScore值较IF2和IF3小，但较IF3T大。CiteScore的偏度和峰度也均较IF2、IF3和IF3T小，说明CiteScore较其他各指标更接近于正态分布；CiteScore的最小最大值比和中位数最大值比均较IF2、IF3大，说明CiteScore的离散度较IF2和IF3小，数据分布相对更集中。另外，IF3T的偏度和峰度较IF2和IF3小，最小最大值比和中位数最大值比均较IF2和IF3大，说明IF3T改善了影响因子的分布偏度和离散程度。

2.3 相关性分析

各指标的相关性分析结果见表3，可以看出，IF2、IF3和IF3T间均呈显著正相关，相关系数的平均值为0.917(均为P<0.001)，说明各影响因子对期刊的评价结果一致；各影响因子与CiteScore均呈显著正相关，相关系数的平均值为0.899(其范围为0.882～0.917)，说明CiteScore与各影响因子对期刊的评价结果一致；各影响因子、CiteScore与问卷调查得分均呈显著正相关，相关系数的平均值为0.673(其范围为0.565～0.727)，说明各影响因子、CiteScore对期刊评价的效力均较高。与问卷调查得分的相关系数由大到小分别为CiteScore、IF2和IF3、IF3T，说明美国眼科学期刊的CiteScore评价效力最高，但CiteScore、IF2和IF3与问卷调查的相关系数差异较小，故可以认为三者评价效力相当；与问卷调查相关系数最低的是IF3T。本研究结果与文献[10]有差异，可能与不同学科间指标评价存在差异性及使用的评价标准不同有关，本研究采用同行评议的标准进行评价，可信度更高。

表1 29种眼科学期刊CiteScore及各影响因子情况

表2 各指标的统计学特征对比

表3 影响因子、CiteScore、问卷调查得分的相关性系数

注：#为P<0.01，**为P<0.001。

3 结论

3.1 美国眼科学期刊的CiteScore较IF2、IF3小，但较IF3T大

本研究结果显示，29种SCI收录的美国眼科学期刊中，20种期刊的CiteScore值小于IF2，21种期刊的CiteScore值小于IF3，Wilcoxon检验结果显示，CiteScore均较IF2、IF3小，且差异均有统计学意义(均为P<0.05)。但25种期刊的CiteScore值大于IF3T，Wilcoxon检验结果显示，CiteScore较IF3T大，差异也具有统计学意义(均为P<0.05)。整体来看，CiteScore较IF2、IF3小，但较IF3T大。

3.2 CiteScore更接近于正态分布，离散度较小

由CiteScore与各影响因子的统计学特征分析结果可以看出：CiteScore的偏度和峰度均较IF2、IF3和IF3T小，说明CiteScore较各影响因子更接近于正态分布；CiteScore的最小最大值比和中位数最大值比均较IF2、IF3大，说明CiteScore的离散度较IF2和IF3小，数据分布相对更集中。

3.3 CiteScore与各影响因子对期刊的评价结果一致

Pearson相关性分析结果表明，CiteScore与IF2、IF3和IF3T间均呈显著正相关，相关系数的平均值为0.899，说明CiteScore与各影响因子对期刊的评价结果较为一致。

3.4 CiteScore、IF2、IF3均与期刊问卷调查的排序结果一致

Pearson相关性分析结果表明，CiteScore、IF2、IF3与问卷调查得分的相关系数分别为0.727、0.700和0.700，可见CiteScore与问卷调查排序结果的一致性最高，但与IF2、IF3的相关系数相差不大，故认为CiteScore与IF2、IF3的评价效力类似，均与问卷调查期刊排序结果一致。

3.5 CiteScore的计算方法不适用于SCI收录的眼科学期刊

使用Scopus数据库中CiteScore的计算方法，在Web of Science中获得的IF3T，其与问卷调查得分的相关系数为0.565，远小于IF2、IF3与问卷调查得分的相关系数，也小于CiteScore与问卷调查得分的相关系数，说明Scopus数据库中CiteScore的计算方法在JCR中并不适用，这应该与眼科学非可被引文献量较多有关[15]。

4 讨论

本研究以SCI收录美国眼科学期刊为例，使用同行评议的金标准对比分析了Scopus数据库新推出的期刊评价指标CiteScore与现行常用的JCR影响因子，结果表明，眼科学期刊的CiteScore和IF2、IF3、IF3T均对期刊具有类似的评价效力，但相对来说，CiteScore的评价效力与IF2和IF3较为一致，且三者均高于IF3T。简言之，美国眼科学期刊的CiteScore评价效力与影响因子类似，但按照CiteScore的计算方法获得的影响因子在JCR中并不适用。

本研究仅以美国眼科学期刊为研究对象，由于不同学科间的被引高峰时间并不一致，其计算影响因子的最佳引证时间窗口会有所差异，故其他学科CiteScore与IF2的关系仍有待研究。此外，不同学科间非可被引文献量及其产生的被引频次差异很大，按照CiteScore的计算公式得到的JCR中期刊的IF3T的实用价值仍有待研究。由于Scopus数据库收录期刊量远比JCR大，且期刊计量指标可以免费获得，故对其推出的CiteScore进行研究具有较大意义，但该指标推出时间尚短，对其全方位的研究仍有待深入。

[1] 胡志刚. CiteScore会成为Scopus的杀手锏吗？[EB/OL]. (2016-12-16)[2017-08-19]. http://blog.sciencenet.cn/blog-1792012-1021080.html.

[2] Enago. 厉害了我的指标,又一个评价指标CiteScore [EB/OL]. (2017-04-12) [2017-08-19]. http://blog.sciencenet.cn/home.php?mod=space&uid=681387&do=blog&id=1048238&from=space.

[3] Garfield E. The history and meaning of the journal impact factor[J].JournaloftheAmericanMedicalAssociation,2006,295(1):90-93.

[4] Elseview. Journal Metrics[EB/OL]. [2017-08-19].https://journalmetrics.scopus.com.

[5] 刘雪立,盖双双,张诗乐,等. “非可被引文献”的引证特征及其对科技期刊影响因子的贡献[J]. 编辑学报,2015,27(5):495-499.

[6] da Silva J A T,Memon A R. CiteScore:a cite for sore eyes,or a valuable,transparent metric?[J].Scientometrics,2017,111(1):553-556.

[7] 中国大学教育. 新的期刊评价体系——CiteScore能否取代影响因子？[EB/OL].(2016-12-25)[2017-08-18]. http://www.sohu.com/a/122511398_479698.

[8] Poljak M. Coverage of Acta Dermatovenerologica Alpina,Pannonica et Adriatica in Elsevier′s CiteScore index:a new tool for measuring the citation impact of academic journals[J].ActaDermatovenerologicaAlpinaPannonicaetAdriatica,2017,26(1):1-2.

[9] 科学网. 为什么我们要用付费的JCR,而不用免费的CiteScore？[EB/OL].(2017-06-20)[2017-08-19]. http://www.sohu.com/a/150558584_390540.

[10] 叶艳,张李义. 基于CiteScore指数与影响因子的期刊评价研究——以经济管理领域期刊为例[J]. 情报科学,2017,35(7):126-131.

[11] 刘雪立,任胜利,程维红,等. 不同学科期刊CiteScore与影响因子的比较研究[J]. 中国科技期刊研究,2017,28(9):837-841.

[12] 肖仙桃,曲建升,王玏,等. CiteScore与JCR期刊评估指标的比较分析[J]. 中国科技期刊研究,2017,28(10):954-958.

[13] Harnad S. Validating research performance metrics against peer rankings[J].EthicsinScienceandEnvironmentalPolitics,2008，8(1):103-107.

[14] 贺颖,邱均平. 同行评议专家遴选的科学计量方法与实证研究[J]. 图书情报工作,2012,56(6):33-37.

[15] 刘雪立,盖双双,周晶. 基于文献类型矫正的影响因子及其实证研究[J]. 中国科技期刊研究,2016,27(3):309-315.