近五年Altmetrics应用于学术评价的研究综述
2022-02-06贾玉文牛铭渝
贾玉文,牛铭渝
(辽宁师范大学 政府管理学院,辽宁 大连 116000)
随着国家需求和社会需要的发展,现阶段的学术评价已不仅仅是通过对学术研究成果的“量”和“级别”对学者、高校等做出简单的划分,更是结合了研究成果质量和影响的全息画像。社交媒体的兴起为学术评价带来了新的形式,各种社交媒体指标也慢慢被纳入学术评价体系中。Altmetrics是一种基于社交媒体活动的指标,于2010年由Jason Priem提出后迅速成为学术前沿和研究热点。Altmetrics的本质就是评价,同时Altmetrics的科学评价功能也是Altmetrics的价值归宿。文章采用系统文献综述法,对近五年国内外关于Altmetrics应用于学术评价的研究进行系统梳理,阐明Altmetrics应用于各个方面学术成果的评价,概述今后Altmetrics的发展方向。
1 Altmetrics应用于学术评价的研究系统文献检索方法
1.1 文献检索
本研究围绕Altmetrics及其在学术评价中的运用这一研究主题进行搜索,中文文献检索选取中国知网数据库,英文文献检索选择Web of Science。时间设置为2016~2021年,对所有文章中与Altmetrics和学术评价二者都有关的中英文文献资料层层过滤。研究问题是Altmetrics与学术评价的交叉领域,在知网上根据“Altmetrics”和“学术评价”进行检索,共检索到93条结果,由于在阅读文献时发现有遗漏的文献,因此扩大检索范围,将主题定为“Altmetrics”和“评价”再次进行检索,得到283条结果;同样地,在Web of Science中进行检索,得到了107条结果。对论文主题、摘要和内容分别筛选,确定了113篇中文文献和16篇英文文献。
1.2 中、英文研究文献的应用分布分析
根据对研究文献的深入分析,近五年Altmetrics在学术评价中的应用主要有期刊、论文、图书、学者、学科以及其他评价,应用数量分布如下:Altmetrics在论文评价中的数量最多(57篇),其次是期刊评价(22篇),随后依次是其他学术评价(17篇)、图书评价(16篇)、学者评价(9篇)和学科评价(8篇)。下文将分别对Altmetrics在这几种学术评价方面的应用进行综合论述。
2 Altmetrics在学术评价中的应用
2.1 学术期刊评价
学术期刊评价是学术评价的重要内容之一,大部分Altmetrics应用于学术期刊评价的研究是通过构建期刊评价指标体系来进行,如赵蓉英和王旭构建的中美国际OA期刊影响力评估和比较研究模型、张洋等构建的纯电子期刊评价体系以及王磊构建的期刊影响力评价模型。还有一些研究比较了国内外期刊Altmetrics指标的差异,如匡登辉指出我国科技期刊的国际显示度不高;刘意发现在重大事件发展早期,外国期刊的学术影响力和社会影响力之间的相关性要比中国期刊高。此外,还有Altmetrics指标和引文指标的相关性研究,如分别采用谷歌H5指数和Altmetrics指标的期刊综合得分的正相关系数为0.582;Mendeley阅读数和传统引文数的评价视角等不同,用于期刊评价研究时还无法单独使用。
2.2 学术论文评价
学术论文是科学研究过程中的一项最直接的产出形式。在相关性方面,同行评议是科学界对学术成果评价的一种基本方法,Bornmann和Haunschild认为同行评议和Altmetrics指标之间的关系没有同行评议和引用之间的关系强,而谭贝加则发现同行评议和引用呈弱相关、与Altmetrics不相关。从时间视角评价方面,刘运梅等基于首次他引速度、月被引峰值等四项指标构建了基于时间因素的论文影响力评价体系;欧桂燕等认为高Altmetrics指标论文网络关注度逐年上升,论文发表后短时间内能够获取各方面关注。此外,在学术不端应用方面,Bornmann和Haunschild对Yamamizu等人发表的一篇论文收集了Twitter数据,发现论文的六个主要人物都是假的。
2.3 学术图书评价
学术图书是重要的学术成果产出形式,Altmetrics在学术图书评价中的应用包括以Bookmetrix数据为基础的应用和多维指标融合评价。Bookmetrix是Springer和Altmetric合 作 开发的图书影响力平台,肖敖夏、杨思洛构建了基于Bookmetrix指标的学术图书因子综合评分体系;杨思洛等基于Bookmetrix研究了G20国家图书影响力指标的分布概况。在多维度评价分析方面,邱悦等构建了基于图书利用、关注和评论3个维度的评价体系,指明评论指标有利于筛选高质量图书;朱世琴等构建了基于引文指标、Altmetrics和图书评论指标的中文图书综合评价体系并证明该体系对不同学科图书都具有较好适应性。
2.4 学者和学科评价
学者是科学研究的主体,对学者进行评价有助于促进学术创新。在相关性研究方面,陈胜龙等指出Altmetrics指标和学者H5指数之间存在显著的相关性;Hoffmann等基于瑞士管理学学者分析了这些学者在ResearchGate上互动所产生的中心性度量与传统指标之间的关系。在分类和对比研究方面,杨柳等基于Altmetrics数据和被引数据对学者影响力进行二维评价,将学者划分为四种类型;王凯分析中美欧三个学术群体在作物学领域的学者论文,以引文数量、H指数、Altmetrics为指标进行比较。学科评价以学科作为评价单元,Altmetrics在学科评价中的应用一部分集中在交叉学科的研究上,如张琳等证明学科交叉水平与论文影响力数据呈正相关;石丽等指出论文的跨学科数量和Altmetrics指标具有负相关关系。其次,还有不同学科间的对比分析研究,如黄晓等论证了不同学科间Altmetrics指标存在相似性且医学有关学科Altmetrics指标覆盖率更高。
2.5 其他学术成果评价
随着Altmetrics研究的深入,学者们发现Altmetrics指标还有很多在其他学术成果评价中的应用,大体可分为:机构评价、项目评价和社交媒体评价。机构评价中,赵洁洁等提出了包括系统层、数据层、功能层和用户层4个层次的高校机构知识库评价框架,其中数据层含有Altmetrics指标;杨青等借助Altmetrics指标对武夷山生物研究领域8个机构的学术影响力进行了分析。项目评价中,肖其师等证明Altmetrics在前沿性、前瞻性的科技项目立项的社会影响力评价中具有可行性。社交媒体评价中,刘晓娟等对社交媒体中与学术成果有关的行为进行分析并构建了社交媒体事件模型。
3 结论
文章对近五年Altmetrics在学术评价中的应用进行了系统性文献综述。通过对研究文献的综合论述,发现学术论文是Altmetrics学术评价的重心,其次是学术期刊和学术图书,再次是学者评价和学科评价。这些研究还提出了Altmetrics进一步的发展方向,主要集中在:①国内Altmetrics工具和平台的探索和发展;②国内外Altmetrics指标的价值、覆盖率和数据质量问题;③Altmetrics计算影响力的正负面效果问题。