APP下载

我国医学情报研究机构科研能力评估指标体系构建及其应用

2018-03-22,,,

中华医学图书情报杂志 2018年6期
关键词:情报研究情报机构指标体系

,,, ,

我国科研活动的规模越来越大,科研支出也越来越多,对科研活动进行有效监督和管理也就显得愈发重要。科研评估作为最直接有效的管理手段之一,受到各国政府及科技管理部门的高度关注[1]。我国医学科研机构评估起步于20世纪80年代[2],中华医学会[3]和中国医科大学[4]先后于1991年、1998年对全国范围医学科研机构进行评估。进入21世纪,中国医学科学院医学信息研究所[5]、上海市医学情报研究所[6]和山东省医药卫生科技信息研究所[7]都曾对国内医学情报研究机构发表的学术论文进行了分析和研究。然而,我国对医学情报研究机构的评估,大都是从论文发文量或文章被引量等单一角度进行评价,不够全面,且并未突出医学情报研究机构的特色。本文对我国医学情报研究机构科研能力评估指标体系的构建进行了探索,以了解我国医学情报研究机构的科研能力,为健全医学情报科研评估提供参考。

1 理论和方法

1.1 指标构建的理论基础

结果链是一种基于结果的管理(Result-based management)工具,分为投入、活动、产出、结果和长期影响5个环节。投入(Inputs)指用于支撑活动所需的资金、人力以及其他资源;活动(Activities)指为了将投入转化为特定产出而采取的行动和开展的工作;产出(Outputs)指项目实施方可以控制的效果,一般体现为供方的变化;结果(Outcomes)与产出不同,特别关注受益者和利益相关方的变化,且一般不能为项目实施方所控制;长期影响(Long-term impact)指多因素驱动下的体系变化情况。“卫生系统宏观模型”应用系统论对卫生系统的运作规律进行描述,其基本原理是卫生系统内部依据“结构-过程-结果”规律运作,这种影响和制约形成了卫生系统内部相对动态平衡的关系。本文基于结果链,梳理了科研能力评估体系的一级指标,并参考卫生系统宏观模型将一级指标进一步细化为二级指标。

1.2 指标体系构建方法

检索中国知网、维普中文生物医学期刊库、万方数据知识服务平台等国内文献数据库中关于“医学情报研究机构科研能力评价”的中文文献,整理分类汇总,形成最初的备选指标。检索策略为:主题=(医学 OR 生物医学)AND (情报研究机构 OR 情报研究所 OR 情报研究中心 OR 情报所 OR 情报机构 OR 情报中心 OR 信息中心 OR 信息研究所 OR 信息研究机构)AND科研。检索日期为2017年3月20日鉴于关于“医学情报研究机构科研能力评价”的文献较少,将搜索范围扩大至医学科研机构的科研能力评价,然后根据医学情报研究机构的特点补充备选指标。在指标体系构建中,本文主要采用基于结果链逻辑框架、卫生系统宏观模型等理论,结合文献检索和专家会议确定指标体系。指标体系的权重主要由各位专家讨论后对每个评价指标赋予权重,计算各个指标权重的平均值和方差,再由各位专家对各项指标进行调整和反馈,最终确定各项指标的权重。

1.3 质量控制方法

调查发现,全国共有28家省市级医学情报机构,将这28家机构作为调研对象,发放调查问卷,最终回收有效问卷11份。在调查正式开展前进行调查表联络人员培训及试调研。调查前,设置合理的调查标准和流程;调查中,在课题组调查表联络人员和样本地区负责人指导下,样本机构相关部门人员共同完成调查表的填写完毕后,调查数据由样本机构管理人员审核予以确认;我们对回收问卷进行逻辑校错和手工校对。对于复查核对中发现的特异值和缺失数据由联系各样本地区负责人给与核查和补充。

2 结果

2.1 医学情报研究机构科研能力评价指标体系

2.1.1 指标体系说明

本文基于结果链逻辑框架、卫生系统宏观模型等理论,结合文献检索和专家会议确定的最终指标体系及指标权重见表1。

其中,专业技术岗位人员中具有硕博士学位的比例=(博士学历人员+硕士学历人员)/在职专业技术人员数;专业技术人员中具有高级职称人员比例=高级职称人员/在职专技人员数;近三年获得外部资助科研经费总额(非财政)是指获得外部资助科研经费总额;近三年科研立项总数的得分=国际级×5+国家级级×4+省部级级×3+厅局级级×2+其他×1):企业委托项目归其他,系数为1;正式受聘担任外单位兼职学术顾问或研究人员数+正式聘任外单位兼职学术顾问或研究人员数=单位目前正式受聘担任高校和研究机构学术职务者;

表1 医学情报研究机构科研能力评价指标体系及指标权重

近三年公开出版著作数=近三年公开出版主编著作+参编著作;调查开展年度完成情报服务业务数=立项查新+成果查新+引文检索+职称引文查证+定题检索+其他+知识产权服务+其他情报服务;近三年获得科研成果奖项数的得分=国家级×3+省部级×2+厅局级×1,协会、学会等的奖励算作其他类型,等同于厅局级奖励,系数为1;问卷中无“近三年论文平均被引次数”指标全部赋值为1;问卷中“近三年高被引论文数量(>数值基线)”全部赋值为1;科研人员人均每年承担科研项目数=近三年获得各级各类科研项目/(在职专业技术人员数×3);科研人员人均每年公开发表论文数得分=近三年公开发表学术论文数/(在职专业技术人员数×3);情报服务人员人均每年完成情报服务项目数=调查开展年度完成情报服务业务数/在职专业技术人员数;因无法区分省级及以上的标准,“省级及以上人才计划的入选人数”以问卷中单位人员入选厅局级及以上人才计划情况为准;问卷中的市域范围会议次数不纳入近三年来单位主办的学术会议(含研讨会/论坛/培训班等),该项的得分按“国际级×3+国家级×2+省部级×1”计算;关于“近三年来单位在学术会议上作报告人次数其得分=国际级×3+国家级×2+省部级×1”,由于问卷中没有区分国家级和省部级,因此将全国范围会议按国家级会议计算,系数为2;问卷中无“百度可检索报道数(精确匹配)”指标者赋值为1。

2.1.2 指标体系分数计算方法

本文构建的指标评价体系中,指标具有不同的量纲和数量级,性质差别很大。如果直接采用原始指标值进行分析,就会增强数值较高的指标在综合分析中的作用,明显削弱数值水平较低指标的作用。为了保证结果的可靠性,需要对原始指标数据进行标准化处理,将标准化之后的数据与指标体系结合,对医学情报机构的科研能力进行评估。

本文主要采用min-max标准化(Min-max normalization),也称为0-1标准化、线性函数归一化、离差标准化。通过对原始数据进行线性变换,使结果落到[0,1]区间,转换函数如下:

其中max为样本数据的最大值,min为样本数据的最小值。

2.2 医学情报研究机构科研能力评价指标体系实际应用结果分析

2.2.1 我国11家省/直辖市医学情报机构的科研能力评价总分

将标准化之后的数据与指标体系结合,对本次接受调研的我国11家省/直辖市医学情报机构的科研能力进行评估的结果见表2。

从不同省市机构评分来看,上海市医学科学技术情报机构的科研能力评分最高,四项一级指标中投入的得分最低。

表2 11家医学情报研究机构科研能力评估结果

2.2.2 科研投入分析

本次调研的11家机构获得的平均科研经费为464.29万元,其中获得的外部资助经费平均为363.55万元,占34.85%。本次调研的11家机构购买的数据库以中文数据库为主,仅有5家机构(上海市医学科学技术情报研究所、山东省医药卫生科技信息研究所、四川省医学情报研究所、甘肃省医学情报研究所、中国医科大学图书馆)购买了外文数据库。综合性全文库是机构的首选,以万方数据知识服务平台、中国知网和维普中文生物医学期刊库为代表。

3 讨论

3.1 医学情报研究机构评价指标体系构建应具有一定的创新性和科学性

对医学情报研究机构的科研能力进行评估时,必须充分认识到医学情报研究机构的特殊功能和定位,并体现该类研究机构的发展需求和要求。本文所构建的指标体系在评估维度上全面兼顾医学情报研究机构的科研工作的各个环节,在情报服务、政府决策影响力等指标上充分体现了医学情报研究机构的特色,使该指标体系突出反映医学情报研究机构的发展重点,具有一定的创新性。相较于传统的从论文发文量或文章被引量等单一角度对科研能力进行评价,本文构建的指标体系实现了投入、过程、产出和影响力4个方面的综合评估,指标涉及科研项目数量、级别、领域、经费、资源及科研管理等科研业务整体情况,论文、专著、批示、转化及奖励等科研产出情况,专家、会议、学术交流及宣传等科研影响力情况,涉及内容全面。

此外,本文以量化指标进行评估,将标准化之后的数据与指标体系结合,使不同机构评价结果具有一定的可比性和可行性,弥补了我国当前医学情报研究机构科研评估体系的缺失,可对全国不同研究机构进行横向比较,也为构建其他类型研究机构科研能力评估指标体系提供借鉴意义。通过建立全国性医学情报机构的科研能力评估指标体系,对各个机构的科研能力进行量化,建立行业竞争机制,有利于各个机构及时发现自身存在的问题,实现机构在投入、活动、产出和影响等整个科研过程的全面发展,进而促进行业的整体发展。

3.2 基于自身特点及优势借鉴其他机构有效经验

本文通过构建评价指标体系,对全国11所医学情报机构从投入、活动、产出和影响等4个方面对其发展情况和科研能力进行评价发现,各机构发展悬殊,上海在各个方面领先。一方面,这与机构的战略目标和定位有一定的关系;另一方面,可以看出上海医学情报机构目前的发展模式是比较成功的。我国医学情报研究机构一度社会需求较高,发展良好;一度面临困难挑战,发展停滞,特别是在经济体制改革过程中,部分医学情报研究机构相继关闭、暂停又重启,并入其他机构或转型发展。当前正值我国卫生事业改革发展关键时期,不同机构间应加强沟通与学习,认清自身不足之处,汲取其他机构的有效经验,避免发展弯路,使各个机构及整个行业都能不断进步。

3.3 科研投入有待提升

通过本次调研发现,11所医学情报机构的科研能力评分中均为“投入”最低。尤其是在信息资源投入方面,目前医学情报机构的科研信息资源仍以三大全文数据库(万方、知网、维普)和中国生物医学文献数据库为主,大部分机构外文数据库资源严重匮乏,远远不能满足医学情报工作的服务需求,制约了文献检索、情报服务工作向高、深层面的发展。因此,充实信息资源建设是其中一项重要的工作。购买科技文献数据库的年费较为昂贵,对于单个机构是相当大的一笔费用,可以通过与高校图书馆、公共图书馆形成战略合作解决这一问题。一般来讲,图书馆的科研信息资源是最丰富、最全面的。在平等、互利、互惠的前提下,加强与图书馆的合作,共享科研信息资源,共享资源费用可由图书馆和医学情报机构共同承担。对机构而言既可满足对信息资源的需求,又能加强与高校及其他机构之间的合作。

4 结语

本文基于结果链和卫生系统宏观模型,通过文献综述和专家咨询构建了我国医学情报研究机构科研能力评估指标体系,并对我国11家省市级医学情况研究机构的科研能力进行调查和评价。结果显示,我国医学情报研究机构发展不均衡,科研投入有待加强。各地医学情报机构的发展应基于自身特点及优势,借鉴其他机构有效经验,最大程度地挖掘自身潜力,激发科研活力,探索出一条适合自己的发展之路。

猜你喜欢

情报研究情报机构指标体系
2022城市商业魅力指标体系
体育信息情报研究发展趋势探析
面向新阶段高质量发展的图书情报研究(卷首语)
网络空间攻防对联合作战体系支援度评估指标体系构建
层次分析法在生态系统健康评价指标体系中的应用
供给侧改革指标体系初探
美国兰德公司在冷战期间的情报研究工作综述
浅谈基层科技情报机构现状及发展对策的思考
情报研究在创新创业中的作用探讨
西方预测伊朗18个月内拥有核武