新疆科技报告质量管理实践与评价体系研究

孙文婷，吴楠贞，刘晓宇

2014 年新疆科技报告制度建设工作启动，2016 年5 月出台了《新疆维吾尔自治区实施科技报告制度建设工作方案》（新政办发〔2016〕61 号，以下简称《工作方案》）。同年，新疆自主开发投入运行了科技报告服务系统，实现与本地科技计划管理公共服务平台相衔接。通过全区范围开展培训，指导科研管理人员和项目负责人完成自治区重点研发、重大专项、科技支撑三类科技计划项目的科技报告回溯工作。按照国家科技报告制度建设的总体安排，目前新疆已建成涵盖自治区科技口各类科技计划的科技报告运行体系，形成科学、规范、高效的科技报告管理模式。截至2019 年6 月，新疆科技报告服务系统共收录科技报告2 000 余篇，数据同步上传国家科技报告服务系统。根据《工作方案》要求，到2020 年新疆科技报告资源应得到深度开发和广泛、有效应用，能够为全区科技创新和政府决策提供重要的基础信息支撑，并形成良好的科技报告制度品牌效应。但与其他省市相同，新疆科技报告也存在质量参差不齐，技术研究内容反映不全面不准确，未按标准格式撰写等问题。近年来，针对如何加强科技报告质量管理[1-3]，建立有效的质量评价体系[4-5]国内学者进行了研究，一是将PDCA循环、三阶段质量控制理论、三全质量控制理论等引入科技报告质量管理；二是利用文献调查法、层次分析法、模糊综合评价等模型构建了我国科技报告质量评价指标体系。

1 新疆科技报告质量总体情况分析

目前，新疆提交科技报告的类型为最终报告，审核实行二审制，初审员侧重于格式审查，内容审查依靠项目负责人把关。当研究部分内容过少时，审核人员做退回修改处理。所有报告复审员审核确认后方可提交共享服务系统。2015 年9 月至2019年4 月，新疆科技报告系统共收录科技报告1 831 篇。本文将先基于采集数据，分析新疆科技报告质量总体情况。

1.1 科技报告篇幅及返工情况

全疆科技报告篇幅总体情况如图1 所示：

图1 全疆科技报告篇幅总体情况

在已收录的科技报告中，以20～30 页最多占到总数的31.4%，其次10～20 页占20.6%，30～40 页占17.9%，而100 页以上的报告仅为4.8%。在初审时我们发现，若以小于20 页为小型报告、20～50 页为中型、大于50 页为大型的标准划分，通常20 页以上的科技报告结构较为完整，包含引言、主体、结论部分，基本满足层次清晰、文字顺畅的要求，而50 页以上的科技报告则科研过程描述更加完整清晰，具有更强的可读性和参考价值。新疆大中小型科技报告占比分别为20%、59%、21%。科技报告在初审时反馈意见有优秀、合格、需要做格式修改、需要做结构内容修改、退回五类。其中，大型科技报告初审为优秀及合格的比例最多，而小型科技报告则需对结构内容进行多次退回修改。

样本中返工报告共1 032 篇，占56.4%。其中需要单纯格式修改122 篇占11.8%，需要做结构及内容修改910 篇占88.2%。通常因常规排版、字体字号、目次等较简单的格式问题，初审员在保证效率的前提下均会自行修改完成。但科技报告多因沿袭原有验收报告形式，引言内容缺失、正文结构不清晰等内容不符合要求的原因而退回修改。

1.2 南疆四地州科技报告质量情况

表1 四地大中小型科技报告情况一览表

表1 所示，南疆四地州指新疆喀什、和田、克州、阿克苏四个地区，也是少数民族较为集中的地区。样本中，四地州科技报告共102 篇，占总量的5.6%，多为医院、大学及研究院所提交。而小型科技报告数量占比达到66%，大型科技报告数量只占3%。

在南疆四地州中，喀什、阿克苏两地高校、科研院所较为集中，提交科技报告质量相对较好，这也与所在地区科技创新发展水平保持一致。

1.3 中小企业的科技报告质量情况

图2 所示，按照国家中小企业分类标准，挑选出这部分单位提交的科技报告加以对比，可以看出与科研院所、医院、高校产出同类型报告总量相比，新疆中小企业提交的科技报告数量偏少，质量也较低，其中大型报告占0.62%、中型2.3%、小型8.4%。

图2 不同性质单位与提交科技报告篇幅占比情况

由于中小企业内部对科研管理宽松散，项目负责人对科技报告重视度不够，未将科研管理与科技报告管理相结合，导致报告中有价值的内容较少。审核员往往反复退回说明修改情况，报告质量仍然得不到明显提高。而技术要点是否完整，论据是否充分，是否对本专业、同行具有参考等因素，理应由项目承担单位负责把关，但这点在科研能力偏弱的中小企业中较难做到。

1.4 问题分析

目前，新疆对科技报告的审核加工依然停留在格式修改和定性评价阶段，科技报告的完整性、准确性及后续产生的附加经济社会效益没有量化评价。科技报告质量管理主要存在南疆地区部分科研人员对报告认识理解不到位和中小企业缺乏科研管理规范化意识没有将科技报告与科研管理相融合，造成的技术研究内容不完整，研究数据或结果分析缺失等问题。

2 新疆科技报告质量评价体系构建

除上述加强新疆科技报告质量管理的措施外，构建新疆科技报告质量评价体系，对科技报告开展定量评价，是提高报告质量最为有效的方式。在结合已有研究成果的基础上，选择符合自身发展的指标构建新疆科技报告质量评价体系也是目前新疆科技报告工作探索的主要方向。本文通过专家填写AHP 调查表，建立新疆科技报告验收阶段层次结构模型，其中准则层一级指标3 个，方案层二级指标9 个，如图3 所示：

图3 新疆科技报告验收阶段质量评价指标结构

使用 Saaty 标度表构成判断矩阵。根据专家意见及判断矩阵标度（1～9 级），比较两两因素的重要性。其中：1 级具有同等重要性；3 级一个比另一个稍重要；5 级一个比另一个明显重要；7 级一个比另一个强烈重要；9 级一个比另一个极端重要；2、4、6、8 为两相邻判断的中间值。以准则层相对于目标层为例：编制质量B1 比效益质量B3 稍重要，故用B1B3=2，采用和积法且目标层权重值设置为1，计算准则层权重及随机一致性比率CR=CI/RI（CI=λmax-n/(n-1)，RI=0.58），计算结果如表2 所示。

表2 准则层相对权重

根据准则层权重值，采用同样的方法继续对方案层的三个矩阵进行计算，最后计算验收阶段新疆科技报告质量指标总权重，如表3 所示：

表3 验收阶段新疆科技报告质量评价体系

该评价体系可在科技计划项目验收阶段对科技报告质量情况进行打分，为后期验收报告与科技报告同步验收，提请专家评议奠定基础。鉴于科技报告在呈交、审核、利用阶段评价主体不同，新疆科技报告质量评价体系还将进一步完善。

3 新疆科技报告质量管理对策

为了打响新疆科技报告品牌，使其在科技创新、决策参考过程中发挥积极的作用，新疆科技报告质量管理不断总结改进，主要措施有如下几点：

1）强化监督管理。先后两次对新疆科技报告服务系统进行升级，并将其嵌入到科技管理公共服务平台中，实现从指南查看、项目申报、项目立项、年度报告、科技报告、项目验收全流程网上提交和管理。项目签订合同时，与承担单位约定科技报告内容，要求重视科学数据的采集，科研过程的记录和科研成果评价信息的收集，提高承担单位对科技报告的质量责任意识。新疆科技发展战略研究院作为审核服务机构严把审核关，对不符合质量标准的报告及时与作者联系反馈意见。建立科技报告服务QQ 群3 个，将相关标准、学习手册上传至群文件，在线答疑并引导自学。

2）加强审核把关。（1）为增强审核能力，审核人员定期开展内部学习交流，谈经验找不足，相互学习借鉴提高审核水平。（2）针对部分单位，尤其是中小企业报告内容空泛敷衍了事的问题，审核时要求正文部分不得少于5 页。结合地方科技财政经费拨款情况，拨款资金在20 万～50 万的项目，原则上应提交大中型科技报告。拨款50 万元以上的项目，原则上应提交大型科技报告。同时，要求项目承担单位严格按照审核流程做好前端控制，在科技报告提交前由项目负责人、单位科研部门开展自评估。对科技报告存在抄袭、数据弄虚作假等学术不端行为的，项目负责人和承担单位会纳入科研信用记录并依据相关规定予以惩罚。（3）开展针对性培训。近两年，在总结经验的基础上我们找准目标群体精准发力，在南北疆少数民族较多的地区开展专项培训16 次，对地州市科技行政管理人员、项目承担单位人员、项目负责人进行系统培训和现场指导。同时，编译了维文、哈文科技报告工作手册，派出双语老师在培训中进行辅导，有效提高了少数民族作者撰写科技报告的能力。

4 结语

我国科技报告制度推广施行多年来周知度不断扩大，对增强国家科技创新能力起到积极地促进作用，未来科技报告价值的体现将依赖于其质量的不断提高，而建立科技报告质量评价体系是极为有效管理手段。因此，我们在不断总结和改进新疆科技报告质量管理的过程中，建议科技项目管理部门采纳已构建的新疆科技报告质量评价体系，在进行项目结题时将验收报告与科技报告同步量化评价，评定科技报告等级，对优秀科技报告的项目负责人在项目申报、职称评定时给予倾斜，以加大对科技报告的重视程度，提高科研项目管理规范化水平。