浅析地方标准实施效果评估工作现状、建议和方法步骤

摘 要：标准的质量和水平是高质量发展的重要支撑和保障。本文在梳理标准实施效果评估工作现状的基础上，分析了地方标准实施效果评估工作中存在的问题，并针对问题从宏观管理和具体工作两个维度提出了建议和对策，同时总结了对标准实施效果评估工作的经验，给出了地方标准实施效果评估工作的方法步骤，并阐述了方法步骤中每个环节的主要做法和注意事项，希望能对地方标准实施效果评估工作提供一种思路方法，指引地方标准实施效果评估工作规范、科学地开展。

关键词：标准实施效果，评价指标体系，对策和建议，方法步骤

DOI编码：10.3969/j.issn.1002-5944.2023.22.002

0 引 言

习近平总书记指出：“标准决定质量，有什么样的标准就有什么样的质量，只有高标准才有高质量。”因此，标准的质量和水平是高质量发展的重要支撑和保障，其在提高产品质量、服务水平和促进技术提升等方面发挥了越来越重要的作用，而标准实施效果评估则是衡量标准质量和水平的重要措施和手段[1]。《中华人民共和国标准化法》明确提出：“要建立标准实施信息反馈和评估机制”；《国家标准化发展纲要》也部署了“要强化标准实施应用，加强标准制定和实施的监督，开展标准质量和实施第三方评估等”要求[2]。通过科学开展标准实施效果评估可以了解标准推广应用的情况、判断标准的技术内容与现实产业发展之间的契合度、及时发现标准内容和实施过程中存在的问题，对后续标准的复审和修订等提供参考依据，进而持续提升标准质量和水平，切实发挥标准对经济社会发展的重要作用，推进我国标准化发展进程。

1 现状和问题

1.1 工作现状

2008年起，我国相关学者和部门已经着手开展有关标准实施效果评价相关研究，并发表了相关论文，颁布了一系列标准。研究论文方面，钱进等[3]宏观地从标准化战略出发研究了标准实施效果评价指标体系。刘盛楠等[4]提出了基于层次分析法-概率统计法的标准实施效果评价模型对标准实施效果的综合评价。张芹等[5]构建了一个通用的标准实施效果评价指标体系，该体系分为标准技术指标、标准实施情况、标准实施效益三部分，并针对每一部分，指出了具体的评价要素和评价内容；标准方面，国标委连续颁布了GB/T 24421.4《服务业组织标准化工作指南 第4部分：标准实施及评价》、GB/T 3533.1《标准化效益评价 第1部分：经济效益评价通则》和GB/T 3533.2《标准化效益评价 第1部分：社会效益评价通则》等用于指导我国标准实施效果评估工作，相关部委和各地区如全国供销总社、安徽、山东、广州等，结合相关专业领域发布了一系列相关标准，用于指导具体领域的标准实施效果评估工作。

2016年起至今，我国标准化行政主管部门、相关部委及全国各省（直辖市）相继开展了标准实施效果评估工作。由于国家标准和行业标准相关技术力量较为雄厚、标准质量相对较高，在标准实施效果评估方面取得了较为明显的成绩，地方标准相对来说支撑标准实施效果评估的相关技术力量较为薄弱、部分归口部门对标准实施效果评估工作认识还不够深入，目前地方標准实施效果评估工作还处于起步阶段，评估方法和路径还有待深入探索，评估的规范性、科学性等还有待进一步提升。

1.2 存在问题

1.2.1 评估工作缺乏系统规划

目前，地方标准实施效果评估工作还处于起步阶段，很大部分省份自2021年开始开展地方标准实施效果评估工作，市场监管部门对各行政主管部门在标准实施效果评估方面的工作，主要通过印发通知、发布评估指南等方式进行指引，但是由于一些归口管理部门对标准实施效果评估概念还不够熟悉，加上每年各主管部门标准实施效果评估工作任务重、时间紧，没有精力和时间对标准实施效果评估工作进行深入研究、实地调研、试验检验等，市场监管部门也缺乏有效手段将标准实施效果评估情况与其他标准化工作相挂钩，导致少数部门将地方标准实施效果评估工作作为任务去完成，缺乏较为系统的工作规划，评估大多交给第三方开展，而大多数第三方评估服务机构资质、人员标准化水平等不足，最终造成评估过程和结果差强人意。

1.2.2 评估指标不够科学

地方标准实施效果评估的内容一般主要包括标准适用性、协调性、执行情况和实施效益等，每项内容里面还要分析其涉及到的评估指标，大多数情况下，各评估主体按照市场监管部门指导性文件去开展，而市场监管部门指导性文件是较为宽泛的指导，因为地方标准涉及领域较广、标准类别众多，没法一一甄别给出特别针对性的评估指标，这就需要各归口管理部门结合自身领域和标准的特点，进而设计出更为科学合理、专业可操作的评估指标和数据需求。然而多数地方标准归口管理部门受到自身标准化能力、时间精力、经济成本等限制，很难切实针对不同标准设计出特别合理的评估指标，笼统按照市场监管部门出台的指引文件开展，不管是产品类标准、技术类标准、服务类标准，还是农业类、市场监管类等标准，都没有全面分析其标准制定的目的、指标设定的原理、各类标准的重点，从而导致各类标准评估指标大同小异、缺乏特点，甚至主次不分，影响了评估结果的准确性。

1.2.3 数据收集不够全面

任何标准实施效果评估都需要定性和定量相结合，量化数据更为直观也更有说服力。因此，数据项的设置必定因标准不同而不同，但是很多评估主体在开展数据设计时没有针对性深入地研究某个标准，而是使用大而化之的数据来进行效益评价，以经济效益为例，只设计年收入这个数据项，根本没法剥离技术进步、人才设备投入等方面改进所产生的效益，就无法计算出标准实施带来的效益。此外，不管是自动抓取还是采用问卷调查收集数据，没有对实际情况进行深入调研，不了解行业和市场实际等，就会导致数据项设置不合理、不具体，那么在数据收集的时候就会遇到阻碍，收集的数据是单一、片面的，也可能出现错误的数据，从而影响了整个标准实施效果评估的客观性和科学性。

1.2.4 分值权重确定不够合理

在地方标准实施效果评估的时候，一些部门为了给出一个综合评估得分，为评估指标赋上了权重分值，少部分采用行业内权威专家研讨确定，还有部分是评估主体自行赋值。一方面，大多赋分是将标准的适用性、协调性、执行情况、经济效益、社会效益和生态效益等评估内容放在一起计分，由于目前并没有权威的研究将标准实施效益中各评估内容的权重进行固定，也就没有标准明确适用性、协调性、执行情况、经济效益、社会效益和生态效益的重要程度，使每部分评估指标权重分值设置的科学性和合理性的问题有待商榷；另一方面，各类标准、各领域标准的侧重点和效益有所不同，那么分值即使计算出来，等级如何确定又是一个需要深入研究的问题，且不同标准、不同领域无法采取统一分级标准衡量，如果不分级，无法通过分值确定实施效果如何，那么分值结果将毫无意义。

2 对策和建议

2.1 建立系统的评估工作机制

建立从地方标准实施效果评估理论研究、工作指导、过程监督、工作评价等多环节的工作机制，通过设置相应科研项目、指定评估服务主体等方式从基础研究做起，进而逐步出台针对各领域标准、各类标准的评估指标体系，针对相应指标给出指导性的数据获取方法（包括数据征集方式、数据覆盖面等）确保数据真实性和有效性，过程中采取抽查、留痕等措施监督评估过程的规范性，事后对工作过程和结果进行评价，将评价结果应用于各归口部门标准制修订、标准化评估考核之中，方能提升地方标准实施效果评估的科学性，让各归口部门在标准实施效果评估工作有的放矢，同时重视加强标准实施效果评估工作，形成一个良性的循环，真正让地方标准实施效果评估工作起到应有的作用，保障地方标准能用、可用、有用。

2.2 科学设置评估指标体系

研究并对地方标准的领域、类别等进行梳理，从标准实施效果评估的角度将标准进行科学分类，如工业产品、农业产品、服务标准、农业生产类标准、工厂化生产类标准、检验检测类标准、数字化智能化类标准等，针对不同类别标准出台相应较为统一的评估指标体系作为指引，再对每项标准具体的评估指标体系确定的过程和方法提出要求，并对评估指标体系确定环节进行监督，要求每项标准评估指标体系设计有可靠依据，确保每项标准评估指标体系的科学、合理。从而能针对正确的指标体系，设计出全面、系统、具体的要收集的数据项，确保数据收集可操作、易操作。

2.3 确保数据真实有效性

在设计出全面、系统、具体的要收集的数据项的基础上，下一步就要考虑数据收集问题，数据收集目前有两种方法：一种是人工抓取，一种是自动化获取。人工抓取可以通过实地调研、问卷调查等方式开展，不管是实地调研还是问卷调查都需要调查对象能提供真实有效的数据，因此需要权威部门通过规范的渠道去进行全面收集，而非一味交给评估机构去开展，样本量应能覆盖本区域内各个地方、不同规模调查对象、产业链上下游相关企业等，才能真实评估标准实施情况，同时应根据数据情况对无效数据进行甄别取舍。自动化获取则较为客观，一般依据以往的数据，从网络上、各类管理平台上去获取，这就需要相关部门之间的协调配合，打通各平台之间的壁垒，方能获取到想要的真实有效数据。

2.4 科学确定分值权重

如果想给评估内容指标设置分值权重，则需要更为精确、深入的研究，一方面需要将标准评估各指标的重要程度进行论证，充分分析行业调查、专家研讨、标准验证等多种结果，进而进行综合分析确定。另一方面则需要对评估结果等级进行划分，那么就需要对本领域相类似标准评估分值之间进行横向比较，根据实际情况按照平均值法、中位数法等进行确定或进行建模确定，这样方能科学地将评估结论意见与评分等级挂钩，得出较为明确的评估结论。

3 方法步骤

3.1 分析与强制性标准之间关系

强制性标准是必须执行的标准，否则就相当于违法，因此首先需要分析被评估标准与强制性标准之间的关系。以产品标准为例，如果其指标要求明显低于强制性标准，则说明该标准已经不符合当前的要求，也不允许被用于实际生产之中，则其必然无法实施，应该被废止或者修订，那么该标准的执行情况、实施效益等均没有分析的必要，也无法进行分析。如此该标准实施效果评估工作到本环节也就可以结束、给出评估结论了。

3.2 识别标准关键技术指标及其作用

只有识别标准关键技术指标及其作用，才能科学、全面地分析标准实施情况和实施效果。因此，本环节就要进行标准关键技术指标及其作用的识别分析。一项标准涉及到的指标有很多，有的是定性指标，有的则是定量指标，所以就需要充分掌握该标准为什么提出这些指标要求、每个指标的作用是什么、指标参数的设置是否合理。此时就要结合标准领域、标准类别和具体指标特点等，采取理论研究、专家研讨、试验验证、实地调研、问卷调查等合适方式进行识别分析。

3.3 设计评估指标体系

3.3.1 确定评估内容

不同的标准其评估内容有所差异，以标准实施效益评估为例，一般情况下经济效益、社会效益和生态效益是其评估的主要内容，但是并不是所有地方标准都能够同时产生这三大效益，比如某些环境保护类标准可能就无法产生经济效益或者短期内需要纯投入，某些基本公共服务类标准可能仅仅为了解决某类社会问题，仅仅体现出社会效益。因此，对具体某项地方标准开展实施效果评估，要在地方标准实施效果评估工作指南的框架下，结合被评估标准的特点综合确定该项标准的评估内容。

3.3.2 分解评估指标

评估指标分解是标准实施效果评估工作中非常重要的一环，其指標项和权重分值设置是否科学合理，直接关乎到数据可收集性、标准评估准确性等。因为每项标准反映评估内容的评估指标是有所区别的，比如有的标准可能是政府采信且在某地区广泛使用的，那么评估其执行情况就不需要再设置很多其他的指标，反之则不然。再比如对标准实施效益分析，不同标准的效益体现形式也各不相同，就经济效益而言，有的体现在个人收入提升，有的体现企业产值提升，有的体现地区生产总值提升，且还要考虑涉及到的不同类型成本投入。因此，对具体某项地方标准开展实施效果评估，就要根据该标准的实施相关方特点、标准对相关因素的影响等多个方面，全面考虑其可能涉及的具体指标，从而对评估指标进行分解确定，形成标准实施效果评估指标体系。

3.4 设计数据收集方案

数据的收集和处理是地方标准实施效果评估工作的关键环节，任何评估分析都要有有效的基础数据作为支撑，否则即使再有能力的评估方也难以得出准确的评估结论。由于不同数据其收集路径、调查对象、收集方法也是不同的，如调查对象信息数据可以通过主管部门注册登记或者备案情况调出，某地区生产总值数据则需要通过统计部门统计公报查询，标准化实施与否则需要针对某地区各个企业实际进行数据调查。因此，对具体某项地方标准开展实施效果评估，要根据其评估指标体系设计合适、可行的数据收集方案，按照方案去进行数据收集。

3.5 收集处理数据

数据的收集处理是分析评估结论的重要支撑，因此在数据收集和处理环节需要核实确定数据的真实性、有效性，确定是否采信后再行处理。首先，应对所有收集来的数据进行遴选、甄别，一些明显有问题的数据要进一步核实确定，着实无法核实确定的少量数据可能还要进行剔除或者作为特殊情况单独列出；其次，要按照设计指标思路对数据进行分析处理，有的部分需要对基础数据进行计算合成方能得出评价结果，如经济效益分析、标准执行情况分析等，有的部分需要定性分析，如标准适用性、协调性分析等，有的部分则需要定性定量相结合的分析方法，至于选取哪种方法还要结合收集到的基础数据情况确定。但要尽量多角度进行数据处理，将有限的数据经过处理后形成支撑更多分析角度和可能的论据。

3.6 分析评估结论

地方标准实施效果评估的过程最终是为了评估结果服务的，分析得出评估结论是地方标准实施效果评估的目的。因此，要根据具体标准的评估指标体系和数据处理情况，采取资料收集、实地调研、专家咨询等多种方式相结合，从理论和实践两方面，对标准的适用性、协调性、执行情况、实施效益等进行分析梳理，分析该标准涉及技术与当前产业技术之间是否一致、其技术指标是否能满足需要、与相关标准之间是否协调配套、标准应用面、标准实施所产生的各类效益等，针对设计了指标权重的评估体系还可进行综合计算，得出评估最终得分和所处等级水平，进而给出评估结论，确保评估结论可为下一步标准改进提升、标准体系结构优化、产业健康发展等提供重要支撑。

4 结 论

标准实施效果评估是一项系统性、复杂性工作，不仅要调查实践情况，也要结合理论研究方能合理确定评估指标。任何一项科学适用的标准，都在我国标准体系中占有一定地位、起到一定作用，不同标准又有各自的特点和重点，有的标准是为了解决某个社会问题，重点体现的是社会效益；有的标准是为了保护环境安全，则其重点体现的是生态效益；而有的标准是为了解决共性技术问题，那么其体现的则是由技术变化带来的社会、经济或生态效益。因此，一概而论去确定评估指标及其分值，统一划定评估等级并不可取。本文给出的标准实施效果评估建议和实施步骤也仅仅是提供一种评估思路，具体问题还需要具体对待，需要结合标准自身的特点和在标准体系中的作用设计评估指标、确定评估方法和分值权重。

参考文献

[1]高艳玲，王志民，隋媛，等.标准质量和实施效果评价方法及应用研究[J].标准科学，2020（5）：60-64.

[2]王秉政，林阳荟晨，上官晓丽.网络安全国家标准实施效果评价方法研究[J].信息技术与标准化，2022（7）：60-64.

[3]钱进.标准化战略实施效果评价指标体系设计及评价方法研究[D].南京：南京理工大学，2008.

[4]劉盛楠.标准实施经济效益评价模型研究及软件系统实现[D].大庆：东北石油大学，2016.

[5]张芹，杨军.标准实施效果评价路径浅析[ J ] .标准科学，2018（7）：83-85.

作者简介

霍家佳，硕士，高级工程师，从事标准化科研项目研究、各类标准制修订、标准化项目技术服务等工作。

（责任编辑：张佩玉）