音视频档案数字资源质量评价标准研究

尹哲 崔伟 黄文静 闫晶亮

摘要：随着音视频档案数字资源数量的快速增长，如何科学地开展质量评价，提升数据治理效能是档案部门面临的挑战之一。论文从构建目标、构建原则、构建方法、构建过程四个方面提出如何构建音视频档案数字资源质量评价标准，并以视频档案数字资源为例给出构建质量评价标准的过程，最后提出评价标准的系统性应用思路，以期为提升档案部门数据治理能力提供帮助。

关键词：音视频档案 数字资源 质量评价标准 层次分析法

当前，音视频档案数字资源数量快速增长，为提升其数据质量和治理效能，国内档案部门进行了积极的探索实践，并且取得了一定的成效。但其仍然面临不少挑战，主要体现在：一是数据质量整体不高；二是对问题数据的治理效能不明显。建立良好的数据质量评价标准是辨别个体数据质量优劣的基础，可以为持续改进整体数据质量提供依据，并最终为指导档案部门提升数据治理能力、构建数据治理体系指明方向。因此，本文以音视频档案数字资源质量评价为研究对象，拟建立一套可量化、操作性强的质量评价标准。

（一）质量评价标准构建目标

1.突出评价的目的性。构建音视频档案数字资源质量评价标准的目的是全面掌握数据的质量状况，进而发现问题并解决问题。因此，评价指标的设置必须有的放矢，能够将评价项目与存在的质量问题联系起来。

2.体现出评价对象的特点。音视频档案数字资源相较于其他类型的档案数字资源，具有技术特性强、整编要求高、利用体验强等特点。为此，在质量评价指标的构建中，应尽可能体现其特点，以凸显评价标准的针对性、适用性。

3.充分借鉴信息质量评价相关成果。音视频档案数字资源质量评价属于信息质量评价的范畴。在信息质量评价方面，目前国内外不同领域已进行了广泛的研究、实践，形成了科学的理论、方法。例如，有学者提出，可以参考ISO 8000、GB/T 36344—2018，根据档案数据质量的概念内涵，从形式、内容和效用等三个维度梳理出档案数据评价指标。[1]为此，在此次质量评价标准的构建中，应尽可能借鉴其他信息评价标准构建的经验、做法，以提升评价标准构建的科学性和效率。

（二）质量评价标准构建原则

评价指标是整个评价的基础，评价指标的设计正确与否对最终的评价结果有重要的影响，因此评价标准设计一般应遵循系统全面性、简单科学性原则。[2]除此之外，还应遵循以下几个原则。

1.指标应具有代表性。评价指标应具备明确的目的性而非多多益善，关键是指标在评价过程中所起作用的大小。评价指标需要涵盖为达到评价目的所需的基本内容，反映出数据的总体质量情况。指标的精炼可以减少评价的时间和成本，使评价活动易于开展。

2.指标应具有可比性。指标的设定必须结合当前音视频档案数字资源质量的普遍水平，指标要求不宜过高，同时通过比较必须能够体现数据质量的水平差异和区分度。

3.指标应具有可操作性。也就是说，评价者要能够方便使用各项指标对数据质量进行客观的衡量，快速统计、计算出相应的分数。

（三）质量评价标准构建方法

目前信息质量评价方法主要有因子分析方法、模糊综合评价法、层次分析法、主成分分析法等。本文借鉴的层次分析法（Analytic Hierarchy Pro？ cess，AHP），是对一些相对复杂、模糊的问题做出决策的简易方法，通过将复杂决策问题的目标层层分解，利用较少的定量信息实现决策过程的数学化，尤其适合对决策结果难以直接准确计量的情形。在科学管理领域中，人们常常面对由众多因素构成的复杂系统，这些因素之间相互关联、制约，并且往往缺乏定量数据。在对这种问题进行处理时，层次分析法是一种简洁而实用的建模方法。层次分析法自提出以来，已被广泛应用于军事、工程、教育等各个领域。[3]

（四）质量评价标准构建过程

目前国内尚没有针对音视频档案数字资源质量进行评价的成型的评价标准。笔者参考了国内外对于数据质量评价的研究成果，根据音视频档案数字资源的特点，聚焦普遍问题，遵循评价构建原则，经过初步筛选和反复斟酌之后，建立音视频档案数字资源质量评价标准的二级指标结构。这个评价标准的一级指标有4个，分别是：技术要素、信息要素、实体要素和感官要素。技术要素是指通过摄录设备采集并保存音视频档案数据使用的各类技术参数；信息要素是指对音视频档案数据进行归档和管理过程中通过人工著录或技术采集方式获得的文件目录及元数据信息；实体要素是指对音视频档案数据进行收集归档和长期保存过程中影响数据质量的文件命名、文件格式、可用性、安全性等因素；感官要素是在音视频档案利用过程中影响利用者对图像及声音感官效果评价的相关因素。

由于音频和视频档案各要素评价二级指标设置方式较为类似，而且视频档案基本涵盖了音频档案各相关要素，受篇幅所限，本文仅以视频档案为例给出质量评价标准的二级层次结构，并以视频档案数字资源为例给出构建质量评价标准的过程。

视频档案数字资源质量评价层次结构如表1所示。

（一）开展问卷调查

针对所构建的指标层次结构，笔者按照9分制打分法向国家档案局、高校、档案馆的专家发放问卷调查表，开展全面细致的调研，并征求專家对评价标准的修改意见，所有专家独立且客观、科学地对各个指标进行打分。

（二）建立判断矩阵

根据专家打分值构建AHP层次分析判断矩阵，具体如表2所示。

（三）计算指标权重

通过层次分析法得到一级指标权重结果，如表3所示。

（四）开展一致性检验

利用层次分析法进行权重计算时，需要进行一致性检验分析，用于研究评价权重计算结果的一致性检验结果，即计算一致性指标CR值（CR= CI/RI）。第一，先描述上述计算得到的CI值[CI=（最大特征根-n）/（n-1）]；第二，结合判断矩阵阶数得到RI值；第三，计算CR值，并且进行一致性判断。

本次针对4阶判断矩阵计算得到CI值为0.000，通过随机一致性RI表格可以查询得到RI值为0.89。因此计算得到CR值为0.00<0.1，意味着本次研究判断矩阵满足一致性检验，计算所得权重具有一致性。如果CR值大于0.1，则说明不具有一致性，应该对判断矩阵进行适当调整之后再次进行分析。

（五）进一步对视频档案的二级指标进行权重分析

同样通过专家打分法构建二级指标的判断矩阵，并根据层次分析法进行权重分析。需要注意的是，由于二级指标相对一级指标的项目更多，因此在开展权重分析时更加需要关注一致性检验的结果。

通过层次分析法得出二级指标权重值后，可以将一级指标和二级指标的权重值相乘即得出加权计算结果，最终得出每个二级指标在所有二级指标中的权重比。

（六）建立和验证视频档案数字资源质量评价细则

在运用质量评价标准开展视频档案数字资源质量评价实际操作时，需要明确每一项二级指标获得对应分值的具体要求，并按照对应的评分权重给出对应的百分制分值，最后制定评价规则以明确数字资源可否得到相应分数。例如，视频档案质量评价二级指标“视频帧率是否符合要求”的具体评价细则为“视频帧率是否大于24”，按照此二级指标的权重比对应百分制分值为“4”，制定评价规则为：如被检测的视频档案“帧率”满足要求可得到相应分数，不满足则不得分。

在按照评价细则对视频档案评分后，可以将视频档案质量划分为“优”“良”“中”“差”4个等级。其中“优”等级得分为90～100分，“良”等级得分为75～ 89分，“中”等级得分为60～74分，“差”等级得分为0～59分。

笔者所在单位开发了音视频档案数字资源采集与检查工具软件，并根据评分标准尝试对部分馆藏音视频数据质量进行评价。采用软件检测方式对音视频档案数字资源的技术要素、信息要素、实体要素进行评价，结合人工检测方式对感官要素进行评价，最终得到不同维度的质量得分、质量总分和质量等级，并根据评价发现的问题对数据质量进行了优化提升，效果较为显著。

音视频档案数字资源质量评价标准最大的价值就是在数据管理工作中建立质量管控的依据、手段，并可以影响数据质量的源头治理和运行机制。

一是借助标准可以对音视频档案数据进行质量检测，给出直观的质量得分和质量等级，全面掌握被评价音视频数据的质量现状。这是评价标准最直接的应用场景，重点用于质量的量化评价。例如在接收音视频档案时，可以应用评价标准对该批次档案进行批量质量检测，整体量化分析出该批次档案质量，出具分析报告，查找存在问题，从而为后续的决策和处理提供参考。

二是借助标准可以对数据发现的各类质量问题提出一般性处理对策建议，为提高质量给出参考依据。按照评价标准给出的处理建议，对数据质量进行完善，不断提升音视频档案的质量。

三是可以将质量评价标准作为质量指南从源头控制音视频档案数据质量。通过评价音视频编码格式、采样率、目录及元数据整编、实体格式、音画体验等诸多质量要素是否符合指标要求，从而倒逼音视频档案采集、整理、编目等环节更加规范，形成更为有效的源头治理。

四是通过应用质量评价标准，可以建立和规范音视频档案数据定期检测和管理机制。一般档案馆都有对档案数字资源进行定期检测的要求，以便了解现状、发现问题、及时处理。通过应用评价标准可以进一步促进检测内容、检测方式、检测频率、检测结果呈现、处理措施等的规范化甚至自动化、智能化。

本文基于对音视频档案数字资源质量的科学分析，运用层次分析法，在系统性、实用性、简洁性的基础上，结合问卷调查的研究方法，构建了音视频档案数字资源质量评价标准。应用该标准，可以对音视频档案数字资源质量进行科学、客观的评估。更重要的是，通过该评价标准可以发现音视频档案管理的薄弱环节，为各级档案部门有针对性地提升音视频档案数字资源质量提供科学依据，进而为提升档案部门数据治理能力提供帮助。

*本文系2022年国家档案局科技项目“人工智能技术在音视频档案数据治理工作中的应用研究”（项目编号：2022-X-066）研究成果之一。

注释及参考文献：

[1]张夏子钰，周林兴.大数据时代档案数据质量：评估与优化[J].北京档案，2023（5）：15-18.

[2]鲁德武.档案技术装备使用质量评价指标体系的建立[J].办公自动化杂志，2013（7）：28-30.

[3]陶丹.基于AHP分析法的創新教育质量评价标准建构[J].创新创业理论研究与实践，2022（19）：10-16.

作者单位：1.北京市档案馆

2.东港瑞云数据技术有限公司