大数据时代背景下档案管理探讨

魏涛

【摘要】本文首先介绍了在当今大数据背景下，存储与复制材料资料，从实体到数据信息的转变到管理资料数据的方式等这些方面皆有大数据有关技术的引入与帮助；然后解释了参考大数据技术方向和具体内容来管理资料数据的方法和注意事项。

【关键词】重要性；大数据之应用；资料数据管理；方法

一、引入大数据相关技术在资料分析中是不可或缺的

2012年5月29日，国家土地管理有关部门公布了国家首批近百个智慧城市试点，所谓智慧城市，很大一方面就是指应用新技术在大数据背景下革新管理和统计数据资料，然后合理规划和发展城乡建设，提高人民生活水平，促进城镇发展达到一定的成绩。这也说明国家非常重视该方面的建设与运用和重要性，国家也在稳步推行和鼓励该型城市的发展，推行聪明城市、聪明建设等方向，运用大数据等新型方法方式等等。之所以被称作智慧城市，就是要遵循以下几个原则，分别是：多用数据少用资源、多用数据多干活、多用数据少犯错误等原则。

（一）现在电子文件急需大数据技术做支撑。当今时代背景下，电子文件增长迅速，应对这些大量的电子类文件，我国长期以来往往采用直接鉴定的方式，但这种方式往往已经不能适应时代的需求，将受到严重的挑战。相关人员逐一鉴定每一份文件的原始文件有些不太现实了，所以此方面也向我们提出了更高的要求。此后，有人提出宏观鉴定的方法。但困难的是无法快速的筛选出有价值的有用的文件类型与种类和具体内容。还有怎么對这些电子文件进行快速分类是个棘手的问题，怎样保存有用的文件也是个重要的问题。

为了解决上述问题，档案工作者除了革新管理方法之外，还可以应用大数据的相关技术，创新式大胆使用最新的方式方法。在通常的设备设施上安装升级数据传感器，就可以海量的接受和处理数据，扩大储存数据的存量。这个量级的大小可以达到每天TB，甚至每天PB的大小，是非常可观的。

（二）大数据技术同样需要应用于非电子类文件的处理与应用。大数据包括很多种类，其中有结构化数据和半结构化数据类型，当然还有非结构类型的数据。非结构型数据的应用目前有大幅增长的趋势，尤其是在互联网普遍应用的今天。至 2012 年末，非结构类型的数据已经超过一般，并有增长的趋势。同时，数据不是单独存在的。长期以来，人们对资料文件管理采用的是有关系类型的资料库，IOE是最有代表性的之一：（I指IBM的硬件设施，O指Oracle的资料库，E指EMC的存放方式）的方法，这同样适用于档案资料的管理行业，这种模式，指IOE似乎有些不能适应当今大数据处理的方式方法，显得有些力不从心。这是因为大数据处理不仅仅指的是数据数量巨大，数据类型繁多，同时文件的数量也是空前的数不胜数，不再是随随便便几个简单的文件了，这就对传统技术提出了挑战。为此，怎样处理文件相关系统层存下的元数据是一个问题，如果处理不好，会直接影响文件的处理效果和硬件的性能。为了应对快速增加的非结构化数据资料，相关资料工作人员在进行电子或非电子资料处理应用时出现了很大的问题，但当下基于应用大数据相关技术数据库的优势，如SQ L等数据处理方法不仅仅可以处理简单的相关数据，同样也应用于空间数据资料、数据流、图形等相关方面，并且基本应用于相关内容的存下结构能够在一个系统中处理十亿等级别资料的相关数据，并且还不能类似于以前常用的存储那样遇见的原始数据处理的麻烦，大数据相关技术作为相关工作人员处理非结构化的电子或非电子资料的麻烦提出了解决方法。

二、档案管理运用大数据的策略

（一）资料数据需要备份复制和统一管理。依据计划，沣东大数据产业园区将会实行数据的大规模统一化集中吸收发出、深度的整理处理、逐步变成国家政务材料幕后整理与复制中心。当前，中国联通公司、中国移动公司和中国电信公司三大通信商家和国家人口数量数据产生与复制（古城西安）中心，这个例子对档案资料管理部门及相关人员提供了很大的启发。当今前档案中心采取的是资料用电子设备备份，这样既安全又方便。

（二）要积极寻找和寻求大数据相关技术公司。争取与它们合作，从而积极发明开展适合资料档案分析整理的工具技术。大数据相关技术内容涉及很广，很宽泛，包括很多方面，如果某个行业想要应用大数据相应技术，就要打破传统思想，不要受专业限制的束缚，积极寻求合作，尤其是和大公司合作专业大数据业务，避免许多事。比如一家石油相关的公司，采油探油是他们的特长，但是对石油行业也有不懂的方面，到最后不得不请来一位北京大学的博士，他既懂石油，又知道未来发展的前景，最终构成了三方合作三足鼎立的状况，如果缺少开放、协同创造，共同创新的思想，想达到这样的目的，得到这样的结果太难了。

三、档案处理用大数据相关技术一定要有明确的目标和标准

在运用大数据相关技术时，在整理和处理相关档案数据时，一定要清楚自己需要什么，需要在数据中提取什么，否则就是纯属浪费时间和精力来处理数据。因此，首先要定义使用大数据的目标和标准，此后再找到合适的工具技术来处理数据、分析数据。

【参考文献】

[1]张欣.解读大数据时代下档案管理的价值提升[J].理论观察，2014（01）：108-109.