新时期大数据现状与对策研究

罗增荣

[摘 要]现阶段大数据的发展呈现出不断上升的趋势，国内外对于大数据的发展也日益重视。对于大数据领域而言，其关键在于对大数据实施科学有效的分析。研究发现，当前大数据在发展的过程中还存在一些问题亟待解决，对其发展也造成了不利的影响。基于此，主要探究了新时期大数据的发展现状，找出其在发展过程中存在的问题，进而有针对性地提出了具体的解决对策。

[关键词]大数据现状;解决对策;探究

一、大數据面临的问题

（一）存储问题

大数据在发展的过程中最需要解决的就是数据的存储问题。从数据的量级角度出发，大数据时代下数据量已经由原来的TB级实现了PB级和EB级的提升，这对于数据的存储与分析工作而言有着很好的帮助作用。在对数据进行分析时需要频繁存取与调度数据，从而使得数据的存储呈现动态化特征。从数据存储机构的角度出发，在数据发展的背景下，无法再借助简单传统的机构化数据库实现对大数量数据的存储，因此现阶段人们主要研究的内容是与大数据特征相吻合的存储方式。另外，需要认识到大数据如果处在动态更新的状况下，应该设法实现数据储存以及交换的一致性。在分析大数据的过程中，数据库领域需要实现数据仓库的可扩展性、向下兼容性和高度容错性等。由此可见，大数据分析的核心问题主要是数据的存储问题。

（二）可用性较弱的问题

实际上，数据所呈现的方式是杂乱无序的，这给大数据的分析增加了很大的难度，因此在开展大数据分析时需要将数据质量因素考虑在内。数据质量本身有着十分广泛的概念，在本文中主要探究的是数据是否具备可用性特征。数据的可用性主要由一致性、时效性、准确性、实体性和完整性五部分共同组成。但是在处理之前，存储和分析大数据的首要步骤主要是对数据可用性的度量。在对数据进行采集时可以使用高效处理过滤数据的方法，为大数据源质量的提升打下坚实的基础。从大数据的完整性角度出发，要想实现对数据正确的描述与评价，需要对数据描述的框架加以完善，进而为数据采集过程中的描述行为提供指导性帮助。从数据的时效性与一致性出发，需要重视数据的客观性与实践价值，必须做到客观事实与数据描述之间的一致。但是在对大数据进行分析与研究时，经常遇到的重难点问题还是关于数据源的自动检测与修复工作。

二、解决大数据面临问题的措施

（一）合理部署云存储技术

云存储主要指的是以互联网为基础向用户提供的存储服务，这种存储的形式其容量、数据的可用性以及各种复杂的基层技术环节不需要用户过多考虑。只需要付费就可以从云存储供应商那里获取足够大的存储空间以及相应的存储服务。在云计算环境下分布式的存储最基础的组成部分就是数据中心，可以从多种角度出发对数据存储中心进行划分。从系统建设的角度出发，云存储中心架构的形态主要有三种：优化的传统数据中心、以云计算为主的数据中心以及二者共存。在提供存储服务的过程中，存储用户和云计算用户是主要的两种云存储用户，这是根据用户服务内容的不同划分的。云存储服务的关键主要是以云计算理论构建的数据中心，如下图所示，调度分割并行编程模型下，存储结构化数据和非结构化数据的目标是通过并行数据库和分布式系统来完成的，而云服务接口价格计算资源服务提供给云用户的基础主要是云服务等级协议。

（二）提升数据的可用性

大数据所分析的主要对象就是数量巨大且复杂的数据。由于数据产生的方式不同，因此也会使用到不同形式的信息系统。在对大数据项目进行分析时，需要搜集相关的数据，进而为分析奠定基础。分析的过程比较简单，重点在于对于数据的预分析。当前，大数据的主要来源还是以Web数据、传感网数据、业务系统数据和科学实验数据为主，不同的数据源会导致有效预处理不同的信息系统和信息结构数据发生变化，这是根据不同类型的数据或相同类型的数据进行的。当前获取和整合高质量大数据的理论和技术等五个挑战性的研究问题已被提出来，而其将数据处理可用性领域的问题从各个方面进行了分析，如基础理论和工程技术等，同时探索了大数据可用性的理论和技术。另外，只有为数据的质量提供保障，才能更好地进行大数据分析，所以对大数据时代数据质量的保障从流程和管理等方面进行了研究。

随着云计算领域软件开发的速度不断加快，社会上对于大数据分析越来越重视，并且逐渐产生了以分析数据为主的服务。但是大数据在分析与发展的过程中还存在很多问题，比如说可用性较低、存储问题等对于大数据的分析与使用造成了极为不利的影响等等，这就需要我们在教学中采取有效的措施实现大数据的健康快速发展。

参考文献：

官思发，孟玺，李宗洁，等.大数据分析研究现状、问题与对策[J].情报杂志，2015，34（5）：98-104.

[作者单位]

韶关市技师学院

（编辑：薄跃华）