基于大数据的数据管理及应用研究

刘洪霞

摘 要：计算机互联网技术的飞速发展使社会很多领域都发生了巨大的变革，并且伴随着这种发展各行业的数据信息的数量和规模都在与日俱增，尤其是基于互联网技术而发展的物联网、云计算以及社交网络等领域的数据信息的种类以及规模正在以令人惊异的速度增长，这些庞大的数据代表着大数据时代来临。而大数据时代的到来不仅为生产生活提供了便利，同时也对社会各领域的发展提出了新的挑战，如何更好的利用大数据是当前社会亟待解决的问题。因此，对大数据技术进行分析研究，阐述大数据管理技术的内涵与大数据处理的框架，分析大数据在数据管理中的应用前景十分重要，对大数据的应用实践有重要的促进作用。

关键词：数据信息 大数据技术 数据管理 应用分析

一、大数据技术基本概述

1、大数据的内涵

大数据是从英文big data直译过来的，大数据中的“大”指的是数量巨大，因此，大数据实际上就是指巨量资料。大数据中的数据信息量十分巨大，大到甚至不能以GB或者TB来计算，而必须以储存空间更大的PB、EB甚至是ZB来计算。总结起来，大数据有四个特点，一般也被简称为“4V”特点，分别是：（1）数据量大（Volume）。只能用PB以上单位进行计算；（2）类型繁多（Variety）。信息种类多种多样，几乎涵盖所有学科领域的数据信息；（3）价值密度较低（Value）。主要是因为大数据并不是单个的、抽样的信息，而是全面的全部的信息，因此数据信息并没有经过“提炼”，庞大的数据信息中可能包含无用信息；（4）速度快、时效高（Velocity）。大数据的主要特点就是信息量十分庞大，因此必须采用特殊的技术架构和路线，提高信息提取速度，这也是大数据和传统数据最大区别。

2、大数据发展特点

大数据的特点随着社会进步和技术发展会出现新的变化，目前，大数据的新型特点有以下几个：第一，规模化。大数据的规模指标具有多变性，一般来说，单个的数据集的规模可能是几十TB，也可能是多数PB。也就是说，如果要储存1PB的数据信息，需要一万台装置为100GB硬盘的个人电脑。并且在使用计算机互联网的过程中还会产生信息的数据信息。第二，多样化。大数据的多样化主要是指数据的来源比较多样化，互联网搜索、移动通讯、社交网络等都会产生新的数据。还有安装在飞机、火车等工具上的传感器也会产生新的数据。最后，高速化。主要是指数据创建和传输的速度在高速网络中的速度十分迅捷。

二、基于大数据的数据管理分析

1、大数据管理技术的内涵

数据管理是借助计算机等设备对数据进行采集、存储、处理以及应用的过程。而大数据管理技术是在数据管理的基础上应用大数据技术来实现对巨量资料信息的分析、处理和应用过程。主要目的是为了能够存储日益增长的大数据，然后为大数据提供强扩展性以及高可靠性的数据存储、提取访问以及管理的解决方案。目前，经常使用的大数据管理技术包括多级缓存、容错机制、分布式数据存储以及负载均衡等。大数据的大使数据管理不能使用传统方法进行储存和管理，因此，相关的研究人员和工作人员必须创新数据管理方式，更新数据管理观念，突破二维数据的同时，树立高维数据管理理念，才能有效利于大数据技术实现数据管理方式的创新，为数据信息提供新的储存、访问方式。

2、大数据管理对社会的影响分析

大数据对社会的影响不仅表现在经济领域，在政治、文化等领域也有深远影响。大数据对数据管理最重要的影响就是开启了“数”管理模式，帮助培养了人们在社会各领域中对数据进行有效管理的思想，现阶段对信息管理专家的需求在不断增加就证明了这一点。“数”管理模式也是当今“大社会”的体现，现在大数据管理技术对很多传统行业都有重构的影响，使数据管理方法和手段成为公司企业管理的主要手段。

3、大数据管理的发展前景分析

根据相关的调查研究发现，在人们广泛关注的大数据技术中，排名靠前的分别是：大数据分析、云数据库、Hadoop、内存数据库以及数据安全。根据这项调查结果显示更受人们关注的大数据技术已经从仅有的Hadoop转变为大数据分析。这表明大数据技术越来越被人们了解和认识，大数据技术拥有较为广阔的发展前景。另外，大数据分析中更受人们关注的是实时分析、丰富的挖掘模型以及可视化界面。

虽然大数据技术拥有良好的发展前景，但是目前的大数据领域还缺乏专业水平较高的人才，这就需要相关企业和高校进行联合，为大数据管理技术提供优质的综合型人才，推动大数据技术的进一步发展。

三、基于大数据的数据管理应用分析

大数据管理技术在很多领域都得到了有效應用，在对大数据管理技术进行应用时，一定要注意将大数据技术和该领域的实际情况进行结合，做到因地制宜、因时制宜地应用大数据管理技术，这样才能保证充分发挥大数据管理的便利性，提高该领域的数据信息管理水平。对大数据管理技术的应用进行研究分析时，主要从以下几个领域进行分析：

1、大数据管理技术在医学领域的应用

在医疗行业中，医生可以借助大数据平台对病人的病例以及历史治疗方案进行分析，建立私人专属医疗数据库。这种数据管理的应用能够极大的简化病人看病过程，并且能够帮助医生及时排除可能会引起病人过敏的药物，提高看病效率和质量。另外，利用大数据管理平台还能够对医疗器械设备以及药物进行有效管理。

2、大数据管理技术在交通领域的应用

在交通行业中应用大数据管理技术主要体现在两方面：一方面是方便对交通线路的运行情况，拥堵情况及时采集；另一方面是能够对实时路况进行准确的信息采集，并且还可以对信号灯进行实时合理管控，保证信号灯的正常灵活运行。

3、大数据管理在智慧城市中的应用

智慧城市指的是利用智能计算技术对城市重要的关键的基础设施进行智能化调控和安排，确保城市关键基础设施的组成更加合理科学，进而保证城市基础设施的服务更具人性化和高质化。大数据管理在智慧城市中的应用能够使城市规划更加合理有序，而智慧城市的发展和建设更是加速了大数据时代的到来。

总之，大数据管理技术在社会很多领域都得到了广泛应用，在经济领域中能够更好的实现对经济风险的管控；在教育领域中能够帮助教师全面掌握每个学生的信息资料，进而保证做到因材施教，提高教育水平。因此，必须重视大数据管理技术的发展和创新，才能赢得信息时代数据战的胜利。

四、结语

综上所述，大数据技术的发展十分迅速，而基于大数据的数据管理已经被广泛应用在社会生产生活中的各个领域中，可以说对大数据技术的有效管理是保证大数据技术更好地服务社会发展的重要保障。因此，相关的研究人员必须勇于创新，敢于实践，开拓大数据技术的应用范围，实现数据管理在各领域中的有效应用。这样才有利于大数据技术为人类社会发展提供便利，同时也能促使大数据技术的进一步发展。

参考文献

[1]王金环，唐明.基于大数据的数据管理及应用研究[J].赤子：上中旬，2016（22）.

[2]张文燚，项连志，王小芳.大数据分区管理模型及其应用研究[J].哈尔滨工程大学学报，2014（3）：353-360.

[3]刘韵，张遥.大数据管理：概念、技术与挑战[J].数码世界，2016（6）：16-16.endprint