大数据时代的计算机信息处理技术分析

袁春芸



大数据时代的计算机信息处理技术分析

袁春芸

中国联合网络通信有限公司唐山市分公司，河北 唐山 063000

随着网络的普及，计算机用户的数量呈现出爆炸式的增长，每天因此而产生的数据总量，已达到了十分惊人的地步，然而新形势下计算机的处理技术能力的要求也是在不断变化发展着，计算机技术也在不断跟进，两者是相辅相成的。现在，必须利用新的思路、新的技术来应对日益增长的数据处理要求。基于此，对大数据时代的计算机信息处理技术进进行了分析。

大数据时代；计算机；信息处理技术

在现代社会发展的过程中，各种数据不断产生，数据的容量及本身的结构也发生了巨大的变化，然而这些数据对计算机信息处理技术提出了新的要求，这些要求的提出使现有的计算机信息处理技术面临了巨大的挑战，同时也迎来了新的发展机遇，本文就将对大数据时代背景下的计算机信息处理技术进行简单的阐述，供参考。

1 大数据的概念与特点

（1）大数据的概念。所谓的“大数据”，就是信息的数据量巨大，由于需要处理的数据十分庞大，目前的计算机主流软件在短时间内无法实现对其进行获取、处理、存储、传输、管理等方面的功能，它不仅包括数据量大，同时还包括数据比较难以处理、复杂多样，同时在处理的过程中，还会出现数据处理的重复性，对于大数据的数据量大到什么程度，目前还没有一个统一的标准，一般认为数据量在10 TB～1 PB（1 TB=1024 GB，1 PB=1024 TB）以上的数据为大数据。

（2）大数据的特点。一是数量大。大数据的产生是基于大量数据信息处理而产生的，需要运用计算机技术处理数据的量越来越大，从TB及已经发展到PB技术的数据处理；二是种类多。随着信息技术在生活应用中普及，人们对信息的需求也越来越多样化，信息数据的来源也变得多样化，结构化和半结构化的原始数据也出现了多样化，使得大数据呈现出多样化的发展趋势；三是速度快。海量的数据，就需要高速度的对数据进行处理，这样才能满足使用者对信息数据的需求，如果大数据的处理出现滞后，将不利于信息的传播与扩散。

2 大数据下的计算机信息处理技术

（1）分布式存储技术。分布式存储技术是当前专门应对大数据存储的问题而发展起来的，由于大数据的海量数据使得传统模式的单个数据库很难存储，同时应对管理以及备份等工作，分布式存储技术打破了传统的思维，利用网络专线或者高速网络将多个数据库存储服务器搭建在一起，形成一个总分形式的分布式存储系统，而上层的总与下层的分的特殊结构之间则是通过数据之间的逻辑关系串联起来，在结构上看，分布式系统中同一个数据链中大数据可能随机分配到不同的数据库服务器中进行存储，而由于数据库存储服务器彼此之间特殊的数据逻辑关系，看似分离的数据却又在逻辑上得到统一，分布式存储技术，不仅解决了海量数据的存储问题，而且多个服务器的共同服务还提升了大数据的高通并发性，解决了数据串行处理反应时间长的问题，大大提升数据处理性能，目前，分布式处理技术在百度、IBM得到了广泛的应用。

（2）数据挖掘技术。数据挖掘技术是主要应对大数据数据处理的而兴起的、体现人工智能处理的计算机处理技术。数据挖掘技术多采用仿生学的手段，按照人类思维的方式，将海量的大数据进行处理，最终从海量数据中过滤出对企业生产或决策有用的信息，进而指导人们的行为。数据挖掘的主要流程包括数据选取、数据预处理、数据挖掘、数据分析与评估。首先对大数据的有效部分进行选取，然后采用数据预处理的技术对数据中的无效数据、冗余数据、零数据等进行清洗和删除，然后采用数据挖掘的技术方法对有效数据进行挖掘，最后将有用的数据，通过专门的应用系统进行分析与展示。其中，数据挖掘技术是采用人工智能的思维方式而设计的数据处理技术，主要包括决策树、聚类、神经网络等多种数据处理技术，通过数据挖掘的处理，最终对清洗后的数据进行有效地分类，最后通过专门的应用系统对分类的数据进行分析、处理、展示，从而使用形象直观的方式展示有价值的数据信息。

（3）信息安全技术。在大数据背景下，各种数据信息已经脱离了原来独立的形式而形成了相互关联的数据结构，但是受限于这种关联结构，其中的某个数据出现问题时，其他数据也会随之受到影响，对信息的安全管理也不在是建立在单个数据或者是单个数据的基础之上，而是需要同时对整个信息系统进行管理，为了保证大数据信息的安全，就需要不断发展信息安全技术。首先，需要加强当前信息安全体系的建设，在加强安全体系建设的同时，还需要对技术管理人员进行新技术的培训，提高技术人员对新管理体系的适应能力和管理能力，确保新的安全体系的作用能够充分发挥，为大数据信息的安全提供保障；其次，需要加快大数据安全相关的技术研究工作，随着大数据时代数据结构及总体容量的变化，当前的信息安全技术难以对大数据进行全面的安全监测，应该全面加强新的信息安全技术的开发，通过技术的更新实现对大数据信息的全面监测，全方位保障数据的安全；最后，在新的安全技术出现之前，大数据的存储管理容易造成数据的泄露，同时，由于当前监测方式无法对数据进行全面监测，还容易导致数据存在一定的安全隐患，因此，在当前技术条件下，可以将重点数据信息作为监测的首要对象，通过确保重要信息的安全来保障整体信息的安全性，在当前技术条件下，这是行之有效的办法。

综上所述，相信在不久的未来，计算机信息处理技术会发展会推动现代社会的不断进步和发展。本文主要对大数据处理中运用的关键技术进行了分析，希望能够为相关研究领域的人们提供参考。

[1]刘银龙.“大数据”背景下的计算机信息处理技术分析[J].电子技术与软件工程，2015（1）：206.

[2]吕敬全.“大数据”时代背景下计算机信息处理技术分析[J].信息与电脑，2013（6）：126-127.

The computer information processing technology of the era of large data analysis.

YuanChunyun

China United Network Communications Co.，Ltd.，Tangshan branch，Hebei Tangshan 063000

With the popularity of the network，the number of computer users showing explosive growth，the amount of data generated every day so，has reached alarming proportions，but the processing ability under the new situation of the computer is in constant change and development，computer technology is also constantly follow up，the two are complementary and now，we have to deal with the processing requirements of the growing use of new ideas，new technical data，the computer information processing technology in the era of big data is analyzed.

Big data era；The computer；Information processing technology

TP274

A

1009-6434（2016）11-0140-02