大数据时代网络信息处理技术

李春光

摘要：随着互联网技术能力的提高，人们已经迈入了信息化时代，在国内各行各业各领域，都充斥着不同种类的庞大数据，这是人类进入全面数据化时代的标志。随着计算机用户量的不断攀升，网络信息处理的技术就需要创新完善，从而帮助人们处理生活与工作。目的：以遵义师范学院为基础数据库进行剖析网络信息处理技术;方法：通过查阅相关资料结合学院自身实际进行技术分析;结论：信息处理技术主要包括收集、加工、传播、储存、应用。

关键词：大数据时代;网络信息;信息处理技术;信息化

中图分类号：TP311      文献标识码：A

文章编号：1009-3044（2020）28-0048-03

1 大数据与网络信息处理技术概论

1.1 大数据概论

从字面意思来看，大数据就是指数量巨大地数据信息。然而大数据并不单单说明数据量地庞大，从更加严谨地角度来说，大数据是具有较为复杂的、多样的、重复的一个大数据库特点的数据。从当前国内的科学技术的发展前景来看，是可以提前预料大数据的产生的，大数据与较为传统的计算技术不同，大数据具有更多的优势，比如说价格相比而言较低、其规模性更大、对于资源的利用率有着更高的比率。同时，由于大数据自身具有复杂的特点，就能够更紧密地对信息之间进行关联。此外，大数据能够更加完整的保存数量庞大的数据，这也是大数据最为关键的一个优势。大数据的主要技术包括有分类分析、机器学习与遗传算法等等[1]。

同时，与传统数据挖掘相比而言，大数据更加具有决策力与洞察力，除去能够奠定计算机技术的发展基础以外，同时能够对于人们的社会与生活的发展产生巨大的影响。大数据实际上是一种技术性的改革，同时属于技术性的改革的还包括自动化生产、无线网革命等等，这些都是新时代的重要发展工具。

1.2 网络信息处理技术概论

当前，所有的信息也正处于从一个电子信息的形式逐步转变为无形化的发展方向。社会活动也正逐渐向无形化趋势发展，这能够极大地减少人们的活动时间，缩小人们的活动空间。这一优势极为明显的体现于网络信息处理技术。相比较为传统的手段，网络信息处理技术能够在储存介质以及快速复制、查询速度上带来很多新的处理方式。计算机与网络的发展给人们带来的源源不断的利益，网络信息处理额能够帮助人们运用各类心理进行信息处理技术地新加工从而生成新的信息、新的资源，进一步结合自身需求进行筛选运用。在这样的情况下，人们能够更加及时、方便的获取自身所需求的信息从而更加有效地进行信息管理，加深信息流通的效率，大大减少办公的成本。对于企业、院校、政府等等工共组织等等沟通、交流、合作的实现提供了助力。

2 大数据下网络信息处理技术的剖析

2.1 信息收集技术

网络信息处理技术的首要步骤就是信息的收集工作，只有在信息收集过后才能进行下一步的数据加工传播、储存应用等等工作。信息的收集就是通过利用现有的计算机的相关软件技术针对特定的数据源进行实时的采集与收取，同时还f可以深入挖掘处理将结构化的一些必要信息进行提取处理并输入机构化的相关数据库中，这个过程能够为各类的信息系统进行数据输入。同时，有效运用网络技术能够保障在收集过程中信息的完整、全面性。与此同时，也能够加速数据的搜集效率以及收集数量，从而保障信息技术的搜集高效性。

通过网络信息的采集系统，能够更好地帮助信息采集工作的有效进行。信息的收集系统往往通过网络的信息搜索引擎为系统的基础。这样的系统能够在最少的时间得到最新的信息，同时将这个存在于不同网站的信息进行统一的采集并分类、整理、统一，并能够最早的将信息整合并发布于自身的数据站点，进一步保证信息的新鲜性，从而辅助人们进行高效的学习办公。

在我院進行相关信息收集时，信息挖掘可以用的工具包括有KNIME、ORANGE等等，能够对分词进行处理、提取关键词从而对信息进行整合。同时，不可否认的是，当代网络用户所面临的问题不再是信息匮乏，而是信息鱼龙混杂、信息过载。通过信息采集也是对于舆情分析的一种主要手段，对此我院通过爬虫PYTHON、Heritrix来对信息进行收集筛查。

2.2 信息加工技术

在通过计算机网络技术的信息采集系统进行相关的信息收集之后，网络信息处理技术就可以进入下一阶段，对信息进行加工。信息的加工处理技术就是指通过利用设立的网络信息加工系统对收集的信息进行分类、标记、整理、加工一系列过程的技术。信息处理技术可以简要的分为三个板块：整理、测量、统计。整理即是指将网络信息采集系统所搜集到的有效信息从混乱、零散、无规律转换为有秩序的、完整的信息。测量即是指通过对所收集到的信息进行属性分析判断，从而进一步的摸索特点从而更好地投入运用中去。统计即是指通过对统计学的相关理论知识进行结合，将收集的信息进行较为统一的整理，事数据变得更加完整、有序、可控、利于应用。

同时信息的加工也包括信息的预处理，信息数量极为庞大的，我院一般将较为原始的数据储存于PostgreSQL数据库，进一步通过将数据库转化为txt格式文件、使用停用词分析筛选无用信息。

2.3 信息传播技术

在大数据的时代下，网络信息的处理技术中最为关键的一项技术就是信息的传播。在经历过信息的收集、加工之后就进入传播的阶段。信息只有经过传播才能够引起社会的注意，从而得到认同肯定后被社会更加广泛的投入应用，从而更好地服务于社会。经过网络信息传播的数据信息往往以数字的形式存在于储存介质之中，并通过计算机的网络进行更加高效的传播，进一步运用计算机等信息设备进行查阅使用[2]。信息传播需要网络作为传播媒介，来进行信息的传递交流从而更好地进行利用。网络信息的传播能够更好地将信息传递给社会，使得人们更加便捷、及时地得到有效信息从而更好地进行学习办公。同时通过网络进行信息传播存在着许多的优势，例如说其具有很高的互动性与及时性，能够及时地关联到多个用户得到相关的信息反馈;同时具有个性化以及传播代价较小的等等优点。

2.4 信息储存技术

通过网络信息处理技术的处理后，信息能够得到有效的收集、加工、传播，在这个过程中，信息就需要载体进行储存，信息经过储存后，就给网络带来了“记忆”，或者说“痕迹”，在后期再次需要相关的信息运用时就可以更加及时高效的将信息调取出来进行利用。

前文反复提出，大数据时代最具有的明显特点就是数据量的庞大，通过网络信息储存系统的处理，就可以进行大容量储存、长时间储存，同时该项技术也具有更加方便地存取的优点，这一点能够在很大程度上对人力资源的压力进行减缓，对于空间与时间也能够在最大程度上的进行缩小。在人们的日常生活与工作中，人们已经离不开网络储存技术的运用。比如说在网络中储存的大量的学习信息资料，企业的相关资料与档案等等。通过对网络信息处理技术进行信息的储存能够使得数据时代下，大量得数据信息具有很高的归属性和分类性，能够更加方便人们的查询使用[3]。

在信息得到收集、加工后，我院主要将信息储存于PostgreSQL数据库，从而进一步进行相关数据的提取等等。

2.5 信息应用技术

网络信息处理技术进入最后一个阶段就是信息的应用，所有的网络信息处理技术都最终服务于网络信息的应用。网络信息的应用也随着计算机网络的高速发展形成了一个较为成熟的技术系统，在这项技术的发展之下，各类的应用软件也在不断地被研究开发出来，这些软件在不同的行业、领域中都发挥了极大的作用，使得人们的生活、学习、办公都变得更加高效、方便[4]。这里我们可以通过举一个比较便于理解得例子来概括这项技术在所有领域中相关应用;以自动化智能办公为例，自动化智能办公就是指在当下发的网络信息技术的背景下，通过对网络信息处理技术与现代的办公系统进行整合的一种新型的办公形式。自动智能化的办公同样经历了一系列的发展阶段。而这项技术的在办公中的应用对于办公效率而言有着极高的改善的作用，同时更加便利于人工的相关学习、管理工作。对于企业而言更是能够推动企业发展的有利武器，它能够更加便利于企业内部员工以及各部门之间的沟通交流，从而促进企业内部办公运行的效率，对于企业建设与企业发展都有着基础又推波助澜的作用。

3 大数据时代背景下网络信息处理技术所面临的挑战及机遇

3.1 网络信息安全性的高需求挑战

在大数据的时代背景下，网络正处于一个高速发展的时期，每日产生的数据已足够庞大，但依然呈持续上涨的趋势增加。在这样的情况下，无论是对于企业而言还是对于个人而言，数据信息的安全问题就成了人们无法忽视的问题。打个比方说，当前对于人们而言，网购已经成了日常购物占比极为庞大的一部分，而在进行网购的过程中，若是对于网络信息没有多加注意鉴别就有可能进入网络的一个黑洞，从而产生很大程度的网络信息的安全上的隐患，更对由信息泄露引起的经济损失产生一定的威胁[5]。故而，对于网络信息而言，还需要格外地注重信息的真假性，由此，也应当由国家进行相关政策的制定，从而进一步维护网络安全，同时相应的一些机构可以通过建立一些有效的安全举措来保护数据的安全，从而避免信息泄露造成的财产损失。

3.2 对于高素质人才的高需求挑战

在大数据背景下，除去对于网络信息处理技术提出更高的要求也对相关工作人员的专业素质提出了一定的要求。网络信息技术虽然在近些年间发展较为迅猛，但相较而言，还是属于新兴的产业，对相关性的专业人才也具有很强的需求性。但当下社会除去需求高专业素养的人才以外，还需要人才具有更高的综合素质。故而，对于已有的相关专业人才，应当定期的加强相关培训[6]。此外，除去专业技术型人才以外，对于管理层的人才的缺口相对而言更大一些。这就需求相关的领导者应当转变较为传统的思维模式，通过对数据、管理为参照的相关依据进行相关人才的选拔。时代在进步，人们的思想与创意也在不断进步，经验不应当成为一种限制，也不能成为一种定论。

3.3 数据深入发掘对新产业的刺激机遇

对于不同的数据进行充分的分析了解后，在巨大的数据库中寻找出一定的规模的方法称之为数据发掘。数据的发掘能够在很大程度上提升决策力。在平时进行数据处理时，常常会出现一些数据库庞大，但缺乏信息的情况。针对这种情况出现的原因就是在一开始的准备阶段就出现了问题。当网络系统较为简单化，数据库的数据信息整理录入、查找统计等等无法及时的提取出有效的信息，从而无法掌握信息的规律性，进一步使得系统不能够对大量的信息进行处理。所以，对庞大的数据库进行更为准确的分析就能够更加准确地得到行为习惯与兴趣爱好等等信息，再经过相关人员进行整理处理并提出针对性决策从而增加工作者的工作效率，进一步推动企业的优良发展。

举个例子来说明这个问题：在我们在进行“百度搜索”时，会发现在输入关键词后能够看到系统自动弹出相关的关键词[7]。这就是浏览器对于所有搜索样本点击的关键词进行了有效的整合与处理从而进一步进行分析，更加充分的发掘出具有代表性的词条，从而能够提升信息应用效率，改善用户获得信息的效率性，从而获得用户的好感，进一步锁定用户。

3.4 云计算的机遇

在大数据的时代背景下，云服务技术也在不断地发展。云服务通过对数据进行集中处理从而达到云计算的方式在各个平台、电子设备上进行相关的数据交换的目的。通过这样的方式能够给需求者提供更多有效、可利用的资源。在当前各项技术都在迅猛发展的状态下，云服务也在不断完善，云计算的意识也在不断攀升，逐步实现网络信息处理技术与云计算共同结合的新形势[8]。

4 结束语

在大数据时代背景下的网络信息处理技术包含了信息的收集、加工、储存、传播等等技术工作。大量的数据信息在网络信息的处理技术下从杂乱无章、零碎不齐、毫无规律逐步变为有序的、高效的、可利用的信息。这些数据信息也变得更加合理、便捷，能够更及时地在人们的日常应用中被获取，从而为人们的学习办公提供更有效的支持。

参考文献：

[1] 田文涛.大数据时代下计算机信息处理技术研究[J].黑龙江科学，2019，10（12）：86-87.

[2] 杨成.初探大数据时代如何运用计算机信息处理技术[J].网络安全技术与应用，2018（3）：54，59.

[3] 张华.大数据时代计算机信息处理技术探析[J].信息系统工程，2018（2）：137-138.

[4] 孙婷.大数据时代计算机信息处理技术及应用研究[J].中国战略新兴产业，2019（12）：121，123.

[5] 周宝富.大数据时代计算机信息处理技术分析[J].信息与电脑：理论版，2019，422（4）：12-13.

[6] 景奕然."大数据+计算机"是强强联手还是暗藏危机？——以信息处理技术为例[J].中国新通信，2018，20（23）：110-111.

[7] 唐和卿.基于大数据时代的计算机信息处理技术浅析[J].网络安全技术与应用，2019（5）：10-11.

[8] 冯含枫.计算机在大数据时代下信息处理技术[J].計算机产品与流通，2019（2）：105-105.

【通联编辑：李雅琪】