网络安全分析中的大数据技术应用

摘 要：随着世界科技与经济的不断发展，计算机逐渐地走进普通百姓的家中，计算机从最开始的DOS系统逐渐演变为286，386。从最开始的需要应用汉化软件，最后来的多种语言可视窗系统Windows95，Windows98，Windows XP，Windows7，等等一系列微软开发的可操作系统，大大方便了人们的生活。全世界也从上一次的工业革命开始迈向互联网革命。在互联网惠及千家万户的今天，人人都可以通过网络快速了解世界，人们可以上网了解很多知识，但在这一过程中，网络是否安全成了又一个问题，人们在使用网络之时经常受到黑客，木马程序，恶意软件的攻击，由此，网络安全，数据安全，越来越成为人们关注的焦点。如何应用相关技术守护网络安全呢？本文详细阐述了在网络安全这一大课题中大数据技术的应用策略。

关键词：数据安全;网络安全;技术应用

提起网络安全，人们第一个会想到的就是杀毒软件，例如，360，金山毒霸，等等这些性能优异的第三方杀毒系统。但是在现如今，什么是网络安全，它的含义早已不局限于此，网络安全是指网络系统的硬件，软件及其系统中的数据受到保护，不因偶然的或者恶意的原因而遭受到破坏，更改，泄露，系统连续可靠正常的运行，网络服务不中断。现如今大数据技术风靡全球，如何将大数据技术应用到网络安全中去，成了现在最热门的课题。

一、 什么是大数据应用技术

大数据技术，指无法在一定时间范围内用常规软件工具手段进行数据捕获，处理，管理的所有数据的集合体管理应用技术。而在这一过程中还涉及一个云计算的概念，大数据与云计算的关系就像是一枚硬币的正反两个面，大数据无法用单台计算机进行处理，必须采用分布式的计算架构方式，它会对数据进行海量的挖掘，使用云计算的分布式数据库，分布式处理，再使用云存储技术将大量的数据存储起来。简单地说大数据是一个很大的概念，而云计算技术就像一个大的装载容器，将大数据完美的存放存储起来。

二、 大数据技术在网络安全中的应用

（一）大数据技术在网络安全系统组织架构的应用

想要弄清楚这一问题，我们先了解一下网络安全系统的组织结构，它包含数据收集，数据缓存，数据结果分析，数据结果展示等几大结构，这几大结构互相独立却又息息相关，为了保证网络安全，一个优异的网络安全系统必须具备大规模的数据收集能力，大空间的云存储能力，并且还必须具备智能的分析数据展现数据的能力。在这一过程中必须应用统计数学上的分布式数学计算方法，实现对数据的分布式收集，存储，分析，展现。

（二）大数据技术在网络安全系统数据采集层级的应用

在采集数据这一基础阶段，大数据技术会对采集的数据进行识别通过STORM，FLUME，等相关技术对采集到的数据进行整合加工，分析大量的数据里，哪些数据是没用的，哪些数据是有用的，并将有用的数据进行打包，在传输之前确定不同的数据形式以相应的格式进行缓存，然后提供给运营代理商和个人用户。

（三）大数据技术在网络安全系统数据存储阶段的应用

在对网络系统安全数据采集完毕之后，我们需要将这些网络安全数据存储存放起来，在这一过程中需要分析收集到的各种数据的类型结构，根据不同的数据类型对大量地收集到的数据进行分类的存储。这样做是为了保证数据应用阶段，对数据查询检索和应用的高效性。

在大数据存储阶段，利用HBASE，GBASE，等信息存储方式，对海量整合之后的数据进行存储安放，自行根据相关网络安全协议的要求对存储数据进行大规模调整，利用分布式计算方法对数据临界点进行深度解析解读，并自动形成专业的测试报告，提出相关的预警信息和网络安全信息分析报告。

大数据技术在这一阶段中的应用效果是十分显著的，它采用了独特的数据存放方式实现了对大批海量数据的有效整合分析，并会自动分析这些海量数据的类型结构，采用统计数学中分布式数学统计思维，分门别类地将收集到的海量数据进行有理有据的划分，从实质上讲这一阶段，是大数据技术在网络安全中发挥的独特作用的集中体现，传统的网络安全技术在存储安全威胁数据时，需要大量的繁杂的存储空间，对空间的利用率也不尽科学，对存储数据结构的层级设计也不够完美，这就造成了存储数据大而空，做不到数据的空间科学分配，结构分布不合理，存储效率低，在一定程度上限制了网络安全防范的基本能力。

（四）大数据技术在网络安全中的数据分析索引阶段

在完成了数据的捕获和采集存储之后，需要对采集和存储到的信息进行分析整合。大数据云计算技术中，采用MAPREDUCE方式对数据进行索引。在数据分析整合之前必须对有效的网络安全分析数据进行快速精准的索引。这一技术的应用完美地解决了这一现实问题，这种技术会在索引查找数据之时对所查找的数据进行统计学中的二次计算，以此来提高索引参数数据的准确性。提高索引效率，把威胁网络安全的因素最大限度地扼杀在摇篮里。

在利用上述技术对数据完成索引之后，主要的要进行数据的分析解读，大数据技术当中，采用SPARK技术和STROM技术对收集存储索引的特有数据进行分析，除此之外，还要解决数据的远距离传输过程中涉及的问题，远距离传输数据过程中可能会出现对数据的监控捕获不到位，传输数据有丢失的现象，大数据技术中采取复杂事件处理技术，使用科学的方法避免了远距离传输过程中数据的监控捕获不到位，数据传输效率低，易丢失的现象。这一技术的应用给网络安全工作中大数据技术的应用提供了坚实的保证。

三、 結束语

综上所述，在现如今的复杂的网络环境之下，想要保证网络安全，采用大数据技术是势在必行的，大数据技术能够通过分布式的计算模式对网络安全威胁数据进行科学高效的收集，存储，索引，分析，整理，在很大程度上改变了传统的网络安全防范工作的整体模式，更加高效更加快速地捍卫了网络安全的相关工作。在越来越错综复杂的网络安全环境中筑起了一道坚固的防火墙，给大众带来了福音，为我国的网络安全分析工作质量提供了极大的帮助。

参考文献：

[1]孙玉.浅谈网络安全分析中的大数据技术应用[J].网络安全技术与应用，2017（4）：102.

[2]王颖.网络安全分析中的大数据技术应用探究[J].电脑知识与技术，2017，13（33）：20-21.

作者简介：

郭志林，四川省乐山市，成都理工大学工程技术学院。