网络安全中大数据技术支持的应用分析

王伦生 柳景峰

随着计算机技术飞速发展，现代社会开始步入全面的信息化时代。信息网络已经成为社会运转不可或缺的一环，许多年轻人已经养成了“机不离手，机在人在”的习惯，可见互联网技术在人们日常生活中渗入之深，但随着信息技术的发展不断加快，一个危险的问题也在困扰着人们，那就是信息泄露，大数据时代，网络会根据人们在网页上浏览过的记录、留置的信息，而主动的为潜在客户推送他们所需的信息，这表面看起来非常的“善解人意”，可实际上从侧面来看这就是一种露骨的“信息泄露”，你的喜好、习惯、浏览记录都一一陷入了大数据的监控之一，宛如科幻电影中的“天眼”。还记得不久前播出的电视剧“长安十二时辰”吗？靖安司的“徐斌”最擅长从重重叠叠的档案记录中挖掘出有用的讯息，剧中称之为“大案牍术”，其实就是相当于现实世界中的大数据技术。对于大数据这个概念，麦肯锡全球研究所将其定义为一种获取储存和管理及分析管理方面，远超传统意义上的数据库的数据集合体，相对一般分析软件的局限性和有限性不同，大数据技术通过整个网络罗织信息，将之收集、存储，然后分析信息主人的表达意图，提供相应的服务。

一、在传统网络安全分析中应用大数据技术的原因

随着现在网速越来越快，数据流动和增长的效率都是呈现直线上升的趋势，这虽然可以淋漓尽致地发挥出互联网的服务功能，却在互联网安全工程上埋下了不小的隐患，主要表现在以下两个方面：其一，数据每分每秒都在进行飞速的更新换代，网络安全分析部门根本无法驾驭住这种变幻莫测的更新速度，如何在有限的时间里及时分析数据信息并将其处理，是互联网人必须思考的问题，网络安全分析系统最重要的基础就是搜集精确和准确的信息流，以此加快在处理信息上的效率，同时又要保证数据分析的结果拥有足够的可靠性，这给网络安全分析工作添加了沉重的负担。其二，相对传统的网络安全分析系统中，向来采取结构化数据库来储存数据，但此种数据储存方式建设成本太大，网络安全部门无法承担这么大的消耗，一般会降低数据的大小，在不超出成本的前提下，提高数据储存的容量，但这种技术在处理过程中，容易在过长的入库储存过程中丢失数据，无论在分析速度上还是在查询效率上都十分缓慢，这些问题的出现都说明了大数据技术替代传统网络技术的必要性。

在现代的网络安全分析中应用大数据技术具有显著的效果。首先，大数据技术对于安全分析系统的数据存储量非常惊人，可高效率的进行网络安全分析工作。其次，合理的运用大数据技术能够降低成本，大数据技术的分布式数据库在运营成本上的费用远远少于结构化数据库，没有硬件要求，在性能很差的端也能稳定运行。最后，大数据技术的运用可以充分提高存储和处理异构数据的效率，进一步提高网络安全分析系统的数据分析精度。

二、网络安全分析中大数据技术应用的作用

（一）数据采集

运用和等工具，可以分布式采集数据，这种数据采集方式极具效率，每一秒钟能够采集到的数据信息量有数百兆之多，在日志数据信息上的处理有着巨大帮助 。

（二）数据存储

在网络安全分析过程中需要储存大量安全数据，大数据技术可根据不同类的数据，采取不同的存储方式，从而大大提高处理数据的效率，以列式存储方式去储存日志信息等类型的数据，使用分布式计算模式分析经过标准化处理的数据。分析处理完数据后，将分析结果存放在列式存储部分，采用流式计算处理即时数据。

（三）数据查询

作为系统基础，组建相应的查询模块，查询数据时对应的节点，会分别自动采取不同的指令，处理完毕后，整理各个节点的处理结果，这种查询方式具有高效的反应和处理速度。

（四）数据分析

网络安全分析系统可以从两个方面来分析数据的计算方式，第一种分析实时数据。以流式计算作为基础，配合技术，复杂事件处理和关联分析算法，对监控和处理实时数据进行综合解析，在极短时间内查找出异常的数据信息。第二种是综合分析处理统计数据和历史数据。可以采用分布式存储和计算，来处理这种对于时效性没有太高要求的数据，结合多种数据处理技术对其深化处理，有效的规避数据风险。

（五）分析处理复杂数据

大數据技术具有储存、分析和查询数据上得天独厚的优势，能够有效的构建异构数据，分析处理系统安全隐患和关联性攻击。应用大数据技术，可以全方位分析处理僵尸网络等网络安全问题，综合检测潜在隐患。

三、大数据技术对于安全网络系统有战略意义

大数据技术拥有庞大的信息网络，但它的优势并不仅仅于此，它的优势在于合理的运用这些虚拟的却暗藏无数情报的庞大信息量，换而言之，要是把大数据比喻成一座企业，那么让这座企业盈利的原因不在于多么过硬的业务能力，而在于清晰的战略导向和明确的战略方针。如何能充分利用这些信息中包含的“虚拟价值”，通过“信息加工”实现信息数据的“信息增殖”是大数据技术目前不得不思考的一个问题。

以更形象的说法来看，大数据和云计算就人的左右手一样，缺了左手，缺了右手都不能够协调的运作。大数据信息量巨大，单台计算机无法负荷，跟何况大数据是经由无数网络平台共同组建而成的架构。它的功用是在海量数据中过滤掉无用的垃圾信息，找到真实可靠的有用信息将之加工处理。大数据技术的基础必须建立在云计算的分布式处理、分布式数据库等强大功能之上才能够运作。现代社会的信息流通十分的快捷和便利，人们之间的交流通过“支付宝”“微信”“推特”变得越来越轻松，生活也越来越愉快，大数据就是这个时代应运而生的产物。“阿里巴巴”前董事长马云就曾经说过，未来的时代是取代的时代，从马云的话中我们就可以得知大数据技术对于阿里巴巴的坚实分量，甚至于对整个互联网行业来说都是至关重要的。

有人把数据比喻为一座大山，山中有黄金有白银有黄铜，也有砂砾有岩石有草木，如何能在数据的这座大山里挖掘到你想要的黄金或者白银，就是大数据技术的关键。与此类似，大数据的中心不在于庞大而在于运用。数据量的庞大只是一方面，学会如何使用这些庞大的数据量获得利润才是大数据要表达的真实意义。对于各行各业而言，如何利用这些大数据技术在竞争激励的未来商场杀出一条血路，是他们冥思苦想的问题。大数据技术价值有以下几点：企业可以充分利用大数据的分析与搜集信息的能力对大量消费者提供产品或服务的精准营销；中小企业可通过大数据进行服务转型；传统的行业面临高新企业与互联网企业的激烈竞争，必须改变形态，需要与时俱进充分利用大数据的价值。

大数据是一柄云时代和数据时代培育出来的“双刃剑”，这柄宝剑正面可以帮助人类更快更高效的分析数据收集信息，解决了人们很多的麻烦，提供了生活中的很多便利，反面则是在信息的搜集和处理中，无形中将人们的私密信息都泄露了出去，可能在无形之中，你已经向数据构成的虚拟世界“袒胸露背”，你的信息完全暴露在公众之下，这也是人类在网络技术不断发展和升级的今天所要警惕的，到底大数据技术利大于弊还是弊大于利，该如何防止大数据技术本身的弊端，取其长处，是现在要思考的问题。

大数据与传统网络技术相比具有无与伦比的决策力，敏锐入微的洞察发现力和改革创新的流程优化能力，海量处理多样化的信息流的能力。随着大数据融进我们的日常生活当中，可以帮助企业做出更多广泛的业务决策，减少风险。

作者单位：山东济南市山东商业职业技术学院