网络大数据应用现状与展望

陈东风 时小麟 孔兴

摘 要：随着互联网、云计算、大数据等领域的快速发展，数据的应用范围日益扩大。网络上每时每刻都在产生海量数据，网络大数据的出现改变了人们的生活，也对企业的经营管理产生了极大的营销学，甚至还引起科学研究的改变。本文以目前网络大数据的应用情况为研究对象，并对大数据科学、数据计算需要的新模式与新范式等方面的发展趋势进行了展望。

关键词：网络大数据；应用；数据挖掘；展望

DOI：10.16640/j.cnki.37-1222/t.2018.20.216

0 引言

通常大数据是指无法在一定时间内用常规机器和软硬件工具对其进行感知、获取、管理、处理和服务的数据集合。网络大数据的存在着巨大的机遇，但是如何有效的应用网络大数据，逐步成为了热门研究课题，具有了现实的研究价值。

1 网络大数据研究的作用

1.1 捍卫国家网络空间数字主权

深入研究网络大数据，可以捍卫国家在网络空间领域的数字主权，以保障社会稳定，推动社会经济健康平稳发展。在信息技术高速发展的背景下，国与国之间的竞争已经蔓延到网络大数据领域，一个国家对数据的解释和灵活运用能力凸显出这个国家的这个国家的竞争力。一个国家如果不重视网络大数据的研究，轻则会导致其内部产业失去战略发展良机，重则会在网络空间领域面临严重的国家安全威胁。

1.2 国民经济核心产业信息化升级的重要推动力量

在国民经济急需发展的背景下，国民经济核心产业迫切需要进行信息化升级，而大数据可以为这一工作提供良好的助推力量。“人、机、物”三位一体的发展模式将会带来大量数据。网络大数据如何有效的运用已经是困扰业界的难题。要想要目前网络大数据应用中存在的问题，需要对网络大数据的各種共性问题加以研究和解决。例如，分析非结构化数据并对其进行统一表示，这一方面目前还缺乏有效的工具和方法。通过对网络大数据共性问题的分析研究，可以让企业具备更强的大数据处理能力，以大幅降低这一过程当中所消耗的代价和成本，进而让各个行业能够顺利迈入信息化和数字化的新的发展阶段。

1.3 促进新兴产业发展

随着网络大数据不断取得各种科技突破，由此也产生了数据材料、数据服务、数据制药等新兴产业，这些产业的出现和发展，为人们理解和分析以及管理数据提供了种种高效的方案，由于大数据本身数据量巨大，数据存在冗余，数据具有高度的复杂性。因此大数据的处理和分析必须要依赖于专业的企业，如此一来就催生出大量的新兴产业，这些行业在网络数据的驱动下，不断进行大数据研究，以提高企业大数据利用效率、降低数据管理成本、提高生产力。

2 网络大数据的特点

2.1 数据的不确定性

对于网路大数据而言，由于其原始数据存在不准确的特点，且受数据集成和展示、应用需求、数据采集处理粒度等因素的影响，不同数据之间普遍存在一定程度的不确定性。传统的数据处理方法无法解决海量大数据的应用。因此，数据的筛选和挖掘面临着较多的难题，其中最大挑战就源自数据的不确定性。

2.2 模型的不确定性

数据不确定性的客观存在就要求人们在处理数据时能够以更加灵活有效的方式，有效规避这种不确定性。因此，在模型构建过程中，必须要保证模型能够有效应对数据不确定性和复杂性，从而得出良好的数据处理结果。由于数据处理和数据分析的需求不同，数据本身具有高度的复杂性和不确定性，在实际的数据管理所构建的模型中，同样存在复杂性和不确定性。对于不同的具体的应用需求，模型具备独特的结构和特征也是不同的。

2.3 学习的不确定性

事实上，模型的参数个数以及复杂性不仅会受到的学习模型参数值的变化而变化，同时也会因为不同数据类型、不同领域、不同应用需求而出现变化，因此，不确定性非常明显。由于此类模型需要复杂的计算，如何将其并行地、分布式地在网络大数据领域中运用，还有待进一步研究和探索。

3 网络大数据的应用

3.1 基于内容信息的数据挖掘

随着社会媒体的出现和壮大，互联网信息搜索面临着新的问题。相关研究的重点也不再集中于抓取海量数据、优化索引结构、分析查询等领域，而是变成提高检索质量、排序学习算法等方面。借助排序学习模型，可以将普通文档转化为特征向量，然后根据特定的损失函数对其加以优化，当前被广泛运用的模型难以满足用户需求多样性、相关性以及重要性等各种目标的排序需要。

3.2 基于结构信息的社会计算

所谓社会网络，就是将社会媒体的用户当作节点，以用户之间的关系为连边所形成的巨大网络。它不仅能够反映出用户的社会关系，也可以承担用户间的交流和信息交互任务。在整个社会网络当中，不同的用户个体往往会因为亲缘关系以及相同爱好等原因而出现各种紧密联系的圈子，这种圈子也被称为社区。社会网络中的社区结构是非常常见的，社区结构有助于网络的信息扩散、网络演化以及高效搜索。

3.3 网络大数据在搜索引擎的应用

对于搜索引擎而言，在大数据平台的出现和快速发展的背景下，其更能够做到对数据的深度处理和加工，从而有效的掌握用户的搜索意图。在此基础上，用户将不必自行去筛选信息，搜索引擎可以直接为用户做到这一点，将用户所需要的、有价值的信息呈现在用户面前。由此可见，大数据平台正在深刻影响着不同行业，合理有效的运用大数据平台，将会令人们的生活更加高效和便捷。

4 结论

网络大数据的海量数据具有巨大的应用价值，但同时网络大数据呈现出较大的复杂性，数据的内容和关系更加的繁杂，应用的难度更高。需要对网络大数据进行分类和针对性的挖掘，通过多种工具应用网络大数据的信息，提升网络大数据的应用价值。

参考文献：

[1]王元卓，靳小龙，程学旗.网络大数据：现状与展望[J].计算机学报，2013（06）.

[2]李文莲，夏健明.基于“大数据”的商业模式创新[J].中国工业经济，2016（05）.

[3]王珊，王会举，覃雄派，周烜.架构大数据：挑战、现状与展望[J].计算机学报，2011（10）.

[4]孟小峰，慈祥.大数据管理：概念、技术与挑战[J].计算机研究与发展，2013（01）.

[5]庄昌武.大数据在广电网络运营工作上的应用[J].西部广播电视， 2016（21）.