APP下载

大数据时代下数据挖掘技术的应用研究

2019-09-10李华张井玲刘婷婷

现代信息科技 2019年13期
关键词:数据挖掘大数据时代

李华 张井玲 刘婷婷

摘  要:大数据时代是目前世界发展的潮流与趋势,随着智能化与信息化的快速发展,大数据成为目前主要的研究课题。通过对大数据的研究,各行各业的行业人士更加容易掌握行业的相关信息,从而促进了行业的发展,同时,大数据对于某些服务类公益类活动也有着极大的帮助。大数据时代的研究主要是指数据挖掘技术,毕竟在此时代,数据的纷繁众多使得有巨大价值的数据不被重视,数据挖掘技术的重要性在此刻就凸显出来。本文通过文献的大量搜集,进行相应的分析综合,从大数据以及大数据挖掘技术的含义、大数据挖掘技术的具体应用以及最为主要的应用的改进三个方面进行详细的阐述与研究,旨在促进大数据时代的发展,促进大数据挖掘技术的完善。

关键词:大数据时代;数据挖掘;技术应用研究

中图分类号:TP311.13      文献标识码:A 文章编号:2096-4706(2019)13-0132-03

Research on the Application of Data Mining Technology in the Age of Big Data

LI Hua,ZHANG Jingling,LIU Tingting

(Shandong Huayu University of Technology,Dezhou  253034,China)

Abstract:The era of big data is now the world tide and trend of development,with the rapid development of intellectualization and informatization,big data as the main research subject,based on the research of the big data,make relevant information from all walks of life are more likely to be mastered in the industry to promote the development of some industry,at the same time,the big data for some public welfare activities of the service industry has a great help,the research mainly is the index of the era of big data,according to the mining technology,after all,in the era of the numerous and complicated data makes the great value of the data is ignored,the importance of data mining technology is highlighted at this moment. Through the huge collection of literature,this paper analyses the corresponding comprehensive,from the meaning of big data and the data mining technology,the application of the technology of data mining,and the application of the most main improvement three aspects in detail elaborated and research,to promote the development of the era of big data,promote the improvement of the technology of data mining.

Keywords:big data era;data mining;technical application research

0  引  言

大數据时代是目前世界发展不可逆转的趋势,随着智能化、信息化的发展,互联网技术的应用在目前已经非常普遍,互联网技术承载着成千上万的各种信息,这些信息的载体就是大数据。对大数据的研究,特别是对大数据挖掘技术的应用研究,有利于在众多信息中寻找到更为有价值的信息,促进大数据时代的发展,从而促进世界的进步。本文主要从三个方面就大数据挖掘技术的应用进行研究,通过文献搜集的方法对各种相应的文献进行分析和综合,旨在为日后大数据挖掘技术的改革提供理论参考意义。

1  大数据及大数据挖掘技术的含义

1.1  大数据的含义

大数据时代是目前正在发展且逐渐完善的时代,大数据是承载着众多信息的载体,通过对大数据的研究,可以了解掌握各种有价值的信息,大数据是互联网时代的基础,是不可动摇的根基,通过对大数据特点的分析,可以为日后对各行各业信息的掌握提供参考。大数据有着众多的特点,其中有几个较为特色鲜明的特点:

(1)大量化。大量化指的就是数据的量较为庞大,几乎囊括所有信息,这样,获取较为有价值的信息就会异常艰难,犹如大海捞针,所以在后文将会提到数据挖掘技术,主要是针对大数据的大量化特点找出相应的技术支持。

(2)多样性。所谓多样性是指其涉及信息的种类多样,并非指的是单纯的数量,其中包括信息的表达方式多样等等,多样性充分展现出大数据值得挖掘和探索的价值,通过对其进行深刻的研究,可以找到需要的各种信息。

(3)快速化。这是互联网时代的优点同样也是大数据时代的特点,快速化指的是寻找有价值信息的过程并非繁琐且需要长时间等待的,而是能够很快找到相匹配的结果。快速化使得大数据的特征更为明显,研究更为有意义。

1.2  数据挖掘技术的含义

所谓数据挖掘技术就犹如表面展现的那样,是从各种大量的信息中快速找到有用或者有价值的信息,以便更好地完成寻找数据的过程;还有在数据进行模糊表达或者数据呈现的含义不清时,对数据进行深层次的剖析,以便完全掌握数据想要表达的内容的过程;同时,就找到的各种信息进行分析综合,直接找到数据想要表达的含义。它属于一种新型的数据处理技术,通过数据的处理实现对信息的掌握。数据挖掘技术的特点为循环往复,及对使用的数据进行多次反复地分析,以便寻找到数据在某一层面有着更为深刻的含义。多次反复分析是数据挖掘的基本,不能丢掉每个有价值的信息是数据挖掘技术的根本,也是其宗旨。

数据挖掘技术的实施过程较为复杂,并且有着多种相应的方法,无论哪种方法,其实施的步骤基本一致,首先,是对要进行挖掘的数据分析判断其是否具有挖掘意义,其次,对于将要挖掘的数据进行筛选,将基本无用的残余信息进行清除,防止数据量过大,耗费时间过长,最终,对数据进行深度挖掘,找到想要得到的结论或者信息。目前针对数据挖掘技术的研究十分有必要,它的研究可以促进各行各业的发展,找到与行业相适应的市场预测,使其按照行业内发展趋势进行发展。

2  大数据时代下数据挖掘技术的应用

数据的挖掘技术在各行各业的发展中都有着极为明显的应用,本文将分别就数据挖掘技术在教育行业、电信行业以及科研行业进行应用研究,通过对其应用研究的了解,为下文提出相应的提升改进举措奠定基础。

2.1  教育行业

目前,教育行业的发展明显在逐步走向智能化与信息化,数据的挖掘技术在教育行业的应用极其明显,随着慕课、翻转课堂等新型课堂模式的出现,免不了使用多媒体或者互联网技术进行配合。大数据的挖掘技术更为主要地应用于教学信息管理或者评价中,例如在教学信息的管理中,如何使得教学信息有效保存并且被众多教师或者在线平台的使用者看到,就需要数据挖掘技术的应用,还有在教学评价中,对于教师的各种行为进行有标准的评价,评价后的总结也是数据挖掘技术的应用。在众多的信息中,找到某种相应的信息进行归类、分析、综合是数据挖掘技术所要达到的,数据挖掘技术使得教育行业的发展更为快速,使得各种信息可以更为有效地发挥其应有的作用,值得在日后继续发展。

2.2  电信行业

电信行业同样是我国发展的朝阳行业,随着智能手机、智能电视等的普遍发展,电信行业的发展也日益快速。电信行业想要健康有效发展,需要对数据挖掘技术的应用进行相应的研究。4G、5G时代的到来使各种网络信息纷繁复杂,不少的信息是无用信息,甚至是有害信息,其中,黄赌毒信息对于电信行业的伤害是不可低估的。数据挖掘技术可以将有益信息与有害信息进行选择分类,呈现出有用信息。电信行业对于各种信息的分析处理也要密切地关注,尤其是对各种信息的整合需要耗费一定的时间,在进行数据挖掘时,确保将要进行分类管理的信息是有益信息是很困难的,需要专业人员逐步在实践中进行摸索。

2.3  科研行业

科研行业的信息更是不计其数,就单拿中国知网的数据库来说,里面的有价值信息不计其数,科研文章,期刊,论文等等,需要及时选择分类,将属于一类的文章进行分类搁置;对于信息的重复等问题也是数据挖掘所要考虑的,需要保证获得的信息不可以进行重复;同时,信息的正确率也需要进行保证。所以,数据挖掘技术在科研行业中的地位同样不可忽视。例如,在进行较为严谨的科研实验过程中,不仅实验本身涉及大量的数据,而且在进行实验数据的处理过程中也产生各种数据,这时,为了保证处理结果的准确性和处理过程的简洁性,会直接选择数据挖掘技术进行数据分析,这样会提高科研实验的精准度,对于实验结果也会有极高的保障。

3  大数据时代数据挖掘技术的改进措施

上文就大数据时代数据挖掘技术的相关应用进行了详细阐述,主要是针对教育行业、科研行业及电信行业进行的分析,接下来,将会对大数据时代数据挖掘技术的改进举措进行详细论述,为日后数据挖掘技术改进提供理论参考价值。

3.1  多媒體数据的应用与发展

所谓多媒体技术指的是包含图片、文字、音乐等内容的在电脑中呈现的技术,此项技术可以更加高效快速方便地对内容进行理解,掌握该了解与掌握的信息,多媒体技术同样也是互联网技术的相关应用,通过将多媒体与大数据挖掘技术节能型结合,方便信息的呈现,大数据主要是指信息的呈现方式,数据挖掘针对模糊信息进行深度挖掘,多媒体是信息承载者,通过两者的结合,将会提升信息的处理速度和信息传达的速度,不失为一个极为有效的方式。多媒体数据的发展将会对教育行业有着前所未有的帮助,目前教育行业只有两者分离的模式,主要是运用多媒体技术进行内容的呈现,帮助师生进行沟通理解,数据挖掘主要是就师生等相关信息进行综合分类处理,两者的结合将会有效增强想要达到的效果,不失为值得改进的方式。

3.2  改进数据挖掘的算法

大数据进行挖掘靠的是计算机的算法,通过一步一步进行算法的演进,从而得到信息的根本含义。然而,原有的算法肯定会产生一系列的问题,例如,算法的过程不够简练,需要进行长时间的演算,算法能够得到信息的准确度降低等等情况,这时,对于算法的研究就要提上日程。算法的演进要根据时代的特征,找到时代发展的特点逐步发展出相应的符合大数据时代特征的算法。同时,算法也会在众多的数据中进行有效的挖掘,不会造成挖掘过程中数据的丢失或者难以保证数据的准确程度,算法的改进将会极大促进信息的发展,是极为不错的一项使用举措。

3.3  数据挖掘技术与其他系统的综合运用

对于数据的挖掘,不只是一种计算机的模式和方法可以完成的,需要使用多种有效的方法和模式进行综合运用。如在科研行业,要将大量的信息分类处理并保证信息的准确度就是一项不小的挑战,在这个过程中,应该尽力保证数据挖掘技术的使用准确性,同时,也应该尽可能地将其他的技术模式与其综合,综合使用可以使得信息处理的结果准确性更高,并且处理时间更短,有着较为重要的作用,像上文提到的举措中的多媒体数据就算其中的一种。然而,数据挖掘技术与其他系统的综合运用是目前并未实现的难题,需要进行专业人员的培训,经历一段艰难的历程从而实现。

4  结  论

在今天这样一个高速发展的时代,原来的数据挖掘技术可能在目前还可以有效使用,然而,随着发展,早晚将会有一天将其淘汰,进行数据挖掘技術的改进还是十分有必要的,将数据挖掘的模式和方法进行改变,从而促进大数据时代的发展。大数据的动态特征在目前变化的世界尤为明显,抓住改革的机遇,迎接挑战,通过多媒体数据的运用、数据挖掘算法的演进以及与其他系统的综合等措施,可以更为有效地促进各行各业的发展。

参考文献:

[1] 鄢泽然.大数据时代的数据挖掘技术与应用 [J].现代营销(经营版),2019(2):122.

[2] 于晶.大数据时代的数据挖掘及应用探究 [J].科技与创新,2018(24):160-161.

[3] 刘铭,吕丹,安永灿.大数据时代下数据挖掘技术的应用 [J].科技导报,2018,36(9):73-83.

[4] 邵燕,陈守森,贾春朴,等.探究大数据时代的数据挖掘技术及应用 [J].信息与电脑(理论版),2016(10):118-119.

[5] 赵倩倩,程国建,冀乾宇,等.大数据崛起与数据挖掘刍议 [J].电脑知识与技术,2014,10(33):7831-7833.

作者简介:李华(1991-),女,汉族,山东泰安人,教师,助教,硕士,研究方向:工业信息化;张井玲(1991-),女,汉族,山东枣庄人,教师,助教,硕士,研究方向:高等教育;刘婷婷(1994-),女,汉族,山东德州人,教师,助教,硕士,研究方向:网络信息安全。

猜你喜欢

数据挖掘大数据时代
基于数据挖掘探讨慢性肾衰竭处方规律
数据挖掘技术在内河航道维护管理中的应用研究
数据挖掘综述
软件工程领域中的异常数据挖掘算法
大数据时代下计算机信息处理技术的应用
大数据时代背景下高职院校宣传思想工作的思考与实践
大数据时代下图书馆的服务创新与发展
大数据时代高校学生知识管理
从“数据新闻”看当前互联网新闻信息传播生态
基于R的医学大数据挖掘系统研究