APP下载

云计算视域下构建大数据标准化挖掘平台的路径与策略

2020-12-24张黄慧

软件 2020年7期
关键词:数据挖掘子系统标准化

摘  要: 基于云计算视域下,扩大了计算机技术是应用范围,在各领域的发展中都具有重要作用,能够结合各领域的发展需求 综合分析,通过对计算机技术的正确应用,为各领域的发展提供有利条件,使计算机技术展现出自身的重要作用与价值。同时,我国相关部门与人员加大了对大数据标准化挖掘系统的研究力度,对云计算技术的应用。传统化的大数据标准化挖掘平台不仅价格比较昂贵,而且系统应用有一定的复杂性,针对初学者来说,会有一定的经济压力与学习压力。而对云计算与大数据标准化挖掘应用平台的综合分析,可有效解决传统化大数据标准化挖掘平台的相关问题,不断完善大数据标准化挖掘应用平台系统程序,价格方面是大多数用户都可以接受的,创新出多样化的平台挖掘路径,满足社会大众的需求,为社会大众带来高质量的服务。

关键词: 云计算;大数据标准化;挖掘平台;路径;策略

中图分类号: TP3    文献标识码: A    DOI:10.3969/j.issn.1003-6970.2020.07.027

本文著录格式:张黄慧. 云计算视域下构建大数据标准化挖掘平台的路径与策略[J]. 软件,2020,41(07):136-139

Paths and Strategies of Big Data Standardized Mining PlatformConstruction from Perspective of Cloud Computing

ZHANG Huang-hui

(Shanghai University, Shanghai 200444)

【Abstract】: Based on perspective of cloud computing, application scope of computer technology has been expanded, which has important role in development of various fields, analyzing development needs of various fields comprehensively, providing favorable conditions through correct application of computer technology with important role and value. At the same time, related departments and personnel in China have strengthened research on standardized big data mining system and cloud computing technology. Traditional big data standardized mining platform is not only expensive, but has certain complexity in system application. For beginners, it brings some certain economic pressure and learning pressure. Comprehensive analysis of cloud computing and big data standardized mining application platform can solve related problems of traditional big data standardized mining application platform effectively, and improve system program of big data standardized mining application platform continuously. With acceptable price to most users, it has innovated a variety of platform mining paths to meet needs of the public and bring quality services to the public.

【Key words】: Cloud computing; Big data standardization; Mining platform; Path; Strategy

0  引言

大數据时代的到来与发展,给人们的日常生活、工作、学习等都产生巨大的影响,也加大对计算机技术的应用需求,使计算机技术逐渐成为人们日常生活中重要的一部分,无论是在日常生活、学习中,还是工作等方面,人们无时无刻不与信息数据打交道,而针对海量的信息数据,为可快捷地获取各信息数据的高价值,最重要的基础条件就是建立科学、完善的大数据标准化挖掘平台,可对各类信息数据的搜集、处理、分析等,为信息数据处理质量与效率的提升起到促进作用。而在云计算技术的支持下,对云计算与大数据标准化挖掘平台的建设综合分析,充分利用云计算的特点与优势,创新多样化的建设路径,对各项信息数据的科学控制与管理,有效解决传统数据挖掘方式相关问题,充分体现出云计算与大数据标准化挖掘平台的重要价值。

1  云计算与大数据标准化挖掘平台的关系分析

基于云计算视域下,使物联网、移动通信、数据自动采集技术等都快速发展,在人们日常生活中占有重要地位,人们会根据自身的需求对各类技术的合理应用,可充分展现出各类应用技术的重要作用。其中就包括数据挖掘技术,在现代化社会的发展中引起各领域的高度重视。从大数据标准化挖掘平台的建设与发展角度分析,主要的核心工作就是对各类信息数据的分析、管理、挖掘信息源等,传统化的集中式串行数据挖掘方法,已经无法满足现代化的发展需求,为全面提升数据挖掘算法处理大数据标准化的能力,还需结合起自身的发展需求与云计算的综合分析,通过对云计算的应用,可多角度、全方面的考虑,分析大数据标准化挖掘平台的关键技术,为大数据标准化挖掘平台的建立与途径的创新等提供有利条件[1]

云计算,是现代化互联网先进计算方式,最大的特点与作用就是能够为网络平台软硬件资源与信息数据的共享,为计算机及相关设备提供有价值的信息数据。并且,云计算还集结了计算与分布式的应用优势,可根据不同用户的不同需求,提供最大化的便利。大数据标准化挖掘,主要是指针对海量信息数据的挖掘、分析、提取等,可对海里信息数据的分类处理,对各信息数据的分析与挖掘,提升信息数据的应用价值,能够为各用户科学决策的制定提供重要信息价值,对现代化社会的发展具有重大的影响。结合云计算与大数据标准化挖掘特点与性质的分析,两者之间以相互促进、相互辅助的关系存在,云计算能够为大数据标准化挖掘平台的建立与应用创新出更多的途径,为其建设与发展奠定良好基础,可提高信息数据计算处理效率,满足各企业的发展需求,为各企业带来巨大的经济效益[2]。而大数据标准化挖掘技术,是云计算发展中重要的组成部分,有明确的任务,主要包括预测任务与描述任务,预测任务是对目标属性值的科学预测,描述任务是可对不同信息数据之间的联系模式详细描述。

2  云计算在大数据标准化挖掘平台构建中的重要性

在现代化社会的发展中,各行业的发展速度加快,无论是在人们的日常生活中,还是工作中,都会接触到海量的信息数据,在海量信息数据中,想要迅速地获取到有价值的信息数据,那么就需创新出多样化的获取路径。通过对大数据标准化挖掘平台的建设,引进云计算,可对海量信息数据的深度挖掘,不仅对各领域的发展产生积极影响,而且还为人们提供重要的信息价值,全面提升人们的工作效率。为在最短的时间内对海量信息的数据分析,并高效率地提取出重要的信息数据,建立大数据标准化挖掘平台是其重要的基础条件[3]。但是,传统化的建设理念与建设模式,已经无法满足现代化社会的发展需求,并且还会在应用的过程中存在重多的问题,对信息数据的价值获取、挖掘等效率产生不利影响。那么对云计算的引进与应用,可根据大数据标准化挖掘平台的构建需求与发展目标为分析主体,创新多样化的建设路径,最大化地满足现代化大数据标准化挖掘平台的建设要求,对各信息数据的合理支配,云计算把复杂化的计算任务分布到各计算机组成的“云”中,明确云系统中各功能的具体任务与目标,既拓展更多的系统功能,又可满足不同用户的不同需求,可全面提升信息数据挖掘的效率与价值[4]。数据挖掘工作,主要就是对海量信息数据的加工與处理,利用计算机技术对各类信息数据的筛选、分配,解决大数据标准化复杂、模糊等问题,全面降低信息数据运算成本与存储成本等。

除此之外,云计算的共享资源存储具有自身独特的特色,服务器群体更是令人乍舌,所具有的超强计算能力使其现代化社会发展的“宠儿”,结合目前大数据标准化挖掘平台的建设与发展情况分析,大多数的算法都是以整体系统为中心,会对个信息数据进行统一处理,但是却无法确保各类信息数据的应用价值。而云计算最大的特点就是能够突出对平台的合理应用,可针对海量信息数据的全面分析,具有较强的挖掘能力与处理能力[5]。无论是平台的运行,还是对海量信息的储存,甚至是对软件的开发与应用等,都可充分展现出其自身“包罗万象”的特点,为更多用户提供高质量的服务。

3  云计算视域下构建大数据标准化挖掘平台路径创新策略

基于云计算视域下对大数据标准化挖掘平台途径创新策略的分析,主要从大数据标准化挖掘平台构建组成部分角度全面分析,其主要由工作流子系统、用户接口子系统、并行抽取转换装载子系统、并行数据挖掘子系统四部分所组成。而各系统都会有自身明确的工作任务,以相互促进、辅助为关系存在[6]。同时,大数据标准化挖掘平台路径的创新,还对相关工作人员提出更高要求,需要工作人员具备专业化技术与综合能力,结合现代化市场的发展全面分析,确保大数据标准化挖掘服务平台的科学性与合理性。一方面,可使信息数据处理结果更准确,满足不同信息数据的挖掘需求。另一方面,对重要信息数据加大保护力度,为用户自身的合法利益提供安全保障。

3.1  工作流子系统

在大数据标准化挖掘平台建设前,需要对其多角度、全方面的分析,能够掌握大数据标准化挖掘平台应用目标,对各系统的科学设计与构建。其中,工作流子系统是大数据标准化挖掘平台建设架构中重要的组成部分之一,主要的应用价值是为用户提供良好接口,根据用户自身的应用需求,对大数据标准化挖掘平台的正确操作,可确保系统能够及时接收到用户的应用需求,把各项工作合理分配到各系统中,用户对大数据标准化挖掘平台的应用,可利用分类算法、关联规则算法、聚类算法等对其的实际操作[7]。在大数据标准化挖掘平台中设置工作流子系统,可利用图形化的UI界面,为用户提供多样化的服务功能,既使每项系统功能都独立存在,结合具体的应用需求完成各项工作任务,又利用各任务内部维持系统的整体运行。

3.2  用户接口子系统

大数据标准化挖掘平台中的用户接口子系统,主要是由用户输入模块与结果展示模块所组成。在实际应用的过程中,要对用户的应用需求与大数据标准化挖掘平台各功能的综合分析,负责对各类信息数据的交互处理,能够确保各信息数据的准确性与完整性,提高信息数据的处理效率,第一时间就满足用户的操作需求,并把相关信息数据直观地呈现。从大数据标准化信息挖掘平台建设与应用的角度分析,其所采用的计算方法不同,用户可根据自身的需求,正确选择分类算法,能够确保信息数据的准确性[8]。例如:可采用并行朴素贝叶斯算法,用户只需要把自己所需要的信息数据正常录入,然后各系统就会分配具体的工作任务,无论是对信息数据的测试,还是对信息数据的储存等,突出大数据标准化挖掘平台的可视化特点,能够在展示界面中,以直方图、圆饼图等形式呈现出各类信息数据,供用户的查看与使用。

3.3  并行抽取转换装载子系统

在大数据标准化挖掘平台应用的过程中,并行抽取转换装载子系统具有重要作用。通常情况下,是对信息数据输出结果、挖掘算法输出结果的处理。随着我国信息化技术的不断发展,扩大了信息化技术的应用范围,传统化的串行数据预处理算法,已经无法满足现代化大数据标准化挖掘平台的发展需求。对此,我国相关部门及人员加大了对其的研究力度,通过对信息化技术的应用,创新出多样化的操作途径,为大数据标准化预处理算法应用效率的提升起到促进作用。以并行抽取转换装载子系统的应用效率为基础,设计出多种先进的预处理算法。如图1所示为改系统中各类ETL算法。通过对并行抽取转换装载子系统预处理算法的创新,使系统整体应用的操作更加简单、方便[9]。例如:針对一些无价值的信息数据进行删除,那么在实际操作的过程中,可根据信息数据类别存储模块操作,采用不同的预算方法,使各类信息数据模块相互独立起来,再利用ETL算法提高信息数据处理效率,帮助用户在第一时间就获取到重要的信息数据,从而满足用户的应用需求。

3.4  并行数据挖掘子系统

在大数据标准化挖掘平台建设路径的创新过程中,为增强平台的应用效率与信息数据挖掘速度,还需要明确大数据标准化挖掘平台的核心部分,就是并行数据挖掘子系统,由并行关联规则算法、并行分类算法、并行聚类算法所组成,具体如图2所示。那么在实际应用的过程中,就需要对大数据标准化挖掘平台整体的全面分析[10],考虑到其系统所含有的算法种类比较多,对各类算法的应用要符合系统应用标准,能够满足用户需求的同时,为用户提供灵活接口,帮助用户集成新的算法提供有利条件。

4  提高大数据标准化挖掘平台基础性设施服务质量

大数据标准化挖掘平台基础性设施服务,主要是指向大数据标准化挖掘平台基础性支持,为计算资源进行信息化的服务,提升大数据标准化挖掘平台信息资源的访问能力。其中就包括远程数据资源服务,从大数据标准化挖掘平台的发展角度分析,其属于托管式行为,可利用计算机技术对信息数据进行远程库操作与仓储等,使大数据标准化挖掘平台具有先进性的特点,既为用户的使用提供方便与快捷的方式,又展现出大数据标准化挖掘平台的应用价值。那么对大数据标准化挖掘平台中各业务流程的完事,能够确保信息数据挖掘过程的简便性,使挖掘出的信息数据简洁明了。应用服务,主要的核心工作就是对大数据标准化挖掘平台软件的开发、运用,拓展平台应用功能与系统,注重数据系统挖掘的远程开发与整合,全面提升大数据标准化挖掘平台应用价值。

5  结语

综上所述,云计算视域下,对大数据标准化挖掘平台构建路径的创新,最主要的前提是能够明确大数据标准化与云计算的关系,突出云计算在大数据标准化挖掘平台构建中的重要性,结合大数据标准化挖掘平台的各系统全面分析,为大众提供多样化的服务。通过对云计算技术的合理应用,创新出多样化的大数据标准化挖掘平台建设路径,积极传统化大数据标准化挖掘计算法所存在的相关问题与不足,能够对海量信息数据进行分类、分析、存储等,为信息数据应用价值的挖掘提供有利条件,提升整体的加工效率,从而满足用户的应用需求,为现代化社会的稳定发展奠定良好基础。

参考文献

  1. 刘丽华, 薛玉倩. 基于云计算的数据挖掘平台的研究与应用[J]. 通讯世界, 2018(6): 36-37.

  2. 杨继武. 云计算视域下数据挖掘技术[J]. 电子技术与软件工程, 2019(5): 151.

  3. 雷晨. 基于云计算技术的数据挖掘平台建设研究[J]. 信息记录材料, 2019, 20(3): 4-5.

  4. 黄国庆. 云计算技术下数据挖掘平台设计及技术[J]. 电脑知识与技术, 2018, 14(19): 10-11.

  5. 胡莹石, 陈家晨, 徐菱. 云计算下数据挖掘平台架构及技术探究[J]. 无线互联科技, 2018, 15(12): 60-61+64.

  6. 杨兆波. 云计算技术下的数据挖掘平台建构研究[J]. 电脑迷, 2018(5): 29.

  7. 李潇雯. 基于云计算技术下的大数据挖掘平台研究[J]. 计算机产品与流通, 2018(1): 21+24.

  8. 石雷. 云计算技术下的数据挖掘平台建构探讨[J]. 自动化与仪器仪表, 2017(11): 59-60+63.

  9. 冯娜. 云计算环境下数据挖掘信息平台架构设计及实现[J]. 电脑编程技巧与维护, 2017(18): 63-65.

  10. 查道贵, 许彩芳, 陈伟. 云计算平台下数据挖掘算法研究[J]. 信阳农林学院学报, 2017, 27(1): 113-115+119.

猜你喜欢

数据挖掘子系统标准化
不对中转子系统耦合动力学特性研究
标准化简述
GSM-R基站子系统同步方案研究
驼峰测长设备在线监测子系统的设计与应用
标准化是综合交通运输的保障——解读《交通运输标准化体系》
基于并行计算的大数据挖掘在电网中的应用
一种基于Hadoop的大数据挖掘云服务及应用
交通运输标准化
车载ATP子系统紧急制动限制速度计算
基于GPGPU的离散数据挖掘研究