基于大数据环境中对统计工作需求和变革途径的分析

2017-03-12华俊煤科集团杭州环保研究院有限公司

消费导刊 2017年11期

关键词：统计数据结构化数据挖掘

华俊煤科集团杭州环保研究院有限公司

华俊煤科集团杭州环保研究院有限公司

网络技术、信息技术等先进科学技术的快速普及，以及传统信息的爆炸式增长态势，促使了大数据环境的形成，因此作为反映社会经济现象的客观实际情况的传统统计工作需进行修正与改变。

大数据环境统计工作需求变革途径

引言

大数据环境中，统计工作的目标虽然没有发生变化，但是数据调查、分析等方式发生了转变，因此，本文将基于大数据环境为根本对统计工作需求与变革途径进行分析。

一、大数据与统计数据的关系分析

1.统计在大数据环境中的价值。统计工作在大数据环境中存在战略价值，大数据将突破通过样本推断总体的传统方法，直接对总体进行相关分析，并更加注重结论的相关性和实时性，大数据物联网使物品和网络连接起来成为可能，物流运输等信息的共享可以之间转化为大数据，然而大数据整理工作是以统计方法为基础充分利用信息技术处理完成。

2.统计工作在大数据环境中为宏观调控提供决策依据。统计工作是社会经济现象的真实反映，充分利用大数据环境为党政服务，在科技、金融、卫生、环境、安全等各领域都具有广阔的发展需求，统计工作与大数据息息相关、密不可分，大数据对多种数据收集、整合、处理与挖掘技术为传统统计工作所需要。

二、大数据环境中对统计工作的需求分析

1.大数据环境中统计数据的质量内涵应重新制定。统计数据的真实、准确、完整、及时是统计工作的灵魂，既要防止趋势性的技术差错，也要防止故意提供虚假数字的现象，而大数据对数据质量具有准确性、一致性、及时性，此时的数据质量含义是“以用户需求为中心”的缓慢扩张。

大数据环境中，在进行越界收集、集成衍生等统计数据方面发生了改变，并让赋予了构成的质量维度全新的准确性、相关性等含义，此时应基于多维角度付“以用户需求为中心”的思想进行评价。但是数据环境与统计数据核心并不矛盾，仅是去粕取精而已。

2.大数据环境中数据统计收集方法被广泛质疑。传统数据要求通过定期、普查、调查、抽样的方式实施数据收集整理。在统计期间要明确研究对象，然后才能设计方法、收集、处理数据。

而大数据环境中，起点是对统计数据的采获，是利用大数据现有数据进行研究的基础，然后在明确研究对象、目标及方法。此模式的出现达到对海量大数据的收集与处理需求，大数据的数量等级已经超越了传统数据处理技术的能力范畴。

3.大数据环境中统计分析模式应发生改变。传统数据分析模式是在完成数据收集后，实施随机抽样研究，研究对象主体为数据，常见使用数据挖掘分析法。

而大数据环境中，随机抽样不能满足新时代对数据信息准确性的需求，此时需要建立海量大数据分析模型，保证数据信息的可靠性与有效性。此时非结构化与半结构化数据成为了分析对象，高端数据挖掘技术成为了主流分析技术。因此，传统数据分析模式应积极的向大数据分析模式靠拢。

三、大数据环境中对统计工作变革途径的分析

1.在半结构化与非结构化数据的分析中使用高端数据挖掘技术。传统数据统计分析需要在统计对象与制度的基础上开展，而大数据环境中统计分析对象却由结构化数据、非结构化数据、半结构化数据等组成。所以，数据统计的基础为把大量半结构化及非结构化数据变成结构化数据，所以传统数据挖掘工作无法完成，只能应用高端数据挖掘技术。此时，统计工作的重点就是统计分析工作是否能顺利进行，因此对统计人员就提出了较高的技术要求。

2.严格推行统计信息化，全面提升统计工作质量。统计业务过程在大数据环境中的改革也是其信息化发展的必经之路。通过利用信息化平台，借助互联网大数据分析，就可以实现对生产、加工、采购、物流等环节的数据详细处理。在统计信息化的初级阶段，统计工作的核心任务是上级催报、数据加工、资料汇总、数据审核，而在大数据环境下，统计工作的核心任务是质量控制，包括原始数据、汇总报表、分析结论的质量控制。因此，大数据环境对统计信息化提出了更为严苛的要求，因此必须加快统计信息化建设工作。

3.通过信息发布程序的创新提高数据使用价值。统计工作开展的作用就是为受众提供具有利用价值的信息，所以应做好统计信息发布工作。因此，在大数据环境中，要大胆的应用视频、影像、音频等发布新方法，从而提高统计信息的利用价值。

4.使用标准化数据采集方式，减少数据转换成本。大数据环境中统计工作需要以数据标准化为统计工作开展的基础。只有实现数据方式的标准统一，才能提高数据的收集、整理、使用能力。通过标准化数据采集，还能提高数据的可靠性、准确性，确保数据分析及处理工作能够得到顺利开展。因此，可以通过打造数据实时共享、监控平台的方式，实现原始数据的标准化采集工作。

5.建设“互联网+”统计模型，寻找“互联网+”统计途径。“互联网+”模式网络信息创新时代与社会经济发展环境的必然产物，如今“互联网+”已经融入到社会、经济、文化、生活的各个方面，蕴含着大量的统计信息源，因而可以利用“互联网+’渠道获取最为真实的原始统计数据。受到“互联网+”模式的冲击，传统统计模式已经崩塌，而取而代之的是一种创新度高、覆盖面积广、实时性强的统计模式。