大数据时代对统计学的挑战
2015-07-05范燕
范燕
摘 要:大数据对于统计学的影响日趋加深,促使负担着培育数据采集的统计学教育也面临着严峻的挑战,为了和新的外部趋势相适应,统计教育应该主动进行改革。然而,对于大数据会给统计学带来什么挑战,统计学在新形势下怎样变革,却很少有人给予关注,文章从大数据和统计学的联系和差异、大数据对统计学的挑战和新形势下统计学的改革三个方面来讨论这一问题。
关键词:大数据;统计学;新形势
大数据是互联网时代的新型产物,这一理念是在一九八零年由美国的未来学家埃尔夫托夫勒提出的。到了二十一世纪,随着互联网技术的普及和运用,全世界的数据量大概每2年翻一倍,这说明人类在最近两年产生的数据量等同于以往产生数据量的总和。大数据虽然在我国发展较晚,但是从起步之后就一直蓬勃发展,尤其是最近几年,新的大数据采集、发掘、储存、探析类企业和组织逐渐建成,大数据在我国各行各业的使用日趋广泛,遍及信息、金融、商品销售等行业。
一、大数据和统计学之间的联系和差异
统计教育是以统计学理论和统计学在相应领域的使用为主的教育内容,所以想要分析大数据时代统计学教育所面对的挑战和改革,首先应该搞清大数据和统计学二者的概念,明白两者之间的联系和差异。
大数据和统计学之间是有密切联系的。首先,大数据虽然是通过巨型数据采集构成,构成主要涵盖非结构化数据和半结构化数据,和通常结构化数据不一样,但是它的根本依然没有离开数据的属性,统计学依然可以把大数据看做探究的主要方面。第二,大数据对于数据的通常处理过程是:搜集—统计解析—发掘—找到需要的信息,而统计活动的主要顺序则是:统计设计—数据采集—数据整理—数据解析—发现数量联系和规律,二者对于数据的处理方式在某些方面虽然有部分差异,但是基本过程也有很多相似的地方。第三,一方面统计学为大数据的研究提供基本方式,比如大量的观察、数据分组、相关解析等也是分析大数据的主要方式,另一方面因为在大数据探究和处理过程中应该借助新的信息技术,所以大数据的发展在很大范围里提升了统计学探究设施和方式,使现代信息设备和互联网技术在统计学的使用更加广泛。
大数据和统计学的主要差别体现在探究目标、数据处理对象和解析技艺上。大数据通过发现数据机遇和数据价值,寻求数据回报为最终目标,数据所触及的范围比较宽泛,运用遍布互联网、经济分析、财产管理、商业投资和医疗器械等方面,处理的数据主要是海量、全面性的非架构化数据和半结构化数据。然而统计学以发现数据后映射物体的自身关联和规律为目的,处理的数据主要为数量不大的结构化数据,使用概率论、非全面调查、抽样推断和相应回归解析等数理统计理论为探究方式。所以,相对于统计学,大数据不但在技术和工具的运用里更为全面和智能,和互联网技术的联结的也变的十分紧密,而且在所处理的数据种类和探究目标上都和统计学有所区别。
二、大数据时代给统计学带来的挑战
大数据和统计学虽然密切相关,但是两者在探究目标、数据处理和解析设备方面却有着很大的不同,人类步入信息时代之后,随着非结构化、半结构化的大数据的比例急速上涨,互联网技术在数据采集和处理中的运用日渐宽泛,大家对数据价值和数据回报的追求更加猛烈。怎样汲取大数据探究里的价值理论,使受教育者把握良好、先进、适用的数据搜集、解析和处理的技术。在大数据时代统计教育将会面对的挑战主要表现为以下几点。
(一)对教育内容的挑战
当下统计学专业教育内容主要是概率论和数理统计、抽样抽查、统计形式和有关的统计运用学科,基本以结构化数据为主要的处理对象,而对非结构化和半结构化数据的解析和设备的运用则触及很少。然而,依据大数据时代对数据处理高端人士素养和技术的需求,目前统计学的内容已经不可以满足非结构和半结构的海量数据探究和商业运用对人才培育的需求。所以,统计学的教育应该看清形势,以对统计专业人士的现实需要为核心,不停地提升原来的科目内容,开设新的课程,才可以确保教育内容跟上大数据时代前行的步伐。
(二)对教育方法的挑战
目前统计学教育模式以课堂教育为中心,主要以老师讲解为主,注重理论,忽略应用,注重方式讲解,忽略技能培育,并且教育方式单调,教育方法陈旧,教育组织的合作观念较弱。所以现在的统计学教育方法已经不适合大数据时代对全面性数据处理和分析人才的素养需求,应该在教学方法上展开调适和改革。
(三)对人才培育方式的挑战
目前统计学教育方式以给予学生知识,培育政府、企业、事业单位需求的统计任务人才和学校、科研组织需求的统计教育和研究人员为主要内容和目的,另外大多高校老师综合素养不够,本专业之外的知之甚少,实验室的建成和设施的更新速度落后,形成培育出的学生偏重于公式推导、运算和数学模型解析,知识构架以数理认知为主,在经济学、管理学、计算机学等领域的认知较少,知识探究和观察的目光短浅,解决现实困难的能力不足。大数据时代虽然需要统计人才拥有数据处理和解析所需求的基础素养和技术,但是更加侧重它从海量的数据里掌控市场机遇,发现和发掘商业价值,为所处行业制造利益的内在潜力、奋发精神和探究欲望。
三、新形势下统计学的改革
信息时代对于统计人员的素质提出了更高的需求,统计学的教育方式也需要進行部分改革。
首先,统计人员应该提升对于新技术的敏感性。因为信息技术的不断发展、不断更新,这就需要统计人员具备职业敏感性,及时学习和理解新技能,能在大数据的环境下熟练运用专业技能。其次,统计人员应该提升团队合作意识。作为统计人员不仅要做好本职工作,还要及时了解团队内部各成员的工作进展状况,相互学习、互相共享信息资源。最后,统计人员应该具备自主创新能力。信息化社会的知识更新十分迅速,统计人员唯有不断学习、不断革新,才能够适应大数据时代的需求。
结语
大数据和统计学两者在本质、探究目标、数据处理对象和技能工具等部分,有联系也有差异。大数据时代的到来不但对统计学的固定探究方式和价值观念带来一定的冲击,并且致使统计学教育面对在教师知识结构、教育内容、教育方式和人才培育方式等方面的众多挑战。所以,为了适应大数据时代的发展潮流和培育更加有效、素养更高、适应能力更强的统计专业人才,统计学教师和统计教育都需要跟上时代,积极做出对应的调整和改革。(作者单位:太原市统计局调查监测中心)
参考文献:
[1] 耿直.大数据时代统计学面临的机遇与挑战[J].统计研究,2014,01:5-9.
[2] 邱东.大数据时代对统计学的挑战[J].统计研究,2014,01:16-22.
[3] 游士兵,张佩,姚雪梅.大数据对统计学的挑战和机遇[J].珞珈管理评论,2013,02:165-171.
[4] 刘春杰.大数据时代对当代统计学教育的挑战[J].统计与决策,2015,08:2+189.
[5] 刘春杰.大数据时代统计学教育面对挑战的应对[J].凯里学院学报,2015,03:29-32.