“大数据”时代到来了吗

詹国枢

一本名为《大数据时代》的书正风靡全球，引起人们越来越强烈的关注。何为大数据？大数据英文名big data，又称巨量资料，是指其数据规模极其巨大，以致很难通过一般软件工具加以撷取、管理、处理并整理成为有用资讯的海量数据。按目前业界公认说法，大数据特点有以下4个V：即，Volume（大量）、Velocity（高速）、Variety（多样）、Value（价值）。

先说大量、高速。大量、高速到了什么程度？我们晓得，一个移动硬盘，容量大约为10个G。而2001年，全球互联网总流量大约为1EB，即10亿个G。到了2004年，一个月流量即可达到1EB，而到了2007年，达到此流量时间是一周，到2013年，达到1EB的流量仅仅需要一天！换句话说，目前，全球互联网一天产生的信息量，可以刻满1.88亿张DVD光盘！

再说多样、价值。如此大量、高速的数据，其多样性毋庸置疑，小到某人与某人的数分钟通话，大到某公司与某公司的一笔巨额交易，虽然全是些风马牛不相及的数字，但是，经过科学的收集、归类、整理，再加以分析、排列、组合，这些数字就会神奇地演变成全新的极其有用的各种资讯！原始数据越大，处理难度自然越大，但是，处理后其应用价值亦越大。大数据这种无中生有、化腐朽为神奇的增值功能，既叫人称奇，更令人神往！

正因大数据的以上特性，世界经济论坛报告将它认定为人类新世纪的“新财富”，称其价值“堪比石油”。也正因此，发达国家纷纷将开发利用大数据作为夺取新一轮竞争制高点的重要目标。美国政府于2012年3月发布了《大数据研究与发展倡议》报告，这是继1993年宣布“信息高速公路”之后又一重大部署。欧盟及日本等国，也纷纷在大数据研发方面投入巨资，竭尽全力拼抢这一制高点。

大数据这块饽饽，虽然闻起来很香，但啃起来却相当硬，其难度主要有四，一是数据收集难，不但难在大，海量信息，而且难在杂，万千角度。二是数据存储难，如此海量存储，既要低成本、低能耗，又要高质量、高识别。三是数据处理难，信息如密网交织，错综复杂，处理如剥茧抽丝，穿针引线，其难度可想而知。四是数据呈现难，数据最终是要拿来使用的，所以其呈现须简单、实用，无疑，这是又一个由繁入简的艰巨工程。

好在，大数据应用已初见曙光，欧美各国均有成功先例，纷纷应用于实践并卓有成效。有人设想，倘若我们将大数据应用于日常生活，那么，当你在北京或者某一城市打算购买某一产品时，只消将名称输入手机，大数据立即就会告诉你，你所需要这些东西，在当地哪些商场有售，其价格此时分别是多少。于是你可以马上作出决策……这将给人们带来多么大的方便，又将给商业流通带来多么大的改变！

万事虽然开头难，坚持动手就不难。所谓大数据之“大”，不过是相对而言，小可积大。目前，百度、阿里、腾讯等不少互联网公司已着手成立大数据研发机构。看到一资料，百度目前日处理数据量已达100PB，相当于一个图书馆2700万册藏书！而阿里则根据淘宝网上中小企业的交易状况，利用先天掌握的大数据筛选出财务健康及讲诚信企业，并对其发放无担保贷款300多亿元，其坏账率仅0.3%，创造了金融业一个奇迹。这些都是大数据应用的好例子。让我们张开双臂，迎接大数据时代的来临吧！endprint