从政府到企业的美国大数据战略
2014-12-01许锐
许锐
《孙子兵法·用间篇》说:“明君贤将,所以动而胜人,成功出于众者,先知也。”“先知”这一用兵之道,强调只有预先了解情况,掌握信息,进行科学分析,运筹计算,才能做出正确的情况判断,胜负预测和定下决心,再通过主观努力去争取胜利。这也正符合了大数据的特性。
美国大数据研究学者表示,如今是大数据大行其道的世界,大数据可以带来巨大的成就,在军事、经济及其他领域中,决策将日益基于数据和分析而做出,而并非基于经验和直觉。正如《孙子兵法》所说:“知彼知己,百战不殆”。所谓知者,乃数据也,数据要“未卜先知”。在大数据时代,“知彼知己”、“未卜先知”能够更加容易地实现。
白宫里的大数据战略
如今,美国已进入“大数据”时代。“大数据”对信息爆炸时代的崭新描述,它的基本单位是“太”(TB),而1000个“太”则等于一“拍”(PB)。这个单位有多大?举个例子,美国国会图书馆是世界上最大的图书馆之一,它所有印刷品的信息量加起来只有15太,而全美国仅在2010年一年的新增数据量就足足有3500拍,这比13亿中国人人手一本1500页的书加起来的信息量还要大。
奥巴马政府意识到大数据技术的重要性,将其视为“未来的新石油”。2012年3月,奥巴马政府在白宫网站发布了《大数据研究和发展倡议》。2012年5月,美国数字政府战略发布,更是提出要通过协调化的方式,以信息和客户为中心,改变联邦政府工作方式,为美国民众提供更优的公共服务。其中关键,就是政府必须保证美国民众可以随时随地通过任何平台或设备获取政府信息和公共服务。美国国家科学基金会、国家卫生研究院、国防部、能源部、国防部高级研究局、地质勘探局等六个联邦部门和机构承诺,将投入超过2亿美元资金用于研发“从海量数据信息中获取知识所必需的工具和技能”。
美国最重要的数据开放平台就是奥巴马政府在2009年推出的Data.gov,Data.gov也是美国“开放政府”承诺的关键部分。依照原始、地理数据和数据工具三个门类,涵盖了农业、 气象、金融、就业、人口统计、教育、医疗、交通、能源等大约50个门类,汇集了“从家庭和企业能耗趋势分析到全球实时地震通知等,甚至还可以查询从好奇号火星漫步者发回来的数据中得知火星的天气情况”。
为了确保美国民众能方便快捷地找到政府服务栏目,美国在各联邦政府层面实施了“数字分析项目”,“这是政府IT部门第一次摸清公众都在网站上寻找什么信息、在哪里寻找这些信息,以及他们是否能够顺利找到信息等情况。”政府IT部门还对联邦政府网站在移动设备上的使用进行了优化,并开发了移动应用程序,确保美国公民随时、随地,通过任何设备都能获取政府信息。
大数据战略在企业
除了政府,美国企业也同样拥有对于数据重视和应用的历史传统。
早在大数据概念火热起来之前,美国信息技术产业在大数据产业已经有了很多技术积累,这使得美国的大型信息技术企业可以迅速转型为大数据企业。有的企业自身是大数据技术的推出者,谷歌就是典型代表。大数据核心技术Hadoop是雅虎员工Doug Cutting根据谷歌2003年发布的学术论文研究而来。有的企业则通过收购业内已经存在的大数据企业来建立大数据业务,典型代表是IBM。自2005年以来,IBM出资160亿美元收购了超过30家大数据企业。大数据不同于传统的结构化数据,而是充斥了非结构化数据和半结构化数据,美国在结构化数据库领域有数据库行业的领头羊甲骨文公司,但甲骨文公司也推出了大数据业务。甲骨文公司成为了业界首个以全面、软硬件集成的产品满足企业关键大数据需求的公司。它可帮助客户进一步提高效率、简化管理并洞察数据的内在本质,从而最大限度地挖掘数据的商业价值。
不仅如此,全球最大的芯片企业英特尔也进入大数据产业,而全球最大的PC厂商惠普也在精简PC业务,2011年斥资110亿美元收购英国大数据企业Autonomy公司,进入大数据业务。美国信息技术产业的大企业,从软件企业到硬件企业,从门户网站企业到社交网络企业,纷纷介入大数据。因此,大型信息技术企业顺应时代潮流,转型升级为大数据企业,是美国发展大数据产业的重要推动力。美国一些大型公司已经开始赞助大数据相关的竞赛,并且在为高等院校的大数据研究提供资金。
如果说信息技术企业能迅速地走上大数据的发展道路属于“理所应当”,那么,制造业企业与零售企业也同样注重大数据,就足以令人惊讶了。美国通用汽车卫星导航服务,提供司机和远程车辆诊断和响应紧急情况管理,每年已经开始处理多达3PB的数据。全球最大的零售商美国沃尔玛公司建立了一个全新的数据中心,它的存储能力竟然高达4PB以上,已经超过了4096TB,是一个真正的天文数字。
美国著名政治评论家、大数据领域的超人Nate Silver作了一场有关大数据的演讲,他告诉创业公司去寻找那些和大数据相关、容易出成果的领域。“寻找那些你有数据可用、但却从没有人拿这些数据进行过分析的领域,这样竞争更小,你也更容易成功。”