Cloudera：针对Hadoop的三大预测

陈曲

1月29日，正值Hadoop十周年生日，作为大数据技术创新的积极推动者和倡导者，Cloudera在京举行了Hadoop十周年暨Cloudera新春媒体见面会。会上Cloudera全球副总裁大中华区总经理凌琦分享了Hadoop及其演变的历史， 阐述了Cloudera商业模式和行业领先地位，以及Hadoop在2016年的展望。凌琦表示，Cloudera将致力于唤醒沉睡在中国的大数据商业价值，从而帮助企业通过大数据处理和分析加速洞察的获取效率。

众所周知，2015年又是Apache Hadoop标志性的一年。就在我们认为2015年就这样过去了，真正的Hadoop时代却来临了，我们有很多事情需要继续做下去。我们看到Apache Spark已经成为主流 ，Kudu（孵化中）的全新储存能力也加入进来，安全也更加卓越。难以想像后面还会有什么，但这正是Hadoop的美妙之处：永不止步、无限可能。至于结果，我们总是惊奇地拭目以待。

2016年我们的期望是什么？当然，没有人能未卜先知，但有几件事我们认为将可能会发生。

Hadoop将更加隐形

这不是一个新的观点，早在去年，Mike Olson（Cloudera联合创始人兼首席战略官）就在纽约Strata Hadoop世界大会的演讲中提出这个说法（意思是用户真正在乎基于Hadoop的平台和能达到的业务结果，而不是Hadoop本身）。这一观点有必要重新提起。Hadoop之初的用例定位就是一个经济型的深度存储和数据处理平台，我们陆续看到如今大大小小的企业都在用这个平台进行创新部署，涉及的应用也越发广泛。

比如像包括True 和英国电信（BT）这样的通信服务供应商正在致力于构建一些应用可以对客户跨业务形成360度视角，重新调整了与客户的交互行为方式;金融服务机构，就像Northern Trust，优化了其服务交付，对付款流程采取实时健康监测。一些跨行业的通用应用也在革新，比如Countertack，就在为各行各业为安全担忧的企业提供创新的网络安全解决方案。

技术将被广泛使用

在Cloudera学术合作伙伴（CAP）中，Cloudera非常自豪已经有超过100名合作伙伴，这无疑是一个重要的里程碑，有助于Cloudera培养未来所需的Hadoop技术专家。随着时间的推移，越来越多掌握Hadoop技术的人们进入工作岗位为他们带来成功。这的确是朝着正确方向迈进的一大步，但并不是全部。

除了获得必要的技能，对于企业来讲，更大的挑战是如何判断和评估Hadoop的最佳适用。岁末年初，话题已经从“是什么”和“为什么”转向“怎么做”。 使用Hadoop来进行平台重构时，技术本身只是等式的一部分，众多企业意识到他们同样需要考虑人员及流程变动的因素，懂得如何去把握所有变化是一项十分艰巨的工作。

2016年，我们将看到成功之路上人们对教育的渴望。“今天的关键着手点是什么？”、“一旦实施，我将如何调整？”、“我如何从部门小项目提升为整个企业的计划？”所有这些问题都需要解决。科技只是拼图的一角，当越来越多的企业停下脚步自我审视，企业处在何地，将去向何方，经过一番深思熟虑，技术才会更加普及，过程才会更加流畅。

就自身而言，Cloudera将尽可能的简化产品。Cloudera Navigator Optimizer 让工作负载更加可视化，有助于客户了解如何最大化利用Hadoop平台，减少开发时间并提高性能。这样的不断提升，Cloudera的技术也会更容易被客户接纳。

物联网机遇下的云

谈到最火爆的流行词，“物联网”据称是大数据时代以来出现频率最高的词汇之一。无论是否言过其实，“物联网”会随着时间的推移而越发火爆，“云”也是一样。对于Hadoop而言，“云”将继续走在前沿，因为数据越来越多地从本地迁移到云上。

在最近的一次网络研讨会上，Cloudera问参会者他们中有多少数据是存储在云上而不是本地的，结果不出所料，45%的人回答到他们的所有数据都是本地存储的，大概一些企业也是如此。相反，只有33%的人希望在2020年前，他们的数据可以实现云存储。很难预见什么时候所有的数据都会存储在云上。但是这个调研清晰地告诉我们，数据对混合云模式的转变，我们认为Hadoop部署也是同样。

在一个专门讨论如何在AWS上成功部署生产环境的网络研讨会上，54%的调查者表示在云上Hadoop的复杂性是导致他们不用云部署的原因。这也是为什么Cloudera要投资开发Cloudera Director这样的工具来简化云部署技术，我们也会持续提高整个平台的易用性。

“物联网”会是我们在将来听到更多的词。Cloudera的客户长期以来一直活跃于物联网领域。举个例子，Vivint使用Cloudera为用户提供物联网解决方案，提升了家居联网的同时也改进了服务体验。另一个例子，Omneo推动工业化物联网领域，实时优化供应链，通过这种方法节省了1500-2000万美元。无论是升级用户体验，还是数据驱动产品，预计物联网在未来都会是各个领域人们的热门话题。