Hadoop正式诞生于2006年1月28日,是一个由多个开源项目组成的生态系统,它从根本上改变了企业存储、处理和分析数据的方式。Hadoop是以开源方式创建的。开源的强大力量可以创造标准,共享给大家,让更多的人参与进来,不断完善。十年前,没有人预料到Hadoop能取得这样的成就,而现在一切都已经实现了。Hadoop之父DougCutting认为,Hadoop正处于蓬勃发展时期,而这样的繁荣至少需要几十年的时间。1月29日,Hadoop诞生十周年,作为大数据技术创新的积极推动者和倡导者,Cloudera在北京举办了Hadoop诞生十周年暨Cloudera新年媒体发布会。会上,Cloudera全球副总裁、大中华区总经理凌奇分享了Hadoop的历史和演变,阐述了Cloudera的商业模式和行业领先地位,以及2016年对Hadoop的展望。凌奇表示:Cloudera将致力于唤醒沉睡在中国的大数据商业价值,帮助企业通过大数据处理分析,加速洞察获取效率。众所周知,2015年对于ApacheHadoop来说又是标志性的一年。就在我们以为2015年已经过去的时候,真正的Hadoop时代已经到来,我们还有很多事情要做。我们看到ApacheSpark已经成为主流,Kudu(incubating)也加入了新的存储能力,安全性也更加出色。很难想象后面会发生什么,但这就是Hadoop的美妙之处:永不止步,绝对有可能。至于结果,我们总是惊奇地观望。我们对2016年有何期待?当然,没有人能确定,但??我们认为有几件事可能会发生。Hadoop将更加隐蔽这并不是一个新的观点,早在去年,MikeOlson(Cloudera联合创始人兼高级战略官)就在纽约StrataHadoopWorldConference的演讲中提出了这一说法(意思是用户真正关心的是基于Hadoop的平台及其可以实现的业务成果,而不是Hadoop本身)。这个观点需要重新审视。Hadoop最初的用例定位是一个经济的深度存储和数据处理平台。我们看到各种规模的公司都在使用这个平台进行创新部署,涉及的应用也越来越广泛。例如,包括True和英国电信(BT)在内的通信服务提供商正在努力构建一些应用程序,这些应用程序可以跨业务形成360的客户视角,重新调整与客户互动的方式;NorthernTrust等金融服务机构优化了服务交付,采用了支付流程的实时健康监控。一些跨行业的通用应用也在创新,比如Countertack,它为各行业关注安全的企业提供创新的网络安全解决方案。该技术将在ClouderaAcademicPartners(CAP)中得到广泛应用,我们非常自豪拥有超过100家合作伙伴,这无疑是一个重要的里程碑,将帮助我们培养未来需要的Hadoop技术专家。随着时间的推移,越来越多具有Hadoop技能的人进入职场并为他们带来成功。这是朝着正确方向迈出的一大步,但这还不是全部。除了获得必要的技能,企业面临的更大挑战是如何判断和评估Hadoop的最佳应用。年末年初,话题从“什么”、“为什么”转向了“如何”。使用Hadoop进行平台重构时,技术本身只是其中的一部分。许多公司意识到他们还需要考虑人员和流程变化的因素。知道如何把握所有变化是一项非常艰巨的任务。2016年,我们将看到人们在成功之路上对教育的渴望。“今天的重点出发点是什么?”,“一旦实施,我将如何调整?”,“我如何从一个部门的小项目走向整个企业的计划?”所有这些问题都需要解决。技术只是难题的一角。当越来越多的企业停下来审视自己,自己身在何处,将走向何方,经过深思熟虑,技术就会变得更加普及,过程也会更加顺畅。就我们而言,我们尽量简化产品。例如,ClouderaNavigatorOptimizer使工作负载更加可见,帮助客户了解如何最大限度地利用Hadoop平台、缩短开发时间并提高性能。通过这样的不断改进,我们的技术将更容易被客户接受。物联网机遇下的云说到最热的流行语是什么时候?“物联网”据说是大数据时代以来出现频率最高的词之一。不管夸不夸张,“物联网”只会随着时间的推移越来越热,“云”也一样。对于Hadoop,我们认为随着数据越来越多地从本地迁移到云端,“云”将继续处于最前沿。在最近的一次网络研讨会上,我们问与会者有多少数据存储在云端而不是本地?不出所料,45%的受访者回答说他们所有的数据都存储在本地,想必一些企业也是如此。相比之下,只有33%的人预计到2020年他们的数据将存储在云端。我们很难预见何时所有数据都将存储在云端。但是这个调查清楚地告诉我们,数据向混合云模型的转变,我们认为对于Hadoop部署也是如此。在一个专门讨论如何在AWS上成功部署生产环境的网络研讨会中,54%的受访者表示,云上Hadoop的复杂性是他们不在云中部署的原因。这就是为什么我们投资ClouderaDirector等工具来简化云部署技术,并且我们不断提高整个平台的易用性。“物联网”是一个我们将来会听到更多的术语。Cloudera客户长期以来一直活跃于物联网领域。例如Vivint使用Cloudera为用户提供物联网解决方案,提升家庭网络和服务体验。再比如,Omneo推动物联网领域的产业化,实时优化供应链,通过这种方式节约了15-2000万美元。无论是升级用户体验,还是数据驱动产品,预计未来“物联网”将成为各领域人们热议的话题。
