IT业界有两大发展潮流,一个是大数据产业将颠覆传统的商业模式,另一个是云计算将改变传统的IT架构服务方式。那么当大数据“邂逅”云计算,它们会擦出怎样的“爱情”火花呢?
大数据服务无处不在 Cloudera又该如何应变?
2016年11月10日,笔者有幸采访到Cloudera云计算工程副总裁Vikram Makhija先生,就大数据与云计算如何结合这个问题进行了探讨,通过此次采访,使得我对Cloudera的云策略有了更深层次的了解。
大数据时代急需Hadoop平台
对于大数据这个概念,相信现在对于任何人都不陌生。我们生活在一个数据爆炸的时代,据预测,到了2020年,全球人口将达到77亿,移动终端能够达到1000亿,产生的数据量将更是达到40ZB。
当然,现在人们谈到大数据,总会讲到大数据的4个"V",而人们最看重的是大数据Value(价值),但同样要想得到大数据中的数据价值,成为企业商业模式的推动力,那么就需要解决大数据另外3个"V"的挑战,他们包括Volume(大量)、Velocity(高速)、Variety(多样)。
那么如何从庞大、复杂、多样数据中挖掘出重要的商业价值呢?Hadoop相信大家都听说过了。在大数据产业发展过程中,以Hadoop为代表的开源大数据生态成为大数据和云计算的重要技术支撑,有效推动了开源社区的用户和贡献者,带动了大数据行业的技术进步与商业发展。
由于Hadoop深受客户欢迎,许多公司都推出了各自版本的Hadoop,也有一些公司则围绕Hadoop开发产品。在Hadoop生态系统中,规模最大、知名度最高的公司则是Cloudera,其最早的Hadoop商业刊发版CDH广为人熟知。
云计算让大数据服务无处不在
从2008年创建成立,到2014年进入中国,到如今开始为大量中国客户提供大数据处理服务,Cloudera发展非常快速。值得注意的是,Cloudera还和Intel在开源方面进行合作,在基于开放的Intel平台硬件上做大量优化,让Cloudera产品在英特尔硬件平台发挥更佳的作用。
Hadoop版对于企业客户的价值是什么?Vikram Makhija先生表示:"并不是所有的客户都有能力去自己研发Hadoop产品,但是对Hadoop需求的用户却非常多,我们对针对这些没有能力自己研发Hadoop产品的客户,给他们提供一个安全、稳定、可靠的Hadoop平台,让他们可以轻松的使用Hadoop版本来为自己服务。"
在云计算时代,Cloudera也推出了适合用户采用的结合云的方案,Cloudera可以让客户无论在什么样的云的环境上都可以接受成功。客户采用的无论是公有云或者是私有云,Cloudera都有关于对Hadoop工作运行的支持选择。而且无论是在哪种选择上,客户都能产生最好的结果。
目前,Cloudera逐渐在加强生态建设方面的合作,无论客户在什么云上面Cloudera都能提供服务能力,Cloudera在生态建设方面做了很大努力。目前,Cloudera跟国外的AWS,微软等都有密切的合作,这种合作也会在中国继续为中国客户提供服务。同时,Cloudera也正在与国内的云服务提供商商谈合作。
Cloudera已为云时代准备就绪
值得一提的是,Cloudera在今年又发布了大数据部署和管理工具Cloudera Director 2.0。Vikram Makhija先生表示,新版Cloudera Director简化了在云端执行Hadoop的工作。
Cloudera Director有助于客户更方便地跨各种云环境部署和管理Cloudera Enterprise集群生命周期。客户可以选择用于AWS、谷歌云平台(Google Cloud Platform)和Microsoft Azure的模板,以快速完成配置、增大/缩小集群规模以及终止集群,客户还能够从一个统一的界面监控和管理所有集群。
据Vikram Makhija先生介绍,相对于Cloudera竞争的友商,Cloudera认认为他们在云上管理的工具比他们更加的完善,类似于Cloudera Director这样的部署,Cloudera都是在这里面提供比他们更有竞争能力的管控工具,能够帮助到我们的企业客户去部署自己的大数据平台。
对于很多用户对云的怀疑态度,Vikram Makhija先生表示,其实很多客户对迁移到云都是小心翼翼的,通常是先把一些并不太重要的系统先往云上去迁。但Cloudera的很多客户已经过了那个时期,很多很重要的客户已经把自己核心的业务迁移到云上面,依赖于云和Cloudera公司的服务来支撑他们的核心业务。Cloudera已经为客户上云准备就绪。
关于安全这一块, Cloudera一直是在安全性这方面有很大的投入。大家可以看到Cloudera Navigator一直以来在数据的审计和数据的溯源方面都可以提供这样的功能,包括Cloudera Kerberos验证工具,Cloudera在安全方面提供了全栈的能力。做好大数据平台的安全管控,这也是Cloudera优势的所在。
总结:
可以说,没有大数据的信息,则云计算的计算能力再强大,也难以找到用武之地;没有云计算的处理能力,则大数据技术再出色,也终究难以更好的服务客户。Cloudera将云和大数据很好的结合起来,为客户带来更出色的服务,必将成为大数据行业的首选。