存储 频道

大数据元年?Hadoop的中国崛起之路

  Hadoop为什么那么“火”?

  尽管大数据是摆在各位IT主管面前的巨大难题,但为什么火的是Hadoop,而不是其他?关键在于成本。据第三方市场研究公司的数据显示,在经济持续低迷的情况下,全球对于IT的投入仍将持续升高。

  NetApp公司大中华区技术及专业服务部总监何英华先生在接受IT168记者采访时说,全球数据爆炸,使得企业的IT投资很难跟上这一步伐。这就迫使企业需要一种成本更低,但稳定可靠的解决方案,而开源技术Hadoop的出现无疑在技术上提供了这样一种可能。

  除了开源技术本身所具备的成本优势之外,诸多领先厂商在Hadoop方面的尝试和经验分享,也给诸多用户提供了参考和建议。例如eBay就已经部署了一个大规模的Hadoop集群,并且ebay公司自动化架构总监Juhan Lee先生在2011年的“Hadoop中国云计算大会”上分享了他们的成功经验。

  Juhan Lee先生在会后接受IT168记者的采访,谈到eBay的变迁之路时说:“我们的变迁可以说是从一种昂贵的数据管理系统迁移到可扩展、更经济的存储系统,并允许更灵活的管理功能的这样一个过程,在开始的时候,我们也非常谨慎,但渐渐的后来我们开始用Hadoop堆栈支撑业务系统,并取得了良好的效果,这鼓励我们继续在Hadoop方面持续我们的尝试。”

  并且,他进一步介绍了Hadoop为eBay带来的好处:“用Hadoop这样的系统,我们就能在分析和转换前把所有的数据归档处理,可以根据分析的需要自由的调用。”对eBay来说,当一个毫无目的的潜在顾客来到eBay网站时,通过这个Hadoop进行处理并能够尽可能多的给出信息,这个潜在顾客也许就能消费。

  同样,在此次大会上,来自FaceBook、淘宝、腾讯、人人网、即刻搜索以及华为等诸多互联网、IT巨头的工程师都毫无保留地分享了他们在Hadoop方面应用的实例,对Hadoop的重要组件,如Hive、Hbase以及HDFS等方面都有不同程度的侧重讲解。同时,在行业方面,中国移动率先分享了他们在“大云”项目上是如何利用Hadoop这一开源技术的。而这些成功案例无疑鼓励了一大批大数据分析的追随者迈出第一步。

  同样,在2012年9月的“系统架构师大会”上,我们也看到了越来越多的Hadoop应用实例。例如京东虚拟化总监何雨先生为大家分享了京东是如何利用OpenStack来自建私有云,尽管主题是OpenStack,但在其中,我们注意到,在存储方面,京东利用了Hadoop这一开源技术来为客服提供了查询支持。

  不管出于何种目的,这些拥有业内领先技术的厂商率先将Hadoop引入自己的数据中心,并将成功案例分享出来,其所起到的“带头”作用无疑是巨大的。

0
相关文章