存储 频道

EasyHadoop向磊:学好Hadoop从Linux抓起

  易用性是Hadoop推广应用的主要瓶颈

  作为国内第一个开源Hadoop部署管理系统——EasyHadoop的作者,向磊和其团队一直致力于让Hadoop大数据分析变得加简单,并陆续举办了多次免费的技术讲座。EasyHadoop 是一款Hadoop一键安装系统,方便大家更容易安装部署Hadoop软件。 在此前对Hadoop及其周边生态的易用性提升过程中,向磊发现易用性恰恰是Hadoop在推广使用方面的瓶颈。而这不仅仅是在互联网领域,因为互联网领域的人才相对集中,情况还好一些。但在其他领域,易用性会造成更大的问题。

  由于Hadoop是一个复杂的分布式处理系统,对于一般人来说,Hadoop在使用上的难度很大。它不仅需要多方面的知识积累,在整个运维方面也有很多难点需要攻克,而这还仅仅是Hadoop本身。向磊表示,Hadoop的周边生态系统所需要学习和积累的东西更多,学习入门的曲线非常陡峭,这就从一定程度上限制了Hadoop的推广和使用。就好比一架波音747,它可以比自行车更快地抵达目的地,但如果飞行员是稀缺资源,那它的普及也会遥遥无期。而这也是向磊设计EasyHadoop的初衷,顾名思义,EasyHadoop就是希望飞机能够自动起飞和降落,让大家先抵达目的地,然后再慢慢根据个人意愿学习手动驾驶。

  Hadoop 2.0只是工具 人才是推动革新的关键

  向磊坦言,虽然他是一个偏技术型的人,相比于其他事情他可能更喜欢编代码。但他一直认为,Hadoop及其周边生态系统只是工具。诚然,Hadoop 2.0的问世,对于大数据领域的基础平台建设提供了一个更稳定和高效的解决方案。技术的进步是一个非常重要的事情,Hadoop 2的确把大数据领域的技术革新又向前推进了一大步,但他认为更重要的是人的思维,因为毕竟人和人才才是最重要的。大数据这个概念,不仅仅是存储和计算技术的进步,更是一个思维的革命。用数据来推动企业业务发展,推动战略的决策指导,把所有事情作为一个可量化的指标来看待,而不是用所谓的头脑风暴来做决策。因为我们通常都以“差不多”、“大概齐”、“应该”、“可能”为一个评判标准,改变这种固有的思维模式,用数据来做指导,推动企业价值的提高,推动民生领域的建设,这才是大数据能够为我们带来的贡献。俗话说:“你用,或者不用,数据就在那里。”Hadoop开启了一扇通往大数据的门,但是进门之后怎么装修,这就是个发挥个人想象力的事情了。向磊强调,在大数据这个领域,Hadoop是极其重要的工具,但它不能替代人才的重要性,有人才会有创新和革命。

  学好Hadoop 从Linux抓起

  大数据是一种很玄的东西,从大数据中,我们可以从看似毫无关联的事物里发现其隐藏的关联性。这就好比是一个反向的蝴蝶效应,我们从一场大风暴中可以推导出是哪只蝴蝶扇动了翅膀,而Hadoop作为大数据技术的主导者,其在大数据领域的重要性不言而喻,未来这方面的工作机会也非常之多。不过对于广大的Hadoop新手而言,快速地学习并掌握Hadoop这项技术并非易事。对此,向磊建议新手们先从Linux学起,有了Linux的基础,新手们进入Hadoop的世界也能轻松很多。此外,学习一些网络知识也是很有必要的。在向磊看来,编程与开发是学习过程中的重中之重。Hadoop是由全世界的程序员构建起来的开源系统,将来也非常需要新手们的加入和贡献。无论是程序员还是硬件爱好者,他都建议他们多参与开源的项目,一切收获都需要付出,贡献开源之后的收获和乐趣是无法比拟的。

  作为本次Hadoop大会的演讲嘉宾之一,同时也身为资深技术人员的向磊先生对大会充满了期待。他笑言,终于可以有一个不用翻墙就可以和全球技术大牛以及Hadoop主要贡献者进行面对面交流的机会了。在本次大会上,向磊将会与大家分享他在Hadoop自动化运维方面以及降低其生态系统使用难度上的相关经验,希望能为大家使用大数据入门提供帮助。另外,他还推荐参会者多关注国内拥有自主知识产权的大数据创业团队和创业项目。向磊表示,每个人、每个团队身上都有可以学习和借鉴的优点,相信创业团队的宝贵经验也能让广大参会者大有收获。

0
相关文章