【IT168 资讯】12月2日-3日,以主题为“海量数据掘宝”的Hadoop中国2011云计算大会在北京会议中心召开。本次大会邀请了Apache软件基金会主席 Doug Cutting先生、威斯康星大学教授Miron Livny以及google、Facebook、EMC、eBuy、IBM、淘宝、华为、支付宝、奇虎、新浪、中兴、曙光、腾讯、人人网、清华大学、英特尔以及百度等学术机构、国际知名公司的资深工程师。
GreenPlum部门从2010年7月起就成为EMC公司专门从事大数据分析研究的部门,在今天上午的最后一堂演讲中,来自EMC公司GreenPlum部门的副总监、资深工程师Ronaldo Ama将我们讲解大数据分析在未来给我们带来的价值。
▲EMC公司GreenPlum部门副总监、资深工程师Ronaldo Ama
数据的海量增加,尤其是非结构化数据的无序增加,给诸多企业的数据信息处理带来了极大的挑战,诸多公司IT主管都面临着大数据处理分析这一挑战,但一旦大数据难以分析这个问题得以解决,那么其将给公司带来无限的价值,并将指引公司走向更辉煌的成功。所以Ronaldo Ama先生认为,大数据分析将是企业是否成功的关键。EMC公司的Greenplum分析实验室一直致力于大数据分析的研究,并从中获得一些宝贵的经验,在今天的会议上,将和大家一起分享。
▲Greenplum 统一分析平台
上图显示的是EMC公司Greenplum部门设计的统一分析平台,底层为私有云或者混合云基础设施或应用,云之上则是数据库和Hadoop对数据进行处理分析。Ronaldo Ama工程师说,Greenplum不仅仅只包含了数据库,因为其是一个专门针对大数据的统一分析平台,所以其还包括了HD、CHORUS,这些工具与数据库一起组成了EMC公司的统一分析平台(UAP)。
Ronaldo Ama工程师认为,Greenplum不仅仅只停留在技术的层面,这个有数据分析师共同组成的团队将成功找到对大数据进行快速分析的途径;包括斯坦福大学和加州大学伯克利分校的数据科学家们将共同协作,而Greenplum部门的数据工程师则将对这些工具进行实践,并提出宝贵的经验。
并且,Hadoop的成功离不开包括Greenplum的实践、论坛的贡献以及数据科学峰会的社会投资。就目前而言,Hadoop生态系统正不断成长,越来越多的公司和合作伙伴加入其中,其中包括McAfee、VMware、SONY、CSC、FICO、Cobait、微软、SAP以及SAS等等。Greenplum分析实验室成立的宗旨在于找到一个具有可操作性并产生商业价值的整体解决方案,以加快你的数据处理与分析能力,利用Greenplum实验室专家的专业知识,建立一个分析发展的战略眼光。