存储 频道

九州初志:让存储集群不再“曲高和寡”

  【IT168 专稿】众所周知,互联网发展速度飞快,无论是互联网上Web页面数量,还是用户提交的搜索请求数量都爆炸式增长。但是Google搜索引擎却并没有因此而变得不堪重负,相反一直争取在0.5秒时间内处理完成用户请求,Google服务器系统已经成为高性能计算的一个成功典范。

  实际上,Google的后台并没有用太多大型的高档的服务器,Google采用的存储方法是用最常见、最普通的一个PC机中带两个硬盘的存储方式。但是却应用了独有的集群方式使后台成为一个高效的、海量扩容的存储系统,如今,集群存储已被实践检验是有效的海量存储解决方法。在视频编辑、广电、地理勘探等海量数据处理环境中,担当了关键和重要的角色,例如2010年最火热大片《阿凡达》其后台数据处理平台同样也采用了集群存储的技术。

  集群不是简单堆积

  九州初志科技有限公司总经理曾超告诉记者,说到集群,绝大多数用户大多会直接想到高性能计算集群或普通的服务器集群,这一方面说明计算集群目前影响范围之广,另一方面,也不得不说是对集群理解的局限。

  集群(Cluster)的英文定义直译为“聚集或工作在一起的相同或相似的一组元素”,但我们常说到的各种集群系统并不是硬件机器的简单堆积,而是希望能将其聚合成在某些核心功能上更加强大的系统,从这个意义上讲,集群其实是我们身边非常常见的一个概念,比如“三个臭皮匠顶一个诸葛亮”就是集群理念在生活中的一个鲜活的实例。

  对于大多数用户的应用环境,如果以高度集成的单一系统去满足用户快速膨胀的需求,将导致系统复杂度迅速提升从而带来成本上的大幅增加,同时系统的灵活性降低。而通过将多个系统松耦合集成的方式将可以降低成本,同时具有更强的扩展性。所以,使用集群理念解决用户的需求是计算机产品发展的一个重要趋势。

  初志公司的产品采用了集群的核心技术,在业界开创了以数据存储动态排序的“栈群”检索技术,构建了CZSS大规模集群存储系统,为国内互联网、广电、能源、电子政务、区域超算平台、行业数据中心提供了独特的个性化、方案化的解决方案和有针对性的产品及软件研发。


九州初志集群系统架构图,拥有集群系统横向扩展的性能和扩展性优势,且元数据与数据采用了独立的通道,提高了检索效率

  根据曾超先生的介绍,初志公司产品的优势包括:

  1. Scale-out的扩展模式达到性能和容量的线性扩展,且扩展时无需停机操作,不需要人工干涉,即可达到系统的负载均衡和数据的自动迁移。


横向扩展技术使得性能和容量达到线性提升

  2. 数据和元数据集群分离技术,能减少元数据操作与数据读写操作之间的互相干扰,提高海量数据的查找检索效率。


多数用户环境中,元数据操作占文件系统总操作数的60%,九州初志公司的集群存储系统将元数据与数据分开独立存储管理,由专门的元数据服务器管理所有的元数据内容,减少元数据操作与数据读写操作之间的互相干扰

  3. 全局文件数据冗余技术,消除系统内单点故障,并允许在一套系统中为不同应用的数据设置不同的冗余度,实现全系统规模快速数据恢复,据称恢复速度是RAID的5倍。

  4. 向下完全兼容传统SAN设备及原有的应用。

0
相关文章