存储 频道

陈坚:融合致简 华为分布式存储技术实践

  【IT168 专稿】4月10日,一年一度的中国数据库技术大会(DTCC)今日在北京五洲皇冠国际酒店召开。自2010年以来,国内领先的IT专业网站IT168联合旗下ITPUB、ChinaUnix两大技术社区,已经连续举办了四届中国数据库技术大会。今年,大会将继续秉承分享IT非常好的应用实践的宗旨,围绕传统数据库和大数据两条技术主线,深入探讨数据库技术的现状和未来的发展方向,以及我们在这个转型过程中的实践经验和教训。

  在第二天下午的“存储和文件系统”专场上,来自华为的高级营销经理陈坚先生为与会者带来了《华为分布式存储技术与应用实践》主题演讲。

陈坚:华为分布式存储技术与应用实践

  ▲华为高级营销经理陈坚

  陈坚表示,“合久必分,分久必合”的定律早已在IT界得到验证,在这种趋势下,IT架构在向“融合”方向演进。创新公司不断涌现,传统IT软硬件厂商也纷纷加入计算存储融合阵营。对此,华为的解决之道是,通过将计算、网络、存储、管理深度融合,推出一体机解决方案——FusionCube。

陈坚:融合致简 华为分布式存储技术实践

  陈坚开玩笑称,华为的特点就是什么都做。据他介绍,FusionCube一体机采用计算网络存储融合设计,计算刀片和存储刀片灵活配置的融合架构,内置GE/10GE /IB多协议交换板。值得一提的是,FusionCube采用的FusionStorage是一种分布式的无状态机头,可实现线性的扩展能力,并且支持PCIe SSD存储。据华为介绍,华为使用的是自己的PCIe闪存卡,在硬件方面具有优势。华为提供的数据显示,FusionCube采用的PCIe闪存卡的最大随机读IOPS为770K(4KB,100%随机),最大随机写IOPS为630K(4KB,100%随机),采用的PCIe 2.0 x8接口,带宽为3.2GB/s,访问延迟为8微秒。

陈坚:融合致简 华为分布式存储技术实践

  目前来看,数据仓库主要的瓶颈是计算和存储节点间的网络IO和主存的磁盘IO。为此,FusionStorage采用Scale-Out架构,通过计算存储的深度融合,分布式存储解决集中式机头的瓶颈。

  FusionStorage的主要特点有:

  · 水平扩展、超大容量:分布式系统,无管理机头瓶颈,容量几乎不受限制

  · 高IOPS:应用大容量分布式Cache技术,提升IOPS

  · 低时延:应用程序通过Cache/SSD直达存储,时延更低

  · 数据重建快:并行重建,重建数据量小

  · 管理简单:结构简单带来管理简单

  FusionStorage的总体架构

  存储接口层

  通过SCSI驱动接口向操作系统、数据库提供卷

  存储服务层

  提供各种存储高级特性,如快照、链接克隆、精简配置、分布式cache、容灾备份等

  存储引擎层

  FusionStorage存储基本功能,包括MDC总控集群、DHT数据路由、分布系统、强一致性复制协议;及在单节点故障时,集群故障自愈与并行数据重建子系统

  硬件设备层

  基于E9000计算、存储融合刀片式服务器,无需外置SAN,支持IB高速交换、PCI-E SSD卡

陈坚:融合致简 华为分布式存储技术实践
▲华为一体机全球参考案例

  据介绍,FusionCube核心关键技术全部基于华为自主研发、自主知识产权的软硬件技术,其中FusionStorage分布式存储引擎便将所有FusionCube的本地存储虚拟化为集群式存储资源池,其多节点、分布式的架构优势使系统不再受制于传统存储RAID控制器造成的性能与带宽瓶颈,并带来更出色的可靠性与可扩展性

陈坚:融合致简 华为分布式存储技术实践

  ▲更多精彩技术分享,请点击IT168图文直播专题

1
相关文章