墙角数枝梅,凌寒独自开。
再冷的冬天也有梅花绽放,再千篇一律的雪野也有暗香。这不仅适用于现在的严冬,也适用于目前的企业级存储市场。这不是说存储市场现在处于寒冬,而是说在这个冬季,有些沉寂的存储市场实在需要一簇“梅花”的绽放。
12月17日,在基于深信服 HCI & SDS 的英特尔® 精选解决方案发布会上,深信服同时发布了凝练着与Intel(英特尔)合作成果的全新高性能版本存储。其高性能与低成本兼顾,高安全可靠的特性立时成为市场的焦点。也对市场释放出一个信号,深信服正唤醒企业级存储的春天。
如何打造“高性能”?
自研“4P”技术+高性能网络通信框架
数字时代的燃料——数据,正在呈井喷式爆发。据IDC预测,到2024年,全球数据总量将超过143ZB,23%的数据全将来自云端,24%来自于实时数据。这是一个非比寻常的时代,数据正以惊人的速度增长。
反映在企业级存储市场,也出现了与多年前相比大有不同的变化,其中一个重要的体现是数据量的暴增使得企业级存储需要更快、更强的产品。现代存储系统需要灵活多变,并能够为随机读/写和顺序读/写提供高性能支持。这意味着要让存储的性能变得更高,从而拉近更多数据与处理之间的距离。
这也是深信服全新高性能版本存储的切入点。今年,深信服企业级分布式存储 EDS全新升级,重点在性能层面实现飞跃,打造卓越的性能体验。
诚然,像英特尔这样的生态合作伙伴提供了非常有竞争力的硬件平台,但不是每个厂商都有能力可以充分发挥出这些硬件的全部性能,这背后非常考验存储厂商的技术积累、软件开发能力、及自主研发能力。
在深信服看来,为了充分释放硬件的高性能,必须从软件架构设计层面有足够的前瞻性、系统性,才能软硬深度协同,在性能层面实现飞跃。为此,深信服研发团队自研打造了高性能数据架构,即“4P”技术+高性能网络通信框架。
自研PhxKV数据库:三节点能够帮助用户轻松驾驭百亿级海量小文件的元数据管理。索引效率提升一百倍,即使是百亿文件场景下,依然能够做到毫秒级快速调阅文件,而且性能损耗衰减低于5%。
自研PhxCache智能缓存技术:将多个离散的小文件聚合成一个连续的大数据块实现智能合并,解决元数据规模大,碎片化以及元数据处理交付复杂的问题。最终实现小文件写入性能提升2倍,重建性能提升5倍,有效容量可以提升50%以上。
自研PhxTier智能分层技术:区别于一般厂商基于时间这种单一维度的分层算法,深信服投入一批精通算法的博士、专家,自主研发出自适应智能分层技术,以AI深度学习算法为核心,能够对数据驻留时间,被访问次数,数据上下文关联性提前感知等策略,形成AI热力图,数据命中率可以达到96%以上,将冷热分层技术背后的本质逻辑——"尽可能在较低成本的前提下满足高性能需求”演绎地淋漓尽致。
自研PhxStore高性能存储引擎:更是用实力诠释“不是所有支持NVMe的存储引擎都是好引擎”,关键看能发挥出几成性能。深信服自研的PhxStore存储引擎天生面向NVMe设计,基于SPDK线程模型,能够充分发挥新一代存储介质(如英特尔傲腾)的极限性能。
在网络层,基于RDMA协议构建了高性能、低时延且低成本的网络通信协议,实现了同成本下切换高速、低延时的存储网络。整个网络延时仅仅为TCP网络的1/10,FC网络的1/2,高性能存储网络建设成本对比InfiniBan直接降低80%。
通过一套架构,一个平台,支撑一个数据中心。深信服EDS存储对外提供块、文件、对象、HDFS等服务接口,无一不在深刻实践着其产品理念:软件定义,充分激发硬件潜能,有效控制成本的同时提供足够卓越的性能。
7年磨一剑,
深信服高性能存储厚积薄发
在企业级市场,深信服一直有个“神话”:从产品的成长路径看,深信服的核心产品经历平均 3 年即成为市场Top3,甚至第1。纵深来看,深信服自成立以来,在信息安全、云计算、IT基础架构领域陆续推出了几十款产品,大多数核心产品经历了 3 年左右的时间,快速成长为领域 Top 3,甚至第 1 的位置。
这背后,自然离不开深信服敏锐的市场洞察+研发高投入,在企业级分布式存储市场,也是如此。
早在2013年,深信服就开始了存储的悄然布局之路,并成立了专门的存储研发部门。最初,该部门主要负责向桌面云aDesk、超融合等产品线输送底层的存储技术模块。通过在桌面云以及超融合产品中的应用,得到了大量用户的验证,积累了丰富的实践经验。
基于这样的积累,2019年,深信服7年磨一剑,正式推出企业级分布式存储 EDS,杀入软件定义存储赛道,以“安全可靠、高性价比、数据开放共享”的竞争优势打响存储市场的格局重塑之战。尤其在高性价比方面,深信服连续多年高投入,不断进行技术创新,深刻地诠释了“性价比,是门技术活儿”。比如,深信服以远高于业界平均水平的重删率与 10:1 的高压缩率,让可用存储空间增长 10 倍,每一步都是在用计算力换存储空间。
深信服EDS存储还创造性地基于深信服20年的安全技术积累,将安全能力赋能存储,比如内置的AI杀毒引擎和安全设备联动,触发灵活的快照策略,文件回收站等等,全方位保护客户的数据安全。
市场要变,
高性能存储将成为企业级存储首选
如今,在数字化的演进中,数据存储的场景也在在发生变化,从终端到边缘到核心,从数据的采集、处理、传输到分析,客户想要的不只是要存储更多的数据,对于数据的管理和价值的挖掘也提出新需求,高性能正成为客户的必然之选。
据透露,明年深信服还将发布分布式全闪型号,采用先进的硬件平台,如傲腾的高速缓存,NVMe SSD,25/100GB的RDMA网络构筑性能高速公路,结合深信服面向全闪存设计的全新存储架构,实现单节点性能超过35万IOPS,可扩展至千万级IOPS,单节点吞吐可达3GB/s,可扩展至百级别Gbps。
然而,通过硬件堆砌的方式追求高性能从来都不是深信服的作风,正如深信服新IT业务总经理张强多次在公开场合强调的那样:伟大的产品从不应该曲高和寡,而应该不断帮助用户降低获得高性能存储体验的门槛。将于明年面世的分布式全闪型号,可以做到以传统混闪的成本,让用户体验到全闪存的极致性能。
经过七年的技术积累,深信服EDS存储一经发布就获得客户的广泛认可,其中很多都是政府、医疗、金融等对存储性能和稳定性要求非常严格的行业客户。比如在南方某市公安局雪亮工程中,视频数据应用分析承载了PB级的的视频存储及数十亿规模的海量人脸图库。得益于深信服在海量小文件的性能优化,使得EDS平台能够从容应对大并发的人脸识别系统,并且满足后续针对原始图片数据的二次挖掘应用。近期,EDS存储还光速进入了动画制作、石油地质勘探、卫星云图处理、基因分析等等对数据存储需求极大,但也对存储性能要求极高的顶尖行业。
同时,深信服亦深知仅凭一己之力,无法完全满足用户对数据存储、处理的复杂需求。深信服一直在积极推进与英特尔等广泛的生态伙伴一起,给用户提供面向数字化转型的“数智”基建,释放数字价值。比如,与英特尔、鲲鹏、Mellanox等合作,基于大量软件深度开发,全面发挥硬件的高性能;与鸿翼、云祺等合作,以更开放的生态,为用户搭建数据防护更立体、服务更完善的数据管理平台。同时,携手ISV深入不同行业业务场景,为用户提供定制化解决方案。
长远来看,随着数据爆发态势继续延续,多云环境下企业对基础架构的性能需求越来越高,企业级存储系统效能正在重新定义。深信服EDS存储通过自身深厚的技术积累和客户实践,与产业链上下游厂商的有力合作,为不同行业的客户提供领先的存储解决方案,释放其数据价值,在加速企业数字化转型的同时,也将推动自身成为中国存储的优选品牌。