存储 频道

采用自主架构处理器,龙芯中科推出分布式存储解决方案

  随着云计算、5G、人工智能等新技术迅速发展,人工智能业务模式的不断升级,互联网、视频应用对大数据处理要求的不断提升,需要一套技术先进、性能优越、具备高可靠性、扩展性的存储系统方案作为后端数据存储的支撑,分布式存储技术应运而生。

  与传统网络存储系统采用存储服务器集中存放数据的方式不同,分布式存储系统将数据分散存储在多台独立的设备上,多台存储服务器分担存储负荷,系统还具备冗余备份、数据纠错等功能,提高了系统的存储效率及可靠性。此外,分布式系统弹性扩展的技术优势,可支持存储容量的动态管理,能够满足了大规模存储应用的需要。

  龙芯中科作为行业领先的自主CPU设计研发企业,2021年推出了龙芯首款16核服务器专用的3C5000L处理器芯片。龙芯3C5000L服务器芯片,主频2.0-2.2GHz,16核,支持2-4路多片互联,具备架构自主、性能卓越、生态兼容和安全融合的特点,性能较3B4000提升了7-8倍。目前基于龙芯3C5000L处理器的多款分布式存储产品已经在项目中得到应用,可有效满足大型数据中心、云计算中心的业务应用需求。

  基于3C5000L处理器的2U及4U机架式服务器

  龙芯分布式存储系统解决方案由龙芯分布式存储设备和分布式存储管理系统两部分组成。其中,分布式存储设备采用基于龙芯3C5000L的存储服务器,为上层应用提供稳定可靠、高效环保的数据存储环境;作为数据处理中心的分布式存储管理系统具有良好的伸缩性,可将各类存储资源组织起来,构建分布式存储池,并为上层应用提供文件、块、对象不同形式的数据操作接口,以便满足业务对结构化、非结构化数据的存储、管理要求。

  为满足不同应用需求,龙芯分布式存储设备主要包含基于3C5000L处理器的2U及4U机架式服务器。

  龙芯分布式存储管理系统支持Ceph、Gluster、Beegfs等多种文件系统及iSCSI、RBD、NFS、CIFS、FTP、S3/Swift数据访问接口,可为业务系统提供全面的数据访问接口,满足结构化、半结构化、非结构化数据处理要求。

  针对非结构化数据的飞速增长,龙芯分布式存储管理系统为不同应用提供从几十TB到数百PB的存储空间,单一文件大小超过TB级别。对于图片及视频等非结构化数据,支持数据压缩、添加水印、在线播放等功能,还可通过加密通道实现数据保护,通过多版本及多站点备份,实现数据的容灾访问。

  龙芯分布式存储管理系统主要功能及特点

  龙芯分布式存储管理系统拥有高性能的文件管理能力、强大的扩展能力,具备全局数据镜像保护及数据分级存储等功能,还可根据不同存储策略实现数据故障检测、系统在线扩容、容量限额及文件镜像保护等高级功能。

  支持数据纠删及备份:

  龙芯分布式存储管理系统提供数据副本和数据纠删两种数据保护策略,支持12级数据副本,可保障数据的完整性;数据纠删支持N+M的数据容错方式,可支持任意纠删比例的数据容错。

  支持WORM:

  Write Once Read Many,是一次写入技术,即文件被写入完成后即可通过去掉文件的写权限,使其进入只读状态,在该状态下文件只能被读取,无法被删除、修改或重命名。通过WORM技术存储的数据,将不会因各种意外丢失或被修改,保证了企业对重要数据的长期存储,数据文档存储更安全可靠,可满足企业或组织对一些重要的业务数据安全存储的需求。

  支持远程复制:

  提供全量、增量方式异步数据复制功能,将龙芯分布式存储系统内的数据同步至远端的龙芯分布式存储系统或其他第三方存储备份系统,方便进行数据的异地备份和恢复,提升数据可靠性。

  支持跨站点及节点级的安全防护:

  多资源池隔离,不同资源池设置不同冗余级别,保障部分业务独享优质硬件资源;硬盘级、节点级、机柜级故障域,最大限度降低硬件故障对业务的影响;并行数据重建,1TB数据恢复时间30min以内,是传统RAID的数十倍,降低数据丢失风险;高性能快照保护,有效避免“软故障”灾难。

  支持数据精细化管理:

  数据分类分级是数据安全精细化管理的前提,针对相同数据不同场景、不同数据相同场景下的个性化管控,实现数据在传输、存储、处理、交换、销毁等数据生命周期下的有效存储。当数据属性、部署场景发生改变时,对应的存储策略也随之动态改变。

  支持数据生命周期管理:

  龙芯分布式存储管理系统针对数据生命周期管理要求设计数据的存储时间,超过指定时间则自动迁移到准备好的低成本存储中,当存储后台判断数据迁移完成之后,则自动删除已迁移过去的数据,释放空间;支持针对冷存储中数据的生命周期管理,比如根据策略可自动删除数据;支持自定义的数据访问权限;支持文件系统接口、对象存储接口数据的生命周期管理,提供到期删除模式、到期双向删除模式、不删除模式等。

  龙芯分布式存储管理系统优势

  性能卓越:单套系统支撑上万台渲染服务器并发读写,支持并行存储,自动分级,大幅提升性能,单台存储最高提供1GB/s以上带宽;

  超大容量:高密度设计,单台存储最大支持容量360TB;Scale-out横向扩展至1024个节点;单套系统最大支持300PB;单个文件最大支持32TB;

  安全稳定:支持硬盘级、节点级、机柜级、数据中心级冗余;支持快照、异地容灾、副本、纠删等多种数据保护方式;支持在线自动重建,多节点同时重建数据丢失部分,比RAID快10倍以上,不影响前端业务;

  广泛兼容:支持文件、块、对象接口类型;支持Ceph、Gluster、Beegfs存储系统;支持CIFS、NFS、HDFS、FTP、HTTP、POSIX、iSCSI、S3、Swift等多种协议。

特别提醒:本网信息来自于互联网,目的在于传递更多信息,并不代表本网赞同其观点。其原创性以及文中陈述文字和内容未经本站证实,对本文以及其中全部或者部分内容、文字的真实性、完整性、及时性本站不作任何保证或承诺,并请自行核实相关内容。本站不承担此类作品侵权行为的直接责任及连带责任。如若本网有任何内容侵犯您的权益,请及时联系我们,本站将会在24小时内处理完毕。
1
相关文章