【IT168 专稿】在过去的两年里，重复数据删除（Date Deduplication）以惊人的速度从一个偏僻的存储术语迅速成为了存储系统中广为人知的特性，几乎所有主流存储厂商都适时推出了自己的相关产品，到今天，重复数据删除技术已经成为备份产品所必备的标准配置之一。
步入2009年，我们看到已经完全占据备份市场的重复数据删除技术，开始在主存储领域蔓延，并获得新生。
早在今年4月在美国奥兰多召开的SNW大会上，致力于容量优化解决方案的厂商Hifn汉帆公司，就展出了该公司基于主存储系统的重复数据删除解决方案。跟随着SNW的脚步步入中国，中国用户也有幸近距离接触到Hifn独具特色、且极具经济效益的主存储重复数据删除。
记者有幸在媒体沟通会上与Hifn汉帆公司销售总监赵强先生交流有关主存储系统重复数据删除方案的特点和商机。
去重与压缩共同作用达到可观的压缩比
从原理上来说，主存储上重复数据删除工作原理与备份领域重复数据删除大同小异，都是根据特定的切割方式，将文件数据打碎成更小的数据块，并根据算法比对这些数据块。相同的数据块予以删除，只保留彼此不同的唯一的数据块。由于系统自动在这些唯一的数据块上保留了组成文件的指针信息，因此系统还能够根据这些指针信息，将这些唯一的小数据块组合还原成文件。
在以往，重复数据删除更多的应用于备份领域，由于备份策略的设定，系统经常会一遍一遍反复备份重复的数据，备份系统内往往存在较大的数据重复率，也因此在备份领域内应用重复数据删除具备更明显的容量压缩的效果。
对此汉帆公司销售总监赵强先生解释道：Hifn公司BitWackr解决方案除了在数据存储的过程中经过了去重，而且还增加了数据压缩的过程，经过去重和压缩两个过程的共同作用，所占用的存储空间就更小了。
根据赵强的介绍，Hifn专利的压缩算法已经有二十多年历史，各种工业设备上都得到了广泛的应用与验证，包括我们熟悉的磁带机。
根据多年的应用经验，将各个行业的数据汇总到一起，平均主存储上的数据压缩率能达到2-3：1的状况，加上数据去重的效果，一般主存上的重复数据删除大概能达到3-5：1的状态。针对一些在主存上应用CDP一类重复性较高的应用，数据删除比例还能达到更高的级别，平均能达到5-10：1的删除效率，对于主存储系统来说已经非常可观。
