基于硬件的重复数据删除效率更高

郭涛

“2009年是重复数据删除技术起步的关键一年。”专注于容量优化与保护的Hifn公司亚太区运营副总裁杨钦铭十分看好重复数据删除技术的发展前景。

迫于全球金融危机的压力,企业级存储用户都在想办法降低成本。通过使用重复数据删除技术,用户可以有效缩减对存储空间的需求,同时减少数据管理的工作量,从而达到降低系统整体拥有成本的目的。

两种实现方式各有优势

重复数据删除技术有两种实现方式,包括在线处理和后处理。在线处理方式就是在进行数据备份的同时对重复数据进行删除。这种方式虽然可以大幅缩减数据存储空间,但是可能对备份的性能产生负面影响。后处理方式就是在数据备份到磁盘上以后,再进行重复数据删除的工作,从而保证备份过程的高性能,但是缩减存储空间的能力稍逊。

目前,大多数采用基于软件的重复数据删除技术的厂商都采用后处理方式。

用户选择重复数据删除技术,最根本的目的还是消除重复数据,从而达到减少存储空间占用的目的。在线处理方式虽然可以更有效地缩减占用的存储空间,但是如果采用基于软件的重复数据删除技术,性能始终是一个瓶颈。

为了消除性能的瓶颈,Hifn公司推出了嵌入式的硬件加速重复数据删除平台——Hifn重复数据删除加速器250与255,它具有简单、易用的特点。Hifn重复数据删除加速器250与255分别采用Hifn公司的Express DR 250 PCI卡与Express DR 255 PCI-Express卡,用于重复数据删除功能的卸载与加速。Hifn重复数据删除加速器还采用了全新的Hifn重复数据删除加速器软件,基于创新的检索技术与独特的指纹功能,可以达到更好的重复数据删除效果。

“通常情况下,基于软件的重复数据删除产品的性能约为400Mb/s。Hifn计划于2009年6月推出的基于硬件的重复数据删除产品的性能将达到1.6Gb/s。”杨钦铭表示。

其实,重复数据删除技术本身并没有好坏之分,关键看系统的性能以及用在哪些应用领域。Hifn重复数据删除加速器的出现,可以帮助用户消除在线处理方式的性能瓶颈,不仅可以将重复数据删除更好地应用在备份、归档等二级存储应用中,而且可以用于主存储,进一步削减冗余数据。

即插即用的硬件加速

“重复数据删除是一个新的功能,未来2～3年会更加流行,而且有可能成为数据保护产品的一个必备功能。”杨钦铭表示,“Hifn重复数据删除加速器的诞生使得厂商能够轻松地将重复数据删除功能融入到现有的存储及服务器产品中,从而加快重复数据删除产品投入市场的速度。”其实,Hifn重复数据删除加速器就是一块卡,可以轻松插入现有的硬件系统中。比如,NAS存储厂商如果想在现有的产品中增加重复数据删除功能,只要使用Hifn重复数据删除加速器,再加上标准服务器,就可以创建实时重复数据删除解决方案。

重复数据删除技术的应用并不仅限于数据备份和归档领域,而是可以广泛用在IP SAN、NAS等存储产品上。杨钦铭表示:“传统的重复数据删除解决方案一般受限于后处理方式,必须先把所有数据写入磁盘,再删除冗余数据。但是基于硬件加速方面的技术优势,Hifn的产品可以支持实时重复数据删除过程,而这正是在大范围存储环境中部署重复数据删除技术的硬性要求。Hifn还准备与WAN优化厂商合作,将重复数据删除技术用于WAN,以减轻数据远程传输的负担。”

目前,Hifn公司已经能够用硬件实现数据压缩、重复数据删除和加密等功能。Hifn公司正在酝酿一个新计划,即推出USB(Unified Storage Bundle)解决方案。这一解决方案不仅可以支持iSCSI和NAS,还集成了基于硬件的压缩、重复数据删除和加密等功能。