WatchStor.com — 领先的中文存储网络媒体 | 51CTO旗下网站

评测导购 > 数据保护 > 正文

重复数据删除技术两种不同的实现方式

WatchStor.com  佚名丨2009-12-04 16:11 标签:数据保护 存储资源管理 重复数据删除 

重复数据删除技术已经走向了一个逐步成熟的境地。在很多的时候很多重要的数据都被重复的数据挤占了存储空间。这让进行存储的企业和个人都很头疼,重复数据删除技术就显得越来越重要。

尽管今天单位存储空间的成本不断走低,但企业需要存储或者备份的数据量仍然在持续上涨,导致了企业在磁盘存储空间方面无止境的成本投入。是否能有一种技术或者解决方案能够10倍甚至20的缩减企业数据量,让磁盘备份在容量空间方面的成本能够被更多的企业承受呢?重复数据删除正是近期的一项热门技术,由于可以大幅压缩和删减用户需要备份的数据量,因此让用户和厂商都对此青睐有加。

但是一旦深入到重复数据删除技术的采购,这些专家就没有更好的意见了。因为重复数据删除的很多供应商目前仅仅能够实现这项功能,而实现的具体方式则各有不同,适用于一家公司的重复数据删除技术解决方案,未必就适用于另外一家公司。因此,本文在此给出了一些建议,来帮助用户在采购时避免不必要的混乱。

选择安全的压缩比

11月2日,EMC宣布以1.65亿美元收购重复数据删除技术专业公司Avamar,以增强在磁盘备份领域的实力。Falconstor和Sepaton已经在产品中采用重复数据删除技术。赛门铁克也推出包括重复数据删除技术功能的备份软件产品。今年三月ADIC(现被昆腾收购)还以6300万美元收购了Rocksoft。今年的并购案列表中,重复数据删除正是最为积极活跃的领域之一。

重复数据删除软件只备份经过更改的数据,这与传统的每周或每天备份所有数据的模式形成了鲜明对比,也就意味着重复数据删除可以大量地削减需要备份的数据量。备份厂商Asigra和Avamar以及VTL初创公司Data Domain是最早拥有这项技术的厂商。

由于重复数据删除技术能够大幅度削减企业存储与备份的数据量以及对存储设备的容量需求,因此对于任何规模和大小的企业来说,重复数据删除无疑是一项极具诱惑力的技术。实际上,重复数据删除对于备份数据量超过2TB的企业来说才具备明显的经济效益。

同时,重复数据删除技术和压缩较为类似,各个企业能够达到的压缩比各不相同。一般来说,10:1的压缩比是较为安全的比例范围,但多数企业会选择使用20:1的压缩比率。但实际上很多企业无法真正达到这个压缩比例。企业最高的压缩比例实际上取决于企业备份的方式以及备份的数据类型。

至于如何决定企业需要的最高的压缩比例,还需要考虑企业是否拥有广泛的分支机构和移动雇员,以及企业是否正在建立一个集中的数据中心。基本上对于各种情况我们都能找到重复数据删除的解决方案,但没有一种解决方案能够适用于所有的企业和所有的情况。

两种不同的实现方式

和光盘存储一样,我们知道蓝光和高清DVD尽管都不适用于企业存储,但都有各自针对的不同人群和市场。重复数据删除技术的领地也可分为两个阵营。其一是作为某种功能嵌入到整体的备份软件或者解决方案中,如重复数据删除与虚拟带库的整合解决方案。这方面领先的厂商包括Diligent, Data Domain, Sepaton, FalconStor和Quantum。

与之相对的另外一部分市场是重复数据删除技术软件成为一个独立的备份软件,从原数据备份之初就开始进行优化并压缩,并替代企业对传统备份软件的需求。这部分领地内,活跃的厂商包括:Avamar (现已被EMC收购), Asigra, Symantec, Atempo和TimeSpring。

在某一个层面上,这两种类型的重复数据删除技术都是相同的,他们都在寻找冗余的数据块并试图删除这些数据块。但他们通过不同的方式来实现这个目的,并且在最终的备份和恢复的整体性能上有截然不同的表现。

一般来说,虚拟带库厂商往往把重复数据删除作为一个必不可少的可选项与整体备份方案相结合,因为这些虚拟带库解决方案本身为高性能的数据存储与备份设计,重复数据删除技术可以帮助企业减少必要的磁盘空间需求量,但因为重复数据删除技术删除了大量的数据副本,仅仅根据修改的历史记录来恢复原有数据,实际上会降低数据安全性以及恢复性能。

尽管如此,一个拥有广泛分支机构的企业部署一套虚拟带库解决方案仍然是昂贵的,最便宜的虚拟带库每节点价格也高达20,000美元以上,还不包括备份软件等等其他的成本。某些替代的备份软件解决方案最终很可能给这些拥有分支机构的企业带来更高的成本,这就是为什么我们说重复数据删除是虚拟带库整体解决方案中 “必不可少”的一部分的原因了。

举例说明:某公司有73个分支机构,使用了Avamar的Axion重复数据删除技术备份软件解决方案,最终他们发现重复数据删除大幅削减了他们的分支机构对数据存储和备份的容量的需求。

但是,重复数据删除备份软件解决方案并不能适用于所有的情况。如果你已经在使用某些备份软件并且每天备份大约50 TB的Oracle数据库数据时,你就不要期望用重复数据删除技术的备份软件去替代现有的备份软件了。除开数据迁移和改变备份模式的风险以外,在大多数情况下你会发现,使用重复数据删除后,数据恢复速度变得慢的让人无法忍受。

如果一个企业拥有广泛的分支机构和一个庞大的数据中心,那么多数情况下企业需要两种重复数据删除解决方案,当然某些国外专家并不认为这是一件糟糕的事情。

例如:某企业采用赛门铁克的NBU备份软件,但企业又拥有庞大的分支机构,那么企业完全可以在总部的数据中心运行赛门铁克NBU,而通过某些重复数据删除技术产品有效优化和备份这些分支机构的产生的数据,因为大量的重复数据都产生于这些分支机构。通过两种截然不同的产品完全可以有效解决企业对备份性能和空间成本上的苛刻要求。

【编辑推荐】

  1. NetApp重复数据删除的重要地位
  2. 重复数据删除的疑难解答
  3. 重复数据删除技术的选择指导意见
  4. 重复数据删除能否保证安全性
  5. 八条标准评估重复数据删除


相关资讯

今日微信独家

《华尔街日报》报道日前援引知情人士的消息称,由于被美国政府以国家安全问题为由进行调查,联想斥资23亿美元收购IBM低端服务器业务的交易陷入了停滞状态。
关注新浪官博 订阅微信订阅号

订阅焦点周刊

论坛与活动

2016中国数据加速峰会直播专题
2016中国数据加速峰会直播专题[详细]
点击查看

精彩视频

最新文章

1111111
1111111
asdasd
asdasd
同有科技应用型大数据存储在南京掀起智能风暴
同有科技应用型大数据存储在南京掀起智能风暴
斯蒂芬斯蒂芬
斯蒂芬斯蒂芬
京东双11技术备战 构建多中心交易系统
京东双11技术备战 构建多中心交易系统