压缩技术对重复数据删除技术造成压力

2008-11-21    | |
打印本文章
RSS

导读:重复数据删除和压缩技术真正的差别在于算法不同或者完成工作的方式不同。但是我们许多人在工作的时候并不需要了解算法存在哪些差异。

关键词:重复数据删除 压缩 磁盘 磁带

正在加载数据...

【TechTarget中国原创】目前,重复数据删除技术十分流行,而我们见证其成长的Lempel-Ziv (LZ)压缩技术虽然略显陈旧,却依然性能良好。两种技术真正的差别在于算法不同或者完成工作的方式不同。但是我们许多人在工作的时候并不需要了解算法存在哪些差异。

  位于霍普金顿的Taneja Group的创始人兼咨询分析师Arun Taneja说:“我认为市场上存在许多误解,大部分人并不是电脑专家。”

  两种技术都能减少数据卷的数量。压缩技术是移除数据流中重复的位数,清除文件中的冗余数据。而重复数据删除技术是比较文件和子文件,参考源文件,移除重复文件,只能节省一个实例的空间。

  标准压缩技术的压缩比率为2:1,即将数据流的位数减半。磁带和磁盘都具有压缩功能。而重复数据删除技术只是针对磁盘(磁带不具有连续性),据称压缩比率可达30:1。不过Taneja指出:“但这并不意味着重复数据删除无所不能,而压缩技术一无是处。”

  现在情况发生了变化:Taneja 指出,Storwize和Ocarina Networks这两家彼此竞争的压缩技术供应商开始重新编排LZ算法,这样就可以在“比较注重性能的环境中”使用压缩技术,而不是仅仅在数据备份中使用这种技术。Storwize公司称其能提供针对主存储的容量优化技术。也就是说,Storwize能提供在线压缩功能(这是最基本的),而不会引起任何性能缺陷。

  Polycom是一家位于加州普莱森顿的视频会议公司,拥有3000名用户,公司IT部门经理Amit Bar-On将Storwize与其NetApp系统相连。于是,可用存储从立刻300GB增长为1.1TB。Bar-On说,Polycom公司应用程序的数据负荷减少了65%。

  Bar-On认为,尽管NetApp系统免费提供重复数据删除技术,但并非他想要的。“重复数据删除技术需要搜索文件,如果在中午做这项工作的话,就会影响性能。”他说,“我需要压缩所有的数据,而不是搜索重复文件,我需要一种能够实时运行的技术。”


重复数据删除
 重复数据删除技术在数据保护过程中有何作用
 结合重复数据删除的虚拟化容灾方案
 选择正确的重复数据删除解决方案
 利用重复数据删除技术进行灾难恢复时需要考虑的四大策略
 有关重复数据删除技术的五大误区
 重复数据删除和VMware DR结合节约成本
 如何评估基于硬件的重复数据删除产品
 重复数据删除技术如何缓解存储需求
 重复数据删除in-band VS out-of-band
 CAS和重复数据删除:归档双雄
 如何通过重复数据删除降低存储成本
 重复数据删除是如何工作的?
 压缩、重复数据删除和加密的区别
 确保重复数据删除系统的高可用性
 如何评估基于软件的重复数据删除产品
 重复数据删除技术的安全性如何?
 重复数据删除技术对备份的作用
 重复数据删除技术的实现方式分析
 技术对比:重复数据删除技术、数据压缩技术和单一实例存储技术
 专访Hifn:重复数据删除是存储发展的必然选择
 重复数据删除:能否由次级存储转移到主存储?
 重复数据删除将走进主存储系统
 专访飞康:重复数据删除更应考虑数据安全问题
 压缩技术对重复数据删除技术造成压力
 支持重复数据删除的虚拟磁带库有什么好处?
 文件级和块级重复数据删除技术的优缺点
 VTL重复数据删除有哪些优点?
 VTL重复数据删除有哪些缺陷?
 重复数据删除技术指南
 中立备份专家评测各大重复数据删除产品
 VTL重复数据删除经典案例
 重复数据删除产品特点详细对比
 备份领域重复数据删除身处何地?(热点话题)
 重复数据删除的八大评估标准
 重复数据删除率受哪些因素影响
 分析:重复数据删除技术的劣势
 重复数据删除技术:块级技术VS.字节级技术
 在VTL或备份设备上运行重复数据删除对性能有影响吗
 重复数据删除的基本定位与实施
 重复数据删除的优缺点与认识误区
 重复数据删除进入主存储为时尚早
 中小型企业应如何评估重复数据删除产品(上)
 中小型企业应如何评估重复数据删除产品(下)
 技术手册:重复数据删除技术详解
 VTL重复数据删除功能解决用户难题
 自动精简配置(Thin Provisioning)和重复数据删除核心技术解读
 重复数据删除产品测试(上)
 重复数据删除产品测试(下)
 如何选择重复数据删除产品
 存储调查:你使用重复数据删除了吗?

【美国TechTarget独家授权】 Compression puts the squeeze on dedupe

【原创内容,版权所有,谢绝转载。TechTarget中国将保留追究其法律责任的权利。】
作者:Ellen O'Brien      译者:周姝嫣   
  评论
 
在本期存储技术沙龙中,TechTarget中国邀请了近年来非常关注去重技术应用的存储巨鳄EMC的高级顾问来现场和大家聊聊重复数据删除的概念、内涵以及最重要的应用问题。
 
6月26日(本周五)下午2:00(1:30签到)EMC在北京、上海、成都、广州四个城市,将同时举办针对Avarma重复数据删除的线下技术培训,有感兴趣的网友可注册参加。
 
美国慷孚系统公司(CommVault)和戴尔联合推出了第一款内嵌重复数据删除功能的数据管理解决方案--戴尔PowerVault DL2000。
 
2009中国网络存储大会上,Hifn首次针对国内市场发布并展示了BitWackr Enterprise——业界首款硬件加速数据容量优化解决方案。TechTarget中国采访Hifn,揭秘BitWackr。
 
问:您能否解释一下数据销毁和数据删除的区别?答:数据删除指的数据不在存在,应用和最终用户看不到数据……
这本技术手册介绍硬盘扇区(块)大小和文件系统分配单元(块)大小的区别。 
不恰当的磁带存储操作常常会导致数据丢失。灰尘,猛然撞击和高温只是导致磁带不能读取的一部分原因。因此,磁带操作和磁带管理非常重要,在实际工作中需要特别注意。
由于法规所要求的数据的存储和保留,数据增长不可避免。当备份的数据被删除时,它们真的找不会来了吗?数据销毁是什么,怎样进行?
最新更新
专家答疑
技巧
钟富钧
问:在Windows Server 2003或Windows XP下,为什么由QSAN控制器组成的磁盘不能从基本转换成动态?
Jeff Boles
问:什么存储刀片?为什么存储刀片是一项好的技术选择?答:今天我们发现很多用户在经济危机时期采用刀片服务器,这是非常好的解决方案……
Curtis Breville
问:磁带写完后应该怎样保存? 答:使用磁带防护罩是有必要的。把磁带放到了防护罩里以后,确保磁带防护罩放在合适的、气候环境可控的环境里。

登录TechTarget中国

关闭
本服务仅向TechTarget中国的会员开放,请登录或立即免费注册
登录Email
请输入您的登录Email
密码
下次自动登录