压缩、重复数据删除和加密的区别

2008-3-12  选择字号:  | |
打印本文章
【TechTarget中国原创】本文将介绍压缩、重复数据删除和加密的区别,这三个概念在日常存储中重要性日渐突出。   目前,硬盘统治着存储行业,传统的存储阵列不断受到其他基于磁盘系统的冲击,例如虚拟磁带库(VTL)、复制平台等。随着越来越多的公司数据被转移到磁盘中,存储管理员必须部署、配置和管理日益增加的容量,尽量将磁盘空间利用到极限,同时保护重要数据免遭盗窃或丢失。压缩、重复数据删除和加密在磁盘存储中应运而生,了解它们各自所扮演的角色是非常重要的。

【TechTarget中国原创】本文将介绍压缩、重复数据删除和加密的区别,这三个概念在日常存储中重要性日渐突出。

  目前,硬盘统治着存储行业,传统的存储阵列不断受到其他基于磁盘系统的冲击,例如虚拟磁带库(VTL)、复制平台等。随着越来越多的公司数据被转移到磁盘中,存储管理员必须部署、配置和管理日益增加的容量,尽量将磁盘空间利用到极限,同时保护重要数据免遭盗窃或丢失。压缩、重复数据删除和加密在磁盘存储中应运而生,了解它们各自所扮演的角色是非常重要的。

  压缩

  事实上,压缩这个概念十年前就出现了,但是,像VTL的存储系统重新赋予了它新生。基本来说,压缩就是通过清除文件中的冗余数据来减小文件的大小。通过缩小文件的大小,就可以节省磁盘空间来存储更多的文件。例如,一个100K的文件通过删除其所占有的额外空间,或将长字符串用短字符来代替的方式,可以压缩到52KB。当文件被读取时,算法会对原始数据进行重组。图像文件也一样可以压缩。例如,.jpg图像文件格式就可以通过压缩来减少冗余像素数据。

  事实上,虽然所有的文件都能被压缩,但是一些无冗余数据的文件压缩的效果微乎其微,所以压缩比只是个指南——而不是个准则。例如,2:1的压缩比在理想情况下可以使400GB的文件只占用200GB的磁盘空间(或者200GB需要保存的文件只需100GB的磁盘空间)。在采用压缩算法之前,很难准确地判断一个文件到底能压缩到何种程度。

  重复数据删除

  一个典型的数据中心可能会存储很多相同文件的备份。文件重复数据删除(有时也叫数据缩减或共同性分解)是另一种旨在删减存储系统中的重复文件来节省存储空间的技术。由于只存储文件的单一实例,磁盘空间可以显著地降低。

  例如,假设同样一个10MB大小PPT文件分别存储在十个文件夹中,供每个销售人员或部分使用。这就需要占用100MB的磁盘空间来存储这个同样的10MB文件。文件的重复数据删除保证只有一个完整的备份被保存在磁盘中。随后重复的文件只保存一个指向以保存备份的指针,这样用户仍能在同样的位置上看到他们的文件。同样地,一个存储系统可能保留200封电子邮件,每封都有同样一个1MB附件。采用重复数据删除,需要存储每个1MB附件的200MB空间可以减小到1MB空间,只需保存一份。

  重复数据删除还可以提供更细粒状的控制,将文件的多余部分转移,甚至可能达到块级水平。这在内容寻址存储(CAS)系统比较常见,例如Avamar Technology公司的Axion产品。对一项重复数据删除产品进行评估时,一定要了解清楚该平台能提供的粒度。

  加密

  随着安全问题在政府法规和公司诉讼中日益突出,存储经理们开始承认安全在企业存储中的重要作用。加密技术是用来保护数据,防止未经授权的用户存取信息,即使文件被盗走。你可以在安全系统中看到加密技术的运用,例如Nexsan Technologies公司的Assureon CAS产品。

  加密是用数学算法通过一个独特的钥匙来对文件进行编码,从而使之无法被读取。在它使用同样的钥匙被解密前,没有其他人可以进入或使用加密的文件。当然如果密钥丢失或忘记,采用该密钥加密的数据就再无法读取。  


重复数据删除
 重复数据删除技术在数据保护过程中有何作用
 重复数据删除的八大评估标准
 结合重复数据删除的虚拟化容灾方案
 选择正确的重复数据删除解决方案
 利用重复数据删除技术进行灾难恢复时需要考虑的四大策略
 有关重复数据删除技术的五大误区
 重复数据删除和VMware DR结合节约成本
 如何评估基于硬件的重复数据删除产品
 重复数据删除技术如何缓解存储需求
 重复数据删除in-band VS out-of-band
 CAS和重复数据删除:归档双雄
 如何通过重复数据删除降低存储成本
 重复数据删除是如何工作的?
 压缩、重复数据删除和加密的区别
 确保重复数据删除系统的高可用性
 如何评估基于软件的重复数据删除产品
 重复数据删除技术的安全性如何?
 重复数据删除技术对备份的作用
 重复数据删除技术的实现方式分析
 技术对比:重复数据删除技术、数据压缩技术和单一实例存储技术
 专访Hifn:重复数据删除是存储发展的必然选择
 重复数据删除:能否由次级存储转移到主存储?
 重复数据删除将走进主存储系统
 专访飞康:重复数据删除更应考虑数据安全问题
 压缩技术对重复数据删除技术造成压力

还没有登录? 阅读全文请先登录或注册
用户名:(请填写您的E-mail做为登录账号)
  • 获取最新的IT业界资讯、市场动态、行业趋势等独家原创内容。
  • 分享国内外技术专业人士提供的技巧经验。
  • 利用专注IT的技术资源中心,不断更新专业知识。
  • 享受白皮书、Webcast等系列特色增值服务。
  • 免费参加TT中国举办的各种会员活动。
  • 更多的精彩服务,在不断开发中……
用户名:(请填写您的E-mail)
密 码:
 永久登录
请输入您的登录email:
提高存储高效性并不适用于主存储。没有人会把这么重要的事情搞砸,在二级存储上有很大的备份文件。通过压缩和重复数据删除技术来减少主存储……
据TechValidate的最新研究发现,最终用户所关注的对象逐渐由性能和数据压缩率转向数据完整性、可恢复性和易用性等问题……
目前,重复数据删除技术十分流行,而我们见证其成长的Lempel-Ziv (LZ)压缩技术虽然略显陈旧,却依然性能良好。
随着市场的推广,国内用户对重复数据删除技术的接受程度也得到快速提升。那么重复数据删除在实施过程中要注意哪些问题呢?
主存储将会是重复数据删除技术的下一个前进领域,但是这却也可能成为我们在如何更好的优化存储空间这个问题上遇到的最大的分歧点……
几年前持续数据保护(CDP)出现时,人们都认为这种产品能够取代传统的备份软件。当时CDP供应商预测IT管理人员都会放弃原来的备份软件,因为它们需要每周一次完全备份、每天一次增量备份……
公司要采购各种各样的设备,在采购的过程中会有很多的技巧。了解这些技巧对我们来说是非常重要的,必要时可以起到事半功倍的效果。
交换机在应用中会出现很多问题,为了在网络中能够满足更多的存储平台或主机服务器,交换机需要定期扩展或替换。交换机通过升级可以达到更好的性能,增强网络的有效性,限制网络流量并提供智能化功能,比如对网络的虚拟化。
最新更新
专家答疑
技巧
Pierre Dorion
我们要购买5TB SATA存储系统,这个系统可以升级到50TB,并且可以和SATA、FATA共用。它也应该能支持多重OS和RAID级别,哪一个对于我们的需求是最好的套件呢?
Jo Maitland
SaaS存储服务会减少存储设备总数和购买的存储容量吗?近期看来没有什么显著的不同。但是从长期看,随着越来越多的服务建立在云计算上……
Greg Schulz
我们有两个负载均衡网络服务器,都是可用的,正在尽力访问SAN上的相同的LUN。我们在操作系统和EMC SAN上用Windows2003标准版本。我们如何实现并行写入SAN……