缓解数据爆炸压力

2008-7-9  选择字号:  | |
打印本文章

  如果有人告诉您“每次要为数据中心引入一个新系统或应用程序时,都必须放弃一个现有的系统或应用程序”,您会怎么做?

  当数据中心面临电力、空间不足或冷却设备能力不足时,必须进行大幅度改动才能继续工作。新建一个数据中心几乎不切实际;新的企业数据中心需要花费成百上千万美元,经历数年时间才能建成。有些公司开始要求管理员做出一些退让以便为数据中心引入新系统或应用程序,即让现有系统或应用程序让位给新进的系统或应用程序。

  数据中心的年用电量在稳步上升。如果继续保持这种态势,将需要新增 10 座发电站才能满足未来三年的用电量增长。

 美国数据中心的估计年用电量最终用途构成

  效率是数据中心节省电力、冷却和空间的关键因素。通过使用刀片和虚拟化软件将服务器资源集中,可以提高服务器资源的利用效率。通过选用合适的存储系统,您可以在存储基础设施中实现与虚拟化服务器基础设施相同的效率类型。NetApp 制定了一个简单的替代方案以满足快速增长的电力、空间和冷却要求:采用创新技术,通过更有效地存储数据,减少用电的机器和磁盘,降低数据中心的碳排放。另外,可以避免因着手建立新数据中心而产生的巨大费用和人力投入。

  NetApp 的存储效率技术包括:

  • 重复数据删除,以消除冗余数据对象
  • RAID-DP,提供比镜像更强的数据保护,同时大大减少所用磁盘数量
  • FlexVol 简化配置,以尽可能缩小分散的存储容量
  • ATA 磁盘驱动器,其耗电量比同等容量的 FC 驱动器少40%
  • Snapshot的时间点恢复技术,只占用非常少的存储
  • FlexClone可写的 Snapshot 副本,用于测试和开发

  存储效率始于平台

  许多数据中心为每项存储需求(业务应用程序、文件服务、备份、存档等)使用不同的存储系统。这种做法不仅增加复杂性,浪费存储,而且降低了宝贵的数据中心资源(人力、电力、冷却和空间)的利用效率。使用以 Data ONTAP? 操作系统为特征的 NetApp 统一存储平台,就不再需要使用独立的存储系统和特殊网关。

  通过重复数据删除技术去除重复的数据对象

  平均每个 UNIX或 Windows企业磁盘卷包含数千甚至上百万重复数据对象。当修改、分布、备份和归档这些对象时,这些重复的数据对象被反复存储,结果导致存储资源被低效使用,并耗费电量为其供电。重复数据删除技术将去除重复的数据对象,并创建一个数据指针指向磁盘上已存储的精确副本。

  重复数据删除实际能节省多少空间?

  重复数据删除供应商声称其产品可提供 20:1、50:1 甚至更高的数据减少比率。这些声称实际上是指重复性数据备份时重复数据删除的“基于时间的”空间节省效果。由于数据备份包含大量未改动的数据,因此在存储第一个完整备份之后,所有后续的完整备份可能需要频繁经历重复数据删除。

  在非备份数据环境中(例如文件归档,或不常访问的非结构化数据),基于时间的数据减少比率的规则不适用。在这些环境中,卷不接收稳定的冗余完整备份,但是仍可能包含大量驻留的重复数据对象。通常采用术语“空间”来评测可通过重复数据删除来减少这些卷中空间需求的能力。例如,通过重复数据删除可将 500GB 的数据归档卷减少到 300GB,则空间减少率 40%。

  采用FlexVol简化配置,提高存储利用率

  根据行业估计,平均存储利用率在 25% 至 40% 之间。由于难以预测实际的存储需求,因此应用程序管理员请求的空间通常会比他们的预计量超出许多,以便当后面需要更多存储时,他们可以从容应对。这种常见做法确保会过度分配 — 估计已供电的总存储容量中有 60%-75% 处于未使用状态。如此低的利用率不仅造成存储浪费,还造成电力浪费。采用 NetApp FlexVol 技术则可以根据物理的磁盘组创建逻辑存储池。池中的容量可以在许多数据集之间自由分配,因此无需为每个数据集分配物理预留。采用 FlexVol 简化配置之后,存储利用率通常从平均 40% 上升到 60% — 节省了 33%。

  威廉博蒙特医院(William Beaumont Hospital)运行了 25 个 Oracle? 数据库,当采用 Data ONTAP 7G 中的 Flex Vol 技术,并且将九个系统合并成三个主存储系统及一个近线系统之后,其利用率提升了 50%。

  使用SATA磁盘,将能耗降低40%或更多

  SATA 驱动器提供每基于驱动器的最高可用存储密度,其平均能耗比同等容量的光纤通道磁盘低 40%,使您可以尽量缩减数据中心的每 TB 瓦特数。根据最新研究显示,通过 SATA 驱动器,Oracle 的能耗可以降低 40%。

  使用RAID-DP提高存储利用率

  为进一步最大化效率及灵活性,您可以将 NetApp SATA 磁盘与我们的专利 RAID-DP 配和使用。我们的双奇偶校验 RAID-DP 是 Data ONTAP 操作系统的一项基本功能。与 RAID 10 数据镜像相比,通过 RAID-DP 提升的存储利用率高达 46%。此外,通过 RAID-DP,您可以在两台驱动器同时出现故障时进行恢复,这一点与其它 RAID 级别不同,后者只能承受一台驱动器发生故障。RAID-DP 的提升性能优势使您可以使用更便宜的 SATA 存储作为主存储,不必担心数据丢失,同时还可以降低您的存储采购成本。

  采用NetApp Snapshot技术,为Snapshot副本使用最少存储

  NetApp Snapshot 副本提供两大主要效率优势。首先,Snapshot 副本占用的存储空间最少。其次,通过这些副本,您可以将一份数据副本用于多项用途,从而降低对专用存储系统的依赖。减少所使用的专用存储系统数量可以从根本上降低用电需求。

  通过FlexClone产生可写的Snapshot副本,减轻测试的存储负载

  测试和开发需要大量的数据副本,并会加大存储基础设施的压力。采用 NetApp FlexClone 技术之后,可以制作多个未实际占用存储开销的即时的数据虚拟副本。可写副本产生的节省量等于克隆的数据集大小减去任何后续改动过的块。

  自使用 NetApp FlexClone 之后,Blackboard ASP 将公司在测试和开发环境下的存储需求削减了 33%。

  实施 NetApp FlexClone 并移到网格基础设施之后,Oracle 的存储利用率增长到 403%。

  汇聚所有这些技术

  避免数据增长失控的唯一办法是在数据妨碍工作之前阻止数据激增。我们的多项技术有助于减少裸存储需求,消除系统中的重复数据。Snapshot、FlexClone、重复数据删除、FlexVol 和 RAID-DP 只是其中的一部分,将对存储空间产生重大影响。

  根据 Oliver Wyman 的研究报告,从客户部署收集的信息显示,采用 NetApp RAID-DP、FlexVol 和 Snapshot 技术的直接结果是,在典型环境下与其他存储供应商的对等系统相比,NetApp 存储系统的客户每可用存储 TB 需要的电力减少 50%,产生的热量减少 50%。

  作者简介:

Brett(右)在 NetApp 主管存储子系统和 OEM 解决方案的产品管理工作。在加入 NetApp 之前,Brett 曾先后担任过工程和业务发展领域的多项职务。他获得了乔治亚理工学院的理学学士学位和斯坦福大学的博士学位。

Mark 拥有15年以上的产品管理和营销经验。在加入 NetApp 之前,Mark 曾在 Hewlett-Packard 公司就职,主要从事服务器业务领域的工作。他获得了科罗拉多大学的电子工程学士学位和德克萨斯大学的 MBA 学位。

来源:NetApp    作者:Brett Battles,Mark Woods    
精简配置是云计算的一个核心技术:从概念上来讲,云计算是外部B2B或B2C服务供应商在因特网上提供的服务化企业IT。
存储巩固是集中磁盘资源的一种方法,这样磁盘资源能够像单一实体一样被管理,并且能在服务器之间分享,为什么这么多企业都要巩固它们的存储?
明确部门角色和责任,划分工作职能。在许多公司,职能界线模糊,责任交叉。例如,由谁负责主机总线适配器的安装——服务器团队还是存储团队这对于数据存储来说非常重要……
分析公司Gartner日前提醒说,用户应该忽略厂商们在市场上大肆宣传的绿色IT概念,该公司警告说"绿色IT"正在迅速地变成一种"过时而且被滥用的"概念。
请问能否通过IP网络在一台EMC DMX2000和一台NetApp filer之间建立同步的数据镜像呢?要在NetApp NAS存储系统与EMC DMX2000之间建立同步的数据镜像文件,可以借助……
几年前持续数据保护(CDP)出现时,人们都认为这种产品能够取代传统的备份软件。当时CDP供应商预测IT管理人员都会放弃原来的备份软件,因为它们需要每周一次完全备份、每天一次增量备份……
公司要采购各种各样的设备,在采购的过程中会有很多的技巧。了解这些技巧对我们来说是非常重要的,必要时可以起到事半功倍的效果。
交换机在应用中会出现很多问题,为了在网络中能够满足更多的存储平台或主机服务器,交换机需要定期扩展或替换。交换机通过升级可以达到更好的性能,增强网络的有效性,限制网络流量并提供智能化功能,比如对网络的虚拟化。
最新更新
专家答疑
技巧
Pierre Dorion
我们要购买5TB SATA存储系统,这个系统可以升级到50TB,并且可以和SATA、FATA共用。它也应该能支持多重OS和RAID级别,哪一个对于我们的需求是最好的套件呢?
Jo Maitland
SaaS存储服务会减少存储设备总数和购买的存储容量吗?近期看来没有什么显著的不同。但是从长期看,随着越来越多的服务建立在云计算上……
Greg Schulz
我们有两个负载均衡网络服务器,都是可用的,正在尽力访问SAN上的相同的LUN。我们在操作系统和EMC SAN上用Windows2003标准版本。我们如何实现并行写入SAN……