TechTarget中国网站推荐

2008年NFS未来向我们走来

2008-3-31  选择字号:  | |
打印本文章

  NFS(网络文件系统)是在1984年由Sun微系统公司设计开发的,目的是为了连接它们的系统。在其发展过程中,通过促成文件系统之间的连接,革命性地改变了存储行业,使得一个环境中的所有文件都能够处于公共视野之下。

  回溯到1984年,当时的高速主干网络是10Mb/s以太网,而磁盘驱动器的容量是按照MB计算,而不是GB。NFS满足了需求,并很快就在行业内得到广泛使用,并成为标准。

  从那时候起,NFS进行了一些有限的改进,一些是针对性能,但是大部分的改进幅度都是很微小的--许多是针对安全,以及为了跟上其他UNIX标准。我们都熟悉NFSv1,v2,v3,现在是v4版本,而且我们都抱怨NFS的性能,因为网络和存储的性能增长要更快,而NFS却没有跟上步伐。

  自从NFS诞生,网络已经从10Mb/s以太网发展到了10Gb以太网(三个数量级的性能增长),存储已经从3Mb/s磁盘驱动器发展到了400Mb/s光纤通道RAID(独立磁盘冗余阵列),这也是133倍的性能增长。而与此同时,NFS只是从4KB数据包发展到了64KB。对于一些不好的网络,大的数据包还可能是个问题,但是当我们需要在高速网络上传输大量数据的时候,我们就需要更好的技术。好消息就是NFS的未来马上就要实现了。

  不用担心,NFS v4.1来了

  理解NFSv4.1(也被叫做pNFS)的最好方法就是读一些文章。pNFS(并行NFS)是NFSv4.1协议的一部分,可以让数据在设备之间进行高速移动。这原来是在另外一个组中进行开发的。pNFS.com提供了一些关于为什么需要pNFS的背景知识(阅读下面所列出的问题,它们详细的指出了现有的NFS协议所具有的一些问题)。

  本图描绘了pNFS系统的架构:

  关于这张图,最有意思的就是IEFT(国际互联网工程任务组)准备支持T10 OSD协议(T10:SCSI存储接口技术委员会,OSD:基于对象存储设备),并将其作为NFSv4.1的一部分。这也就意味着,通过NFSv4.1,你可以从NFS服务器中按照块、T10 OSD对象或文件来移动数据。很重要的一点就是,随着NFSv4.1开始启动,由于大部分厂商在还仅仅只是将这些方法中的一个方法作为实施的开始,因此就有一些问题。

  同样重要的是,作为传输机制的一部分,数据和元数据是分开的。因此对于基于块的存储来说,一般情况下,索引节点以及任何非直接的扩展都被聚集在一起,而块地址则是通过使用DMA(直接内存存取)来从网络上直接获得。和NFSv4以及更早版本的NFS在网络上读取文件的方式比起来,这种方式的性能将是一日千里。当然,如果是在10Mb/s以太网,或者1Gb以太网上读取文件,不同方式的差别不会很大,但是你也会感觉到采用新方法所带来的改善。现在,如果你拥有10Gb以太网,或者说DDR(双数据率)IB(InfiniBand),或者说未来更快的网络,那么现有的NFS协议可以让这些高速网络的运行得简直就像在1Gb以太网上一样。

  1991年左右,我被一个站点叫去做技术支持。他们有两台Cray超级计算机,通过HiPPI连接(高性能并行接口,800MB),而且他们还由一个FDDI(光纤式分布数据接口,100Mb)。你可能会疑惑,为什么HiPPI的速度不是FDDI的八倍,而是只高出10%呢。他们问,为什么他们花了这么多钱来部署HiPPI,结果却只得到10%的性能提升。我不能给出很好的答案。当然,HiPPI上ftp和rcp的运行要更快。这趟访问的唯一一个好处就是我去了德国,因为我不能给客户以满意的答复。在当时,NFS甚至在高速网络上也运行不快。NFS做了一些细微的调整,使得它在1Gb以太网上也能够被接受,但是它还是不能达到网络的速度。转眼过去15年,我们马上就要进入商品高速网络时代,如10GB以太网,但是目前版本的NFS还是不能胜任。下面是对NFS问题的描述:

  "客户对存储I/O带宽的要求的增长远远快于网络文件服务器所能提供的能力。当我们在NFS协议上进行安装时,就会越来越多的遇到这种问题。这个问题可以通过提高服务器带宽的方式来解决。这个草案建议对NFS文件服务进行改进,让NFS文件服务能够随客户群扩展而扩展。建议的方法就是通过并行化文件服务,将所有可能的带宽都集中到一个单一的文件系统上,这样的结果就是多个网络连接到多个要求数据传输的服务器终端。我们要在NFS架构内部实现这种方式,比如通过一个NFSv4协议的次版本"。

  显然,IETF的这个声明显示它理解NFS目前的局限,并正努力解决它们。几乎所有的主要厂商都介入到了NFSv4.1(pNFS)的制订,包括但不限于,EMC、IBM、NetApp、Sun,当然还有Linux社团。甚至还有一些网路传言说,微软正准备在未来的Windows版本中考虑NFSv4.1。我对此持怀疑态度。

  NFSv4.1的局限

  和有些人想的相反,NFS是一个协议,而不是文件系统。NFS允许通用的外部接口进入文件系统。即使它的名字是这样,它也不是一个文件系统。这也就是说你要受到底层文件系统性能的约束。例如,如果微软将NFSv4.1纳入未来某个版本的Windows系统,而你的摄像头连接是在10Gb以太网上,但是这并不是说你可以通过FAT32文件系统在你旧的计算机上以1GB/秒的速度导出数据。这里有很多限制。

  事实是,在这里,我们的媒介不能以1Gb/s的速率传输数据,更重要的是,你受制于文件系统的性能。即时你拥有能够以1Gb/s速率传输数据的媒介,鉴于目前的数据格式,FAT32文件系统也不可能支持这种数据速率。

  我相信NFSv4.1会使很多文件系统相形见绌。现在,这些NFS文件系统可以借口说它们被目前的NFS性能局限所限制,这可能是实情,但是未来就不是如此了。我一直在尝试的一件事情就是在一台本地NFS文件服务器设备上运行性能测试,以测试我的读写速度究竟能有多快。然后我会观察底层硬件,并判断性能瓶颈是出在文件系统还是硬件上。在这些时间里,我发现,更经常的是,性能瓶颈是在文件系统上而不是硬件上。由于目前的NFS协议有局限,而10Gb以太网则没有,因此,在NFS上连接到服务器的文件系统可以将性能问题归咎于协议,但是这种日子将很快过去。

  作为一名悲观论者,我的看法是一些厂商将选择不支持NFSv4.1和10Gb以太网,直到它们能够让它们的文件系统能够和NFSv4.1及10Gb以太网完美配合,使数据传输达到网络的速度。没有一个厂商会希望让自己看起来很糟糕得。拥有高性能文件系统的那些厂商(我们都知道他们它们是谁)可能是最先支持NFSv4.1的厂商。因为你总是被数据通道中最慢的组件所约束,因此那些文件系统不支持高性能数据传输的厂商也可能不支持NFSv4.1。在未来几年中观察NFS4.1的进展是一件非常有意思的事情,特别是如果你理解厂商之所以这么做的原因的话。


多协议系列
 了解NFS版本 4 的新动向
 选择NFS还是CIFS
 2008年NFS未来向我们走来
 什么是NFS
 NFS与NAS更适合VMware

来源:EnterpriseStorage    作者:Henry Newman     译者:Bill   
当前大部分国内企业的IT经理们不得不在工作时间之后本地化备份数据库、文件或者是数据设置,并且通过可移动式媒体或邮件等方式来把复制的备份件集中传送存储到企业内部……
远程站点能从重复数据删除技术中获益,但是,对许多顾客而言,选择备份策略是件很麻烦的事。首先,建议你暂时抛开这项技术,先看看你的需求……
我们有六个Windows XP系统,并且他们都共享彼此的文件,五个计算机每晚把它们的数据备份到一个计算机(Windows XP)和两个大的硬盘驱动上,如何远程备份数据呢?
什么时候,路途多远备份磁带应该在异地存储,什么是最好的方案呢?你能解释一下为什么这个距离合适吗?我们来听一听专家的解答。
对于一个SMB而言要实现和管理数据保护是一个挑战。因为SMB很少有这个人力或者财力去处理内部复杂的数据保护,第三方存储服务能够提供一个划算的选择……
交换机在应用中会出现很多问题,为了在网络中能够满足更多的存储平台或主机服务器,交换机需要定期扩展或替换。交换机通过升级可以达到更好的性能,增强网络的有效性,限制网络流量并提供智能化功能,比如对网络的虚拟化。
磁盘阵列几乎是每个网管员必须掌握的一项技术。随着现在越来越多的厂商推出了各种磁盘阵列技术,在现在的存储应用中也越来越广泛。那么磁盘阵列技术对我们的影响有什么呢?
数据增长速度的加快、新应用需求的增加、对数据存档的监管力度的增大和业务连续性需求,正在让企业的IT预算越来越吃紧,同时也使得其传统存储架构的不足日益显露,而分层存储从某种程度上可以减缓这些压力。
最新更新
专家答疑
技巧
Pierre Dorion
我们要购买5TB SATA存储系统,这个系统可以升级到50TB,并且可以和SATA、FATA共用。它也应该能支持多重OS和RAID级别,哪一个对于我们的需求是最好的套件呢?
Jo Maitland
SaaS存储服务会减少存储设备总数和购买的存储容量吗?近期看来没有什么显著的不同。但是从长期看,随着越来越多的服务建立在云计算上……
Greg Schulz
我们有两个负载均衡网络服务器,都是可用的,正在尽力访问SAN上的相同的LUN。我们在操作系统和EMC SAN上用Windows2003标准版本。我们如何实现并行写入SAN……