判断超融合存储优劣的几个原则初探(二)

日期:2016-2-26作者:陈靓

超融合   SDS   ServerSAN   

【TechTarget中国原创】在上一篇文章中,强调了区分系统存储介质访问方式的重要性,接下来,需要考虑的问题就是IO请求所经过的网络路径。

所谓IO请求路径,通常包括几个部分:接收外部(如虚拟机的)IO请求、寻址即将外部IO请求转换为(ServerSAN)系统内部请求、将内部IO请求发至相应的存储节点以实现数据访问。

在一个ServerSAN系统中,通常会由客户端块设备驱动来负责接收外部IO请求,其处理方式亦寻址方式有多种:有些需要查询元数据库(Metadata Store,用于存放内部数据块的元数据,包括数据块在哪个存储节点上的信息);有的则利用Consistent Hashing的方法,直接计算出IO请求对应的内部存储地址,从而达到省略查询元数据库的目的。

此外,将内部请求发送到存储节点也有多种方式:以副本为3份的写请求为例,有的是将数据依次写入3个存储节点,如此就涉及3个网络跳转;也有的是将数据先写入主节点(Primary),再由主节点发给另外两个从节点,如此需要两个网络跳转。另外一种方式是同时广播给3个存储节点,如此只涉及一个网络跳转。

 1
图 1拥有最长网络路径的系统

以Sheepdog Storage系统为例,一个IO请求需要通过QEMU block driver,Gateway,存储节点3个网络跳转,即网络路径为3。以Ceph为例,一个IO请求需要通过RBD(客户端驱动),主OSD(存储节点),从OSD共3个网络跳转,即网络路径为3。

 2
图 2拥有最短网络路径的系统

目前为止,我们见到的分布式存储系统里最优的I/O路径为2:客户端驱动和存储节点;其中寻址功能被合并到客户端驱动,并且寻址不需要查询元数据库。客户端驱动直接广播到所有的存储节点上。

同样的,就像上篇文章提到,有没有一个判断ServerSAN系统I/O路径的简单方法呢?

我们一直都在努力坚持原创.......请不要一声不吭,就悄悄拿走。

我原创,你原创,我们的内容世界才会更加精彩!

【所有原创内容版权均属TechTarget,欢迎大家转发分享。但未经授权,严禁任何媒体(平面媒体、网络媒体、自媒体等)以及微信公众号复制、转载、摘编或以其他方式进行使用。】

微信公众号

TechTarget微信公众号二维码

TechTarget

官方微博

TechTarget中国官方微博二维码

TechTarget中国

评论
查看更多评论

敬请读者发表评论,本站保留删除与本文无关和不雅评论的权力。

作者>更多

陈靓
陈靓

曾于AWS Storage Team(云计算核心存储团队)工作长达7年之久,曾担任系统架构师和研发团队带头人,负责设计和实现了著名的AWS Glacier系统结构;2011年加入AWS S3团队,负责对AWS S3 的Volume子系统新版本的研发。2013年,接受南京市政府321计划的感召,选择归国创业,创办了南京鹏云网络科技有限公司,致力于私有云存储产品的研发。2015年入选中组部“国家千人计划”专家人才。

云存储>更多

  • 企业文件同步和共享魅力大调查

    企业文件同步和共享为企业提供更安全的文档共享与协作方法,帮助解决了许多业务问题。越来越多的企业在已经拥有某一类型的文件共享与协作系统之后,正在寻求另一种企业文件同步和共享工具。

  • 亚马逊、谷歌和微软提供的云存储服务有何不同?

    亚马逊、谷歌和微软是主要的公有云供应商,让我们看一看这些领先的公有云服务提供商提供的功能——包括备份与恢复、归档、混合云存储以及云分析,有何不同?

  • 以正确的方式实现混合云

    混合云存储既省钱又方便扩展,感兴趣的人越来越多。但是在接纳它之前,有一些关键问题要理清楚。

  • 企业数据保护策略:别忘了磁带与云

    云计算在短期数据存取与保存方面能够发挥巨大作用;同样,在数据的长期归档存放应用领域,它同样颇具价值。

相关推荐

  • 2017最受关注的12家存储领头羊公司

    2017开年,和您分享最受关注的12家企业存储厂商大名单。从该名单中,你可以看到存储巨头的最新动态及未来看点。

  • 整合看点: DellEMC的HCI市场如何来看?

    2017年初,EMC融合平台与解决方案业务亚太及日本地区首席技术官Matt Oostveen来到中国,与TechTarget中国记者就EMC融合平台及相关产品的发展战略展开了对话。

  • 超融合究竟带来了什么?

    超融合成为如今企业IT市场的宠儿,超融合是基于什么样的技术变化而到来?超融合又为企业带来了什么?

  • 飞康 x Hypernode:“按需提供SAN”晋升企业云存储市场新宠

    2016年12月13日,澳大利亚著名企业云运营商 Hypernode正式与软件定义存储创新公司FalconStor Software®有限公司达成战略合作,将选择业内首款真正的水平融合数据服务平台 FreeStor®,通过位于悉尼、中央海岸和墨尔本的基础设施,提供简单且经济实惠的按需存储。

技术手册>更多

  • 数据迁移技术详解手册

    数据迁移(又称分级存储管理,hierarchical storage management,hsm)是一种将离线存储与在线存储融合的技术。它将高速、高容量的非在线存储设备作为磁盘设备的下一级设备,然后将磁盘中常用的数据按指定的策略自动迁移到磁带库(简称带库)等二级大容量存储设备上。TechTarget专家将深入讲解数据迁移时要注意的问题。

  • 分层存储技术手册

    这本技术手册中,TechTarget专家将深入给我们讲解如何选购分层存储工具,以及在应用过程中的遇到的一些问题和解决方法。

  • 企业闪存应用与采购

    固态存储技术正获得越来越多的关注,同时这种技术提供用户在不同环境中不同的固态存储部署方式。固态存储所展现出的高性能对于用户应用来说无疑是充满吸引力的,然而你还需要对其部署在何处、所需要的具体容量及使用模式作出具体评估和判断。

  • 存储虚拟化工作手册

    为了解决这些关于存储虚拟化的问题,我们特地写了这篇存储虚拟化手册,希望它可以帮助你们更好地认识那些在存储虚拟化过程中用到的产品和流程。

TechTarget

最新资源
  • 安全
  • 虚拟化
  • 网络
  • 服务器
  • 数据中心
  • 云计算
【TechTarget中国原创】在上一篇文章中,强调了区分系统存储介质访问方式的重要性,接下来,需要考虑的问题就是IO请求所经过的网络路径。

所谓IO请求路径,通常包括几个部分:接收外部(如虚拟机的)IO请求、寻址即将外部IO请求转换为(ServerSAN)系统内部请求、将内部IO请求发至相应的存储节点以实现数据访问。

在一个ServerSAN系统中,通常会由客户端块设备驱动来负责接收外部IO请求,其处理方式亦寻址方式有多种:有些需要查询元数据库(Metadata Store,用于存放内部数据块的元数据,包括数据块在哪个存储节点上的信息);有的则利用Consistent Hashing的方法,直接计算出IO请求对应的内部存储地址,从而达到省略查询元数据库的目的。

此外,将内部请求发送到存储节点也有多种方式:以副本为3份的写请求为例,有的是将数据依次写入3个存储节点,如此就涉及3个网络跳转;也有的是将数据先写入主节点(Primary),再由主节点发给另外两个从节点,如此需要两个网络跳转。另外一种方式是同时广播给3个存储节点,如此只涉及一个网络跳转。

 1
图 1拥有最长网络路径的系统

以Sheepdog Storage系统为例,一个IO请求需要通过QEMU block driver,Gateway,存储节点3个网络跳转,即网络路径为3。以Ceph为例,一个IO请求需要通过RBD(客户端驱动),主OSD(存储节点),从OSD共3个网络跳转,即网络路径为3。

 2
图 2拥有最短网络路径的系统

目前为止,我们见到的分布式存储系统里最优的I/O路径为2:客户端驱动和存储节点;其中寻址功能被合并到客户端驱动,并且寻址不需要查询元数据库。客户端驱动直接广播到所有的存储节点上。

同样的,就像上篇文章提到,有没有一个判断ServerSAN系统I/O路径的简单方法呢?

不幸地是,我们很难通过一个系统的外部表象来判断这个系统的I/O路径是多少,是否最优?我也没有想出一个简单的方法。但就像判断直接和间接访问裸设备一样,判断系统的I/O路径对于判断系统的水平也是非常重要的。

尽管没有一个简单的方法,但在实际的选型过程中,I/O路径应该成为一个考察的重点,用户应该要求供应商介绍其系统架构,以及外部I/O、内部I/O请求的方法,一旦我们得知系统不是内直接寻址或不是将数据一次性广播给所有的副本节点,我们就可以得出如此的判断:该系统的I/O路径极有可能不是最优的。

  (未完待续)


系列阅读:

判断超融合存储优劣的几个原则初探(一)