NVMe over TCP:利用标准IP网络增强SSD存储

来源 :计算机世界 | 被引量 : 0次 | 上传用户:A403537889
下载到本地 , 更方便阅读
声明 : 本文档内容版权归属内容提供方 , 如果您对本文有版权争议 , 可与客服联系进行内容授权或下架
论文部分内容阅读

  在存储性能最大化方面,NVMe/TCP是SSD网络的下一步发展方向。

  在数据中心开始从机械硬盘向固态硬盘(SSD)转换后不久,NVMe协议就开始支持高性能直接附加的PCIe SSD。紧随NVMe之后的是NVMe over Fabrics(NVMe-oF),旨在高效地支持超大型远程SSD池,有效地取代直接附加存储(DAS),进而成为云基础设施中分离式存储的默认协议。

  最近推出的NVMe over TCP可提供更强大的NVMe-oF技术,能够在降低部署成本和设计复杂度的同时提供更高的性能。本质上,NVMe over TCP使用简单高效的TCP/IP结构将NVMe扩展到了整个数据中心。
  商业和技术咨询公司Capgemini North America的IT主管Eric Killinger说:“能够在高带宽、低延迟的情况下进行通信,在存储阵列之间实现物理隔离,以及添加包含TCP协议的普通交换网络进行传输,无疑将改变游戏规则。超大型云服务提供商已经采用这项技术以取代已有二三年历史的SSD技术,从而为数据分析和物联网提供了更大的查询访问能力。

背景:NVMe和NVMe-oF的出现


  由NVMe SSD构建的存储阵列极大地提升了存储速度,但是这些设备仍然通过基于SCSI的主机连接与服务器进行通信。NVMe-oF的部署可以跨交换结构支持基于NVMe的块存储设备远程直接内存访问(RDMA)。
  技术研究公司IDC的基础设施系统研究副总裁Eric Burgener说:“这是一种专门为固态存储优化的高性能存储网络协议,其提供了更低的延迟、更高的带宽、并行性和更高的效率。”
  NVMe-oF 适用于光纤通道(FC)、以太网和InfiniBand等不同类型的网络传输。在以太网中,用户还可以选择RoCE(RDMA over Converged Ethernet)、iWARP以及TCP等不同的传输选项。
  缺点是FC、InfiniBand、RoCE和iWARP选项都需要定制的主机总线适配器和驱动程序,这使得它们的部署和维护既困难又昂贵。Burgener说:“NVMe over TCP是一个真正的行业标准,可与几乎所有的企业服务器上的标准聚合以太网适配器配合使用。”此外,大多数重要的Linux变体如今在其标准发行版中都含有NVMe-over-TCP驱动程序。
  Burgener说:“作为一个已发布且被广泛接受的标准,从长远来看,它们将主导NVMe-oF的部署。虽然部署成本也较低,不需要标准Linux或以太网适配器之外的升级计划,但是它们的延迟比RoCE要高一些。迄今为止,RoCE是另一种被广泛部署的以太网选项。”
  RoCE和iWARP都支持RDMA,而FC和TCP则不支持RDMA。虽然支持RDMA可稍微降低延迟,但是所有这些方法都比基于普通SCSI的存储网络技术(如FC和iSCSI)提供了显著的性能改进。

NVMe/TCP的部署和应用


  用户采用NVMe/TCP的一个主要原因是其提供一个低延迟的共享存储解决方案。
  Burgener说:“如果用户有一个基于NVMe的全闪存阵列,但是该阵列仍然通过基于SCSI的存储网络连接到服务器上,那么用户可能会遇到很多性能问题,并且固态存储资源使用效率也不高。如果用户希望让所有的应用程序都能够享受到基于NVMe的全闪存阵列的性能,那么用户这时需要用到NVMe-oF存储网络。”
  对于大多数企业而言,最终的传输选择将取决于已部署的技术或是规模与性能要求。
  Burgener说:“FC是满足后一种要求的最佳传输方式,但是随着高带宽以太网新版本的不断推出,这种区别正在不断缩小,因为以太网可通过更高的带宽处理更多的工作负载。一些对性能非常敏感的应用程序使用FC作为NVMe-oF的传输层会更好,不过随着时间的推移,这类应用程序会越来越少。”
  如果企业已经有了FC网络,那么在其上部署NVMe-oF就相对容易些,因为许多企业已经在这样做了。Burgener认为,大多数新建企业还是会选择部署以太网,而TCP最终将胜出。
  Burgener说:“在应用程序方面,我们将会看到NVMe over TCP被用于由人工智能/机器学习(AI/ML)驱动的大数据分析工作负载当中,特别是在要求实时的情况下。另一个重要意义在于,环境已将大量工作负载整合到单个存储阵列上,并且需要能够在高工作負载密度下提供出色的性能。”
  虽然AI/ML驱动的大数据分析应用正在增长,但是该领域仍处于新兴阶段。更为直接的原因在于,NVMe/TCP在基于闪存的超大存储部署环境中受到了越来越多的关注,尤其是在大量低延迟数据必须通过现有的高带宽交换网络被快速访问的情况下。
  Killinger说:“超大规模是这项技术的天然消费者,因为它们可以实现闪电般的数据访问,并允许数据分布在多个数据中心内,同时它们还在电网、冷却和本地化的高可用性体系结构方面具有优势,不会带来的额外成本。”
  NVMe/TCP还可以允许用户利用现有的交换网络技术。这些技术已经商品化并可从许多原始设备制造商处获得。Killinger说:“与Infiniband或光纤通道相比,连接多个10G以太网端口的每个端口的成本使得利用NVMe的TCP堆栈成为可能。”
  Burgener指出,许多高端存储用户已经致力于FC存储网络,并且已经或正在计划升级到RoCE。不过,这种情况在未来几年可能会发生变化。   Burgener认为,随着存储基础设施越来越多地转向固态存储,用户也将越来越关心基础设施的效率,NVMe over TCP将明显优于SCSI,而且成本低廉,易于部署。

NVMe-over-TCP的可用性


  NVMe及其规范由NVM Express拥有和维护,NVM Express是一个由网络、存储和其他IT相关公司组成的联盟。NVMe规范于2011年发布,其定义了主机软件如何通过PCI-Express(PCIe)总线与非易失性内存通信,目前已成为PCIe SSD的行业标准。NVMe/TCP于2018年获得NVM Express的批准。
  从目前的情况来看,对NVMe/TCP的支持主要来自Mellanox Technologies等网络供应商,以及Lightbits Labs、Excellero、Pavilion Data和Infinidat等存储初创公司。SSD芯片制造商Kioxia也支持NVMe over TCP。
  NVMe/TCP可用性预计将在未来几年快速增长。Burgener预测称:“尽管大多数主要的企业级存储供应商还没有动作,但是他们可能会在未来12~18个月内推出相关的产品。”
  虽然大规模的NVMe-over-TCP部署在短期内是一个障碍,但是它们很可能转化为一个长期的成功。
  Killinger说:“大多数IT公司都在尝试公有云服务,估计有超过90%的业务部门在使用一个或多个公有云。同时,IT更新率一直呈下降趋势。对于用高端的NVMe技术更新老化的存储基础设施,许多公司没有编列足够的预算资金。尽管如此,一些公司开始尝试用公有云服务提供商来替代自己的企业IT服务。这正是NVMe over TCP大显身手的地方,其增长速度将是企业IT购买力的数倍。”
  Burgener认为,NVMe/TCP的未来前景光明,但是部署率可能要到2022年或2023年底才会真正开始上升。Killinger也乐观地认为,NVMe/TCP最终将成为主流技术。他说:“我没有找到NVMe over TCP不会蓬勃发展的理由,甚至在未来几年它们还会加速SSD的部署。”他预计,SSD存储OEM厂商很快就会进行大规模的市场推广,并积极拓展其产品在NVMe over TCP上的性能。
  本文作者John Edwards为资深商业技术记者,曾在《纽约时报》《华盛顿邮报》以及CIO、Computerworld、Network World、CFO Magazine、IBM Data Management Magazine、RFID Journal和Electronic Design等眾多商业和技术刊物上发表过文章。
  原文网址
  https://www.networkworld.com/article/3609921/nvme-over-tcp-how-it-supercharges-ssd-storage-using-standard-ip-networks.html
其他文献
你知道2020年企业必须改变什么吗?  你会专注于开发新产品和新服务吗?当然,这是关键的起点,尤其是对于越来越多的、希望直接向最终用户销售和提供数字驱动产品和服务的企业而言。也许你的企业已经经历过数字化颠覆,失去了市场份额,意识到来自新的初创公司的竞争威胁,意识到必须重振客户体验。  如果不是这样,也许你的首要任务应该是想方设法成为数据驱动型的企业。你的领导在制定战略决策时,是不是采用了由无数电子
我经常翻阅旧报刊,追寻已失去的历史。近读1948年12月3日《益世报》刊登的一则消息:“南大决定不搬家”,引起我对国共两党争夺知识分子的回忆。那是一场不见硝烟的战争,其影响是极其深远的,不亚于一场军事战争。  1948年冬,正是国共两党进行决战时期,三大战役的辽沈战役已经结束,淮海战役正在进行,平津战役也开始了。东北人民解放军入关和华北解放军杨得志、杨成武两个兵团联合,包围平津。国民党仍在宣传“城
已故刘祚昌先生所著《刘祚昌美国史讲义》,经由刘文涛教授整理后,已由天津古籍出版社于2008年9月出版。这是先生生前在教学中年复一年的修改充实,精益求精,千锤百炼而形成的讲义。全书共分为十五讲。前六讲分析了北美殖民地时期、独立战争时期的若干重大历史问题;七至十讲从不同的侧面、层面阐释了杰斐逊的人生阅历,特别是他的民主思想和独特风格;最后五讲则围绕美国内战前后美国人民争取西部土地的斗争、黑奴制、武装黑
作为高效会议专家,263企业会议包括电话会议、网络会议和视频会议等多种丰富的产品形式。  263電话会议携手通信设备提供商美国Compunetix公司,引进summit电话会议平台为企业客户提供高质量的电话会议服务,单场会议可支持最大3000方同时在线;  263网络会议是基于SaaS模式的互联网实时会议平台,依托于互联网技术,将音频、视频、数据、文字等信息内容实时传输,突破时间地域的限制,实现面
IDC表示,正逐渐成为“企业支柱”的SD-WAN市场到2022年可能达到45亿美元,甚至业务部门也会寻求集成管理和安全功能。  无论用户是想要稳定的云连接资源,更好地管理远程网络,还是仅仅升级老旧的广域环境,软件定义的广域网(SD-WAN)技术都在购买清单之列。  有证据显示,网络市场中的这一部分份额将达到45亿美元,并且从2017年到2022年将以40.4%的复合年增长率增长。市场研究公司IDC
1894年爆发的中日甲午战争是近代东亚国际关系史上的一个转折点。美国政府在甲午战争中始终声称奉行“中立”政策,实际上却发挥了其他列强不曾起到的作用。战前,美国驻朝鲜、中国和日本的外交官对于因中日两国出兵朝鲜所引发的紧张局面从一开始就予以了密切关注,而美国政府的态度则比较微妙:一方面不愿意看到日本因朝鲜问题挑起战争,致使东亚局面复杂化,另一方面,美国政府又拒绝朝鲜和清政府的调停请求,听任日本发动战争
[摘要]在清末戏曲改良运动和辛亥革命的影响下,作为戏曲大省的河南戏曲改良活动逐渐展开,“河南新剧团”就是在这一背景下产生的。新剧团不仅演出和推广新剧,同样也改良旧戏,因其不同于传统戏班的全新形式,加上社会各界的广泛参与,在民初河南戏曲改良活动中发挥了重要的作用,同时也促进了社会启蒙。  [关键词]“河南新剧团”,戏曲改良,社会启蒙  [中图分类号]K26[文献标识码]A[文章编号]0457-624
中国系统多年来始终聚焦数字与信息服务,在现代数字城市建设与运营、行业数字化转型、高科技工程服务等领域具有深厚经验。  当前,坚持创新驱动发展,加快发展现代产业体系,已经成为了时代的使命。今年的《政府工作报告》明确提到要“依靠创新推动实体经济高质量发展,培育壮大新动能。”作为科技创新的重要领域,信创产业正迎来新一轮发展机遇,相关部门、地方政府与头部企业正展开积极布局,解决核心技术“卡脖子”问题,构建
[摘要]肯尼迪政府时期,第三世界成为美苏争夺的重点,被视为“民主橱窗”的印度成为美国优先援助的对象,战后对印度的开发援助达到高潮。肯尼迪政府对印度的开发援助,更多是从意识形态、全球战略和国家利益的视角来考量。  [关键词]肯尼迪政府,开发援助,印度  [中图分类号]K7 [文献标识码]A [文章编号]0457-6241(2010)08-0059-05    肯尼迪政府时期,加强对第三世界的争夺成为
编者手迹:刘泽华先生是国内著名的历史学家,尤其用力于中国政治思想史的研究,取得了一系列有影响的成果,形成了一套独特的体系。被一些人称之为刘泽华学派。近年来,也由此发生了不少论争,因此我们组织了这次访谈,希望通过访谈对刘先生的学术、思想等有一个更深入的了解,也更清晰地了解先生对于这些争鸣的看法。  关键词 中国,传统,政治思想,国情,文化反思  中图分类号 K20--01 文献标识码 A 文章编号