解决方案

SOLUTION DETAIL

InfiniBand技术究竟是何方神圣?

我们经常听到关于某超算中心又用了什么先进的技术,而在这些技术中,InfiniBand技术则是人们谈论最多的话题。那么InfiniBand到底有多牛?关于更多Infiniband技术架构请参考:InfiniBand知识和架构。文章内容:1、InfiniBand技术背景和现状2、InfiniBand为超算中心提供超强传输性能3、InfiniBand技术玩家和

当前位置:首页 > 解决方案
InfiniBand技术究竟是何方神圣?
解决方案
SOLUTION OVERVIEW

InfiniBand技术究竟是何方神圣?

我们经常听到关于某超算中心又用了什么先进的技术,而在这些技术中,InfiniBand技术则是人们谈论最多的话题。那么InfiniBand到底有多牛?关于更多Infiniband技术架构请参考:InfiniBand知识和架构。文章内容:1、InfiniBand技术背景和现状2、InfiniBand为超算中心提供超强传输性能3、InfiniBand技术玩家和

  • 方案分类 解决方案
  • 内容形式 场景方案 / 技术解析
  • 服务支持 咨询、测试申请、实施建议

如果你正在评估对应场景,我们可以基于当前方案继续细化产品组合、测试路径与实施节奏。

浏览更多相关方案
DETAIL MODULES

方案详情

查看方案背景、关键能力与适配场景,帮助你更快判断下一步应进入测试、咨询还是部署阶段。


我们经常听到关于某超算中心又用了什么先进的技术,而在这些技术中,InfiniBand技术则是人们谈论最多的话题。那么InfiniBand到底有多牛?关于更多Infiniband技术架构请参考:InfiniBand知识和架构。

 


 

文章内容:

 

1、InfiniBand技术背景和现状

2、InfiniBand为超算中心提供超强传输性能

3、InfiniBand技术玩家和如今巨头

4、盘点全球超算系统哪家强?

    ①、超算为何被视为超级明星

    ①、超算为何被视为超级明星

    ③、采用的处理器类型和份额

    ④、超级计算机中的核心数量

    ⑤、各国的超算系统的数量

    ⑥、各用途和超算供应商的总体处理能力

    ⑦、处理器和各领域的总处理能力

    ⑧、超算系统历史和未来发展去向

 

    简单来说,InfiniBand是一种支持多并发链接的转换线缆技术,它既可以处理存储I/O、网络I/O,也能够处理进程间通信(IPC),这样它即可以将磁盘阵列、SANs、LANs、服务器和集群服务器进行互联,也可以连接外部网络(比如WAN、VPN、互联网)。

 

1、InfiniBand技术背景和现状

 

    设计InfiniBand的目的主要是用于企业数据中心,大型的或超大型的数据中心,为了实现高的可靠性、可用性、可扩展性和高的性能。并且InfiniBand可以在相对短的距离内提供高带宽、低延迟的传输,而且在单个或多个互联网络中支持冗余的I/O通道,因此能保持数据中心在局部故障时仍能运转。

 

    Infiniband网络是一种高带宽低延时的网络,相比传统的以太网络,最新一代的Infiniband网络带宽可达100Gbps,点到点的延时低于0.6us。Infiniband网络主要用于高性能计算场景,通过高速的Infiniband网络,将一台台多路服务器构建为一个高性能计算集群,集群性能基本上是单台服务器性能的线性叠加,可以说正是因为有Infiniband网络技术,才能催生出超算高性能集群架构。 Infiniband交换机可以分别带管理交换机和不带管理交换机,带管理交换机有硬件管理端口,对整个网络的管理可以通过交换机硬件完成,通常一个项目中会配置少量的带管理交换机(两台)。

 

2、InfiniBand为超算中心提供超强传输性能

 

    有鉴于此,越来越多的超算中心开始大量采用InfiniBand技术,尤其是在对传输性能要求非常高的数据中心中,应用非常广泛。近日,全球知名的InfiniBand解决方案提供商Mellanox公司市场副总裁Gilad Shainer先生接受了记者专访时,详细阐述了InfiniBand 解决方案的市场竞争力及为全球用户企业提供的全新性能和可扩展性。

 

    当今超算TOP500的排名中,在Intersect360调查中,约2/3的受访系统上部署安装了以太网和InfiniBand。这显示,InfiniBand解决方案依然在高性能计算领域占有着绝对的市场份额,远远高于高性能计算系统里面的其他网络互联厂商。关于超算互联技术和各种份额请参考:超算网络市场分析报告解析。
 


    Mellanox的InfiniBand的解决方案占据了近一半的市场份额,高达46%的份额,这充分例如显示了在高性能计算系统里面Mellanox的网络依然是一个绝对领先的高速网络。

 

    而在2016年TOP500里面新建的系统中,有65个选择了Mellanox的产品,在2019年最新TOP500列表中,InfiniBand份额为28%(140个系统)。但是,从性能的角度来看,基于InfiniBand的计算网络占TOP500总体性能的40%,最近新2次TOP500列表排名分析如下:

 

    第54届超算TOP500排名,中美分别以数量和表现领先

 

    全面解析超算TOP500列表,美国5大DOE系统冠领榜单

 

3、InfiniBand技术玩家和如今巨头

 

    InfiniBand Trade Association (IBTA)的9个主要董事成员中只有Mellanox和Emulex专门在做InfiniBand,其他成员只是扮演了使用InfiniBand的角色。而Emulex由于业务不景气也在2015年的2月被Avago收购,Qlogic的infiniband业务在2012年也全部卖给Intel了,Intel基于此布局OPA。

 

    Mellanox在InfiniBand市场一家独大,其产品的集群部署数量远远大于选择竞争对手的数量,选择Mellanox产品的集群数量是选择竞争对手Omni-Path(英特尔)网络的近四倍,是另外一个竞争对手Cray系统的五倍。
 

    Mellanox公司提出Co-design(协同设计)理念,基于任务卸载(Offloading)的架构能够让像RDMA(远程内存直接访问)这样的技术变得可用,而这传统的数据中心加载(Onloading)架构无法做到的。而且采用智能的互连和卸载技术,可以让高性能计算系统继续扩展下去。
 




    为了让网络来协助处理数据,Mellanox不断去开发智能网络,在2019年11月份,Mellanox发布了全球首个 200Gb/s 数据中心网络互连解决方案。Mellanox ConnectX-6 适配器、Quantum交换机、 LinkX线缆和收发器一同构成了面向新一代高性能计算、机器学习、大数据、云、web 2.0和存储平台的完整 200Gb/s HDR InfiniBand 网络互连基础设施。

 

    ConnectX-6改进了Mellanox的多主机技术,允许最多8台主机连接到一个适配器将PCIe接口分割成多个独立的接口。降低了通过减少资本支出(线缆、NIC和交换机端口)和运营成本(减少交换机端口费用)。Mellanox多主机技术可用于Mellanox ConnectX10/25/40/50/100千兆以太网和VPI(虚拟协议互联)适配器、定制卡和基于OCP主板。

 

    200Gb/s HDR InfiniBand 解决方案进一步巩固了Mellanox的市场领先地位,同时使客户和用户能充分利用基于开放标准的技术,最大程度的提升应用程序的性能和可扩展性,同时极大降低数据中心的总体拥有成本。Mellanox 200Gb/s HDR 解决方案将在 2017 年大规模出货。

 

    Mellanox 200Gb/s HDR InfiniBand Quantum 交换机是全球最快的交换机,支持 40 端口的 200Gb/s InfiniBand 或 80 端口的 100Gb/s InfiniBand 连接,可实现 16Tb/s 的总交换处理能力,且延迟极低,仅有 90ns(纳秒)。Mellanox Quantum 交换机拥有市场上可扩展性最强的交换芯片,提升了对网络内计算(in-network computing)技术的支持,并经过优化且灵活的路由引擎。关于Mellanox 200Gb/s HDR InfiniBand Quantum 交换机详情参考:详解Mellanox 200G HDR InfiniBand解决方案。

 

    为了打造完整的端到端 200Gb/s InfiniBand 基础架构,Mellanox还将发布最新的LinkX 解决方案,为用户提供一系列不同长度的 200Gb/s 铜缆及硅光线缆。


EVALUATION CHECKLIST

方案评估清单

在进入报价、测试或实施前,先把业务目标、现网条件和风险边界整理清楚。

GOAL

业务目标

明确要解决的性能、扩容、稳定性、覆盖、互连或运维问题,并确认上线优先级。

NETWORK

现网条件

整理拓扑、服务器/交换机型号、接口速率、链路距离、供电散热和现有管理平台。

VALIDATION

验证范围

确认是否需要 PoC、兼容测试、吞吐测试、时延测试、无线覆盖测试或故障切换测试。

DELIVERY

落地边界

确认交付窗口、责任分工、备件策略、培训需求、验收指标和后续扩容路径。

ANSWER FIRST

方案快速回答与常见问题

先回答“适合谁、如何评估、下一步怎么做”,再决定是否继续进入测试与实施阶段。

FIT CHECK

先判断当前方案是否匹配业务目标和现网条件

如果你已经明确业务规模、性能目标和实施时间,这类方案更容易直接转化为可执行的落地路径。

TEST PATH

不确定时,优先进入咨询与测试验证

对兼容性、吞吐、延迟和交付风险有要求的项目,更适合先通过 PoC 或测试申请把关键问题前置。

NEXT STEP

整理现网信息后,再细化产品组合与实施建议

业务规模、接口需求、现网架构和时间节点越清楚,后续选型、测试和部署节奏越容易收敛。

FAQ 01

InfiniBand技术究竟是何方神圣? 适合什么业务场景?

适合已经明确业务目标,需要继续判断网络架构、产品组合和实施路线的团队,用于加快技术评估与落地决策。

FAQ 02

评估方案前需要准备哪些信息?

建议准备业务规模、性能目标、现网架构、关键接口、时间节点,以及是否需要测试验证等信息。

FAQ 03

是否可以先做测试或 PoC?

可以。对于需要验证兼容性、性能或交付风险的项目,可先进入咨询、测试申请和 PoC 节奏,再推进部署。

FAQ 04

如何继续获取实施建议?

可在当前方案基础上继续沟通品牌方向、业务场景、计划规模和时间要求,再细化产品组合、测试路径和实施建议。

FAQ 05

判断方案是否适配时最先看什么?

建议先看业务目标、现网瓶颈、性能指标、扩展规模、上线窗口和预算约束,再判断方案架构与产品组合是否匹配。

FAQ 06

方案落地前有哪些风险需要前置确认?

需要前置确认兼容性、链路带宽、时延要求、设备供电与散热、施工窗口、测试范围和交付责任边界。