我们经常听到关于某超算中心又用了什么先进的技术,而在这些技术中,InfiniBand技术则是人们谈论最多的话题。那么InfiniBand到底有多牛?关于更多Infiniband技术架构请参考:InfiniBand知识和架构
文章内容:
1、InfiniBand技术背景和现状
2、InfiniBand为超算中心提供超强传输性能
3、InfiniBand技术玩家和如今巨头
4、盘点全球超算系统哪家强?
    ①、超算为何被视为超级明星
    ①、超算为何被视为超级明星
    ③、采用的处理器类型和份额
    ④、超级计算机中的核心数量
    ⑤、各国的超算系统的数量
    ⑥、各用途和超算供应商的总体处理能力
    ⑦、处理器和各领域的总处理能力
    ⑧、超算系统历史和未来发展去向
简单来说,InfiniBand是一种支持多并发链接的转换线缆技术,它既可以处理存储I/O、网络I/O,也能够处理进程间通信(IPC),这样它即可以将磁盘阵列、SANs、LANs、服务器和集群服务器进行互联,也可以连接外部网络(比如WAN、VPN、互联网)。
1、InfiniBand技术背景和现状
设计InfiniBand的目的主要是用于企业数据中心,大型的或超大型的数据中心,为了实现高的可靠性、可用性、可扩展性和高的性能。并且InfiniBand可以在相对短的距离内提供高带宽、低延迟的传输,而且在单个或多个互联网络中支持冗余的I/O通道,因此能保持数据中心在局部故障时仍能运转。
Infiniband网络是一种高带宽低延时的网络,相比传统的以太网络,最新一代的Infiniband网络带宽可达100Gbps,点到点的延时低于0.6us。Infiniband网络主要用于高性能计算场景,通过高速的Infiniband网络,将一台台多路服务器构建为一个高性能计算集群,集群性能基本上是单台服务器性能的线性叠加,可以说正是因为有Infiniband网络技术,才能催生出超算高性能集群架构。
Infiniband交换机可以分别带管理交换机和不带管理交换机,带管理交换机有硬件管理端口,对整个网络的管理可以通过交换机硬件完成,通常一个项目中会配置少量的带管理交换机(两台)。
2、InfiniBand为超算中心提供超强传输性能
有鉴于此,越来越多的超算中心开始大量采用InfiniBand技术,尤其是在对传输性能要求非常高的数据中心中,应用非常广泛。近日,全球知名的InfiniBand解决方案提供商Mellanox公司市场副总裁Gilad Shainer先生接受了记者专访时,详细阐述了InfiniBand 解决方案的市场竞争力及为全球用户企业提供的全新性能和可扩展性。
当今超算TOP500的排名中,在Intersect360调查中,约2/3的受访系统上部署安装了以太网和InfiniBand。这显示,InfiniBand解决方案依然在高性能计算领域占有着绝对的市场份额,远远高于高性能计算系统里面的其他网络互联厂商。关于超算互联技术和各种份额请参考:超算网络市场分析报告解析
Mellanox的InfiniBand的解决方案占据了近一半的市场份额,高达46%的份额,这充分例如显示了在高性能计算系统里面Mellanox的网络依然是一个绝对领先的高速网络。
而在2016年TOP500里面新建的系统中,有65个选择了Mellanox的产品,在2019年最新TOP500列表中,InfiniBand份额为28%(140个系统)。但是,从性能的角度来看,基于InfiniBand的计算网络占TOP500总体性能的40%,最近新2次TOP500列表排名分析如下:
3、InfiniBand技术玩家和如今巨头
InfiniBand Trade Association (IBTA)的9个主要董事成员中只有Mellanox和Emulex专门在做InfiniBand,其他成员只是扮演了使用InfiniBand的角色。而Emulex由于业务不景气也在2015年的2月被Avago收购,Qlogic的infiniband业务在2012年也全部卖给Intel了,Intel基于此布局OPA。
Mellanox在InfiniBand市场一家独大,其产品的集群部署数量远远大于选择竞争对手的数量,选择Mellanox产品的集群数量是选择竞争对手Omni-Path(英特尔)网络的近四倍,是另外一个竞争对手Cray系统的五倍。
Mellanox公司提出Co-design(协同设计)理念,基于任务卸载(Offloading)的架构能够让像RDMA(远程内存直接访问)这样的技术变得可用,而这传统的数据中心加载(Onloading)架构无法做到的。而且采用智能的互连和卸载技术,可以让高性能计算系统继续扩展下去。
为了让网络来协助处理数据,Mellanox不断去开发智能网络,在2019年11月份,Mellanox发布了全球首个 200Gb/s 数据中心网络互连解决方案。Mellanox ConnectX-6 适配器、Quantum交换机、 LinkX线缆和收发器一同构成了面向新一代高性能计算、机器学习、大数据、云、web 2.0和存储平台的完整 200Gb/s HDR InfiniBand 网络互连基础设施。
ConnectX-6改进了Mellanox的多主机技术,允许最多8台主机连接到一个适配器将PCIe接口分割成多个独立的接口。降低了通过减少资本支出(线缆、NIC和交换机端口)和运营成本(减少交换机端口费用)。Mellanox多主机技术可用于Mellanox ConnectX10/25/40/50/100千兆以太网和VPI(虚拟协议互联)适配器、定制卡和基于OCP主板。
200Gb/s HDR InfiniBand 解决方案进一步巩固了Mellanox的市场领先地位,同时使客户和用户能充分利用基于开放标准的技术,最大程度的提升应用程序的性能和可扩展性,同时极大降低数据中心的总体拥有成本。Mellanox 200Gb/s HDR 解决方案将在 2017 年大规模出货。
Mellanox 200Gb/s HDR InfiniBand Quantum 交换机是全球最快的交换机,支持 40 端口的 200Gb/s InfiniBand 或 80 端口的 100Gb/s InfiniBand 连接,可实现 16Tb/s 的总交换处理能力,且延迟极低,仅有 90ns(纳秒)。Mellanox Quantum 交换机拥有市场上可扩展性最强的交换芯片,提升了对网络内计算(in-network computing)技术的支持,并经过优化且灵活的路由引擎。关于Mellanox 200Gb/s HDR InfiniBand Quantum 交换机详情参考:详解Mellanox 200G HDR InfiniBand解决方案
为了打造完整的端到端 200Gb/s InfiniBand 基础架构,Mellanox还将发布最新的LinkX 解决方案,为用户提供一系列不同长度的 200Gb/s 铜缆及硅光线缆。
4、盘点全球超算系统哪家强?

关注我的读者会发现,我每年都会对TOP500中的超算系统进行分析,具体分析可以搜索历史文章了解。今天,我们基于2019年的数据算一算全球谁家超算最给力?

①、超算为何被视为超级明星?
超级计算机是国家高端研究能力的代名词,因为当前的研究都是涉及很大的计算量。超级被用作模拟复杂的金融,流体动态以及设计新药品等等。
有多种方法可以测量超算的算力(性能基准),关于超算系统的测试基准标准请参考文章:超算系统常见测试评估基准解析。除非另有说明,否则此文所描述的性能均采用“RMAX-Maximal LINPACK”基准。
②、十大超级计算机系统分布
按国家分布(以下为2019年6月数据)
按处理能力排行榜分布
美国占有顶级和亚军位置。中国紧随在后。
③、采用的处理器类型和份额
前2名超算系统由IBM芯片提供支持。英特尔占有前10名中的大多数的系统。
④、超级计算机中的核心数量
尽管名前两名,但IBM处理器的内核数量相对较少,这表明IBM在核心处理器方面具有优势。
⑤、各国的超算系统的数量
尽管中国拥有世界上第二大超级计算系统,但中国拥有的工业超级计算能力超过世界其他地区的总和,鉴于中国是世界工厂,这可能是合理的。美国在研究中的主导地位是至高无上的。
⑥、各用途和超算供应商的总体处理能力
联想已经建立了比任何其他供应商提供了更多的整体超算能力(500强内所有联想超算处理能力的总和),联想的超算大都用于工业用途。IBM虽占据第二位,但在研究方面占据主导地位。第三名CRAY是为超算而成立的公司,在研究领域也非常强大。2019年5月,HPE宣布收购CRAY。
⑦、处理器和各领域的总处理能力
在超算处理器领域,英特尔是无可争议的霸主,但IBM在研究领域是很强的。
⑧、超算系统历史和未来发展去向
摩尔定律放慢了速度,根据使用的指标,自2008年或2013年以来,超级计算处理能力的提升有所放缓。
自2008年(如果通过第500台超级计算机测量)或2013年(如果通过顶级超级计算机测量),超算系统改进的速度已经逐步放缓。
就各国的系统份额而言,在中国,TOP500超算系统安装数量一直在增加,目前(2019年11月)为227个,而在六个月前为219个。系统中有45.6%目前在中国。美国系统所占份额保持在23.4%。同时,美国系统为118。但是,美国超算系统平均性能要比中国高的多,占该列表总性能的37.1%。中国以32.3%的性能表现紧随其后。相比六个月前,这种性能差距有所缩小。2019年6月的榜单上,美国占榜单总性能表现的38.4%,中国占29.9%。
申明:感谢原创作者的辛勤付出。本号转载的文章均会在文中注明,若遇到版权问题请联系我们处理!
推荐阅读
更多架构师技术相关知识请参考“架构师技术全店资料打包汇总(全)”电子书(32本技术资料打包汇总详情、目录和内容请通过“阅读原文”获取)。
现在下单,可享内容更新“免费”赠阅,疫情活动期间价格仅168元(原总价240元)。
温馨提示:
扫描二维码关注公众号,点击阅读原文链接获取架构师技术全店资料打包汇总(全)电子书资料详情

继续阅读
阅读原文