Mellanox200GHDR深度学习加速引擎结合NVIDIA将人工智能平台应用加速两倍
2022-02-03 17:29:26 来源:
Mellanox 网络计算分层聚合和归约协议(SHARP) 技术与 NVIDIA 聚合通信函数库 (NCCL) 结合,为人工智能带来性能突破
2019 年 3 月 19 日, Mellanox Technologies, Ltd。(纳斯达克股票代码:MLNX)是面向数据中心服务器和存储系统的高性能、端到端互连解决方案的供应商,该公司今天宣布,其采用可扩展分层聚合和归约协议(SHARP) 技术的 HDR 200G InfiniBand 创造了新的性能记录,使深度学习操作性能提高了一倍。Mellanox 网络计算 SHARP技术与 NVIDIA V100 Tensor Core GPU 技术以及聚合通信函数库 (NCCL) 的结合,为深度学习和人工智能应用带来了的效率和可扩展性。
将先进的 NVIDIA GPU、Mellanox 的 InfiniBand网络、GPUDirect RDMA技术 和 NCCL通信库相结合以训练神经网络,已成为扩展深度学习框架(如 Caffe、Caffe2、Chainer、MXNet、TensorFlow 和 PyTorch)的事实标准。借助 Mellanox SHARP 技术和 HDR InfiniBand网络,可以卸载并加速深度学习训练的数据聚合操作,从而将性能提高至两倍。
通过与 NVIDIA 合作,并在 Mellanox 的性能实验室进行测试验证,使用 Mellanox HDR InfiniBand Quantum 交换机连接 4 台系统主机,每台主机使用 8 个采用 NVLink 互连技术的 NVIDIA V100 Tensor Core GPU 和一片ConnectX-6 HDR 网卡,并通过将 SHARP 的本地流聚合功能与 NVIDIA 的 NCCL 2。4通信库(该库现在可以充分利用Mellanox 网络提供的双向带宽)集成,实现了 19。6Gb/s 的有效归约带宽。在使用相同硬件配置的情况下,与NVIDIA 当前基于树型通信结构的实现相比,SHARP实现了两倍的带宽性能。
在更常见的系统配置中,如果每个主机系统中有4 个HCA卡用于各种工作的负载均衡,其中 SHARP 和 NCCL 的初始计算将会产生70。3GB/s的流量。对于更高密度的GPU系统,如 NVIDIA DGX-2,其每个系统节点中有 16 个采用 NVLink 技术的 NVIDIA V100 Tensor Core GPU,Mellanox的网络计算功能和全双向带宽更将被用的淋漓尽致。
Mellanox Technologies 市场副总裁 Gilad Shainer 表示:我们与 NVIDIA 的长期合作为我们带来了强大的解决方案,这些方案充分利用 Mellanox InfiniBand网络的卓越性能,包括 GPUDirect RDMA技术,以及集成在NCCL中的网络计算技术,为人工智能应用提供了两倍于以往的性能。HDR InfiniBand网络计算加速引擎(包括 SHARP 技术)为 HPC 和人工智能工作负载提供了优异的性能和可扩展性。
NVIDIA 副总裁兼加速计算总经理 Ian Buck 表示:Mellanox 的解决方案和我们的开源聚合通信函数库 NCCL的整合,极大地增强了 NVIDIA 无与伦比的 CUDA-X 加速库的性能。我们携手合作,共同提供完整解决方案,确保数据中心内要求最为苛刻的人工智能应用能够从性能和扩展效率中受益。
辅助资源:
● 深入了解 Mellanox SHARP
● 深入了解 Mellanox Quantum HDR 200Gb/s InfiniBand 智能交换机
● 在 Twitter、Facebook、Google+、领英和 YouTube 上关注 Mellanox。
● 加入 Mellanox 社区
关于 Mellanox
Mellanox公司的英文全称是Mellanox Technologies(中文名:迈络思),是一家在全球范围内为服务器和存储提供端到端InfiniBand和以太网互联解决方案的领军企业。Mellanox互连解决方案通过低延迟、高吞吐量的强大性能,可以极大的提升数据中心效率,在应用和系统之间快速的传递数据,提升系统可用性。Mellanox为业内提供了加快内部设备互联的技术和产品,包括网卡、交换机、软件和芯片,这些产品都可以加速应用的执行,并化的提升HPC、企业数据中心、Web2。0、云计算、存储以及金融服务的效率。
注:Mellanox、ConnectX-6、Mellanox Quantum、Mellanox 可扩展分层聚合和归约协议 (SHARP) 以及 Mellanox 徽标是 Mellanox Technologies, Ltd。 的注册商标。所有其他商标均为其各自所有者的资产。
-
黑科技十足三星GalaxyFold折叠屏手机深受追捧
大屏化是智能手机发展的方向之一,但在全面屏之后遇到了发展瓶颈,最近热议的折叠屏手机给市场带来了新的可能。目前众多手机品牌纷纷研
2022-02-03 15:19
-
苹果发布新广告片《惊喜》,这次的主角是iPad
11月26日上午消息,苹果公司一直有在美国感恩节之前分享节日广告的传统,今天早上,他们发布了最新的假日视频广告:惊喜(The Surprise)。
2022-02-03 14:41
-
全球首款面向半导体技术的键合镀金银线:以更低的成本确保高性能
就在今天,贺利氏电子在SEMICON China 2019展会(新国际博览中心,3月20-22日),展示全球面向半导体技术的键合镀金银线。欢迎各位朋友莅
2022-02-03 13:18
-
罗永浩:锤子手机比索尼、夏普、微软、LG都好,没什么牛X的
今天凌晨,罗永浩再爆惊人言论,表示虽然夸了索尼耳机,但是锤子手机做得比索尼好。随后罗永浩再发一条微博,要他们承认事实,还不如杀
2022-02-03 12:26
-
春季装修正当时海尔空气净化器帮你拒绝甲醛污染
春分到了,万物开始复苏,由于气温适中,非常有利于家装,因此大部分人都会选择在春天改造新家、老居。那么问题来了,装修过程中产生的
2022-02-03 10:32
-
电子合同行业首家,尚尚签网络入选“卓信大数据计划”
近日,工信部直属科研事业单位中国信息通信研究院(以下简称中国信通院)发布卓信大数据计划第二批成员名单,杭州尚尚签网络科技有限公司
2022-02-03 09:58