首页 - 财经 - 产业观察 - 正文

Jim Keller建议英伟达:使用以太网,而不是InfiniBand

关注证券之星官方微博:

(原标题:Jim Keller建议英伟达:使用以太网,而不是InfiniBand)

如果您希望可以时常见面,欢迎标星收藏哦~

来源:内容由半导体行业观察(ID:icbank)编译自tomshardware,谢谢。

作为开放标准的坚定支持者,Jim Keller 在推特上表示,Nvidia 应该在基于 Blackwell 的GB200 GPU 中使用以太网协议芯片到芯片连接,用于 AI 和 HPC。凯勒认为,这可以为英伟达及其硬件用户节省大量资金。这也将使这些客户更容易地将他们的软件迁移到不同的硬件平台,而英伟达不一定希望这样做。

当 Nvidia 推出用于 AI 和 HPC 应用的 GB200 GPU 时,该公司主要关注其 AI 性能和先进的内存子系统,很少介绍该设备的制造方式。与此同时,Nvidia的GB200 GPU由两个计算处理器组成,使用台积电的CoWoS-L封装技术和使用专有协议的NVLink互连技术缝合在一起。对于那些已经使用 Nvidia 硬件和软件的人来说,这不是问题,但这对业界从 Nvidia 平台移植软件提出了挑战。

传奇 CPU 设计师兼 Nvidia 竞争对手Tenstorrent首席执行官 Jim Keller建议 Nvidia 应该使用以太网而不是专有的NVLink ,这是有原因的。Nvidia 的平台使用专有的低延迟 NVLink 进行芯片到芯片和服务器到服务器的通信(与基于CXL协议的 PCIe 竞争),并使用专有的 InfiniBand 连接进行更高层的通信。为了最大限度地提高性能,该软件针对这两种技术的特点进行了调整。出于显而易见的原因,这可能会使软件移植到其他硬件平台变得更加复杂,这对 Nvidia 有利,但并不完全适合其竞争对手。

不过,有一个问题。以太网在硬件和软件层面都是一种无处不在的技术,它是 Nvidia 用于数据中心的低延迟和高带宽(高达 200 GbE)InfiniBand 互连的竞争对手。在性能方面,以太网(特别是下一代 400 GbE 和 800 GbE)可以与 InfiniBand 竞争。

然而,InfiniBand 在 AI 和 HPC 功能以及出色的尾延迟方面仍然具有一些优势,因此有些人可能会说以太网的功能无法满足新兴的 AI 和 HPC 工作负载。与此同时,由 AMD、博通、英特尔、Meta、微软和甲骨文带头的行业正在开发超以太网互连技术,准备为人工智能和高性能计算通信提供更高的吞吐量和功能。当然,对于此类工作负载,超级以太网将成为 Nvidia InfiniBand 更有效的竞争对手。

Nvidia 还面临着 CUDA 软件平台主导地位的挑战,因此受到业界广泛支持的统一加速器基金会 (UXL)的出现,这是一个包括 Arm、英特尔、高通和三星等在内的行业联盟,旨在提供一种替代方案到 CUDA。

当然,英伟达需要开发可供此时使用的数据中心平台,这可能至少是其花费数十亿美元购买专有技术的愿望的一部分。如果像带有 CXL 的 PCIe 和 Ultra 以太网这样的开放标准技术在性能和功能方面将超过 Nvidia 专有的 NVLink 和 InfiniBand 技术,那么 Nvidia 将不得不重新开发其平台,因此 Keller 建议Nvidia 应采用以太网。然而,这可能还需要数年时间,因此目前英伟达的设计继续利用专有的互连。

英文原文:

https://www.tomshardware.com/tech-industry/artificial-intelligence/jim-keller-suggests-nvidia-should-have-used-ethernet-to-stitch-together-blackwell-gpus

点这里加关注,锁定更多原创内容

*免责声明:本文由作者原创。文章内容系作者个人观点,半导体行业观察转载仅为了传达一种不同的观点,不代表半导体行业观察对该观点赞同或支持,如果有任何异议,欢迎联系半导体行业观察。

今天是《半导体行业观察》为您分享的第3735期内容,欢迎关注。

『半导体第一垂直媒体』

实时 专业 原创 深度

公众号ID:icbank

喜欢我们的内容就点“在看”分享给小伙伴哦

微信
扫描二维码
关注
证券之星微信
APP下载
下载证券之星
郑重声明:以上内容与证券之星立场无关。证券之星发布此内容的目的在于传播更多信息,证券之星对其观点、判断保持中立,不保证该内容(包括但不限于文字、数据及图表)全部或者部分内容的准确性、真实性、完整性、有效性、及时性、原创性等。相关内容不对各位读者构成任何投资建议,据此操作,风险自担。股市有风险,投资需谨慎。如对该内容存在异议,或发现违法及不良信息,请发送邮件至jubao@stockstar.com,我们将安排核实处理。
网站导航 | 公司简介 | 法律声明 | 诚聘英才 | 征稿启事 | 联系我们 | 广告服务 | 举报专区
欢迎访问证券之星!请点此与我们联系 版权所有: Copyright © 1996-