NVIDIA NVLink 桥接器概述 | AI生成和翻译

首页 2026.07

问题:NVIDIA NVLink Bridge(2插槽/3插槽/2路/4路)有什么用途,特别是针对RTX 3090、A6000、A100、H100?

答案:

Image

Image

Image

Image

Image

Image

NVLink Bridge 是一个物理连接器,用于将两块 NVIDIA GPU 通过高速 GPU 到 GPU 互联连接起来。 它不是一个能将 GPU 自动合并成一块巨型 GPU 的适配器。多 GPU 通信必须得到软件(如 CUDA、PyTorch、NCCL 等)的支持。(NVIDIA)

可以将其想象为:

没有 NVLink:

GPU 0 ---- PCIe ---- CPU ---- PCIe ---- GPU 1

使用 NVLink:

GPU 0 ===== NVLink ===== GPU 1

第二种路径具有更高的 GPU 到 GPU 带宽和更低的延迟。


1. “2插槽 / 3插槽” 是什么意思?

它描述了主板上两个 GPU 之间的物理距离

示例:

2插槽桥接器

GPU
[====]

(空间)

GPU
[====]

两个 GPU 之间间隔 2 个 PCIe 插槽。

3插槽桥接器

GPU
[====]

(空间)

(空)

GPU
[====]

两个 GPU 相隔更远。

桥接器只是一个刚性连接器。你需要选择正确的间距。


2. “2路 / 4路” 是什么意思?

大多数消费级/工作站显卡:

GPU0 <==== NVLink Bridge ====> GPU1

示例:

这些显卡支持配对两块 GPU。(NVIDIA)


这主要是服务器/HPC领域的范畴:

GPU0 ===== GPU1
 ||         ||
GPU2 ===== GPU3

通常需要:

示例:

普通的带有 PCIe RTX 显卡的桌面主板无法构建 4 路 NVLink 网络。(NVIDIA Developer)


RTX 3090 很特别,因为它是最后一代支持 NVLink 的 GeForce 显卡。

两块 RTX 3090:

RTX3090 24GB
      |
   NVLink
      |
RTX3090 24GB

内存:

总计 48GB VRAM

并非像一块 48GB 的单 GPU

例如:

适用场景:

非自动生效:

model.to("cuda")

不会使其变成 48GB。

PyTorch 仍然看到:

cuda:0 -> 24GB
cuda:1 -> 24GB

你需要:


4. RTX 3090 + A6000 桥接器兼容性

有趣的一点:

RTX A6000 NVLink 桥接器经常被用于 RTX 3090,因为 Ampere 架构的 NVLink 使用的是同一代技术。社区测试证实,A6000 的 2插槽/3插槽桥接器可以与 RTX 3090 配合使用。(Reddit)

示例:

RTX3090
   |
A6000 3插槽 NVLink Bridge
   |
RTX3090

这在 AI 工作站构建中很常见。


5. A100 / H100 是不同的

A100 PCIe

类似的概念:

A100 PCIe
    |
 NVLink
    |
A100 PCIe

存在双卡配置。

A100 SXM / H100 SXM

这些是数据中心加速器:

        NVSwitch
       /   |   \
H100  H100 H100 H100

它们拥有更强大的互联能力。

H100 使用第四代 NVLink:


6. 对于你的 AI 工作站使用场景

考虑到你对本地 LLM 训练/推理的兴趣:

双 RTX 3090

适用场景:

2 x RTX3090
=
48GB VRAM
+
NVLink

用于:

但是:

NVLink 并不能神奇地让你获得:

单 GPU 48GB

许多现代的 LLM 框架无论如何都能有效地利用 PCIe/NCCL。


购买优先级

对于 AI:

VRAM
  >
GPU 算力
  >
显存带宽
  >
NVLink

通常:

2 x RTX3090 没有 NVLink

仍然可以胜过

1 x RTX3090 有 NVLink

因为你获得了:

NVLink 是锦上添花。


简单总结

产品 NVLink? 典型配置
RTX 3060
RTX 4070
RTX 3090 2 GPU 桥接器
RTX A6000 2 GPU 桥接器
A100 PCIe 2 GPU
A100 SXM ✅✅ NVSwitch 系统
H100 SXM ✅✅ NVSwitch 系统

对于家庭 AI 实验室,最有趣的是:

2 × RTX3090 24GB
+
A6000 2插槽/3插槽 NVLink bridge

但这需要在你拥有足够的 PCIe 通道、电源供应能力和散热能力之后考虑。(Reddit)

参考资料:


AI生成和翻译,但整理分享仍需精力。如果觉得有帮助,欢迎 捐助支持。 微信:@lzwjavaWeChat QR · X: @lzwjava · 打个招呼 👋

返回 捐助