news 2026/4/15 6:41:16

【IC】英伟达显卡的超高显存带宽

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
【IC】英伟达显卡的超高显存带宽

LPDDR 和英伟达用的显存完全不是一个量级的东西。

英伟达 H100/B200 之所以能达到3.35 TB/s ~ 8 TB/s的恐怖带宽,不是因为它跑得快(频率其实不高),而是因为它路太宽了

1. 揭秘:HBM 的“暴力美学”

英伟达的高端 AI 卡(H100/B200)用的既不是 GDDR,也不是 LPDDR,而是HBM3 / HBM3E (High Bandwidth Memory)

我们来做一个简单粗暴的算术题:

A. 你的 LPDDR5X (64-bit)
  • 频率:8.5 Gbps (非常快!)
  • 位宽64 bit(很窄,像双车道)
  • 带宽8.5 × 64 / 8 ≈ 68 GB/s 8.5 \times 64 / 8 \approx \mathbf{68 \text{ GB/s}}8.5×64/868GB/s
B. 英伟达 H100 (5120-bit)
  • 频率:5.2 Gbps (其实比你的 LPDDR 还慢!)
  • 位宽5120 bit(这是 80 车道的超级高速公路!)
    • H100 封装了5 颗HBM3 显存堆栈。
    • 每颗 HBM3 堆栈有1024 bit位宽。
    • 总位宽 =1024 × 5 = 5120 bit 1024 \times 5 = 5120 \text{ bit}1024×5=5120bit
  • 带宽5.2 × 5120 / 8 ≈ 3 , 350 GB/s ( 3.35 TB/s ) 5.2 \times 5120 / 8 \approx \mathbf{3,350 \text{ GB/s}} (3.35 \text{ TB/s})5.2×5120/83,350GB/s(3.35TB/s)
C. 英伟达 B200 (8192-bit)
  • 频率:8.0 Gbps (HBM3E)
  • 位宽8192 bit(使用了 8 颗 HBM3E)
  • 带宽8.0 × 8192 / 8 ≈ 8 , 000 GB/s ( 8 TB/s ) 8.0 \times 8192 / 8 \approx \mathbf{8,000 \text{ GB/s}} (8 \text{ TB/s})8.0×8192/88,000GB/s(8TB/s)

结论:英伟达赢在位宽上。它的位宽是 LPDDR 的100 倍以上。

2. 为什么 LPDDR 做不到这么宽?

你可能会问:“那我也把 LPDDR 的位宽做大不就行了?”

这就是物理限制了:

  • LPDDR 需要在 PCB 板上走线:你在主板上画 64 根线还可以,画 5000 根线?板子得有几十层厚,面积得像桌子一样大,根本画不下。
  • HBM 是在芯片里走线:HBM 是通过CoWoS (2.5D 封装)技术,在硅中介层(Interposer)上刻蚀出来的线。硅片上的线宽只有几微米,所以可以在指甲盖大小的地方塞进几千根线。

3. GDDR 呢?它在哪里?

  • 消费级显卡 (RTX 4090)还在用GDDR6X
    • 频率:21 Gbps (极快!是 HBM 的 3-4 倍)
    • 位宽:384 bit (比 LPDDR 宽,但远不如 HBM)
    • 带宽21 × 384 / 8 ≈ 1 , 008 GB/s ( 1 T B / s ) 21 \times 384 / 8 \approx \mathbf{1,008 \text{ GB/s}} (1 TB/s)21×384/81,008GB/s(1TB/s)
    • 你看,即使是最顶级的 GDDR,带宽也只有 HBM 的几分之一。

总结

  • LPDDR (68 GB/s)电动车。省电、便宜、随便跑。
  • GDDR (1 TB/s)F1 赛车。单圈极速(频率)最快,但车道少。
  • HBM (4-8 TB/s)高铁车队。虽然单车速度(频率)不快,但它一次能拉几百节车厢(位宽极大),总运力无敌。

所以,做 AI 训练这种吞吐量极大的任务,HBM 是唯一的选择

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/4/15 11:51:23

还在手动写代码?Open-AutoGLM自动生成功能让效率飙升,错过就亏了

第一章:Open-AutoGLM自动生成功能概述Open-AutoGLM 是基于 GLM 大语言模型开发的自动化内容生成框架,专注于提升文本生成效率与准确性。该系统通过集成自然语言理解、上下文感知推理和动态模板匹配技术,实现从用户输入到结构化输出的端到端自…

作者头像 李华
网站建设 2026/4/14 14:36:23

外包干了一个月,技术明显进步。。。。。

先说一下自己的情况,本科生,19年通过校招进入南京某软件公司,干了接近2年的功能测试,今年年初,感觉自己不能够在这样下去了,长时间呆在一个舒适的环境会让一个人堕落!而我已经在一个企业干了2年的功能测试&…

作者头像 李华
网站建设 2026/4/10 6:47:50

基于单片机测距系统

摘 要 现代科学技术的发展,进入了许多新领域,而在测距方面先后出现了激光测距、微波雷达测距、超声波测距及红外线测距。 为了实现物体近距离、高精度的无线测量,本文采用红外发射接收模块GP2D12作为距离传感器,单片机作为处理器&…

作者头像 李华
网站建设 2026/4/14 13:11:21

2025年天津大学计算机考研复试机试真题(附 AC 代码 + 解题思路)

2025年天津大学计算机考研复试机试真题 2025年天津大学计算机考研复试上机真题 历年天津大学计算机考研复试上机真题 历年天津大学计算机考研复试机试真题 更多学校题目开源地址:https://gitcode.com/verticallimit1/noobdream N 诺 DreamJudge 题库&#xff1…

作者头像 李华