从B200到B300:NVIDIA在"内存墙"上的关键一役

2026年,AI基础设施的竞争焦点已从单纯的"算力峰值"转向**“单位智能成本”**——即每百万token的推理成本。在这个维度上,显存容量和带宽成为了决定性的分水岭。

本周,NVIDIA正式发布了 Blackwell Ultra B300 加速器,以及基于它的 DGX B300 系统。这并非B200的简单升级版,而是NVIDIA针对"长上下文推理"和"大模型部署"痛点给出的系统性答案。

B300的核心升级:288GB HBM3e,为长上下文而生

Blackwell Ultra B300的关键规格如下:

参数 B300 B200(对比)
显存容量 288 GB HBM3e 192 GB HBM3
显存带宽 8,000 GB/s ~6.7 TB/s
FP4 Tensor Core性能 ~75 TFLOPS(单卡) ~50 TFLOPS
FP8 Tensor Core性能 72 PFLOPS(DGX B300系统级) -
TDP 1,400 W 1,000 W

最引人注目的是显存容量的跃升。从192GB到288GB,增幅达50%。在万亿参数模型的推理场景中,这意味着什么?

以DeepSeek-R1(671B MoE)为例,FP16精度下完整权重约需1.3TB显存。使用8张B300(总显存2.3TB),可以以较低的tensor parallelism度完成部署;而B200需要更多卡数才能达到同等效果。更大的显存意味着更少的跨GPU数据搬运,直接降低延迟和成本。

NVIDIA官方数据显示,Blackwell Ultra系统在DeepSeek-R1推理上达到**$0.24/百万token**的成本(102 TPS/user),相比Hopper架构降低了一个数量级。

DGX B300:OCP合规的"AI工厂"新形态

B300本身是一张加速器卡,但NVIDIA将其封装为 DGX B300 整机系统,这才是真正的产品化落地:

  • 8块Blackwell Ultra B300 GPU,总显存2.3TB HBM3e
  • Intel Xeon 6776P CPU 作为host处理器
  • 第五代NVLink,单卡1.8 TB/s带宽, aggregate 14.4 TB/s
  • 8x OSFP端口,支持800 Gb/s InfiniBand/Ethernet
  • OCP合规机箱设计,兼容标准数据中心部署

DGX B300的发布标志着NVIDIA在基础设施标准化上的进一步深入。与之前封闭的DGX架构不同,B300采用NVIDIA MGX compliant chassis,意味着第三方服务器厂商(如Microway、Supermicro等)可以基于同一规范构建兼容系统——这类似于当年x86服务器通过OCP标准打破专有架构垄断的逻辑。

为什么是现在?"Agentic AI"时代的推理需求爆发

Blackwell Ultra B300的定位与Vera Rubin NVL72形成互补:

  • Vera Rubin 面向超大规模训练和集群推理,60 exaFLOPS算力,适合"AI工厂"级部署
  • B300/DGX B300 面向企业级单系统部署,144 PFLOPS FP4推理性能,适合"每企一厂"

这种差异化策略反映了AI基础设施市场的分层趋势:

  1. ** hyperscaler层面**:Vera Rubin NVL72 / GB300,数百卡集群,训练+大规模推理
  2. 企业层面:DGX B300,单机架8卡,中小规模训练和实时推理
  3. 边缘/私有化层面:B300单卡部署,满足数据不出域的需求

尤其值得注意的是Agentic AI(智能体AI) 的兴起。当Agent需要长时间上下文、多轮工具调用、跨会话记忆时,prefill阶段的算力需求和decode阶段的内存带宽需求同时飙升。Blackwell Ultra通过新设计的attention加速指令和更大显存,在这两个维度上同时发力。

生态与定价:B300正在改变云GPU市场

B300已在多家云服务商上线,价格区间如下:

  • Vast.ai:$5.90/GPU/小时(最低价)
  • 市场中位数:~$9.12/GPU/小时
  • 对比H100:H100云租金约$3-6/GPU/小时,但B300的FP4推理性能是其数倍

这意味着对于推理密集型工作负载,B300的每token成本可能远低于H100。SemiAnalysis的InferenceX基准测试显示,Blackwell Ultra系统在低延迟agentic工作负载上,每兆瓦吞吐量提升50倍,每token成本降低35倍。

竞争格局:NVIDIA vs AMD vs Intel的"三代同堂"

2026年的AI芯片市场呈现"三足鼎立"态势:

厂商 旗舰产品 特色
NVIDIA Blackwell Ultra B300 / Vera Rubin HBM3e大容量、NVLink互联、CUDA生态
AMD Instinct MI455X / Helios机架 432GB HBM4、72卡机架级带宽
Intel Gaudi 3 / Crescent Island LPDDR5X低成本大内存、风冷部署

NVIDIA的策略是**“全栈封闭优化”——从GPU架构、HBM内存、NVLink互联到DGX整机,全部自研协同设计。AMD和Intel则试图在"开放标准+差异化内存方案"**上突围。

B300的发布进一步巩固了NVIDIA在推理端的领先优势。但挑战依然存在:CUDA生态的护城河虽深,但成本压力正在推动企业探索多供应商策略。

结语:B300不是终点,而是"AI工厂2.0"的起点

Blackwell Ultra B300的意义不在于单卡跑分,而在于它验证了一个判断:在Agentic AI时代,显存容量和内存带宽比峰值算力更重要。

当NVIDIA用B300把单卡显存推到288GB、把推理成本压到$0.24/百万token时,它正在重新定义"企业级AI基础设施"的门槛。未来一年,随着DGX B300在各大云厂商的普及,我们可能会看到更多基于B300的私有化部署案例——尤其是那些对数据隐私有严格要求的金融、医疗场景。

B300不是Blackwell系列的终点。黄仁勋已在GTC上预告了更远的未来——Feynman架构、3D堆叠、1nm制程。但在那之前,B300将是2026-2027年AI推理基础设施的"事实标准"。


参考来源:NVIDIA官方DGX B300产品页面、SemiAnalysis InferenceX基准测试、GPUs.io云GPU价格对比、Microway DGX B300采购页面