← 返回AI算力选型库

GPU SELECTION PROFILE

NVIDIA A40

48GB ECC显存的Ampere数据中心PCIe GPU,兼顾视觉、虚拟工作站和中型模型推理。
资料更新:2026-07-27官方资料来源 →

核心规格

厂商/维护方
NVIDIA
功耗
300 W
主机接口
PCIe 4.0 x16
显存容量
48 GB
产品形态
全高全长双槽PCIe
显存类型
GDDR6 ECC
架构
Ampere
卡间互联
NVLink 112.5 GB/s
显存带宽
0.696 TB/s

软件与部署生态

  • CUDA
  • TensorRT
  • NVIDIA AI Enterprise
  • vLLM

部署与采购注意事项

  • 被动散热版本必须装入合格服务器
  • 旧架构采购需与L40S及专业工作站卡比较总成本

不适合或需要谨慎的场景

  • 极高带宽训练
  • 普通桌面机箱
  • 追求FP8吞吐
HOW TO USE THIS PROFILE

不要用单个参数直接作出采购决定

显存决定模型能否装入,显存带宽和算力影响速度,功耗、散热、卡间互联与软件生态决定方案能否长期稳定运行。消费卡与数据中心卡不能只按价格和峰值算力比较。

WANGYU COMPUTE SERVICE

让网昱继续核对这份算力方案

结合模型、并发、硬件平台、预算和交付条件,进一步确认配置边界,或匹配可租算力资源。