登录 / 用户中心
登录 / 用户中心
← 返回AI算力选型库

MODEL SELECTION PROFILE

Qwen3-32B

32.8B级通用模型，能力与本地部署成本较平衡，适合高质量中文问答、代码和智能体。
资料更新：2026-07-24官方资料来源 →

核心规格

模型系列
Qwen3
厂商/维护方
Alibaba Qwen
许可证
Apache 2.0
输入模态
文本
架构
Dense Transformer
总参数量
32.8B
最大上下文
131072 tokens
推荐精度
BF16、FP8、INT8、INT4
仅权重显存估算
BF16：65.6 GB；INT4：16.4 GB；INT8：32.8 GB
建议GPU显存
BF16：80 GB；INT4单用户：24 GB；INT8或高并发：48 GB

软件与部署生态

  • Transformers
  • vLLM
  • SGLang
  • llama.cpp

部署与采购注意事项

暂无额外部署说明。

不适合或需要谨慎的场景

  • 24GB卡运行INT4时上下文与并发余量有限
  • 服务化显存需加入KV Cache和运行开销
HOW TO USE THIS PROFILE

不要用单个参数直接作出采购决定

权重显存只是部署下限。真实服务还需要预留KV Cache、批处理、上下文、框架运行开销和安全余量；MoE模型的激活参数也不能代替完整权重容量。

WANGYU COMPUTE SERVICE

让网昱继续核对这份算力方案

结合模型、并发、硬件平台、预算和交付条件，进一步确认配置边界，或匹配可租算力资源。