← 返回AI算力选型库

MODEL SELECTION PROFILE

Baichuan2-13B-Chat

百川智能发布的13B中英双语对话模型,适合中文问答、研究和存量私有化项目。
资料更新:2026-07-27官方资料来源 →

核心规格

模型系列
Baichuan2
厂商/维护方
Baichuan Intelligence
许可证
Baichuan 2 Model Community License
输入模态
文本
架构
Dense Transformer
总参数量
13B
最大上下文
4096 tokens
仅权重显存估算
BF16:26 GB;INT4:6.5 GB;INT8:13 GB
建议GPU显存
BF16:32 GB;INT4推理:12 GB

软件与部署生态

  • Transformers
  • vLLM
  • llama.cpp

部署与采购注意事项

暂无额外部署说明。

不适合或需要谨慎的场景

  • 上下文长度明显低于新一代模型
  • 商用前核对模型许可
HOW TO USE THIS PROFILE

不要用单个参数直接作出采购决定

权重显存只是部署下限。真实服务还需要预留KV Cache、批处理、上下文、框架运行开销和安全余量;MoE模型的激活参数也不能代替完整权重容量。

WANGYU COMPUTE SERVICE

让网昱继续核对这份算力方案

结合模型、并发、硬件平台、预算和交付条件,进一步确认配置边界,或匹配可租算力资源。